Puntuajes F y Precisión
En Eyewire, se le otorga una calificación de precisión basada en su calificación F. Las puntuaciones F son un método estadístico para determinar la precisión, tanto para la precisión como para la recuperación. O, más simplemente, las puntuaciones F son la forma en que HQ determina su precisión en función de lo que se agregó y lo que se perdió. La fórmula para la puntuación F tradicional es:
Antes de que podamos calcular primero la puntuación F final, debemos calcular su precisión y recuperación individual. Cuando un jugador hace un cubo, hay cuatro resultados posibles para cada segmento en ese cubo: un resultado verdaderamente positivo, un resultado falso positivo, un resultado falso negativo y un resultado verdaderamente negativo. Un verdadero resultado positivo (tp) es cuando un jugador agrega un segmento que debe agregarse. Un falso positivo (fp) es cuando un jugador agrega un segmento que no debe agregarse. Un falso negativo (fn) es cuando un jugador pierde un segmento que debería haber agregado. Un verdadero negativo (tn) es cuando un jugador omite correctamente un segmento que no pertenece. En la siguiente figura puede ver un ejemplo de falso negativo y de falso positivo.
150px|izquierda A la izquierda hay un ejemplo de una rama enviada por un jugador. En este ejemplo, los segmentos rojo y verde son lo que el jugador envió, mientras que el segmento púrpura se dejó de lado.
El segmento rojo aquí es un falso positivo y el segmento púrpura es un falso negativo. El jugador agregó erróneamente el segmento rojo cuando debería haber agregado el segmento púrpura en su lugar. El segmento verde es correcto.
Esto nos lleva a la precisión; la precisión es la cantidad de un volumen que se agregó correctamente. Por ejemplo, si el jugador A tiene una precisión de 0.9221, eso significa que aproximadamente el 92% de lo que agregó el jugador A fue correcto y aproximadamente el 8% de lo que agregó el jugador A no debería haberse agregado. Para determinar la precisión de un jugador, usamos sus verdaderos resultados positivos (tp), correctamente agregados, y sus falsos positivos (fp) resultados, agregados incorrectamente, en esta fórmula: centro
Recordar mide cuánto del volumen se perdió. Digamos que el jugador A tiene un retiro de 0.9409. Eso significa que el jugador A perdió alrededor del 6% de los segmentos correctos en los cubos en los que trabajó el jugador A. Para determinar la recuperación de un jugador, usamos sus verdaderos resultados positivos (tp), correctamente agregados y falsos negativos (fn), incorrectamente omitidos, en esta fórmula: centro
Ahora tomaríamos los resultados de ambas fórmulas y los incluiríamos en la fórmula anterior para obtener el puntaje F de un jugador. Otra forma de verlo es tomar la media armónica de la precisión de un jugador y recordar para obtener su índice de precisión general.
¿Qué tan exactos son los puntajes F?
One question we a get a lot is how do we know what is correct and what isn’t? What is correct is determined by combining the GrimReaper’s corrections with the EyeWirer consensus. If a cube does not have a GrimReaper correction we just use the EyeWirer consensus. EyeWire consensuses have proven to be quite accurate. However, there is still a small chance that a consensus may contain a wrong piece. This means that F-scores cannot prove user accuracy 100% of the time. However, they are accurate enough that we feel confident using them as a player guide.
