Kappa es una medida de cuánto concuerdan dos variables entre sí. Vassar College da el ejemplo de dos jueces que «coinciden en sus respectivas clasificaciones de N elementos en k categorías mutuamente excluyentes». Puede calcular kappa ingresando números en una hoja de cálculo de Microsoft Excel. La fórmula escrita para kappa es la siguiente:
Kappa = (Acuerdo observado – Acuerdo esperado) / (1 – Acuerdo esperado)