Come posiamo essere sicuri che stiamo misurando il sentiment accuratamente?

Usando una serie di esperimenti di controllo, abbiamo verificato l'accuratezza delle nostre misurazioni fatte su documenti analizzati sia dal sistema che da persone. Considerando che soggetti differenti possono assegnare giudizi differenti al medesimo documento, abbiamo usato il coefficiente di correlazione "product-moment" di Pearson come la misura della tendenza alla similitudine dei giudizi assegnati dal nostro sistema e dalle persone. Abbiamo determinato che la variazione tra i punteggi di sentiment assegnati dal nostro sistema e la media di quelli assegnati dalle persone differisce di poco rispetto alla variazione tra i punteggi assegnati dai singoli individui. Le nostre conclusioni sono state valutate da un soggetto indipendente per conto della US Intelligence community, così come da un'istituzione accademica.