Алгоритмы Сокол, Out_LIEr CQT и Вектор предназначены для анализа однотемных тестов, но могут быть использованы и для анализа многотемных тестов, что реализовано в ПО Сокол. При этом Out_LIEr CQT и Вектор более "естественены" для многотемных тестов.
Алгоритм Сокол диагностирует ложь/правду при получении соответствующей оценки вероятности > 95%/96,5%. Out_LIEr CQT и Вектор - при получении соответствующих оценок > 90%, алгоритм Б7 при оценке вероятности > 85 %. В таблице ниже находятся результаты алгоритмов Сокол,Out_LIEr, Вектор и Б7, определённые на выборке из архива подтверждённых дел Национального центра оценки достоверности информации (США), которые даны в сравнении с результатами американских алгоритмов. Так же в таблицу включены результаты классификации полиграмм экспертами из России (5) и экспертами из США (10). В таблице приведены усреднённые результаты экспертов, округлённые до целых чисел.
У Сокола и Б7 в два и более раза меньше ошибочных результатов на американской выборке, чем у других алгоритмов, у Out_LIEr CQT и Вектора - в полтора раза. Надо учитывать, что по сравнению с другими алгоритмами Сокол имеет более жёсткие правила принятия решения (>95%). При отсутствии границ принятия решения Сокол имеет на этой выборке 4 ошибочных результата, и, соответственно, 96 правильных. Увеличение базы - обучающей выборки алгоритма должно привести к уменьшению числа не определённых результатов на этой выборке.
В таблице ниже помещены параметры алгоритмов, оценённые на американской выборке.
Работа алгоритма Out_LIEr CIT проверялась в сравнении с алгоритмом ChanceCalc. В таблице ниже приведены результаты этой проверки.
Между результатами работы алгоритмов обнаруживается статистически значимая разница. Но происходит это за счёт существенно большего процента неопределённых результатов в случае алгоритма ChanceCalc. При исключении неопределённых результатов статистически значимая разница между работой алгоритмов Out_LIEr CIT и ChanceCalc не обнаруживается. Для Out_LIEr CIT определены следующие параметры:
- Чувствительность - 0,86;
- Специфичность - 0,95;
- Общая точность - 0,91;
- Неопределённость - 0,1.
В следующих таблицах находятся результаты испытания алгоритма с поисковыми тестами для двух случаев 50/50 и 100/0