Фактчекінг
Навчання перевірці відповідей ШІ і глибокому пошуку
Модель відповідає однаково впевнено, коли знає і коли вигадує, а посилання під відповіддю ще не доводить, що факт узято саме звідти. Вчимо команду перевіряти вихід так, щоб у роботу йшло лише те, що витримає перевірку.
-
257
джерел за один глибокий пошук на занятті
-
6
занять для аналітиків антикорупційної редакції
-
3+
сервіси, в яких звіряють одну задачу
Кому це потрібно
-
Посилання не відкриваються
Глибокий пошук дає посилання, які не відкриваються, або не дає їх зовсім, — а без джерела факт у роботу не піде.
-
На обсязі починає вигадувати
На великому масиві судових справ інструмент спершу працював добре, а потім почав вигадувати, і все довелось перевіряти заново.
-
Вигадані звʼязки
Про маловідому особу модель вигадує звʼязки, яких немає, і пише про них так само впевнено, як про правду.
-
Шукає не в реєстрах
Модель шукає не в державних реєстрах, а в агрегаторах і перших посиланнях видачі, тому довідка виходить поверхнева.
-
Ліміти вигорають за тиждень
Один фігурант — це кілька окремих досліджень, і ліміти глибокого пошуку вигорають за тиждень.
-
Відповідь вставляють як є
Модель вигадує норму, ДСТУ чи цитату, а текст такий гладкий, що його вставляють у матеріал як є.
Де це вже працює
-
Шість занять для аналітиків антикорупційної редакції: декларації, судові реєстри, звʼязки між людьми — і місця, де інструмент починає вигадувати.
- StarLightMedia Два заняття для медіакоманди: перевірка фактів, один запит у кілька сервісів зі зведенням результату, пошук в архіві з джерелами.
- Savynskyi Law Office Пошук по законодавству з посиланням під кожним твердженням: один глибокий пошук на занятті просканував 257 джерел.
Що розбираємо
-
Галюцинації й вигадані посилання
Звідки береться впевнена неправда і чому посилання ще не доводить, що факт узято саме звідти.
-
Декомпозиція запиту
Замість "збери все про людину" — окремі запити на біографію, майно й суди: точніше і дешевше за ліміти.
-
Верифікація
Відповідь розбивається на факти, цифри, дати й імена, і факт без цитати вважається вигаданим, поки не перевірено.
-
Карта джерел
Що лежить у відкритих джерелах, що тільки в первинних реєстрах, а що за платним доступом, куди модель не зайде.
-
Коли міняти інструмент
Масив виріс, відповіді попливли або сервіс блокує легітимну тему — це сигнал переходити на інший.
-
Не Ctrl-C / Ctrl-V
Відповідь моделі — чернетка, і в матеріал вона йде лише після людини, яка під нею підписується.
Що команда вміє після
-
Досьє на фігуранта
кілька вузьких запитів замість одного "збери все"
-
Відповідь глибокого пошуку
кожне твердження з посиланням, яке відкривається
-
Важливий факт
підтверджений у двох незалежних джерелах до публікації
Формати і ціна
Одна ставка на все — 200$ за годину
Діагностична сесія
15 хвилин, безкоштовно. Розберемо задачі команди зі штучним інтелектом, скажу, який формат підійде, назву ціну й терміни.-
Аудит ШІ-готовності
від 2 годин від 400$ -
Корпоративний воркшоп
2 або 4 години від 400$ -
Навчання всієї компанії
від 2 годин від 400$ -
Серія занять під відділ
4 × 2 години від 1600$ -
Програма ШІ-чемпіонів
6 × 2 години від 2400$ -
Для керівників
1–2 години від 200$
Перед навчанням ШІ, якщо люди не можуть зайти в робочий акаунт, — цифрова грамотність, від 200$.
Що питають перед стартом
Три найчастіші питання. Решта — на сторінці питань.
-
ШІ сам шукає по державних реєстрах?
Здебільшого ні: він іде в звичайний пошуковик і збирає відповідь із перших посилань видачі, а платних баз і закритих реєстрів не бачить. Доступу до них ми не даємо і платних обмежень не обходимо — вчимо бачити цю межу.
-
Чи є якась система перевірки тексту, який генерує модель, на фактчекінг?
Це процедура, а не окремий сервіс: розбити відповідь на факти, вимагати цитату під кожним і перевірити в новому чаті або іншому сервісі. Посилання при цьому відкривають руками.
-
Глибоких пошуків на місяць обмаль. Як не спалити їх на одному фігуранті?
Декомпозицією: окремий запит на біографію, окремий на майно, окремий на суди. Так точніше і дешевше за ліміти водночас.
Схожі напрямки
Поруч за задачами або за аудиторією
Розберемо запит за 15 хвилин
Безкоштовний дзвінок, на якому розпитую про задачі й кажу, що зробив би — буває, що задача закривається без мене.