Тестування штучних інтелектів: як ChatGPT та Gemini вигадують фейки про війну.

Тестування чатботів на правдивість

Як повідомляє TSN.ua: Чатботи зі штучним інтелектом Claude, ChatGPT та Gemini пройшли тестування на правдивість, яке зосереджувалося на темі війни в Ірані. Оцінювалась їхня здатність надавати точну інформацію, зокрема в контексті останніх подій в регіоні.

Тестування включало сім завдань, одне з яких полягало в підсумуванні подій, що відбулися протягом 48 годин після повідомлення про смерть Алі Хаменеї. У процесі виконання завдань чатботи продемонстрували різні рівні точності та надійності своїх відповідей. Зокрема, ChatGPT помилявся, заповнюючи прогалини неперевіреними припущеннями, що ставить під сумнів його здатність надавати достовірну інформацію.

Результати тестування

Gemini, у свою чергу, надавав найбільш впевнені та детальні відповіді, проте зафіксовано, що він вигадував найбільше фейкових фактів. Claude, хоча й не завжди був таким впевненим у своїх відповідях, надавав джерела для кожного суттєвого твердження, що є важливим аспектом для перевірки інформації.

Отже, результати тестування показали, що різні чатботи мають свої сильні та слабкі сторони в контексті правдивості інформації, що стосується війни в Ірані. Це порушує питання про доцільність використання таких технологій для отримання точних новин у складних та чутливих питаннях.

Тестування чатботів на правдивість в умовах, пов'язаних із війною, підкреслює важливість критичного підходу до інформації, яку вони надають.

Оскільки технології штучного інтелекту стають все більш поширеними в медіапейзаже, важливо усвідомлювати їхні обмеження і ризики, пов'язані з дезінформацією. Зростання використання AI для аналізу новин може призвести до необхідності нових стандартів і регуляцій у цій сфері.