Исследователи показывали семи чат-ботам панорамные снимки — изображения, на которых видны сразу обе челюсти. Программы должны были определить, есть ли на снимке заданный признак, а в отдельных заданиях — назвать номера отсутствующих или поражённых зубов. Ответы сравнивали с разметкой стоматологов. Работу опубликовал BMC Oral Health 29 октября 2026 года.
Увидеть проблему и найти нужный зуб — разные задачи
Для объяснения разницы представим два ответа: «На снимке есть пломба» и «Пломба стоит на таком-то зубе». Первый ответ ещё не показывает, что программа умеет находить нужный зуб. В исследовании эти способности оценивали отдельно.
Для основной проверки использовали 192 снимка. Чат-боты отвечали без примеров и после четырёх разобранных примеров; каждый вариант повторяли трижды. Стоматологи заранее подготовили правильные ответы, а спорные случаи обсуждали между собой.
Что помогло, а что осталось ненадёжным
После примеров шесть из семи моделей чаще правильно отвечали на общие вопросы о наличии признака. А вот определение номеров зубов оставалось слабым.
Авторы оценивали его показателем F1: он учитывает и пропущенные зубы, и ошибочно названные. Ни в одном варианте средний результат не превысил 0,185 по шкале до единицы. Это не означает «18,5% верных диагнозов»: здесь считали совпадения номеров, а не успех лечения.
Почему это важно тому, кто загрузил свой снимок в чат
Уверенное объяснение чат-бота ещё не означает, что он правильно нашёл зуб. Из этой работы следует простой редакционный вывод: ответ программы о собственном снимке нельзя принимать за установленный диагноз или готовый план лечения.
Речь об обычных чат-ботах и конкретных версиях, зафиксированных авторами. Проверка не даёт оценки всем специализированным медицинским системам. Она также не показывает, сколько ошибок было бы на реальном приёме: лечение пациентов в эксперименте не проводили.
О том, какую информацию даёт панорамный снимок, — в разборе ортопантомограммы. Отличия цифровых инструментов объясняем в гиде по цифровой стоматологии.
Частые вопросы
Можно загрузить несколько примеров, чтобы чат-бот перестал путать зубы?
В этом опыте четырёх примеров оказалось недостаточно. Улучшение общих ответов не сделало определение конкретных зубов надёжным.
Значит, любая программа анализа снимков работает плохо?
Нет. Проверяли семь универсальных чат-ботов. Для специализированной системы нужны её собственные результаты проверки. Статья пока опубликована в ранней принятой редакции.
