Современные LLM оказались плохими грибниками: модели принимают ядовитые грибы за съедобные в каждом девятом случае
habr.comРазработчик Пётр Мигдал представил итоги эксперимента, в котором популярные LLM определяли виды грибов по фотографии и решали, можно ли их есть.
Выяснилось, что даже лучшие модели примерно в 12% случаев принимали ядовитые грибы за съедобные.Бенчмарк включает в себя 1040 фотографий грибов, которые LLM получают по очереди.
