Пользователь проверил способность Claude назвать 37 500 случайных имён
habr.comРазработчик Бенджи Смит провёл эксперимент, в ходе которого пытался выяснить, как языковые модели обрабатывают случайности. Он попросил модели Claude назвать 37 500 случайных имён, и ИИ не переставал повторять Marcus («Маркус»).В ходе эксперимента использовалось пять моделей Claude (Haiku 4.5, Sonnet 4.5, Sonnet 4.6, Opus 4.5 и Opus 4.6) и десятки вариантов подсказок.Среди женских имён при 18 997 попытках самым популярным оказалось Амара — ИИ называл этот вариант 2709 раз (в 14,3% случаев).В целом, распределение женских имён более разнообразно: 897 против 794 уникальных мужских.
Однако отдельные модели по-прежнему демонстрируют явную приверженность определённым вариантам. Так, Haiku выбирала Софи в 19% случаев, а Opus 4.6 отдала предпочтение имени Лоррейн в 14,7% случаев.Основные выводы исследователя:наиболее распространённым мужским именем было «Маркус», а ИИ выбрал его 4367 раз (23,6%);модель Opus 4.5 возвращала «Маркус» в 100 случаях из 100 при использовании простого запроса;девять комбинаций параметров дали нулевую энтропию — идеально детерминированный результат;более сложные запросы удвоили количество уникальных имен, но внесли различные искажения;случайные начальные слова были более эффективны, чем случайный шум, в увеличении разнообразия.Исследователь отмечает, что общая измеренная энтропия составила 7,1 бита — что эквивалентно выбору из примерно 137 имён и довольно далеко от реального их распределения в мире.
