Тип нейросетей, который мы будем использовать, называется Большая Языковая Модель, англ. Large Language Model. Далее просто Модели или LLM. Возможно вы уже работали с ними - так устроены ChatGPT, DeepSeek, Алиса и другие.
Если сильно упростить, это нейросети натренированные на многих гигабайтах самого разного текста - от научных статей до художественных произведений. В процессе тренировки Модели усваивают вероятность следования одного слова за другим. Например, если написано "Сырно", то скорее всего далее будет "- бака". Или "- сильнейшая", лол.
Из устройства Моделей следует важный момент - они вас не понимают в человеческом смысле. Их натаскали отвечать на один набор слов другим набором. Но они, как попугай, не понимают смысла сказанного. У них нет и не может быть эмоций. Они могут изображать подобие логического мышления, но только повторить его как текст из учебных примеров, а не сам процесс. Также модели ограничены тем набором знаний, на которых их обучили. Они не знают сегодняшних новостей и даже который сейчас час. (Без дополнительных инструментов, пока не будем переусложнять).
Еще один нюанс Моделей, следующий из их вероятностного принципа работы - так называемые галлюцинации. Чтобы не генерировалось одинакового ответа на схожие вопросы в модели добавили элемент рандома. Модель может выбрать следующее слово с малой вероятностью из своей таблицы вместо более вероятного. Иногда получается более красочный и живой текст. Иногда это выглядит как фактическая ошибка или ответ невпопад.
Несмотря на все перечисленные нюансы, за счет своего огромного объёма учебных данных LLM могут очень, очень убедительно симулировать человеческую речь и поведение на любых языках. Да, это иллюзия, но чертовски убедительная! Пожалуйста, помните о сказанном в дисклеймере.
