TGTGInsighttelegram intelligenceLIVE / telegram public index
Post content
Post content
Математическая лингвистика: от грамматик к трансформерам От регулярных языков и конечных автоматов — к контекстно‑свободным и магазинной памяти, дальше к КЗ и языкам типа 0 и машинам Тьюринга — уже не как к музейным экспонатам, а как к линейке моделей Добавляем структурную лингвистику: фонемы, морфемы, синтаксические деревья Затем поверх этого три слоя: статистическую ОЕЯ, нейросетевой подход и, наконец, трансформеры и большие языковые модели как синтез всех предыдущих идей Зачем всё это, если есть готовые парсеры и ChatGPT? Чтобы понимать, что происходит внутри этих моделей и как воспроизвести их поведение своими руками, а не ждать очередного чуда от чёрного ящика