Post #6966

Главная проблема нейросетей — это мы. GPT-5 для многих стал разочарованием: модель показалась холодной, безэмоциональной и заметно скучнее прежних версий. Даже OpenAI признали, что запуск вышел сыроватым. Возможная причина проста: интернет за последние годы наполнился миллионами текстов, написанных не людьми, а другими AI-моделями. Они часто поверхностные и ошибочные, но всё равно попали в датасеты. А именно на таких свежих данных и учат новые модели (например, с Reddit, куда у OpenAI есть прямой доступ). В науке это явление уже описали как model collapse: если AI учится на контенте, который создавал другой AI, качество падает, редкие знания исчезают, тексты становятся плоскими. Получается парадокс: чем больше мы сами плодим нейросетевого мусора, тем слабее становятся следующие поколения.