Post #497

Пять лет индустрия жила по простому принципу: хочешь умнее — добавь больше Больше данных для обучения, больше параметров в модели, больше вычислительных мощностей Компаниям такой подход нравился — риски минимальны, результат предсказуем Не нужно делать ставку на гениальных исследователей Просто увеличивай масштаб и получай прирост Но данные для обучения конечны — весь интернет уже скормлен моделям, простое увеличение масштаба в сто раз принципиально не изменит ситуацию Достигнуть AGI таким образом не получится Мы возвращаемся в эпоху исследований — только теперь с мощными компьютерами в руках Нужно искать принципиально новые подходы, а не просто крутить ручку громкости на максимум Ml модели обобщают знания намного хуже людей Нужен новый путь к сверхразуму И не через бесконечное масштабирование Эпоха масштабирования заканчивается