avatar
8 месяцев назад

Коллапс нейронок

Прочитал сейчас крутую статью на n+1

Статья обсуждает риск инбридинга в языковых моделях, когда они обучаются на данных, сгенерированных другими ИИ. Это приводит тупо к деградации выхлопа инфы. Причем это касается как текстовых так и изображений. Чтобы она улучшалась нужны уникальные данные, в которые, судя по превью, все нейронки скоро упрутся. Причем на техданные они уже уперлись. Так же в статье упоминается что к 2026 году инет на 90% будет состоять из нейрохрючева xd В общем делаем бэкапы википедии, гитхаба итд пока не создали более менее работающий детектор, в создании которого тоже все очень туманно и неоднозначно.

36комментариев