Обсуждение:Нейронный коллапс

Материал из MachineLearning.

Перейти к: навигация, поиск

Первый промт:

Ты специалист в области машинного обучения и теории глубоких нейронных сетей, профессор ведущего технического университета и популяризатор науки. Напиши энциклопедическую статью "Нейронный коллапс" для сайта MachineLearning.ru. Понятно объясни, что нейронный коллапс — это особая геометрическая структура признаковых представлений, которая наблюдается у некоторых нейронных классификаторов на позднем этапе обучения, когда ошибка на обучающей выборке уже стала нулевой, но функция потерь продолжает уменьшаться. Статья должна быть полезна как новичку, с понятными определениями и объяснением основных идей, так и профессионалу, с содержательными подробностями, полезными ссылками и значимыми научными результатами. Используй разметку MachineLearning.ru и внутренние ссылки на связанные понятия. Не используй шаблон {{lang-en|...}}: английские названия указывай обычным текстом в скобках. Все формулы оформляй тегами <tex>...</tex>. Открывающий тег, формула и закрывающий тег должны находиться на одной строке, без переносов, табуляции и отступов внутри формулы. Не используй команды \lVert и \rVert; норму записывай через \|x\|. Используй только реальные авторитетные источники. Раздел «Литература» оформи как ненумерованный список через символ * с шаблонами {{статья}}, {{книга}} и {{cite web}}. Не выдумывай публикации, авторов, результаты и ссылки. Верни полный вики-код статьи.


Вторым промтом я добавил пример, чтобы было понятнее:

Добавь простой геометрический пример с тремя классами в двумерном пространстве. Свяжи этот пример с четырьмя свойствами нейронного коллапса. Пример должен помогать понять геометрию, но не заменять математическое определение. Не усложняй первые разделы математическими выкладками. Сохрани точные определения и сведения для профессионального читателя в отдельном математическом разделе. Верни полный исправленный вики-код статьи.