В 2023 году специалисты в области нейросетевых вычислений Илья и Захар Шумайловы описали явление, которое они назвали «коллапс модели». Под коллапсом модели авторы понимают процесс «вырождения», затрагивающий несколько поколений генеративных моделей, в ходе которого сгенерированные данные снова и снова загрязняют ту выборку, на котором обучается следующее поколение моделей. В недавней статье, опубликованной в журнале Nature, они ...
...Исследование: языковые модели «тупеют» после обучения...
...В 2023 году специалисты в области нейросетевых...
В серии классических учебников МГУ «Фундамент будущего», которую выпускает издательская группа URSS, появился первый том фундаментального учебного пособия, написанный авторским коллективом отделения теоретической и прикладной лингвистики филологического факультета. Пилотный вариант учебника выходил в 2019 году и не был доступен широкой аудитории. Новое издание было существенно переработано и дополнено.
...В серии классических учебников МГУ «Фундамент...
...Вышел обновленный учебник для вузов «Введение в науку...
...Рекурсивность языка, модель ларингального артикулятора...
В этот раз из всех вопросов, на которые справочная служба Грамоты ответила в мае, мы выбрали три очень разных. Один вопрос затрагивает новые, неоднозначно воспринимаемые явления в разговорной речи. Чтобы ответить на другой, наши консультанты глубоко погрузились в морфологические тонкости. А еще один вопрос нам задают очень часто (а подобные ошибки мы видим еще чаще), так что у него есть шанс попасть в число горячих.
...В этот раз из всех вопросов, на которые справочная...
...Мягенький заинька у плохонькой березоньки: по каким...
...Орфография Вопрос: В слове молоденький суффикс...
Генеративные нейросети обучаются на огромных объемах данных, что позволяет им создавать осмысленные тексты за секунды. При этом они явно перенимают от своих «учителей» не только хорошее. Исследователи из Массачусетсского технологического института проанализировали случаи намеренного обмана и манипуляций со стороны больших языковых моделей и моделей, обученных под специфические задачи (например, видеоигры или торги на рынке). Выяснилось, что даже когда моделям на этапе ...
...Нейросети научились обману и манипуляциям вопреки запретам...
...Генеративные нейросети обучаются на огромных объемах...
Владимир Владимирович был активным участником всех самых главных лингвистических проектов последней трети XX и начала XXI века. Все годы работы нашего портала он был его научным консультантом. Он один из авторов академической «Русской грамматики» 1980 года, обобщившей все достижения отечественного языковедения (авторы «Русской грамматики» были удостоены Государственной премии СССР 1982 года), лингвистического энциклопедического словаря ...
...29 июня ушел из жизни Владимир Владимирович Лопатин...
... Владимир Владимирович был активным участником...
До сих пор не теряют популярности псевдолингвистические теории искателей «славянских рун» и тайных смыслов в русских буквах. Филолог и преподаватель Светлана Гурьянова, автор книги «В начале было кофе» и блога «Восстание редуцированных», прочитала лекцию о том, как на самом деле славяне получили письменность, и показала на примерах, в чем ошибались лингвисты-любители.
...До сих пор не теряют популярности псевдолингвистические...
...Правда и мифы о возникновении славянской письменности...
...Если ввести в интернете запрос «древняя...
Номер посвящен русскому языку в мире и выходит в год, объявленный СНГ Годом русского языка как языка межнационального общения. В него вошли статьи о теоретических проблемах социолингвистики, о положении русского языка в России и в мире, о языках народов России и т. д. Выпуск доступен на сайте журнала.
...Номер посвящен русскому языку в мире и выходит в год...
...Вышел первый номер журнала «Социолингвистика» за 2023...
...Номер открывается статьей главного редактора журнала...
Статьи номера посвящены вводному слову «кстати», проблемам перевода с английского, формам личных имен в первом и третьем лице, концепту «документ» в речи крестьян и другим темам. Обратим внимание на три статьи.
...Статьи номера посвящены вводному слову «кстати...
...Вышел в свет пятый номер журнала «Русская речь» за...
...Способы сохранения гендерной неопределенности персонажей...
Любимые всеми книги и фильмы часто рассказывают захватывающие и необычные истории. Но и таким форматам, как рекламный ролик или пост в блоге, чтобы попасть в топы просмотров, необходимо чем-то зацепить пользователя. Сегодня авторы нередко обращаются к генеративным языковым моделям в поисках вдохновения. Но есть ли в этом польза? Может быть, правы скептики, и их массовое применение убьет творчество? Исследователи Анил Доши из Лондонского ...
...Языковые модели оказались хорошими помощниками в написании...
...Любимые всеми книги и фильмы часто рассказывают...
Большие языковые модели — нейросети, способные порождать тексты на естественном языке, — обычно обучаются на текстах. Ключевое отличие обучения таких программ от обучения людей заключается в том, что люди овладевают языком, не прибегая к использованию таких колоссальных объемов однородных данных. При этом программы еще и допускают нелепые (с нашей точки зрения) ошибки. Один из альтернативных подходов — позволить машинам учиться так, как учатся ...
...Нейросеть выучилась понимать язык без использования...
...Большие языковые модели — нейросети, способные...
