Большие языковые модели — нейросети, способные порождать тексты на естественном языке, — обычно обучаются на текстах. Ключевое отличие обучения таких программ от обучения людей заключается в том, что люди овладевают языком, не прибегая к использованию таких колоссальных объемов однородных данных. При этом программы еще и допускают нелепые (с нашей точки зрения) ошибки. Один из альтернативных подходов — позволить машинам учиться так, как учатся ...

...Большие языковые модели — нейросети, способные...

Перемены в языке не в последнюю очередь связаны с переменами в обществе. Подтверждение этому тезису можно найти как в истории, так и в окружающей нас действительности. Газеты, радио, телевидение сыплют «пиарами», «траншами», реклама глушит «чумовыми джок-дайлами», «офшорами» и «таймшерами». Мы все больше привыкаем к вхождению в наш повседневный язык большого количества новых слов иноязычного происхождения, но, привыкая к ним, хорошо бы отдавать себе отчет в правильности и уместности их употребления, а зачастую и в элементарном понимании значения того или иного слова.

...Перемены в языке не в последнюю очередь связаны...

...Уже второй год, отправляя студентов на практику, я...

Насколько хорошо россияне помнят героев произведений русской литературы и обстоятельства жизни их авторов? Всероссийский центр изучения общественного мнения (ВЦИОМ) представил результаты телефонного опроса и предложил их интерпретацию. Участники исследования отвечали на четыре вопроса в пределах школьной программы. Все вопросы были открытыми, в формате «устного экзамена», так что угадать правильный ответ было нельзя. Часть вопросов содержала ...

...Насколько хорошо россияне помнят героев произведений...

В последние годы благодаря развитию технологий нам удается узнать больше о коммуникации живых существ — от обезьян до птиц. В новом исследовании специалисты разобрались в том, как общаются между собой рыбы — красные груперы из семейства каменных окуней. Многие виды рыб используют звуки, но связать конкретный сигнал с определенным социальным поведением раньше было трудно. В новой работе научная группа из США и Пуэрто-Рико ...

...В последние годы благодаря развитию технологий...

  Друзья! В день рождения «Грамоты.ру» (14 ноября порталу исполнилось 22 года) делимся с вами радостной новостью: вышел в свет «Объяснительный орфографический словарь (1–4 классы)». Его авторами стали старший научный сотрудник Института русского языка им. В. В. Виноградова РАН, заместитель главного редактора портала «Грамота.ру» кандидат филологических наук Е. В. Арутюнова и научный сотрудник Института русского языка им. В. В.

...  Друзья! В день рождения «Грамоты.ру...

Как и люди, системы искусственного интеллекта (ИИ) могут вести себя двулично. Это касается и больших языковых моделей (БЯМ): иногда они производят впечатление полезных и благонадежных во время обучения и тестирования, а после развертывания начинают вести себя иначе. Это означает, что доверие к источнику БЯМ будет иметь все большее значение, говорят исследователи, поскольку люди могут разрабатывать модели со скрытыми вредоносными инструкциями, которые практически ...

...Как и люди, системы искусственного интеллекта...

В середине сентября Робин Спир, создательница проекта Wordfreq, который анализировал использование языка в интернете, объявила о том, что размещенная на нем информация больше не будет обновляться. В своем посте на платформе для разработчиков GitHub она объяснила свое решение тем, что среди данных для анализа оказалось слишком много «мусорных», и обвинила крупные компании, разрабатывающие генеративные нейросетевые модели, в создании «беспорядка»

...В середине сентября Робин Спир, создательница проекта...

Современные инструменты распознавания языков, такие как LangID (Language Identification) компании Google, используются для автоматического перевода, общения с пользователем на его языке, классификации и фильтрации данных. Однако со многими редкими языками они работать не умеют. Например, тексты на навахо — наиболее распространенном из языков коренных американцев — система распознает неправильно, как тексты на исландском, лингала, волоф и других языках. Этот пример отражает более ...

...Современные инструменты распознавания языков, такие...

Наше внимание привлекли несколько весенних выпусков передачи Ольги Северской. Педагог, филолог Наталья Кулибина говорила о том, как научить ребенка читать; лингвист Александра Плетнева обратила внимание на сходства и различия языка лубка и церковнославянского; поэт и богослов Ольга Седакова рассказала о поэтике богослужебных песнопений. В специальном выпуске коллеги и друзья вспоминают академика РАН Юрия Апресяна. Все выпуски доступны на канале. 

...Наше внимание привлекли несколько весенних выпусков...

...Как заниматься чтением с не умеющими читать?...

Как изменилось наше представление о языке после появления корпусов текстов, в частности Национального корпуса русского языка? Использование корпуса в практике лингвистических исследований уже стало общепринятым, а что дают корпусные данные теоретикам? Какие явления следует изучать в первую очередь и почему лингвисты не должны опираться на интуицию? Об этом Грамота поговорила с академиком РАН, заместителем директора Института русского языка им. В. В. Виноградова Владимиром Александровичем Плунгяном.

...Как изменилось наше представление о языке после появления...

...Грамота: Все, кто работает с языком как исследователи...