Исследователи из Массачусетского технологического института (MIT) нашли объяснение так называемого U-образного эффекта, который характерен для больших языковых моделей вроде ChatGPT. Суть этого эффекта в том, что модели обрабатывают разные части текста с разной точностью. Чем дальше от центра текста, тем точность выше (отсюда и название — график точности имеет спад в центре, отчего становится похож на букву U). Что это означает? Например, если модели нужно ...
...Исследователи из Массачусетского технологического...
Со второй половины 2010-х годов компьютерные языковые модели совершили революцию в обработке текстов. Они научились осмысленно отвечать на вопросы, делать переводы, писать рассказы и даже романы. Лингвисты восприняли эту революцию неоднозначно: кто-то — с оптимизмом, а кто-то — со скепсисом.
...Со второй половины 2010-х годов компьютерные языковые...
...Получившая громкую известность аббревиатура GPT расшифровывается...
В современном русском языке принято выделять шесть падежей, но в интернете периодически возникают дискуссии по поводу их количества — особо смелые авторы увеличивают число вдвое. Лингвист Алексей Лебедев в статье для журнала «Наука и жизнь» показывает, что почти все якобы исчезнувшие падежи можно считать либо частными случаями основных шести, либо особыми формами слов.
...В современном русском языке принято выделять шесть...
...В древнерусском языке действительно было больше...
Сложно организованные сообщества требуют сложных систем коммуникации. Хотя многие животные выработали свои способы обмена информацией, можно ли сказать, что хоть один из видов приблизился в этом к людям? Исследователи из Лаборатории искусственного интеллекта Массачусетского технологического института и международной инициативы CETI изучили вокализации (звуковые сигналы) кашалотов и пришли к выводу, что они похожи на настоящий язык. Авторы работы отталкивались от ...
...Сложно организованные сообщества требуют сложных систем...
Генеративные модели искусственного интеллекта позволяют создавать изображения, текст, звуки и видео, используя обычные текстовые команды. В том числе их нередко используют для написания сочинений и эссе. Московский городской педагогический университет (МГПУ) решил легализовать эту практику. Ученый совет МГПУ в конце августа 2023 года принял решение разрешить студентам использовать технологии искусственного интеллекта при подготовке выпускных квалификационных работ. При ...
...Генеративные модели искусственного интеллекта позволяют...
В статье рассматриваются проблемы теории и истории языкознания рубежа XIX–XX веков, получившие развитие в трудах видного лингвиста Дмитрия Николаевича Кудрявского (1867–1920). Автор обращает особое внимание на обзор научных идей, изложенных в новаторском курсе лекций «Введение в языковедение», их связь с новыми тенденциями в отечественной и мировой науке начала XX века и подчеркивает их значение для осмысления последующей лингвистической традиции в России. В статье приведены также малоизвестные факты сотрудничества Д. Н. Кудрявского с «Энциклопедическим словарем» Брокгауза и Ефрона.
...В статье рассматриваются проблемы теории и истории...
...Только постоянное нарушение живой речью устанавливаемых...
Предлагаем вашему вниманию статью Романа Робертовича Гельгардта, опубликованную в журнале «Русский язык в школе» (№ 3, 1968). Что мешает читателю текста в точности понять смысл, заложенный автором? Что имел в виду Пушкин в строке «Вина кометы брызнул ток» и почему при чтении стихов Брюсова читатель может вспомнить химическую формулу HDO?
...Предлагаем вашему вниманию статью Романа Робертовича...
...Предисловие «Грамоты.ру» Роман Робертович...
Вы не находите, что за последнее время русский язык сильно испортился? Давайте узнаем, как отвечают на этот вопрос специалисты. Многие книги из этой подборки переиздавались уже не раз, но неизменно исчезают из магазинов. Известные лингвисты напоминают нам о том, что язык меняется и он неотделим от жизни. Эти книги легко читать, они подарят вам не только знания, но и положительные эмоции.
...Вы не находите, что за последнее время русский язык...
... 1. Мария Елифёрова. Панталоны, фрак, жилет...
Номер посвящен русскому языку в мире и выходит в год, объявленный СНГ Годом русского языка как языка межнационального общения. В него вошли статьи о теоретических проблемах социолингвистики, о положении русского языка в России и в мире, о языках народов России и т. д. Выпуск доступен на сайте журнала.
...Номер посвящен русскому языку в мире и выходит в год...
...Номер открывается статьей главного редактора журнала...
Нейросети часто называют «черным ящиком»: их внутренние механизмы остаются загадкой даже для их создателей. Однако недавнее исследование, опубликованное в журнале Nature Communications, позволяет заглянуть в этот «ящик»: между большими языковыми моделями и человеческим мозгом обнаружилось поразительное сходство. Выяснилось, что архитектура больших языковых моделей, таких как GPT или Llama, в определенном смысле повторяет работу нейробиологических ...
...Нейросети часто называют «черным ящиком»...