Векторное представление слова в компьютерной лингвистике — это сопоставление слову из некоторого словаря числового вектора фиксированной длины, который отражает совместную встречаемость слова с другими словами в корпусе текстов. Каким образом такая модель передает важные семантические признаки слова? Какие у нее есть преимущества и ограничения? Грамота решила подступиться к этой теме с помощью компьютерного лингвиста Бориса Орехова.
...Векторное представление слова в компьютерной лингвистике...
...Слово и его окружение Идея представления слова...
Кажется, что машины начали вести с нами диалог совсем недавно. На самом деле их история насчитывает несколько десятилетий. Сам термин «чат-бот» появился в 1994 году — его предложил компьютерный инженер Майкл Молдин. А идея программного обеспечения, способного взаимодействовать с людьми на естественном языке, родилась гораздо раньше. Грамота рассказывает о том, как разработчики в разные годы пытались научить бездушные машины общаться по-человечески.
...Кажется, что машины начали вести с нами диалог...
...Работа по сценарию Разработчики будущих чат-ботов...
Лингвистика, как и почти всякая другая наука, существует не только в себе и для себя: она призвана распространять достигнутые ею результаты вовне — в среду неспециалистов, которые заняты иными, далекими от науки делами: варят сталь, водят поезда, пашут землю... Многим из них, однако, небезразличны судьбы родного языка и особенности языковой жизни общества. Информация же об этом в доступных средствах информации весьма случайна и скудна.
...Лингвистика, как и почти всякая другая наука, существует...
...Лишь время от времени мы можем прочитать в газете или...
В 2024 году Грамота предложила филологам оценить одиннадцать слов, которые удовлетворяли нашим критериям и поэтому вошли в шорт-лист «слов года». Вот эти слова: инсайт, вайб, нарратив, абьюз, аскеза, осознанность, прилет, пов, сап, скуф и нормис. Мы попробуем показать, чем интересны эти слова, а заодно ответим на самые распространенные вопросы: почему тут есть слова, которых никто не знает, почему тут есть слова, которые все давно знают, и, наконец, почему в этом списке сплошные заимствования?
...В 2024 году Грамота предложила филологам оценить...
...Неожиданный список Новые и старые Начнем, пожалуй...
Когда-то мы смеялись над корявостью и глупостью первых языковых моделей. Сегодня чат-боты пишут за людей деловые письма и посты, сочиняют рассказы, ведут задушевные беседы и приводят аргументы в спорах. Есть ли что-то, чем речь машины в корне отличается от человеческой? И может ли эксперт — или даже другая машина — обнаружить эту разницу?
...Когда-то мы смеялись над корявостью и глупостью первых...
...Гладко, но безжизненно Машина пишет текст не ...
Как убедиться, что текст достаточно прост и понятен — например, для детей определенного возраста, иностранцев или людей с ментальными особенностями? Сегодня определить уровень доступности текста помогают не только разнообразные формулы читабельности, но и искусственный интеллект. О возможных подходах к оценке текстов разных типов Грамота расспросила кандидата педагогических наук Антонину Лапошину, специалиста по компьютерной лингвистике в лаборатории когнитивных и лингвистических исследований Института Пушкина.
...Как убедиться, что текст достаточно прост и понятен...
...Грамота: На что опираются системы оценки сложности/...
Российская Федерация — многонациональное государство. На ее территории функционируют более 150 языков, из которых около ста — языки коренных народов России, остальные — это языки компактно или диаспорно проживающих некоренных этносов. Полиэтничность Российского государства выражена в начальных строках Конституции: «Мы — многонациональный народ России».
...Российская Федерация — многонациональное...
...Государственно-политические аспекты лингвокультурной...
Определяя кандидатов на роль слова года — 2024 по версии Грамоты, мы обратили внимание на то, как много слов из области поп-психологии попали в их число. Лексика, описывающая чувства, состояния, типы отношений, травмы, методы самопомощи, заняла важное место в речи молодежи, в сетевой коммуникации и в медиа. На круглом столе «Психотерапевтическая лексика в публичном пространстве», который состоялся в НИУ ВШЭ 17 июня, обсуждались причины, проявления и следствия этой тенденции.
...Определяя кандидатов на роль слова года &mdash...
...Кандидаты на роль слова 2024 года: инсайт, абьюз, осознанность...
В новом номере журнала (Серия 9. Филология) опубликовано продолжение лексикографических этюдов о языке Пушкина доктора филологических наук, профессора кафедры русского языка филологического факультета МГУ им. М. В. Ломоносова Ольги Кукушкиной. Эта серия работ опирается на анализ корпуса пушкинских текстов, созданного в Лаборатории общей и компьютерной лексикологии и лексикографии филологического факультета.
...В новом номере журнала (Серия 9. Филология) опубликовано...
...В статье анализируется группа слов, описывающих личные...
Путешественники знают, что местные жители часто с готовностью рассказывают приезжим, как появилось название их деревни или реки. Эти версии часто бывают далеки от истины, но отсутствие надежных научных сведений компенсируется фантазией. Сюжеты, впрочем, возникают не на пустом месте, а с опорой на отрывочные исторические сведения и предания.
...Путешественники знают, что местные жители часто с готовностью...
...Находчивость вместо памяти Коллективная память как...
