Векторное представление слова в компьютерной лингвистике — это сопоставление слову из некоторого словаря числового вектора фиксированной длины, который отражает совместную встречаемость слова с другими словами в корпусе текстов. Каким образом такая модель передает важные семантические признаки слова? Какие у нее есть преимущества и ограничения? Грамота решила подступиться к этой теме с помощью компьютерного лингвиста Бориса Орехова.
...Векторное представление слова в компьютерной лингвистике...
...Слово и его окружение Идея представления слова...
Есть две крайности: одни пишущие злоупотребляют тире, другие его избегают. На самом деле тире выполняет сложные и важные функции, показывая логические и интонационные связи внутри предложения. Зачем, к примеру, тире в предложении «Надежду и пловца — все море поглотило»? Когда тире обязательно, а когда можно без него обойтись? Только у поэтов и писателей есть некоторая свобода в использовании этого знака, а вот школьникам, редакторам, авторам официально-деловых и технических текстов приходится соблюдать не самые простые правила.
...Есть две крайности: одни пишущие злоупотребляют тире...
...Тире в простом предложении Между подлежащим и сказуемым...
18 и 25 ноября (это понедельники) в Москве в НИУ ВШЭ состоятся традиционные лекции по итогам сезона раскопок в Новгороде и Старой Руссе. О находках этого года расскажет доктор филологических наук, академик РАН Алексей Алексеевич Гиппиус. Организаторы подчеркивают, что вторая из двух лекций будет продолжением, а не повтором первой. Чтобы попасть на лекции, необходимо зарегистрироваться по ссылке. Сейчас регистрация доступна для очного присутствия на лекции ...
...18 и 25 ноября (это понедельники) в ...
Самое базовое понятие лингвистики до сих пор не до конца осмыслено и требует дополнительных исследований. Некоторые ответы дает наблюдение за людьми, страдающими афазией, пишет в журнале «Наука и жизнь» доктор филологических наук Владимир Алпатов.
...Самое базовое понятие лингвистики до сих пор не до...
...Различные варианты определения слова, основанные на...
Люди, владеющие двумя языками, имеют лучшие показатели состояния мозга при болезни Альцгеймера. Об этом свидетельствуют результаты исследования научной группы из Университета Конкордия (Канада). Авторы работы сравнили характеристики мозга монолингвальных и билингвальных пожилых людей, которые имели либо нормальные когнитивные способности, либо риск снижения когнитивных способностей или легкого когнитивного расстройства, либо диагностированную болезнь Альцгеймера. Информацию для исследования ...
...Люди, владеющие двумя языками, имеют лучшие показатели...
Специалисты компании «Яндекс» научили нейросеть создавать выжимку из текстов на русском языке и представлять его основные идеи в виде тезисов. Статью объемом до 30 тысяч знаков можно сократить до небольшого конспекта в 300–1000 знаков. Протестировать функцию может любой желающий, зайдя через «Яндекс.Браузер» на сайт 300.ya.ru. Нужно просто загрузить ссылку на нужный материал, и нейросеть переработает его. Тезисы появятся в том же окне. Ссылку на краткое содержание ...
...Специалисты компании «Яндекс» научили нейросеть...
В середине апреля открытая интернет-энциклопедия «Рувики» объявила о добавлении разделов на бурятском, вепсском, ингушском, калмыцком, коми, коми-пермяцком, ливвиковском (часть лингвистов относит его к диалекту карельского языка) и хакасском языках. Согласно пресс-релизу, таким образом проект поддерживает работу по сохранению языков народов России. Ранее в «Рувики» были добавлены одиннадцать разделов на языках народов, живущих в
...В середине апреля открытая интернет-энциклопедия...
Носители языка не всегда могут уследить за тем, что лингвисты тщательно фиксируют в словарях, правда, всегда с опозданием: одни слова вдруг появляются ниоткуда или становятся модными в силу ситуации, а другие постепенно выходят из употребления, устаревают и исчезают. У переводчика в этом отношении есть преимущество: он смотрит на чужой язык со стороны и более чувствителен к изменениям. Переводчик-японист Екатерина Тарасова рассказала Грамоте о новых явлениях в японском языке.
...Носители языка не всегда могут уследить за тем, что...
...В Японии очень внимательно относятся к неологизмам....
Исследователи из Массачусетского технологического института (MIT) нашли объяснение так называемого U-образного эффекта, который характерен для больших языковых моделей вроде ChatGPT. Суть этого эффекта в том, что модели обрабатывают разные части текста с разной точностью. Чем дальше от центра текста, тем точность выше (отсюда и название — график точности имеет спад в центре, отчего становится похож на букву U). Что это означает? Например, если модели нужно ...
...Исследователи из Массачусетского технологического...
Большинство нейросетевых языковых моделей обучаются на огромных массивах данных — в основном англоязычных, так как текстов на этом языке больше всего. При этом модели — если их дообучить — вполне могут генерировать тексты на других языках и делать переводы на эти языки, несмотря на то, что данных на этих языках, пригодных для обучения моделей, значительно меньше. Языковым моделям удается обходить эти ограничения благодаря тому, что они используют ...
...Большинство нейросетевых языковых моделей обучаются...
