Векторное представление слова в компьютерной лингвистике — это сопоставление слову из некоторого словаря числового вектора фиксированной длины, который отражает совместную встречаемость слова с другими словами в корпусе текстов. Каким образом такая модель передает важные семантические признаки слова? Какие у нее есть преимущества и ограничения? Грамота решила подступиться к этой теме с помощью компьютерного лингвиста Бориса Орехова.
...Векторное представление слова в компьютерной лингвистике...
...Что такое векторные модели и как можно их использовать...
...Мы можем легко понять, как устроено двумерное пространство — скажем, страница книги. В случае векторного представления слов мы имеем дело с пространствами трехсот-пятисотмерными....
...Технология, о которой мы говорим, по сути дела, позволяет объяснить компьютеру, что примерно значит слово. Мы уже давно научились объяснять компьютеру грамматику и другие уровни языка, а вот с семантикой были проблемы....
...С помощью векторов мы понимаем, какие из множества значений для этого домена более релевантны....
...Как мы будем создавать эту матрицу, имея дело с текстом? Мы выбираем некоторое слово, которое нас интересует, и создаем вокруг него окно «видимости» определенного размера (например, пять слов слева и пять слов справа)....
... И, таким образом, все высказывания в некотором наборе текстов превращаются в многомерное пространство, которое мы даже не можем помыслить. Мы все привыкли к трехмерному пространству, в котором живем....
8 сентября — Международный день грамотности. Уровень грамотности в России — один из самых высоких в мире. По последним данным Института статистики ЮНЕСКО, он составляет 99,93%. Кроме того, Россия находится на втором месте в мире по числу публичных библиотек: их 46 тысяч. Ее обходит только Китай, где их больше 51 тысячи. Но всеобщее умение читать и писать — цель, которая была достигнута в нашей стране еще в
...В поисках грамотности: у кого узнать, как правильно...
...«Когда мы говорим о грамотности, то различаем коммуникативно значимые ошибки, которые влияют на понимание, и коммуникативно незначимые», — напоминает Мария Лебедева. Первые мы не должны допускать, потому что в этом случае мы не поймем друг друга....
...«Если мы пользуемся русским языком публично, преподаем, если мы выходим на большую сцену или на высокую трибуну, то нам надо бы стараться», — считает эксперт. В то же время разные ошибки имеют разные практические последствия....
...Во-первых, если мы обращаемся к словарю, чтобы проверить себя, «мы должны убедиться, что фамилия, которая стоит на обложке, или организация, которая подготовила издание, действительно имеет хорошую репутацию в этой области», — объясняет Мария Лебедева....
...Мария Ровинская При этом мы должны понимать, что есть области, в которых степень ответственности за качество нашей речи очень высока....
...А вторые ошибки неприятны в том случае, если их делают журналисты или вообще те, кого мы считаем носителями нормы и образцом для подражания....
Говоря о выборе системы письма, мы не будем затрагивать вопросы исконного, если можно так выразиться, выбора: происхождения систем письма и формирования письменных ареалов. Далее будет говориться лишь о ситуации последних веков, включая современность.
...Говоря о выборе системы письма, мы не будем затрагивать вопросы исконного, если можно так выразиться, выбора: происхождения систем письма и формирования письменных ареалов. Далее будет говориться лишь о ситуации последних веков, включая современность....
...Факторы, влияющие на выбор системы письма...
...Однако в периоды революций и смен культурной ориентации мы видим нередкие случаи смены системы письма....
...Однако удобство перечисленных букв для русского языка не зависит от системы письма, просто мы привыкли к тому, что по-русски пишут кириллицей....
...Говоря о выборе системы письма для уже письменных языков, мы имеем в виду прежде всего выбор между сохранением уже существующей системы и переходом на какую-то иную....
...В 1929–1930 годах для русского языка комиссией во главе с профессором Николаем Феофановичем Яковлевым были разработаны три варианта латиницы (к этому проекту мы ниже еще вернемся). И там были буквы, соответствующие я, ю, ё, ь!...
...А попытка довольно частной реформы 1964–1965 годов оказалась неудачной из-за психологической позиции взрослых грамотных носителей языка; сейчас в связи с новым проектом еще более частной реформы мы видим нечто подобное....
Мария Лебедева заведует лабораторией в Институте Пушкина и руководит образовательным направлением Грамоты. Она считает русский язык самым важным школьным предметом. Почему? И как сделать его живым, интересным и практически ценным для каждого школьника? Об этом она рассказала в лекции для преподавателей русского языка, прочитанной в рамках проекта «Тотальный диктант». Грамота предлагает краткий конспект этой лекции.
...Мария Лебедева заведует лабораторией в Институте...
...Самый важный предмет. Функциональный подход к обучению...
...Где мы можем использовать тот материал, который мы даем на уроках русского языка? Чем он полезен для нашей успешности, академической или жизненной?...
... Мы видим, что тот язык, которому мы обучаем на уроках русского языка, не очень пригодится ребенку в обычной жизни, он недостаточно функционален....
... Мы можем посмотреть на русский язык не как на предметную область, которой мы занимаемся на уроках русского языка, а как на инструмент нашей коммуникации в разных ситуациях....
... Если мы попробуем добавить коммуникативную цель в наши занятия, то они станут более интересными, более мотивирующими, помогут построить мостик между самым важным предметом — русским языком — и жизнью, в которой мы говорим, слушаем, читаем и пишем....
...Язык — это тот инструмент, которым мы пользуемся постоянно для разных целей, и эти цели могут быть близки и понятны школьникам....
После того как в среду, 22 ноября, портал Грамоты был перезапущен в новом дизайне и с новой поисковой системой, команда внимательно следила за реакцией пользователей. Анализ обратной связи позволяет нам совершенствовать работу портала. Вот некоторые изменения, которые были внесены: большинство ссылок и редиректов стали работать корректно; снижен порог, отсекающий в выдаче нерелевантные ответы справочной службы, — теперь пользователи видят гораздо больше ответов;
...Дневник обновлений: Грамота реагирует на обратную связь...
...Мы приветствуем обратную связь, конструктивные замечания и предложения. Наша команда будет и дальше делать все, чтобы пользоваться порталом было легко и удобно....
Совсем скоро выпускники будут сдавать ЕГЭ по русскому языку. Показывают ли результаты этого экзамена уровень знания предмета? Каких умений не хватает филологам-первокурсникам? Можно ли в школе научить не только грамотно писать, но и убедительно говорить? Об этом мы поговорили с экспертом Грамоты, кандидатом филологических наук, доцентом МПГУ Станиславом Викторовичем Ивановым.
...Об этом мы поговорили с экспертом Грамоты, кандидатом филологических наук, доцентом МПГУ Станиславом Викторовичем Ивановым....
...Филолог и педагог Станислав Иванов: «Нужно, чтобы в...
...Значит, мы его заинтересовали....
... Когда мы пытаемся проанализировать устную речь ученика любого класса или выпускника, мы не можем предъявить претензии школе. Если мы говорим о школьных предметах, то за развитие устной речи должна отвечать риторика, а ее нет. Тогда где и как формируется устная речь?...
...Недавно мы анализировали со студентами слово культура в тексте Дмитрия Сергеевича Лихачева. Понятно, что оно употреблено в значении отвлеченного существительного. Что видят студенты в словаре?...
...Мы потеряли системность. У меня педагогический стаж 31 год в нашем университете, и раньше я никогда не сталкивался с тем, что у студентов отсутствует представление о морфологической системе русского языка....
... Но когда эти дети приходят к нам, мы, преподаватели вуза, вынуждены заново объяснять им школьную программу, восполнять пробелы. Соответствует ли полученное количество баллов уровню их знаний? По моему мнению, у 95% выпускников не соответствует....
Приятель брата — Митя или Дима? А новая коллега — Женя или Евгения? Анна Ивановна считает себя начальником или начальницей? Как описать соседа: он глухой или с нарушениями слуха? Во многих ситуациях нам приходится делать этот непростой выбор. На что лучше ориентироваться: на мнение того, о ком речь, на правила языка или на собственное удобство? Грамота расспросила об этом популяризатора лингвистики, кандидата филологических наук Александра Пиперски.
...Приятель брата — Митя или Дима? А новая...
...Право на имя...
...Если мы относимся к коллеге или подруге с уважением, если мы хотим ей понравиться, то мы, конечно, запомним, что она заведующая кафедрой, но преподаватель музыки....
...Мы не знаем мнение людей, оказавшихся на улице, о том, как их лучше называть. Но мы знаем, что те, кто им помогает, предпочитают слово бездомный и не употребляют слово бомж....
... Но про каждого человека запоминать такое довольно сложно, так что мы в основном используем нейтральную стратегию, рискуя при этом, что наши представления разойдутся с представлениями того, о ком мы говорим....
...В ней есть много разных уровней в зависимости от того, насколько мы готовы учитывать мнение другого человека....
... Как бы мы ни сочувствовали бездомным людям, мы все равно продолжаем считать, что жить на улице нехорошо, нам не нравится такая жизнь, бездомные могут вызывать у нас ощущение небезопасности. Поэтому эвфемизмы, обозначающие неприятные явления, неизбежно изнашиваются....
Предлагаем вниманию читателей портала статью Павла Яковлевича Черных, опубликованную в журнале «Русский язык в школе» (№ 3, 1949). Правильно ли мы читаем и, главное, понимаем программное стихотворение А. С. Пушкина? Как в черновиках поэта выглядели знакомые нам со школьной скамьи строки? Об этом идет речь в статье.
...Правильно ли мы читаем и, главное, понимаем программное стихотворение А. С. Пушкина? Как в черновиках поэта выглядели знакомые нам со школьной скамьи строки? Об этом идет речь в статье....
...Из наблюдений над языком стихотворения Пушкина «Памятник...
...Сделаем некоторые замечания относительно лишь отдельных слов, которые теперь мы произносим иначе. Как прочесть вознесся: вознёсся или вознесся?...
...В последнем стихе Пушкин говорит не оспоривай глупца, тогда как мы теперь сказали бы не оспаривай. Как известно, в старом русском языке глагольных образований на -ывать, -ивать с корневым гласным а вместо о типа нашивать было немного....
...Но мне кажется, что лингвистический (и в известной мере стилистический) анализ этого стихотворения нельзя считать законченным (хотя бы и в очень общем виде), если мы не дополним сделанные выше наблюдения еще одной справкой по истории авторского текста....
...изменения, вместе взятые, и, в особенности, эта замена причастия живущий, обычного в литературном русском языке, необычным сущий (в смысле «имеющийся», «находящийся») подтверждают уже ранее сделанное наблюдение, что в стихотворении, разбор которого мы...
Мы пользуемся языком, чтобы делиться информацией и обмениваться идеями. Гораздо сложнее понять, насколько язык необходим, чтобы мыслить. Сегодня есть данные, которые позволяют ученым утверждать, что язык и мышление существуют достаточно обособленно друг от друга. О новом исследовании рассказывает новостной портал Массачусетского технологического института.
...Мы пользуемся языком, чтобы делиться информацией и обмениваться идеями. Гораздо сложнее понять, насколько язык необходим, чтобы мыслить. Сегодня есть данные, которые позволяют ученым утверждать, что язык и мышление существуют достаточно обособленно друг от друга....
...Для чего нужен язык в первую очередь...
... Но, какими бы прочными ни были ассоциации между языком и мышлением, они не доказывают, что мы действительно мыслим с помощью языка....
...«Учитывая, что языки обладают всеми этими свойствами, вполне логично, что мы используем язык для общения», — говорит она....
... — Если бы язык давал нам ключевые понятия, с помощью которых мы мыслим, то разрушение языковой системы приводило бы и к проблемам с мышлением. А на самом деле этого не происходит»....
...«Практически при всех мыслительных процессах мы не видим никаких признаков задействования языковых механизмов, — говорит Эвелина Федоренко. — Система обработки языка практически неактивна, когда человек занят разного рода размышлениями»....
Как изменилось наше представление о языке после появления корпусов текстов, в частности Национального корпуса русского языка? Использование корпуса в практике лингвистических исследований уже стало общепринятым, а что дают корпусные данные теоретикам? Какие явления следует изучать в первую очередь и почему лингвисты не должны опираться на интуицию? Об этом Грамота поговорила с академиком РАН, заместителем директора Института русского языка им. В. В. Виноградова Владимиром Александровичем Плунгяном.
...Как изменилось наше представление о языке после появления...
...Владимир Плунгян: «Первый урок корпуса — не злоупотреблять...
...Значит, если мы нечто находим в корпусе в большом количестве, мы должны именно это и описать. Наше описание должно моделировать владение языком человека. А что такое владение языком? Эту умение говорить о важном....
...Если мы с этой новой точки зрения посмотрим на классические теории языка, мы увидим, что эти теории все немного странно устроены. Формат XX века — это мало примеров, тщательно отобранный материал и сложная красивая конструкция....
...Речевая деятельность — это извлечение: мы заглядываем в наш ментальный корпус и извлекаем оттуда то, что там уже есть. Тогда получается, что очень много в том, как мы себе представляем язык и его описываем, зависит от качества корпуса....
...Мы легко говорим о том, что уже знаем, что у нас уже есть в голове. Корпус дает нам целую философию: язык — это имитация, грамматики нет. Поэтому он так сильно меняется при межпоколенческой передаче. Поэтому мы так часто ошибаемся, поэтому в языке так много исключений....
...Даже если все это в каком-то виде есть, мы уж точно должны сместить акценты. Функциональные теории в этом месте расходятся с формальными. В чем их главные противоречия? В....
