Любящим русский язык! Внесите свой вклад!

Что такое гражданское общество?
Гражданское общество — это не враг государства, не его альтернатива и даже не его помощник. Гражданское общество — это параллельная государству структура, которая работает с ним «в одной команде» и орудует там, куда государство лезть не хочет или не может.

Сегодня я приведу пример по-настоящему годного начинания.

Как я уже много раз писал, один из важнейших наших ресурсов — это русский язык. На русский язык плотно завязана вся наша культура. 

Плавно перехожу теперь к сути статьи.

В текущем десятилетии разного рода роботы набегают на нас изо всех щелей. Роботы-пылесосы, роботы-проститутки, роботы-кулинары… тысячи их. И каждому из этих наших слуг надо как-то нас понимать.

Сейчас уже есть технологии, которые позволяют роботам говорить с нами на человеческом языке. В качестве классического примера приведу разработанную специально для айфона технологию Siri. Телефону можно сказать обычным голосом, например, «напомни мне, что четверг в пять у меня встреча» или «найди ближайший ресторан». Телефон распознает запрос и выполнит распоряжение.

Но есть нюанс. Говорить с телефоном придётся на английском. В настоящее время фирма Apple болт класть хотела на поддержку русского языка, хоть на нём и говорит больше людей, чем на итальянском, корейском и немецком, для которых локализованные версии Siri уже есть.

Очевидно, это политическое решение. Русский язык является сейчас одним из главных — если не главным — конкурентом английского языка. Так как остальные «европейские» языки, начиная с того же немецкого, без боя сдают позиции своему английскому старшему брату.

У нас, например, есть свои Яндекс и ВКонтакте. У Германии, Италии, Испании, Франции и остальных свободолюбивых когда-то европейских странах — уже нет. Они пользуются американскими Гуглом и Фейсбуком.

Так вот. Сейчас энтузиасты запустили очень важный проект по поддержке русского языка. Проект по созданию открытого корпуса текстов на русском языке:
http://habrahabr.ru/post/152799/

Что это такое?

Это сборник из размеченных специальным образом статей, который программисты смогут использовать для разработки разного рода компьютерных систем на русском языке.

Сразу приведу пример. Допустим, робот слышит команду «вызывай наряд». Как ему понять о чём идёт речь, о наряде милиции или о национальном наряде? Или, может быть, хозяин запросил у него бухгалтерский наряд-заказ?

Корпус текстов нужен для того, чтобы расшить все эти неоднозначности, разжевать роботу их смысл и, в конечном итоге, научить робота понимать обычную русскую речь.

Размеченные таким образом корпуса есть для многих языков мира. Для многих, но не для русского языка. Хотя — позор на наши седины — размеченный корпус текста есть уже даже для венгерского: для языка, на котором говорит в двадцать (!) раз меньше человек, чем на русском.

Точнее, на русском языке существует несколько закрытых корпусов текстов разного размера. Но разметившие эти тексты частные компании ни разу не спешат делиться своими корпусами с остальными русскоязычными разработчиками.

Что мы с вами можем сделать, чтобы исправить ситуацию?

Очевидно, присоединиться к проекту по разметке свободного корпуса текстов. Согласно подсчётам авторов, для первого этапа работ нужно будет скормить добровольцам четыре миллиона вопросов. Если таковых добровольцев наберётся пять тысяч, то каждому из них нужно будет потратить всего лишь один час времени.

После чего свободно скачиваемый корпус текстов на русском языке будет в полном распоряжении всех отечественных роботостроителей.

Как конкретно происходит «разметка»? Вы заходите на сайт открытого корпуса и берёте на разметку небольшую связку слов:

http://opencorpora.org/

Если вы выберете, например, пул «существительные — родительный/винительный», вам будут показывать фрагменты такого типа:

…Это задает вектор нового персонажа — любила его больше…
…помазывает лбы невесты и жениха освященным маслом…
…только лишь укажите автора текста…

Вам надо будет указывать сайту, где выделенное слово стоит в родительном, а где — в винительном падеже. Это удобнее всего делать, заменяя в уме нужное слово на слово «лиса». «Вектор новой лисы», «укажите лису текста» и так далее — по окончанию слова сразу всё понятно.

Работа для любящего русский язык человека довольно простая, на грани развлечения, что-то типа раскладки пасьянсов или лузганья кроссвордов. Про огромную важность этой работы я уже написал. Поэтому, коллеги, я считаю себя вправе обратиться к вам с просьбой.

Примите, пожалуйста, участие в разметке этого корпуса текстов. И обязательно посоветуйте своим читателям сделать то же самое. Тогда через несколько лет вы сможете сказать своему личному андроиду, что своим умением говорить на русском языке он обязан в том числе и вам.