zhChinese    enEnglish
  ПМ-ПУ  » Поступающим  » Поиск смысла

Поиск смысла

Добрынин В.Ю., доцент факультета ПМ-ПУ

Здесь мы не будем говорить о поиске смысла жизни, наша тема значительно проще и касается она поиска смысла в интернете. Давайте не будем голословными и, избегая сложных философских определений, обратимся сразу же к примеру.

Возьмем слово матрица. Что это слово значит для Вас? Для кого-то это название известного фильма, для кого-то математический объект. Посмотрим, что по этому поводу думают Яндех и некоторые другие поисковые машины.

Начнем с Яндекса. Вот что видно на первой странице — магазин, фильм, опять фильма, а далее идут невидимые здесь три ссылки на математику, опять одна на фильм, одна на матрицу судеб, и еще две на компанию и магазин. Иными словами сплошной винегрет. И это объяснимо — слово матрица имеет множество смыслов, а Яндекс не знает, какой из этих смыслов мы имели в виду.

Рисунок 1

Есть одна поисковая машина, которая старается разобраться со всеми этими смыслами.  Эта машина берет  200-300 первых документов из результата и старается сгруппировать их по смыслу - отдельно про фильм, отдельно про математику. Вот что у нее получилось:

 

Слева можно видеть названия групп документов и размеры каждой из них, на панели справа раскрыта первая группа - про фильм.

Кстати, если ввести тот же запрос (на английском) в поисковую машину, которую мы разработали в рамках проекта SOPHIA совместно с коллегами из Университета Ольстера (Северная Ирландия), то кое-что интересное найти можно найти и тут. Наша машина работает с различными коллекциями документов. Например, с 18 миллионами рефератов медицинских статей,  с 4.5 миллионами рефератов американских патентов, с сотнями тысяч газетных публикаций и со многими другими источниками данных.  В данном случае мы делаем поиск по англоязычной Википедии и группируем не три сотни документов, а сотни тысяч:

Тут результаты так же разбиты на группы. Первые три из области математики, потом идет фильм, потом еще три группы из математики и три из биологии. И это только на первой странице. Давайте теперь откроем группу посвященную фильму:

 

Тут три страницы различные статей из Википедии по этой теме. Кстати, слева показаны тэги, описывающие содержание этой группы документов — они построены автоматически.

Что сказать на прощание — приходите к нам искать смысл вместе.

 

Последние изменения: 21.04.2010 13:53