Что такое интеллектуальный поиск

Виды поиска документов: интеллектуальный, атрибутный, быстрый

Оглавление

Введение

Справочно-правовые системы (информационно-правовые системы) – класс компьютерных баз данных, содержащих тексты законов, указов, постановлений, решений различных государственных органов и т.д. Подкрепленные нормативными документами, они также содержат консультации специалистов по праву, бухгалтерскому и налоговому учёту, судебные решения, типовые формы деловых документов и др.

Актуальность проблемы изучения и развития современных СПС (ИПС) обусловливается тем, что они существенно повышают производительность труда юристов, бухгалтеров, аудиторов, руководителей организаций и представителей многих иных видов деятельности при решении правовых вопросов.

Компьютерные справочно-правовые системы появились еще во второй половине 60-х годов ХХ века по мере развития современных технологий и систем телекоммуникаций. Так, первой электронной картотекой для компьютерного поиска правовой информации стала бельгийская система, заработавшая в 1967 году [7]. Система была создана совместными усилиями университетов Бельгии и Бельгийского союза адвокатов и нотариусов.

Разработка первой справочной правовой системы – Lexis (сейчас LexisNexis) началась в том же 1967 году с соглашения между Коллегией адвокатов штата Огайо и фирмой Mead Data Central. В отличие от электронного каталога CREDOC американская система была полнотекстовой, то есть позволяла не только находить необходимые документы среди сотен тысяч других, но и работать с самими текстами, а также предоставляла дополнительную информацию к ним, более того, стал возможен поиск по контексту и датам [5].

Начало созданию справочно-правовых систем в СССР было положено в 1975 году, когда было принято решение о создании первой информационной базы нормативных документов [1].

Структура ИПС «Кодекс»

Первая версия информационно-правовой системы (ИПС) «Кодекс» была выпущена консорциумом «Кодекс» в 1991 году. Предназначенная для юристов, по своей структуре ИПС Кодекс представляла собой совокупность программного комплекса и набора баз данных [3].

В 1996 году была выпущена информационно-консультационная система «Помощник Бухгалтера». В дальнейшем были разработаны системы для кадровиков и специалистов в области медицины и здравоохранения.

К настоящему времени система представляет собой электронный справочник правовых баз данных, с разделением по тематическому признаку. Системы «Кодекс» включают в себя:

– документы международного, федерального и регионального законодательства;

– документы органов судебной власти;

– комментарии, статьи и консультации по вопросам применения законодательства;

– справочную информацию: курсы валют, нормативы и цифровые показатели, регулируемые законодательством (МРОТ, ставки рефинансирования, ставки налогов и т.д.);

– образцы и формы документов.

Основные структурные единицы базы данных «Кодекс» – это информационно-справочные системы (ИСС), которые, в свою очередь, делятся на информационные разделы [2].

Среди относительно простых структурных единиц ИПС «Кодекс» можно назвать такие системы, как, например, «Законодательство Санкт-Петербурга», «ФАС Северо-Западного округа» или «Медицина».

Однако в структуре ИПС «Кодекс» есть и сложные системы, состоящие из множества информационных разделов. Так, состав ИСС «Помощник юриста: Профессионал» включает:

– Проф-компонент законодательства России;

– Проекты нормативных актов;

– Практика высших судебных органов РФ;

– Законодательство в вопросах и ответах;

– Комментарии, статьи, консультации на тему «Право и экономика»;

– Образцы правовых и деловых документов;

– Все формы отчетности;

– Словарь терминов Российского законодательства;

Состав ИСС «Помощник юриста: Стандарт» таков:

– Проекты нормативных актов;

– Практика высших судебных органов РФ (урезанная);

– Законодательство в вопросах и ответах;

– Образцы правовых и деловых документов;

– Все формы отчетности;

В состав достаточно специфичной ИСС «Помощник юриста: Строительство. Саморегулирование» входят:

– Справочник юриста строительной организации;

– Практика разрешения споров по вопросам строительства;

– Словарь строительных терминов;

– Комментарии, статьи, консультации по вопросам строительства.

Таким образом, ИПС «Кодекс» – один из лидеров рынка правовых систем – создает тематические продукты, направленные на решение ежедневных задач руководителя, юриста, бухгалтера, финансиста, сотрудника отдела кадров, специалистов бюджетной сферы, а также сотрудников медицинских учреждений.

Правовая система «Кодекс» содержит российское и региональное законодательство, судебную практику, комментарии, консультации, справочные материалы, юридическую и бухгалтерскую прессу, образцы и формы документов и другую информацию, необходимую в работе современных профессионалов.

Виды поиска документов: интеллектуальный, атрибутный, быстрый

В системе «Кодекс» есть 3 вида поиска [6]:

– Поиск по атрибутам;

Разберем каждый из них подробнее.

Интеллектуальный поиск – мощное поисковое средство, которое может быть востребовано в следующих случаях:

– когда неизвестны точные атрибуты документов, но пользователь может сформулировать фразу, которой характеризуется интересующая его проблема;

– при поиске документов по номеру или дате принятия документа (например, Положение по бухгалтерскому учету от 30.03.2001 – ПБУ 6/01);

– когда пользователь хочет получить в результате поиска как можно больше документов (материалов), пусть даже отдаленно относящихся к интересующей его проблеме.

Порядок интеллектуального поиска таков [3].

1. Введите запрос на интеллектуальный поиск в поле ввода текста запроса на навигационной панели. При поиске система автоматически отбросит слова, которые не содержатся в базе данных. Не будут также учитываться «шумовые» слова (предлоги, союзы и т.п.), знаки препинания и окончания слов.

Например, если нас интересует вопрос: «Как определяется выслуга лет для офицеров вооруженных сил, увольняющихся в запас», введем в строке запроса поисковую фразу «выслуга лет офицеров вооруженных сил увольняющихся в запас».

2. Закончив ввод фразы, нажмите расположенную рядом кнопку «Найти» или клавишу Enter на клавиатуре.

По результатам поиска система отсортирует найденные документы по степени их близости к контексту заданного запроса. В верхней части страницы со списком отобранных документов будет приведена статистика найденных слов.

При просмотре документов слова из списка термины, которые входили в поисковый запрос, будут выделены в тексте цветом. Слева и справа от термина будут расположены ссылки (» >») соответственно на предыдущее и следующее вхождение термина в тексте документа.

Пользователь может изменить запрос и область поиска. Для этого надо нажать на кнопку «Изменить условия» в верхней части страницы, откроется страница с формой запроса на интеллектуальный поиск.

В верхней части формы находится область поиска. Чтобы изменить область поиска, перейдем по ссылке «Где искать».

Таким образом, интеллектуальный поиск в ИПС «Кодекс» осуществляется по словам, фразам, по контексту, это аналог «Быстрого поиска» в ИПС «Консультант Плюс» и «Базового» в системе «Гарант». Отличается тем, что здесь нет вкладок для поиска по виду документа (например, по комментариям).

Интеллектуальный поиск является в ИПС «Кодекс» основным инструментом. Он ищет также по номеру документа, по видам документа и остальным реквизитам документа, нередко заменяя собой поиск по атрибутам. В этом случае интеллектуальный поиск сообщает при выводе результатов, что слово «акт», например, рассматривалось как вид документа.

Поиск по атрибутам так называется потому, что при задании условий известны и используются атрибуты документа или материала. Атрибутами являются, например, дата, принявший орган, актуальность.

Чтобы найти документы по известным атрибутам, следует перейти к форме поиска по атрибутам по кнопке «Поиск по атрибутам».

Результаты поиска сортируются по дате принятия.

Поиск по атрибутам позволяет искать документы по общим или специализированным атрибутам.

Общие атрибуты – это такие атрибуты, которые присущи большинству видов информации. К ним относятся: наименование, вид документа/материала, принявший орган/источник, номер, дата принятия, действие/актуальность, по тексту.

Специализированные атрибуты – это такие атрибуты, которые свойственны только данному виду информации. Для каждого вида они свои. Например, для вида информации «Образцы и формы» таковым будет атрибут «Код формы по ОКУД». При нахождении на ярлыке определенного вида информации пользователю будет доступен поиск только по документам и материалам данного вида информации.

Карточка поиска по атрибутам состоит из: панели для выбора вида информации и перехода к результатам после поиска и полей для ввода атрибутов.

На закладке «Все» представлены общие атрибуты для всех видов информации.

Состав закладок различных видов информации формируется в зависимости от подключенных продуктов, например, «Законодательство», «Судебная практика», «Образцы и формы». На этих закладках представлены общие и специализированные атрибуты данного вида информации.

Если мы располагаем атрибутами документа, которые не представлены на закладке «Все», следует определить, к какому виду информации относится искомый документ или материал, и перейти к нужному виду.

Таким образом, достоинством поиска по атрибутам в ИПС «Кодекс» является то, что для каждого вида информации предлагаются свои атрибуты. Для консультаций – автор, для форм – код, и т.д.

Недостаток же видится в следующем: этот поиск, в отличие от интеллектуального, не допускает отклонений. Например, если пользователю нужен документ номер ММВ-7-3/760@, а он введет ММВ-7-3-760, то не найдется ничего. А в системе «Интеллектуальный поиск» документ был бы найден. [4]

И, наконец, «Судебный аналитик»: уникальный поиск в ИПС «Кодекс», который осуществляется по самым разным параметрам:

– по номеру документа;

– по правовому рубрикатору;

– по судебному округу, инстанции и конкретному суду;

– по участникам спора: по виду участника (например, «Налоговые органы») и по названию фирмы;

– по виду судебного акта;

– по результату рассмотрения дела;

С точки зрения предпринимательской, судебной или иного рода практики хотелось бы выделить поиск по названию фирмы, принимавшей участие в спорах, а также поиск по правовому рубрикатору и по судье. Собираясь в суд, можно посмотреть, как конкретный судья уже рассматривал тот или иной раздел законодательства. Этот поиск выгодно отличает ИПС «Кодекс» от других систем.

Вместе с тем, недостатком ИПС «Кодекс» является отсутствие таких возможностей, как «Поиск по ситуации» в ИПС «Гарант» и «Правовой навигатор» в ИПС «Консультант Плюс». Иначе говоря, если мы не знаем, какими словами сделать запрос, чтобы система нас поняла, выхода из этой ситуации нет.

Также в ИПС «Кодекс» нет поиска по изданиям. Причина кроется в том, что этот вид информации как таковой очень слабо представлен.

Нет и достаточных возможностей для расширенного поиска. Интеллектуальный поиск может дать 2 нужных слова в разных частях документа, и они не будут взаимосвязаны.

Источник

Умный поиск на сайте: преимущества, возможности и способы настройки

Поиск на сайте, фильтры, сортировки — очень значимые и полезные инструменты, которые помогают посетителям сайта быстрее ориентироваться и находить то, что им нужно. Согласитесь, введя в поисковой строке онлайн-магазина название товара, выбрав нужный цвет, размер и другие параметры с помощью фильтров, отсортировав по цене продукцию, клиент найдет нужный товар намного быстрее, чем если он будет бродить по сайту в надежде подобрать то, что он хочет. И каким же будет его разочарование, если в итоге он ничего не найдет.

Поиск на сайте сейчас стал необходимостью, в основном применяется он на коммерческих сайтах, в частности в интернет-магазинах. Но и для блогов, новостных порталов и других инфоресурсов с количеством страниц более 20 он не будет лишним.

Разберем ситуацию. Вы владелец интернет-магазина автозапчастей, посетитель зашел на сайт, чтобы найти детали Mitsubishi. Точное написание названия этой марки без подсказки повторит далеко не каждый. И вот он вводит «Mitsubisi» или вовсе решает, что на русском все проще и пишет «Мицубиси», а поиск на сайте не распознает таких названий и в результате выводит «Такого товара нет»:

А теперь на этом же сайте, введя запрос без ошибок, увидим, что такой товар есть, причем в широком ассортименте:

Я привела вам наглядный пример, когда из-за небольшой опечатки в названии владелец интернет-магазина потеряет своего клиента, хотя многие из нас часто допускают небольшие оплошности, орфографические ошибки, сокращают слова, не переходят с одной раскладки на другую. И чтобы не возникало таких проблем, разработали умный поиск, о котором мы и поговорим в этой статье.

Умный поиск: что это и в чем его преимущества

Поиск на сайте — это инструмент внутреннего индексирования сайта, который позволяет посетителям получать релевантную запросу выдачу результатов и искать нужные товары.

Умный поиск, в свою очередь, имеет расширенные возможности. За счет искусственного интеллекта он способен распознавать слова с опечатками, синонимы, транслитерации, неверно выбранную раскладку и не только.

Своим принципом умный поиск на сайте напоминает работу поисковых систем, которые так же умело распознают запросы пользователей, даже если они введены неверно.

Работает он по аналогии с тем же поиском Яндекса. Например, исправляет ошибки.

Или распознает запросы, введенные на неверно выбранной раскладке:

О том, какие запросы способен обрабатывать умный поиск, мы поговорим далее.

Преимущества умного поиска на сайте

Выделю два основных и, на мой взгляд, очень весомых плюса:

Возможности умного поиска

Как вы поняли, основная функция поиска — это считывать информацию с сайта и представлять пользователям подходящие запросу страницы. Но умный поиск на то и «умный», а значит и стандартной функцией «просто найти соответствующий запросу товар» он не ограничится. Раз уж он обладает интеллектом, то его задача — понимать пользователя лучше.

Итак, что же умеет умный поиск:

1. Распознавать слова, написанные с ошибками и опечатками

Такое встречается в интернете сплошь и рядом, кто-то случайно, торопясь, пропускает букву, а кто-то в принципе не знает, как пишется, например, словосочетание «дистиллированная вода». Задача умного поиска принимать слова, написанные с ошибкой, с пропущенной буквой, с буквой, указанной два раза, слитно или раздельно написанные слова.

Замечательно настроен умный поиск у сайта М-Видео, на его примере я покажу вам, как умеет справляться с некорректными запросами умный поиск.

Например, вот так на введенный запрос «стЕральные машины» выводятся, как и положено, карточки товаров «стИральных машин»:

Или по запросу «иригаторы», в котором пропущена одна буква Р, выдает товары с правильным названием:

2. Распознавать названия на разных языках

Далеко не все пользователи вводят название марки на нужном языке. Например, многим проще написать «Фольксваген», чем мучиться с латиницей. Это умный поиск тоже должен учитывать.

И для такого случая исправно работает умный поиск от М-Видео. По запросу «пылесосы Борк» находит нам то, что нужно:

Кстати, помимо того, что поиск должен уметь распознавать разные языки, он должен учитывать и возможные ошибки, допускаемые пользователями. Например, на практике мне встречалось разное написание марки «Xiaomi», было и «Сяоми», и «Ксиаоми», и «Ксяоми» и как только не было.

Посмотрим, возникнут ли трудности в таком случае у умного поиска от М-Видео.

Вариант 1. «Сяоми»:

Вариант 2. «Ксиаоми»:

Вариант 3. «Ксяоми».

Как видим, умный поиск в интернет-магазине М-Видео работает отменно.

3. Различать неверно включенную раскладку на клавиатуре

Такое встречается у всех, кто забыл переключиться на русский, а текст уже набрал. Умный поиск должен распознать и это, и точно так же, как поисковик Яндекс или Google, преобразовать текст.

Вот как это работает у М-Видео. Я ввела «ryjgjxyst vj,bkmyst ntktajys», что на русской раскладке значит «кнопочные мобильные телефоны», и поиск меня понял:

4. Понимать синонимы, аббревиатуры, сокращения

Многие пользователи используют привычные им названия, к примеру, аккумуляторные батареи чаще вводят просто, как АКБ, электрические щетки — электрощетки, или телевизоры вовсе называют плазмой. Все эти нюансы должен учитывать умный поиск.

В М-Видео, введя привычное нам слово «микроволновка», получим карточки с правильным полным названием «микроволновые печи»:

Хороший умный поиск поймет нашу разговорную речь. =)

5. Улавливать смысл, не заморачиваясь на грамматике

Правильно настроенный умный поиск учитывает запросы с некорректным написанием рода, числа или падежа, фразы с упущенным предлогом. В строке необязательно вводить детально верное название с правильными окончаниями — убедитесь сами.

Введем «набор посуда микроволновка» без предлогов и все в именительном падеже, но даже так умный поиск справляется на ура:

Все это умный поиск должен уметь, чтобы облегчить жизнь посетителю сайта и не потерять его заказ.

В будущем поиск поможет владельцу ресурса узнавать о предпочтениях пользователей, например, если они искали модель, которой не оказалась на сайте, это отличный повод расширить ассортимент.

Кроме того, поиск можно настроить так, чтобы при ненайденной продукции пользователь мог получить варианты аналогичных или сопутствующих товаров. Это также позволит увеличить конверсии с сайта.

Как настроить умный поиск на сайте

Чтобы внедрить на своем ресурсе умный поиск, можно использовать два варианта:

1. Сделать все своими руками

Вы можете настроить поиск самостоятельно, воспользовавшись инструкцией. Чтобы ее правильно выбрать, учитывайте CMS сайта или язык программирования вашего ресурса. Справиться с такой задачей нелегко, и доверить работы лучше стороннему специалисту, если в вашей команде нет собственного веб-разработчика.

Настройка поиска требует не только определенного уровня знаний и умений, но и времени. Потому что работу поиска нужно постоянно контролировать, анализировать и вносить коррективы, которые изначально не были учтены.

2. Воспользоваться уже готовыми решениями

Специально разработанные модули, как правило, не требуют особых усилий, а инструкции по их установке ограничиваются двумя-тремя шагами. Вам нужно только найти наиболее подходящее для вас решение по стоимости и функциональным возможностям. Благо, на рынке представлено очень много продуктов, расскажу вам про два сервиса, которые тестировала лично.

Умный поиск Multisearch.io

Поиск по сайту, который учитывает транслитерацию, опечатки, неправильно выбранную раскладку, морфологию, синонимы, историю недавних запросов. Есть несколько тарифных планов, отличающихся своими возможностями, стоимость начинается от 2900 рублей в месяц:

Установка не требует сложных настроек — вам нужно указать ссылку на Яндекс.Маркет фид, прописать Javascript строку кода и наслаждаться использованием умного поиска от Multisearch.io.

Умный и быстрый поиск от SearchBooster

Интеллектуальный поиск, который работает с фильтрами по свойствам, управляет синонимами, выводит поисковые подсказки, исправляет раскладку, опечатки, и это далеко не все его возможности. Также есть несколько тарифов, отличающихся опциями. Цены начинаются от 300 рублей в месяц по минимальному тарифу:

Процесс установки такой же простой, как и MultiSearch.io: указываете ссылку на фид Яндекс.Маркета, вставляете Javascript код в html страницы сайта или опубликуйте через GTM.

Вывод

Умный поиск — отличное решение для интернет-магазинов и других сайтов с большим количеством страниц. Он значительно упрощает работу с сайтом для пользователей, понимает их, даже если они говорят на искаженном русском, и за считанные минуты находит то, что им нужно. Для владельца сайта — это не менее важный помощник, ведь он не допустит потери продаж, заказов услуг, потери читателей блога и т.п., а, наоборот, сделает все возможное, чтобы увеличить конверсию на сайте.

После прочтения этой статьи я советую всем внимательно изучить поиск на своем сайте, способен ли он учитывать все, что я перечисляла выше, или ему пора «поумнеть». А если вам потребуется помощь в улучшении вашего сайта, мы всегда готовы вам ее оказать.

Источник

Публикации

Любая организация накапливает за годы работы огромный массив информации, который со временем только увеличивается. Ежедневно сотрудникам нужно ориентироваться в этом океане данных, извлекать из него материалы для решения рабочих задач.

По данным исследования Naumen и TAdviser, 48% российских организаций испытывают трудности с поиском необходимой информации.

Почему «добыть» нужные данные так непросто

1. Данные в организации не объединены в общую базу. Информация хранится в разрозненном виде во множестве внутренних и внешних источников. В 92% опрошенных Naumen и TAdviser компаний сотрудники часто не понимают, что и в каких конкретно корпоративных системах искать. В 60% компаний сотрудники сталкивались с тем, что, в принципе не могли найти нужную информацию во внутренних системах.

2. Компании пользуются поиском на основе ключевых слов и точного соответствия текста. Это устаревшая технология, которая совсем не облегчает сотрудникам жизнь. По оценке IDC, специалисты тратят около 2,5 часа в день (36% рабочего времени) на поиск информации.

Обычный поиск не выходит за рамки «бездумной» выдачи в ответ на ключевой запрос. Он не учитывает контекст работы сотрудника, историю поиска, связи между документами. Результаты исследования Search Your Cloud показывают, что сотруднику требуется сделать до 8 запросов, чтобы добраться до нужного документа.

Поиск по ключевым словам плохо ориентируется в разнообразных форматах данных, преимущественно работая с текстом. При этом в организации данные могут храниться в сотнях форматов — презентации, видео, статьи, текстовые документы, графики, изображения

Какие проблемы приносят сложности с поиском информации

Без возможности просто и быстро найти нужные данные, эффективность сотрудников падает. Рабочее время уходит на безрезультатные поиски, решение задач откладывается.

Опрошенные TAdviser компании выделяют такие последствия:

Решение: корпоративный интеллектуальный поиск

Чтобы решить перечисленные проблемы, нужно создать/внедрить систему, которая будет агрегировать информацию из всех источников и анализировать ее. Таким решением является корпоративный интеллектуальный поиск.

Что такое интеллектуальный поиск

По определению Forrester — это новое поколение корпоративного поиска, которое применяет технологии ИИ: обработку естественного языка и машинное обучение. Технологии нужны, чтобы усваивать, понимать, организовывать и запрашивать цифровой контент из множества источников данных.

Интеллектуальный поиск помогает объединить все источники информации (внутренние и внешние) в единую базу знаний, в которой легко сориентироваться и найти то, что нужно максимально быстро.

Чем интеллектуальный поиск отличается от обычного

Как работает интеллектуальный поиск

В компании есть внутренние системы хранения и управления данных, также для поиска идет запрос к внешним источникам. Информация фрагментированная и разрозненная, хранится в разных хранилищах и корпоративных приложениях.

Система корпоративного поиска подключается к имеющимся источникам данных. Далее проходит следующие этапы:

Система анализирует содержимое файла и мета данные, на основе этого создает связи с другими файлами. Анализ содержимого и создание связей — самый технологически сложный процесс. Именно в нем кроется большая часть успешности поисковой системы в целом. Здесь мы видим качественное отличие от обычного поиска: он ищет по ключевым словам, а интеллектуальный используется машинное обучение.

После индексации система создает базу данных, где хранит результаты анализа. Далее в процессе поиска она будет обращаться именно к этой базе.

Как происходит сам процесс поиска

Пользователь создает поисковый запрос, система обрабатывает его с учетом контекста работы сотрудника (его роли). Система старается как бы понять намерение запроса, а не просто искать по ключевым словам.

В системе есть персонализация выдачи. Учитывается роль пользователя и его нахождение в организационной структуре компании. Например, в дочерних компаниях или филиалах могут быть свои нормативные документы с похожими названиями. В первую очередь пользователь будет видеть данные из его организации.

На поисковую выдачу повлияет, есть ли у пользователя доступ к документам источника. Если нет, то он их не увидит.

Также выдача будет меняться в зависимости от истории запросов пользователя.

Какие технологии лежат в ядре интеллектуального поиска

Для начала рассмотрим наиболее сложные с технической стороны задачи, которые стоят перед корпоративным поиском, а затем покажем, какие технологии позволяют их решать.

Задача 1: Проанализировать содержимое данных, чтобы построить между ними связи

Сюда входит анализ видео, аудио, изображений; распознавание образов и текста. Необходимо найти концептуальную связь между данными и элементами данных — например, чтобы определить, насколько близки по смыслу две научные статьи.

Задача 2: Интерпретировать запрос с учетом контекста

С этими задачами система справляется благодаря машинному обучению. А именно его области — обработки естественного языка (Natural Language Processing). NLP анализирует и выделяет смысл из текста, написанного человеческим языком. В том числе текста на изображениях, видео и расшифровок аудио с речью.

Машинное обучение в целом:

Важная особенность машинного обучения — это, собственного, его обучаемость. Можно применить технологии, которые со временем найдут скрытые связи между запросами и данными, наиболее полезными пользователю. Постепенно алгоритмы поиска учатся выдавать более релевантную информацию. Все эти возможности реализованы в системе корпоративного поиска Naumen Enterprise Search.

Источник