1. Ссылки в нормативных
документах
Сбор и хранение

2. СПС «Право.ру»
• более 9 миллионов документов
• +10 000 документов / день

3. Проблемы
• фидеральный зокон
• ФЗ о федзаконе
• документы меняются
• разная структура документов

4. Требования
• быстрый отклик на запросы
• большое количество ссылок
• Хранение дополнительных данных для
сложных запросов

5. Задачи
• Как собрать?
• Как хранить и использовать?

6. Сборка ссылок
• Нормализуем текст
• Поиск документа
• Поиск уточнения в документе

7. Исходный текст
Согласно пп 1 пункта 2 ст.17
ФЗ РФ «О крабах», медведи не имеют
права голоса на выборах.

8. Нормализуем
Согласно [подпункт 1] [пункта 2] [статьи
17] [Федеральный Закон] [Российской
Федерации] [«О крабах»], медведи не
имеют права голоса на выборах.

9. Склеиваем
[подпункт 1 пункта 2 статьи 17
Федеральный Закон Российской
Федерации «О крабах»]

10. Поиск
Тип: Федеральный Закон
Регион: Российская Федерация
Заголовок: «О крабах»

11. Поиск уточнений
подпункт 1 пункта 2 статьи 17
SELECT id FROM entities
WHERE
types = «13,16,17»
AND
num_path = «1,2,17»
AND
tons_of_optimization_shit

12. Хранение
• Neo4j
• OQGraph
• OrientDB
• HyperGraphDB
• MySQL + Sphinx

13. Решение
• MySQL - хранение ссылок
• Sphinx
• Индекс ссылок в документе
• Индекс счетчика ссылок на документ

15. Итоги
• Ссылки в документах
• Связанные документы
• Автоподборка юр.практики

16. Вопросы?
Андрей Суббота
subbota@gmail.com
http://twitter.com/numbata