李其霖分享他们的搜索引擎如何发展以解决他们的业务难点和其他相关实践。

1. 1
李其霖
April 10 2019, 搜索引擎技 家, 安保
安保 搜索引擎的架

2. 2
Agenda
公司介 和 背景
痛点和架 演化 程
未
1
2
3

3. 33
安保 作 首家
互 保 公司，以服
互 生 自身定
位。目前主要 事 商
，航旅 ， ，
，健康 以及金
融等 。

4. 4
背景
• DB海量 据
‒ 保 量高 百
‒ 8 1024表
‒ 每日增量更新上
• 据 分 分表后无法
‒ 普通
‒ 多表 join
‒ tddl全表 描 效率
• 效率要求
‒ 毫秒
• 据 性要求
‒ 秒 据更新要求

5. 5
Agenda
公司介 和 背景
痛点和架 演化 程
未
1
2
3
2
1

6. 6
安第一代搜索引擎：TSearch
Terminator-Search( 搜),基于solr建立的分布式搜索引擎。
D
4 -
4 -
O
C
B
4 -
4 - 4
4 -
4
4
-

7. 7
第二代搜索引擎：Open Source ElasticSearch
1. 源
a. 有源 方便我 定位跟踪 ， 行定制化 足 安自己的特殊需求
1. 可 展性、可用性、 定性更高， 可以 容
1. 近 更新
a. db 生修改后，只需要1秒 即可在搜索引擎中看到
1. 更快的 速度
a. 比Tsearch的 速度，提升了50%

8. 8
Open Source vs. Elasticsearch Service
• ES集群的配置，部署， 容, 据接入等
工作全靠人工完成， 工作量巨大。
• 直接全量 生 集群，集群 升，影
方使用。
• 共享ES集群的限流和隔离做的不 ，一 用
的突 流量暴 ， 影 其 的 用。
• 外部 据源全量 入ES 有有效的管理和 控。
• 只能支撑 化 需求，全文搜索需求不能
很好支撑。
• 自 化 容和配置， 少 工作
量。
• 阿里云Elasticsearch集成了Elastic Stack商
版的X-Pack 件包，包括安全、告警、
控、 表生成、 分析、机器 等 件，
用 可以 箱即用。
• 提高elasticsearch集群的 据安全性。
OpenSource Elasticsearch遇到的挑 阿里云Elasticsearch Service

9. 9
安搜索引擎架
X c
S
an
I CPDt
e
CP V HBOp L
iT I
D l l l
X - -
Fr r Ehk
-
/
i
g
c
R
-
-
l
- -
-
s A -

10. 10
安搜索管理平台X-Search

11. 11
管理平台- 据源定

12. 12
管理平台- 例管理

13. 13
安搜索引擎架 -搜索微服
.

14. 14
安搜索引擎架 -核心保 集群
E
E
E
-
B
A DCD

15. 15
安搜索引擎架 -通用集群（共享型）
KH D
B
KH D
AG
-
F
B B B
E
I

16. 16
安搜索引擎架 -中文集群
- RI
ANJ
- RI
ANJ
-
A
-
PV D
TH NJ TH NJ
KFS KFS
E
- -
-
L
B

17. 17
安搜索引擎架 -日志集群
E
JK
- FA
A B
D A
理 展示

18. 18
ZATV 面

19. 19
Kibana 面

20. 20
Agenda
公司介 和 背景
痛点和架 演化 程
未
1
2
3
13
1

21. 21
未
1. 做一 高可用的搜索引擎。
2. 故障 ，自 保 的高可用解 方案。
3. 采用基于Kubernetes+Docker的容器技 ， 各 的 用 行 源
隔离。
4. 集成Elasticsearch机器 的能力。

22. 22
Thanks
Contact me
Email : liqilin@zhongan.io