当当网Docker应用实践

2. 当当网Docker实践
当当网个性化推荐组
肖骁
16/9/23

3. • 个人简介
• 肖骁
• 当当网个性化推荐团队项目负责人
• 研究生毕业于哈尔滨工业大学
• 负责推荐系统架构的研发
• 研究方向为大数据工具以及Docker的应用

4. 目录
• 当当网推荐后台Docker的应用
• 遇到的问题

5. 目录
• 当当网推荐后台Docker的应用
• 遇到的问题

6. 当当网推荐后台Docker的应用
• 推荐系统
• 5000W请求/天
• 21台机器

7. 当当网推荐后台Docker的应用
• 推荐系统架构

8. 当当网推荐后台Docker的应用
• 开发测试部署上线环境，配置问题
• 大促扩容，资源弹性问题

9. 当当网推荐后台Docker的应用
• 开发便利性
• 测试一致性
• 运维标准化

10. 当当网推荐后台Docker的应用
• 推荐后台容器

11. 当当网推荐后台Docker的应用
• 推荐后台容器
• 性能测试情况
类别 TPS 平均响应时间 最大响应时间 最小响应时间 运行时间
物理机 400 21ms 46ms 15ms 1H
Docker 400 22ms 55ms 16ms 1H

12. 当当网推荐后台Docker的应用
• 代码流水线管理
• 提高开发效率
测试镜像
仓库
代码开发
查询
部署
开发
镜像制作
测试
提交
测试应用
线上镜像
仓库
查询
部署
运维
发布应用
pushpush
代码管理
触发
gitlab jenkins

13. 当当网推荐后台Docker的应用
• Registry

14. 当当网推荐后台Docker的应用
• Jenkins
• Pipeline as Code
• Pipeline中提供了默认的Docker支持
Build Test Push Sent mail

15. 当当网推荐后台Docker的应用
• docker-compose
推荐后台镜像：
…
数据镜像：
…
日志镜像：
…
Flume镜像：
…
compose.yaml
docker-compose up
镜像仓库

16. 当当网推荐后台Docker的应用
• 无数据容器后：mesos marathon
• marathon-lb --服务发现，负载均衡

17. 当当网推荐后台Docker的应用
•镜像构建
• 从Dockerfile生成
• 避免依赖过深
• 镜像都应有对应的Git
• 镜像管理
• 单点问题
• 性能问题
• 权限问题

18. 当当网推荐后台Docker的应用
• 发布管理
• 镜像构建自动化
• 不需要考虑外部依赖
• 日志管理
• 容器无状态

19. 当当网推荐后台Docker的应用
•配置管理
• 配置文件
• 环境变量
• 配置中心
•网络管理
• Host
• Bridge
• 自定义

20. 目录
• 当当网推荐后台Docker的应用
• 遇到的问题

21. 遇到的问题
• 使用Docker时要注意的问题
• docker运行环境要求
• 镜像载荷要求
• 推荐后台作为载荷时遇到的问题
• 数据容器过大
• 多实例运行
• 镜像管理，版本控制

22. 遇到的问题
• 使用Docker时要注意的问题
• 坑1：ulimit参数
• 坑2：DNS
• 坑3：内部IP
• 坑4： latest tag

23. Q?A:END
xiaoxiao@dangdang.com