SlideShare a Scribd company logo
1 of 15
Download to read offline
北京迅达云成科技有限公司 www.speedycloud.cn
北京迅达云成科技有限公司
www.speedycloud.cn
2015年8月 北京
WELCOME
云计算平台资源调度系统要点解析
北京迅达云成科技有限公司 www.speedycloud.cn
云计算平台资源调度系统的进化过程
或许改成这个名字更贴切:
北京迅达云成科技有限公司 www.speedycloud.cn
什么是调度系统
北京迅达云成科技有限公司 www.speedycloud.cn
云计算平台的资源调度系统是干什么的?
北京迅达云成科技有限公司 www.speedycloud.cn
云主机 云存储 SDN 网络 防火墙 其他服务负载均衡 云分发
北京迅达云成科技有限公司 www.speedycloud.cn
北京迅达云成科技有限公司 www.speedycloud.cn
怎么干?
罗马不是一天建成的 系统不是一天写好的
所以,我们尝试从头来,拆开这个东东看看,看看TA 是怎么进化成现在的样子的
北京迅达云成科技有限公司 www.speedycloud.cn
场景一:
功能描述:
通过 Web 分配云主机给客
户使用
环境设定: (后文同此设定)
1. 展示层有专人开发
2. 只开发后端业务逻辑
3. 忽略参数验证和异常流
Web
DB 物理机
1
2
3
4
5
6
技术选型:
开发语言:Python + Django + Shell
虚拟化技术:KVM
数据库:MySQL
北京迅达云成科技有限公司 www.speedycloud.cn
场景二:
问题描述:
客户一次分配多台云主机时
需要等待的时间太长
解决办法:
将之前顺序分配的方式变成
多线程
北京迅达云成科技有限公司 www.speedycloud.cn
场景三:
问题描述:
单数据中心完全没办法满足用户
需求,于是部署了多个数据中心,但是
有些客户说分配时间很长,经常等到超
时,但是我们用 PDB没法调试。
解决办法:
将之前分配的方式变成由多线程
变成多进程。
Web
DB 物理机
Web
DB
数据中心 A
数据中心 B
数据中心 C
数据中心 D
数据中心 E
北京迅达云成科技有限公司 www.speedycloud.cn
场景四:
问题描述:
经过反复测试,发现执行任务不
成功是因为某些数据中心到控制中心的
网络不稳定造成的,而且时常发现云主
机实际上分配成功了,但是控制中心拿
不到状态。
解决办法:
1. 换BGP数据中心
2. 引入了消息队列解决多任务等
待时间久问题,提升用户体验
Web
DB
数据中心 A
数据中心 B
数据中心 C
数据中心 D
数据中心 E
数据中心 B
数据中心 C
数据中心 D
数据中心 E
Web
DB
数据中心 A
MQ
Worker
北京迅达云成科技有限公司 www.speedycloud.cn
该告以段落休息一下了
下一阶段还有新的任务
北京迅达云成科技有限公司 www.speedycloud.cn
场景五:
问题描述:
1. 随着设备越来越多,设备故
障率也上来了,需要进行升级维护。
2. 随着用户访问增大,对于
Web 端的可用性要求提高,要求在
升级 Web 端的时候也允许用户提
交资源申请
数据中心 B
数据中心 C
数据中心 D
数据中心 E
Web
DB
数据中心 A
MQ
Worker
解决办法:
1. 对宿主机进行热迁移 + 操作
系统打热补丁。
2. 增加系统挂起状态
3. 增加节点挂起状态
数据中心 B
数据中心 C
数据中心 D
数据中心 E
Web
DB
数据中心 A
MQ
Worker
Job
Tracker
1. 增加系统挂起状态
2. 增加节点挂起状态
北京迅达云成科技有限公司 www.speedycloud.cn
• 中国运维高端垂直社区组织
• 微信群:2015年4月29日
– 高效运维 主群(280) //No.1
– 高效运维 1号群(400)
– 高效运维 2号群(400)
– 高效运维聊聊群(300)
– 高效运维互动群(200)
• 公众号:2015年5月17日
– 纯粹技术原创,每周多篇
– 3个月订阅用户数突破1.6万
北京迅达云成科技有限公司 www.speedycloud.cn
Thanks!
北京迅达云成科技有限公司
地址:北京市朝阳区酒仙桥路12号电子城科技大厦917
网址:www.speedycloud.cn
电话: 400-6911-816

More Related Content

Viewers also liked

Fixed Mindset and Growth Mindset
Fixed Mindset and Growth Mindset Fixed Mindset and Growth Mindset
Fixed Mindset and Growth Mindset Le Phu
 
Presentation of project on e auction with dotnet
Presentation of project on e auction with dotnetPresentation of project on e auction with dotnet
Presentation of project on e auction with dotnetSunanda Chakraborty
 
E - Auction (Electronic Auction)
E - Auction (Electronic Auction)E - Auction (Electronic Auction)
E - Auction (Electronic Auction)Jewel George Thomas
 
Petit Club - Zoom sur l'Influence
Petit Club - Zoom sur l'InfluencePetit Club - Zoom sur l'Influence
Petit Club - Zoom sur l'InfluencePetit Web
 

Viewers also liked (8)

4. Micosis sistemicas
4.  Micosis sistemicas4.  Micosis sistemicas
4. Micosis sistemicas
 
Fixed Mindset and Growth Mindset
Fixed Mindset and Growth Mindset Fixed Mindset and Growth Mindset
Fixed Mindset and Growth Mindset
 
Presentation of project on e auction with dotnet
Presentation of project on e auction with dotnetPresentation of project on e auction with dotnet
Presentation of project on e auction with dotnet
 
Procedure in syariah trail
Procedure in syariah trailProcedure in syariah trail
Procedure in syariah trail
 
E - Auction (Electronic Auction)
E - Auction (Electronic Auction)E - Auction (Electronic Auction)
E - Auction (Electronic Auction)
 
Petit Club - Zoom sur l'Influence
Petit Club - Zoom sur l'InfluencePetit Club - Zoom sur l'Influence
Petit Club - Zoom sur l'Influence
 
Modelo atómico demócrito
Modelo atómico demócritoModelo atómico demócrito
Modelo atómico demócrito
 
Modelo Funcional De Luria
Modelo Funcional De LuriaModelo Funcional De Luria
Modelo Funcional De Luria
 

Similar to SpeedyCloud 云计算平台资源调度系统要点解析

蓝鲸PaaS平台介绍.pptx
蓝鲸PaaS平台介绍.pptx蓝鲸PaaS平台介绍.pptx
蓝鲸PaaS平台介绍.pptxssuser693b9a
 
Chinacache一站式开发和应用部署环境
Chinacache一站式开发和应用部署环境Chinacache一站式开发和应用部署环境
Chinacache一站式开发和应用部署环境OpenSourceCamp
 
Cnut 容器大会 京东
Cnut 容器大会 京东Cnut 容器大会 京东
Cnut 容器大会 京东tommy tommy
 
中国云计算发展之道
中国云计算发展之道中国云计算发展之道
中国云计算发展之道raisinli
 
海通证券金融云思考与实践(数据技术嘉年华2017)
海通证券金融云思考与实践(数据技术嘉年华2017)海通证券金融云思考与实践(数据技术嘉年华2017)
海通证券金融云思考与实践(数据技术嘉年华2017)Zhaoyang Wang
 
云计算概念介绍2011 03
云计算概念介绍2011 03云计算概念介绍2011 03
云计算概念介绍2011 03Liming Liu
 
課程1 1:雲端運算初探
課程1 1:雲端運算初探課程1 1:雲端運算初探
課程1 1:雲端運算初探vaemon
 
ChinaNetCloud - Aliyun Joint Event on Cloud Operations
ChinaNetCloud - Aliyun Joint Event on Cloud Operations ChinaNetCloud - Aliyun Joint Event on Cloud Operations
ChinaNetCloud - Aliyun Joint Event on Cloud Operations ChinaNetCloud
 
20121202 中国电信云计算by谢博士 v4.2
20121202 中国电信云计算by谢博士   v4.220121202 中国电信云计算by谢博士   v4.2
20121202 中国电信云计算by谢博士 v4.2wendy bai
 
云计算推动金融业 I T 架构变革
云计算推动金融业 I T 架构变革云计算推动金融业 I T 架构变革
云计算推动金融业 I T 架构变革Hardway Hou
 
Big Data Technology - Cloud Computing
Big Data Technology - Cloud ComputingBig Data Technology - Cloud Computing
Big Data Technology - Cloud ComputingRen-Hao (PAN) Pan
 
《云计算 信息产业新浪潮》第一篇 云计算概念解读 -- 锋迈正德云计算报告
《云计算  信息产业新浪潮》第一篇 云计算概念解读 --  锋迈正德云计算报告《云计算  信息产业新浪潮》第一篇 云计算概念解读 --  锋迈正德云计算报告
《云计算 信息产业新浪潮》第一篇 云计算概念解读 -- 锋迈正德云计算报告Liming Liu
 
Big Data World Forum
Big Data World ForumBig Data World Forum
Big Data World Forumbigdatawf
 
Cloud ready v mware 云计算解决方案
Cloud ready   v mware 云计算解决方案Cloud ready   v mware 云计算解决方案
Cloud ready v mware 云计算解决方案ITband
 
Iaa s管理平台的规划与研发 社区
Iaa s管理平台的规划与研发 社区Iaa s管理平台的规划与研发 社区
Iaa s管理平台的规划与研发 社区benbenhappy
 
Intelligence suppy chain on mos note 20180829
Intelligence suppy chain  on mos note 20180829Intelligence suppy chain  on mos note 20180829
Intelligence suppy chain on mos note 20180829Ralph Yin
 
Cloud Operations Challenges - Talk by ChinaNetCloud at Joint Cisco event
Cloud Operations Challenges - Talk by ChinaNetCloud at Joint Cisco eventCloud Operations Challenges - Talk by ChinaNetCloud at Joint Cisco event
Cloud Operations Challenges - Talk by ChinaNetCloud at Joint Cisco eventChinaNetCloud
 
拨开浮云见神马-云计算PaaS平台实战
拨开浮云见神马-云计算PaaS平台实战拨开浮云见神马-云计算PaaS平台实战
拨开浮云见神马-云计算PaaS平台实战Cam Song
 
创新内容计算网络 拥抱万物互联
创新内容计算网络 拥抱万物互联创新内容计算网络 拥抱万物互联
创新内容计算网络 拥抱万物互联Hardway Hou
 
AI-enabled digital transform for manufacturing
AI-enabled digital transform for manufacturingAI-enabled digital transform for manufacturing
AI-enabled digital transform for manufacturingWang Johnson
 

Similar to SpeedyCloud 云计算平台资源调度系统要点解析 (20)

蓝鲸PaaS平台介绍.pptx
蓝鲸PaaS平台介绍.pptx蓝鲸PaaS平台介绍.pptx
蓝鲸PaaS平台介绍.pptx
 
Chinacache一站式开发和应用部署环境
Chinacache一站式开发和应用部署环境Chinacache一站式开发和应用部署环境
Chinacache一站式开发和应用部署环境
 
Cnut 容器大会 京东
Cnut 容器大会 京东Cnut 容器大会 京东
Cnut 容器大会 京东
 
中国云计算发展之道
中国云计算发展之道中国云计算发展之道
中国云计算发展之道
 
海通证券金融云思考与实践(数据技术嘉年华2017)
海通证券金融云思考与实践(数据技术嘉年华2017)海通证券金融云思考与实践(数据技术嘉年华2017)
海通证券金融云思考与实践(数据技术嘉年华2017)
 
云计算概念介绍2011 03
云计算概念介绍2011 03云计算概念介绍2011 03
云计算概念介绍2011 03
 
課程1 1:雲端運算初探
課程1 1:雲端運算初探課程1 1:雲端運算初探
課程1 1:雲端運算初探
 
ChinaNetCloud - Aliyun Joint Event on Cloud Operations
ChinaNetCloud - Aliyun Joint Event on Cloud Operations ChinaNetCloud - Aliyun Joint Event on Cloud Operations
ChinaNetCloud - Aliyun Joint Event on Cloud Operations
 
20121202 中国电信云计算by谢博士 v4.2
20121202 中国电信云计算by谢博士   v4.220121202 中国电信云计算by谢博士   v4.2
20121202 中国电信云计算by谢博士 v4.2
 
云计算推动金融业 I T 架构变革
云计算推动金融业 I T 架构变革云计算推动金融业 I T 架构变革
云计算推动金融业 I T 架构变革
 
Big Data Technology - Cloud Computing
Big Data Technology - Cloud ComputingBig Data Technology - Cloud Computing
Big Data Technology - Cloud Computing
 
《云计算 信息产业新浪潮》第一篇 云计算概念解读 -- 锋迈正德云计算报告
《云计算  信息产业新浪潮》第一篇 云计算概念解读 --  锋迈正德云计算报告《云计算  信息产业新浪潮》第一篇 云计算概念解读 --  锋迈正德云计算报告
《云计算 信息产业新浪潮》第一篇 云计算概念解读 -- 锋迈正德云计算报告
 
Big Data World Forum
Big Data World ForumBig Data World Forum
Big Data World Forum
 
Cloud ready v mware 云计算解决方案
Cloud ready   v mware 云计算解决方案Cloud ready   v mware 云计算解决方案
Cloud ready v mware 云计算解决方案
 
Iaa s管理平台的规划与研发 社区
Iaa s管理平台的规划与研发 社区Iaa s管理平台的规划与研发 社区
Iaa s管理平台的规划与研发 社区
 
Intelligence suppy chain on mos note 20180829
Intelligence suppy chain  on mos note 20180829Intelligence suppy chain  on mos note 20180829
Intelligence suppy chain on mos note 20180829
 
Cloud Operations Challenges - Talk by ChinaNetCloud at Joint Cisco event
Cloud Operations Challenges - Talk by ChinaNetCloud at Joint Cisco eventCloud Operations Challenges - Talk by ChinaNetCloud at Joint Cisco event
Cloud Operations Challenges - Talk by ChinaNetCloud at Joint Cisco event
 
拨开浮云见神马-云计算PaaS平台实战
拨开浮云见神马-云计算PaaS平台实战拨开浮云见神马-云计算PaaS平台实战
拨开浮云见神马-云计算PaaS平台实战
 
创新内容计算网络 拥抱万物互联
创新内容计算网络 拥抱万物互联创新内容计算网络 拥抱万物互联
创新内容计算网络 拥抱万物互联
 
AI-enabled digital transform for manufacturing
AI-enabled digital transform for manufacturingAI-enabled digital transform for manufacturing
AI-enabled digital transform for manufacturing
 

More from SpeedyCloud

教育交互直播的技术难点与架构探索 @ 见云沙龙
教育交互直播的技术难点与架构探索 @ 见云沙龙教育交互直播的技术难点与架构探索 @ 见云沙龙
教育交互直播的技术难点与架构探索 @ 见云沙龙SpeedyCloud
 
选型指南:Cdn系统中dns的设计与研发
选型指南:Cdn系统中dns的设计与研发选型指南:Cdn系统中dns的设计与研发
选型指南:Cdn系统中dns的设计与研发SpeedyCloud
 
浅析Python多线程与多进程的使用
浅析Python多线程与多进程的使用浅析Python多线程与多进程的使用
浅析Python多线程与多进程的使用SpeedyCloud
 
How to Use Multi-thread & Multi-process in Python
How to Use Multi-thread & Multi-process in PythonHow to Use Multi-thread & Multi-process in Python
How to Use Multi-thread & Multi-process in PythonSpeedyCloud
 
运维?KVM & OpenVZ & Docker
运维?KVM & OpenVZ & Docker运维?KVM & OpenVZ & Docker
运维?KVM & OpenVZ & DockerSpeedyCloud
 
深入Docker的资源管理
深入Docker的资源管理深入Docker的资源管理
深入Docker的资源管理SpeedyCloud
 
Resource Management of Docker
Resource Management of DockerResource Management of Docker
Resource Management of DockerSpeedyCloud
 

More from SpeedyCloud (7)

教育交互直播的技术难点与架构探索 @ 见云沙龙
教育交互直播的技术难点与架构探索 @ 见云沙龙教育交互直播的技术难点与架构探索 @ 见云沙龙
教育交互直播的技术难点与架构探索 @ 见云沙龙
 
选型指南:Cdn系统中dns的设计与研发
选型指南:Cdn系统中dns的设计与研发选型指南:Cdn系统中dns的设计与研发
选型指南:Cdn系统中dns的设计与研发
 
浅析Python多线程与多进程的使用
浅析Python多线程与多进程的使用浅析Python多线程与多进程的使用
浅析Python多线程与多进程的使用
 
How to Use Multi-thread & Multi-process in Python
How to Use Multi-thread & Multi-process in PythonHow to Use Multi-thread & Multi-process in Python
How to Use Multi-thread & Multi-process in Python
 
运维?KVM & OpenVZ & Docker
运维?KVM & OpenVZ & Docker运维?KVM & OpenVZ & Docker
运维?KVM & OpenVZ & Docker
 
深入Docker的资源管理
深入Docker的资源管理深入Docker的资源管理
深入Docker的资源管理
 
Resource Management of Docker
Resource Management of DockerResource Management of Docker
Resource Management of Docker
 

SpeedyCloud 云计算平台资源调度系统要点解析