资讯专栏INFORMATION COLUMN

云计算技术在高速公路上的应用实践

dunizb / 2469人阅读

摘要:新的动力年月,国务院发布国务院关于促进云计算创新发展培育信息产业新业态的意见,云计算成为互联网行动计划的新基础设施。

第一部分 初识云计算、迁移上云

1.1初识云计算、迁移上云

2012年,当我们使用远程桌面客户端登录云端主机的那一刻开始,新IT基础设施时代来了,基于传统硬件模式的各业务系统架构将会发生巨变。

我们在云端搭建好主机、数据库、网络等环境后,联系了网站、投资、人力资源、财务管理等系统的软件厂商进行系统迁移,按照从小到大、从易到难的顺序,将这些系统陆续迁移到了云端,并于2015年2月全部迁移完成。集团总部将原用于支撑这些系统的主机、存储、防火墙、防毒墙、路由器、交换机等设备断电、下架并同时拆除了网络专线。

1.2新的动力

2015年1月,国务院发布《国务院关于促进云计算创新发展培育信息产业新业态的意见》, 云计算成为“互联网+”行动计划的新基础设施。

2015年7月4日,国务院印发《关于积极推进“互联网﹢”行动的指导意见》,《意见》指出,加快互联网与交通运输领域的深度融合,通过基础设施、运输工具、运行信息等互联网化,推进基于互联网平台的便捷化交通运输服务发展。

2016年11月世界互联网大会,中国交通运输部发出以整合资源、开放共享为重点,以泛在互联、全面感知、便捷交互为目标,推动“互联网+”与交通运输融合发展的倡议。

2017年9月14日交通运输部办公厅印发《智慧交通让出行更便捷行动方案(2017—2020年)》的通知,在不断完善智慧出行发展环境的要求中提出,“深化出行公共信息资源开放示范。推动相关政府部门、事业单位加快交通出行公共信息资源开放,充分利用以综合交通出行大数据开放云平台为代表的各类数据开放平台,支撑各类出行信息服务产品的研发推广。鼓励各类主体利用开放信息资源开展出行服务创新。”

2017年12月26日,在交通运输部召开的全国交通运输工作会议中,在实施创新驱动发展战略,加快推进行业转型升级的要求中提出“要充分利用互联网广泛覆盖、高效连接等特性,解决传统产业中存在的信息不对称、中间环节多等问题,以旅客便捷出行、货物高效运输为导向,全面推进“互联网+交通运输”行动”,“要坚持以信息化驱动交通运输现代化,推动云计算、物联网、大数据、移动智能终端等技术在交通运输领域的深度应用,推动交通运输传统产业向自动化、智能化转变。”

国家这一系列政策与倡议出台,更加坚定了我们选择云计算平台作为新的基础设施来支撑“互联网+”行动计划的信心与依据,使我们有了新的强大动力。

第二部分 全面使用云计算

2.1 云计算基础服务的应用

(1) 按需付费,秒级计费

在2013年的时候,很多国内云计算服务提供商宣称自己的云平台费用最低,我们在逐一试用后发现,各类资源最少的付费周期是一个月,也就是说其实是包月或包年价格最低,也就是无论你用不用这些计算资源,都得先支付至少一个月的费用,这与云计算服务按需付费的特点是不匹配的。

那么如何才是真正的按需付费呢?那就是按秒来计费。例如,我们在云端建立了一台主机进行相关测试,在使用了59分59秒后删除,那么在云端应该只收取59分59秒费用。在云端购买的这些主机、路由器等资源和物理设备不同,若不再使用直接删除就行,而物理设备买回来就成了固定资产。所以只有做到了云平台上所有服务都按照秒级计费的要求,才能实现真正的按需付费,这才是真正的费用最低。

我们按照按需付费,秒级计费的要求,经过认真比较与全面亲自的测试,我们最终选择了一家于2013年上线,在当时国内第一家也是唯一的一家,从对外提供云计算服务开始,云端所有资源都按照秒级计费的青云QingCloud云计算服务,正式开始了我们集团的云计算之旅。

(2)定时器与自动弹性伸缩

①定时器的应用场景

带宽自动调整:已经迁移上云的财务管理系统带宽是根据用户日常作息时间自动动态变化的:7:00-19:00为20M带宽,19:00-0:00为10M带宽,0:00-7:00为5M带宽,每天自动循环,计费也随之调整。

资源自动备份:我们在云端部署的主机、硬盘、数据库等含有数据的资源,在每天凌晨3点自动进行包含操作系统的镜像级备份,并且可以设定备份链的天数,可以从任何一个备份链条上,迅速还原到某天的状态。

自动开关机:因与AI业务相关的测试需要使用到GPU主机,但这种类型的主机租用费较高,我们把它设定为每天在工作时间自动开机,非工作时间自动关机以节约费用。

②自动弹性伸缩

自动扩充存储空间:我们使用的开源数据库可以根据实际资源使用情况,来自动进行数据库存储空间的扩容。例如:存储空间使用到达80%后,自动扩充100G的空间,计费也随之调整。

自动扩充负载均衡器后端主机的数量:我们的协同指挥调度云平台如果出现高并发的访问,在达到我们预设的阈值后,就会自动增加后端计算资源来应对。例如:负载均衡器后端主机的CPU负载只要到达80%,负载均衡器就会自动克隆出一台主机来应对高并发访问,等到访问量减少到预设的阈值,这台克隆出来的主机又会自动被删除,计费也随之调整。

自动伸缩网络带宽:再拿我们的财务管理系统举例,在定时器已经在使用的情况下,如果在某个时间段内突然出现了大量用户访问,而这个时间段内的带宽又不够,那么根据预设的带宽调整阈值自动增加或减少带宽,计费也随之调整。

(3)多副本热备、热迁移与备份

没有永远不损坏的硬件,云计算平台使用的硬件也一样。我们在云端购买的任何服务,在后台都自动存在同样运行着的至少两个热备副本随时待命,这些副本运行在与正本不同的服务器上,只要正在运行正本的主机的CPU、内存等出现硬件故障,副本会在几十秒之内进行热迁移以接管服务,保证业务系统的不间断运行。由于云计算平台底层的存储做了多重RAID保护,所以当云平台的硬盘出现损坏时,用户是无任何感知的,所以在云端是无需担心数据丢失问题。

而资源备份与多副本热备是两个不同的概念,备份是用来解决应用系统出现数据误写入、数据被篡改等问题后,进行回滚操作以恢复某时某天数据的。云端提供的备份回滚功能也相当的快,通常在几十秒内回滚完成。

(4) 主、子账号管理体系与计费方式

我们集团总部与所属单位采用的是1个主账号+多个子账号的云端账号管理模式,实现了以下功能:

1、由主账号统一管理全集团的云端账号权限,包括开通、删除、云端IP地址规划等操作。各所属单位的业务系统均部署在各自的子账号里。

2、子账号可以共享主账号的余额或者独立计费。

3、主账号可以监管子账号内的资源使用情况,以预防子账号资源使用不足或分配不合理等问题。

使用云端主、子账号的管理模式,我们集团实现了原先在物理机房环境下无法实现的管理模式与成效,足不出户就可以管理各子账号的资源或帮助子账号解决技术上的问题。

(5) 全面使用各种类型的免费隧道服务

青云的隧道功能齐全,有IPsec(含主模式与野蛮模式)、GRE,有了这些隧道,就可以实现主子账号之间、各子账号间数据的安全互通与共享,这种模式为全集团的大数据集中分析奠定了最重要的网络基础;同时也可以实现本地与云端的安全互联,实现各类数据在云端快速交互与汇聚。目前多数云平台的隧道功能有的按照数量计费、有的按照流量计费、有的按照时间计费、还有的限制隧道的数量。而青云的隧道不但功能齐全,不限数量、不限种类、而且还免费,为我们安全、快速组网节约下了大量的费用。

(6) SD-WAN的使用

我们在使用隧道功能的同时,发现当本地需要接入云端(隧道方式)的路由器越来越多,在网络管理上的压力越来越大。这时SD-WAN横空出世,只要本地CPE终端设备通上电且能够访问云端SD-WAN控制台,CPE终端里的配置就会由云端控制台自动下发,本地就会自动建立隧道直达云端VPC;SD-WAN同时也解决了单个VPC不能支持过多隧道的性能瓶颈问题,而且还能与普通模式的隧道共用一个VPC。

另外,SD-WAN网络除了支持本地CPE多WAN口(电信、联通、移动的宽带以及4G网络同时接入)自动切换功能之外,还能在本地到达云端的互联网链路上,支持多POP点的备份,以保证本地到达云端隧道的连通性。后续我们还需在此基础上研究扩展更先进的路由功能以匹配更高效、复杂的应用场景。

在这个强调自主可控的时代,我们也提出除了SD-WAN厂家自身要做到自主可控之外,用户也需自主可控,我们需要能自助完成从CPE终端到云端VPC的整个配置过程,这就需要SD-WAN厂家向用户也同样开放原先只有厂家自己才能看到或做到的内部网络参数与配置过程。

(7)去IOE

去I(传统物理服务器)在上云的同时就已经实现了从购买硬件向购买服务的转变,而且云平台自身使用的是超融合设备,而非传统物理服务器。

去O(商业数据库),我们从以下几点来说明:

1、 随着我们各个系统用户数量与需求的快速增长,支持商业数据库的硬件配置需求越来越高,而商业数据库是依据硬件的配置来收取授权费用的,硬件配置越高,授权费用就越高,最后高到用户无法承受。

2、 运维费用昂贵,如果遇到应用软件商解决不了的商业数据库问题,还必须请商业数据库原厂工程师到达现场处理。

3、 目前我们收费系统的数据库还是商业数据库,建立之初的用途只需满足收费相关的业务就行。如今ETC不停车收费、高速公路客服系统、收费稽查业务、绿色优惠车系统等,这些需要频繁读写数据库的业务系统陆续上线,同时各级审计部门、行业管理部门等机构也有大量读收费数据库的需求。商业数据库在这么大的压力下,我们为了保证业务系统的正常运行,就得围绕着这个商业数据库不停的想办法,只有通过购买各种原厂或第三方的数据集群、同步、备份等软件来维持,而往往这些软件的价格反而要超过商业数据库本身的授权费,并且这些软件本身还在继续消耗数据库的读写资源。

而开源数据库具有以下等先天的功能与优势:

1、完全免费

2、多主多从节点,用主节点写,用从节点来读,主从节点之间数据强一致性同步。

3、无限水平扩展功能,包含计算节点数、存储空间。

4、多重实时副本保障数据存储介质安全,确保数据不会丢失

5、自动实现数据库水平分表

目前很多软件开发商在开发应用软件时,还是会推荐使用商业数据库,我们进行了原因分析:一是商业数据库价格贵,但毕竟用的人多,熟练操作的人也多,遇到解决不了的问题可以请原厂工程师来。二是很多应用软件厂商一直以来都是使用的商业数据库,只要更换数据库,那么软件厂商的软件就要做较大改动。三是因为开源数据库虽然是免费的,但没有原厂上门的技术支持,应用软件厂商在使用中若自己不能及时解决问题会造成损失。

云计算服务也正是为了解决以上这些问题而来,在云平台上,开源数据库成了标准的PaaS服务,关系型与非关系型等各种类、各品牌的数据库用于进行事务处理与数据分析。开源数据库本身是免费的,应用软件厂商也无需去搭建与维护开源数据库,直接使用就行。

去E(传统物理存储设备)上云后,我们现在使用的部分存储已经从传统的块存储(磁盘阵列、硬盘)、文件存储(FTP、NFS)迁移到了既读写快、能共享、又按需付费的对象存储上。

(8)微服务化、容器化、容器编排

我们学习采用互联网行业的特点,迭代发布应用软件,追求创新,快速响应用户的变化、关注用户的行为,倡导以用户为中心的产品设计,也正是这些特点,我们使用了敏捷开发模式。使用敏捷开发模式就要进行微服务化,要进行微服务化,底层就要进行容器化,进行容器化后,就要有容器编排服务来管理这些容器。

我们目前新建的,以及综合管理系统、协同指挥调度云平台等系统,已经使用了微服务架构新建或者正在改造成微服务架构。我们在云平台上从Kubernetes到Docker或再往上的每一层都做好了服务准备,同时也让软件开发商全力专注于应用软件的开发。

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/5834.html

相关文章

  • 原生土壤孕育的开源森林

    摘要:在这个风起云涌的时代,云原生技术作为孕育这些高科技的土壤,亦是备受世人关注。结合可靠的自动化手段,云原生技术使工程师能够轻松地对系统作出频繁和可预测的重大变更。 showImg(https://segmentfault.com/img/bVbpMA1?w=1200&h=300); 当今的社会是高速发展的新型科技社会,互联网、物联网、人工智能等一系列新鲜事物如雨后春笋般喷薄而出,并以前所...

    MageekChiu 评论0 收藏0
  • 原生土壤孕育的开源森林

    摘要:在这个风起云涌的时代,云原生技术作为孕育这些高科技的土壤,亦是备受世人关注。结合可靠的自动化手段,云原生技术使工程师能够轻松地对系统作出频繁和可预测的重大变更。 showImg(https://segmentfault.com/img/bVbpMA1?w=1200&h=300); 当今的社会是高速发展的新型科技社会,互联网、物联网、人工智能等一系列新鲜事物如雨后春笋般喷薄而出,并以前所...

    dongxiawu 评论0 收藏0
  • 原生土壤孕育的开源森林

    摘要:在这个风起云涌的时代,云原生技术作为孕育这些高科技的土壤,亦是备受世人关注。结合可靠的自动化手段,云原生技术使工程师能够轻松地对系统作出频繁和可预测的重大变更。 showImg(https://segmentfault.com/img/bVbpMA1?w=1200&h=300); 当今的社会是高速发展的新型科技社会,互联网、物联网、人工智能等一系列新鲜事物如雨后春笋般喷薄而出,并以前所...

    zebrayoung 评论0 收藏0
  • 亿级并发服务器开启计算新时代

    摘要:全球首款亿级并发云服务器系统日前在天津高新区曙光信息产业股份有限公司正式量产。此外,曙光云服务器的国产体系架构,为保障云计算应用的安全增添了一道屏障。  全球首款亿级并发云服务器系统日前在天津高新区曙光信息产业股份有限公司正式量产。云服务器是曙光公司专门面向云计算典型应用需求研发的服务器,采用全新的国产体系架构,可有效应对亿级以上的并发访问。该产品的量产标志着全球云计算基础硬件设施进入一个全...

    DobbyKim 评论0 收藏0
  • 基于开源,强于开源,轻舟微服务解决方案深度解读

    摘要:德邦快递创始于年,从专于传统零担业务到现在全面发力大件快递,业务量正处于高速增长中。网易云轻舟微服务是围绕应用和微服务打造的一站式平台,帮助用户快速实现易接入易运维的微服务解决方案。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 2018年7月31日,由杭州市政府、赛迪以及网易主办的2018中国杭州云创大会于杭州国际博览中心如期举办,大会以开放·生态·赋能为主题,汇聚行业领袖、技...

    weknow619 评论0 收藏0

发表评论

0条评论

最新活动
阅读需要支付1元查看
<