资讯专栏INFORMATION COLUMN

云计算发展进程中的六大关键技术

yuanxin / 2212人阅读

摘要:云计算是以数据为中心的一种数据密集型的超级计算。云计算的数据存储系统主要有和开发团队的开源系统。云计算采用编程模式,将任务自动分成多个子任务,通过和两部实现任务在大规模计算节点中的调度与分配。

云计算是以数据为中心的一种数据密集型的超级计算。在数据存储、数据管理、编程模式、并发控制、系统管理等方面具有自身独特的技术。

海量分布式存储技术

为保证高可用、高可靠和经济性,云计算采用分布式存储的方式来存储数据和冗余存储的方式来保证存储数据的可靠性,从而提供廉价可靠的系统。为了满足大量用户的需求,数据存储技术必须具有高吞吐率和高传输率的特点。

云计算的数据存储系统主要有Google GFS(Google File System)和Hadoop开发团队的开源系统HDFS(Hadop Distributed File System)。大部分IT厂商,包括Yahoo、Intel的“云”计划采用的都是HDFS的数据存储技术。

并行编程模式

为了高效地利用云计算的资源,使用户能更轻松地享受云计算带来的服务,云计算的变成哦是必须保证后台复杂的并行执行和任务调度向用户和编程人员透明。云计算采用MapReduce编程模式,将任务自动分成多个子任务,通过Map和Reduce两部实现任务在大规模计算节点中的调度与分配。

数据管理技术

云计算系统对大数据集进行处理、分析,向用户提供高效的服务。因此,数据管理技术必须能够高效地管理大数据集。其次,如何在规模巨大的数据中找到特定的数据,也是云计算数据管理技术所必须解决的问题。云系统的数据管理往往采用列存储的数据管理模式,保证海量数据存储和分析性能。云计算的数据管理技术最著名的是Googe的BigTable数据管理技术,同事Hadop开发团队开发了累死BigTable的开源数据管理模块HBase。

分布式资源管理技术

在多节点并发执行环境,分布式资源管理系统是保证系统状态正确性的关键技术。系统状态需要在多节点之间同步,关键节点出现故障时需要迁移服务,分布式资源管理技术通过锁机制协调多任务对于资源的使用,从而保证数据操作的一致性。Google的Ghubby是最锥你给的分布式资源管理系统。

云计算平台管理技术

云计算资源规模庞大,一个系统的服务器数量可能会高达十万台并跨越几个坐落于不同物理地点的数据中心,同时还运行成百上千种应用。如何有效地管理这些服务器,保证这些服务器组成的系统能提供7*24小时不间断服务是一个巨大的挑战。云计算系统管理技术是云计算的“神经网络”,通过这些技术能够是大量的服务器协同工作,方便地进行业务部署和开通,快速发现和恢复系统故障,通过自动化、智能化的手段实现大会磨系统的可运营、可管理。Google通过其卓越的云计算管理系统维持着全球上百万台PC服务器协同、高效地运行,起云计算系统管理技术也被作为企业核心机密,至今没有公布任何技术资料。

绿色节能技术

云计算技术降低了服务器的采购成本,从而使电源消耗所带来的运营成本成为云计算计算中心的主要开支之一,为了进一步降低成本,云计算的先去在绿色节能技术上进行了大量探索。

传统数据中心空调冷却的费用约占整体电费的30%—70%,Google为了节省能源,在比利时的数据中心降温系统无需冷却剂,而是采取额室外空气进行自然冷却。根据比利时的气候条件,每年只有7天左右无法使用自由冷却方式。在比较炎热的夏天,Google可以通过云计算管理系统将该数据中心的计算任务转移到其他数据中心中。

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/5117.html

相关文章

  • 计算技术发展六大趋势

    摘要:高利用率一体化低功耗自动化管理成为云计算数据中心建设的关注点,整合绿色节能成为云计算数据中心构建技术的发展特点。隐私权保护问题虽是云计算普及过程中需要解决的一大难题,但随着云计算的发展及相关标准的成熟。 1、数据中心向整合化和绿色节能方向发展目前传统数据中心的建设正面临异构网络、静态资源、管理复杂、能耗高等方面问题,云计算数据中心与传统数据中心有所不同,它既要解决如何在短时间内快速、高效完成...

    UCloud 评论0 收藏0
  • 数据中心自动化需要克服六大障碍

    摘要:虚拟和云计算的复杂情况当需要管理同一网络上的大量机器时,基于虚拟和或云计算的数据中心就会遇到挑战。当数据中心由本地部署虚拟环境和或云计算环境的异构组合组成时,会出现更多复杂情况。当今的数据中心管理人员经常监督日益复杂的运营环境,其中包含各种应用程序、数据库和竞争平台的混合。通过脚本和平台,以及特定于应用程序的调度工具来管理数据中心环境,这有可能效率低下,并且耗时,从而导致数据中心自动化孤岛,...

    seanlook 评论0 收藏0
  • UCloud优刻得六大特惠开启双11,乌兰察布服务器低至0.5折仅37.5元/年-老刘博客

    摘要:而受益于乌兰察布的成本优势,让这款服务器以更亲民的方式走近市场。在现金激励的基础上,追加年免费体验快杰云服务器大礼包,深化与大使的紧密合作。 企业数字化转型,离不开云平台搭建。助力企业上云、加速传统企业数字化转型,UCloud在双11启动了一轮大规模补贴:性能卓越的快杰云服务器、性能安全兼具的裸金属,企业数字化转型利器混合云,以及音视频核心产品CDN……多款重磅云计算产品亮相UCloud双...

    geekidentity 评论0 收藏0
  • 存储必备的六大要素是哪些

    摘要:本篇白皮书的目标是描述企业云计算中存储必备的个要素。虽然,云存储服务提供商在考虑成本的同时继续增加可用性,但是目前市场上的服务级别协议不能满足企业关键应用的需求。内部企业方案和企业云存储的主要差别在于,主数据保护在方案中是如何绑定的。在最近对云计算的所有关注中,存储更多地被视为基础平台。时至今日,许多云计算提供的仅仅局限于CPU内核的集合,定量的内存分配,低转速存储,或者还有一些面向互联网的...

    2bdenny 评论0 收藏0
  • 六大加速器推进增长 计算产业链合纵掘金企业级市场

    摘要:六大加速器推进增长与美国等成熟市场相比,国内云计算市场在年增速已经高于全球平均水平,但是由于起步较晚,累计体量仍处于比较初级的阶段。目前,国内公有云的市场规模仅相当于美国年整体市场规模的左右。  伴随着宽带市场引入民资、三大运营商换帅、提速降费、流量不清零、电信联通网络终端共建共享等重大事件,通信业2015年悄然走过,2016年产业大幕已经拉开。  在2015年,云计算更多触及社会的各个方面...

    WilsonLiu95 评论0 收藏0

发表评论

0条评论

yuanxin

|高级讲师

TA的文章

阅读更多
最新活动
阅读需要支付1元查看
<