资讯专栏INFORMATION COLUMN

阿里云正式推出消息队列Kafka:全面融合开源生态

aisuhua / 2628人阅读

摘要:在全面兼容Apache Kafka生态的基础上,消息队列Kafka彻底解决Apache
Kafka稳定性不足的长期痛点,并且支持消息无缝迁移到云上。

近日,阿里云宣布正式推出消息队列Kafka,全面融合开源生态。在全面兼容Apache Kafka生态的基础上,消息队列Kafka还具备了超易用,超高可用可靠性,扩缩容不操心,全方位安全诊断,数据安全有保障的特点。可用行达99.9%,数据可靠行99.999999%,彻底解决Apache Kafka稳定性不足的长期痛点,并且支持消息无缝迁移到云上。

» 全面兼容Apache Kafka生态

Apache Kafka是一个高吞吐的分布式,具备冗余备份的持久性化消息产品。正因为Apache Kafka为了分布式大数据而生,Apache Kafka 具有丰富的应用生态,主要包括以下三个方面:

广泛应用于大数据领域,如网站行为分析、日志聚合、Apps监控、流式数据处理、在线和离线分析等;

让数据集成变得简单:您能将 Kafka 中的消息导入到 ODPS、HBase、HBASE 等离线数据仓库;

可广泛的与流计算引擎集成,包括阿里云平台的 StreamCompute、E-MapReduce 和开源产品 Spark、Storm 等;

消息队列 Kafka 全面兼容Apache Kafka生态的基础上,还具备了超易用,超高可用可靠性,扩缩容不操心,全方位安全诊断,数据安全有保障的特点。

» 无缝迁移,自建无缝迁移到云上商业版

从自建 Kafka 到消息队列 Kafka,支持开源产品的无缝迁移,提供无门槛接入方式。那么消息队列 Kafka是如何做到让用户无缝迁移的呢?消息队列 Kafka 100% 兼容开源社区Apache Kafka(0.10.0.0 及以上版本),直接使用Kafka开源客户端便可与阿里云上消息队列Kafka进行通讯;对于原本使用开源 Apache Kafka的用户无需任何改造,即可迁移上云,享受到阿里云提供的消息队列 Kafka 服务;同时消息队列 Kafka 支持开源社区、阿里云平台产品的打通,与Kafka全生态能快速对接。

» 全托管服务,专业团队运维,客户0运维成本

Kafka团队提供专业的托管服务,用户无需关心各种运维细节。Kafka团队会从巡检 + 监控 + 告警三方面去保驾护航:

提供HouseKeeping(健康巡检组件):自动在Kafka
核心链路的运行时巡检,每分钟会对集群做一次全面扫描诊断,并能针对不健康的状态进行告警,同时,每日出具整体巡检报告,方便运维人员每天观察
Kafka 系统的健康状态;

业务监控与告警:每个 Consumer Group 都可以根据消息的堆积量情况进行监控与告警设置,帮助用户及时发现问题;

Open APIKafka 提供给用户的一整套完备的管控类 Open API,用于实现一系列资源管理和运维功能。

» 稳定安全,可用行达99.9%,数据可靠行99.999999%

优化开源Apache Kafka长期的痛点。支持海量消息堆积,在海量消息堆积的情况下,始终保持 Kafka 集群的消息收、发的高吞吐能力服务可用性达 99.9%;消息会持久化落盘到消息队列,在磁盘容量足够的情况下,未到期数据保障存储,数据可靠性达到 99.999999%。

支持阿里云 VPC 访问;支持权限控制,以消息主题(Topic)、订阅组(Consumer Group)的粒度对用户访问权限进行控制,对每一条消息(Message)的收、发都进行严格的访问控制,确保消息的安全性;访问安全,在非VPC环境下使用,基于阿里云账号体系,并利用 SSL 对通道进行加密传输,确保数据传输过程中不被窃取或篡改,保证客户数据的安全。

历经近10年的技术沉淀,阿里巴巴将企业互联网化的精华沉淀在Aliware上,后者支撑了99%以上的大规模应用,目前阿里云推出了企业级分布式应用服务EDAS、性能测试PTS、消息队列MQ等近10款Aliware产品,为政府央企、智能制造、新零售等众多领域领先企业提供了领先的PaaS云产品,消息队列Kafka的推出将为更多长期使用Apache Kafka的开发者带来更多便利。

本文作者:中间件小哥

阅读原文

本文为云栖社区原创内容,未经允许不得转载。

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/11405.html

相关文章

  • 2021年9月国产数据库大事记

    .markdown-body{word-break:break-word;line-height:1.75;font-weight:400;font-size:15px;overflow-x:hidden;color:#333}.markdown-body h1,.markdown-body h2,.markdown-body h3,.markdown-body h4,.markdown-body...

    suemi 评论0 收藏0
  • CloudBest:年度复盘丨盘点2020无处不在的「原生」

    摘要:华为云华为云在云原生这场游戏中,最具竞争力的玩家之一。年,金山云在云原生领域推出了三款重磅产品星曜裸金属服务器云服务器和云盘。在线上智博会上,浪潮云发布了经过全新迭代升级的浪潮云,进一步提升平台云原生服务能力。面对数字时代复杂系统的不确定性,传统的 IT 应用架构研发交付周期长、维护成本高、创新升级难,烟囱式架构,开放性差、组件复用度低,这些都成为了企业业务快速增长的瓶颈。而云原生以其敏捷、...

    Tecode 评论0 收藏0
  • Apache Flink,流计算?不仅仅是流计算!

    摘要:基于流处理机制实现批流融合相对基于批处理机制实现批流融合的思想更自然,更合理,也更有优势,因此阿里巴巴在基于支持大量核心实时计算场景的同时,也在不断改进的架构,使其朝着真正批流融合的统一计算引擎方向前进。 阿里妹导读:2018年12月下旬,由阿里巴巴集团主办的Flink Forward China在北京国家会议中心举行。Flink Forward是由Apache软件基金会授权的全球范围...

    KoreyLee 评论0 收藏0
  • 2021年10月国产数据库大事记

    摘要:月日消息,近日,中国信息通信研究院大数据产品能力评测数据库方向的测评结果陆续出炉。月日消息,国家工业信息安全发展研究中心发布电信行业数据库产品第一期测评结果,前三名分别是阿里云数据库柏睿数据企业级交易型数据库信创版云和恩墨企业级数据库。 .markdown-body{word-break:break-word;line-height:1.75;font-weight:400;font-si...

    elva 评论0 收藏0
  • 阿里巴巴为什么选择Apache Flink?

    摘要:从长远来看,阿里决定用做一个统一的通用的大数据引擎作为未来的选型。在阿里的现状基于在阿里巴巴搭建的平台于年正式上线,并从阿里巴巴的搜索和推荐这两大场景开始实现。目前阿里巴巴所有的业务,包括阿里巴巴所有子公司都采用了基于搭建的实时计算平台。 本文主要整理自阿里巴巴计算平台事业部资深技术专家莫问在云栖大会的演讲。 合抱之木,生于毫末 随着人工智能时代的降临,数据量的爆发,在典型的大数据的业...

    CoderBear 评论0 收藏0

发表评论

0条评论

最新活动
阅读需要支付1元查看
<