通过简单的页面设置即可完成存储计算分离架构的hadoop集群创建。
1
创建HDFS框架集群,完成后进入到下一步。
2
创建计算框架集群,可选是否开启元数据独立管理。
3
两集群创建完成后,即可实现存储计算分离架构,计算框架集群可以直接读写HDFS框架集群的数据。
借助存储计算分离,离线业务与在线业务可拆分分布在不同的计算集群上,避免了资源抢占,有效隔离计算资源。
多个计算集群可共用同一个存储集群,降低成本的同时也避免了数据在不同的Hadoop集群之间做迁移。
可以方便的只利用hdfs存储集群对文件进行归档存储,使用简单、价格便宜。
可根据业务需要,单独增加计算节点或存储节点,有效降低弹性管理集群的人力成本和服务器成本。
为优化集群整体成本,UHadoop 针对存储计算分离场景出了存储更大、价格更低的机型,可根据不同数据量规模选择不同节点机型。
机型名称 | 数据盘总存储(TB) | 数据盘块数(块) | 价格(元/月) |
---|---|---|---|
HDFS-large | 8 | 1 | 467 |
HDFS-xlarge | 16 | 2 | 934 |
HDFS-2xlarge | 32 | 4 | 1868 |
HDFS-4xlarge | 64 | 8 | 3736 |
HDFS.IO-large | 4 | 1 | 351 |
HDFS.IO-xlarge | 8 | 2 | 702 |
HDFS.IO-2xlarge | 16 | 4 | 1404 |
HDFS.IO-4xlarge | 32 | 8 | 2808 |