资讯专栏INFORMATION COLUMN

快速开始 数据仓库 UDW Doris

ernest.wang / 1275人阅读

摘要:点击创建实例,进入集群创建页,按照实际需要根据页面提示,选择所需规格配置并购买。使用云数据仓库使用云数据仓库使用云数据仓库连接集群连接集群在集群所在地域同一网段下建立一台云主机,在云主机上安装,官方下载地址下载。

快速开始

本篇目录

创建集群查看集群信息使用云数据仓库UDoris创建数据库及数据表准备数据并导入查询数据

创建集群

1.登录UCloud账号进入到用户控制台,在全部产品下搜索或者数据仓库下选择“数据仓库 UDW Doris”,进入到数据仓库 UDoris控制台下。

udoris-create

2.点击创建实例,进入集群创建页,按照实际需要根据页面提示,选择所需规格配置并购买。各配置项说明见配置说明。

udoris-create-opt

配置项说明 配置项说明 地域 暂支持地域华北一、上海二、广州,建议按业务就近原则选择合适地域。

注意:一旦地域选定,购买成功后无法进行修改。

版本按实际需要选择内核版本CPU/内存
Frontend机型 4核16G Backend机型 4核16G、4核32G、8核32G、8核64G、16核64G、16核128G、32核128G、32核256G、64核256G、64核512G、128核512G
节点个数Frontend支持单节点和3节点,3节点的集群具有高可用性。Backend节点最大支持16个,Frontend(3节点情况下)和Backend都默认3副本存储云盘容量集群默认云盘容量为100G,最大支持8000G,如存储数据量比较庞大,建议增加容量。网络 VPC(Virtual Private Cloud)是属于用户的、逻辑隔离的网络环境。 各地域我们会创建默认VPC和默认子网,用户可直接将集群创建在默认VPC中

查看集群信息

集群创建并启动成功后,您可进入到数据仓库 UDoris控制台下,选择集群所在地域可用区后,可查看集群列表和详情信息。

udoris-list

使用云数据仓库UDoris

连接集群

在集群所在地域(同一网段)下建立一台云主机,在云主机上安装mysql-client,官方下载地址:下载mysql-client

下载如下rpm包:

mysql-community-client-5.7.26-1.el7.x86_64.rpm
mysql-community-common-5.7.26-1.el7.x86_64.rpm
mysql-community-libs-5.7.26-1.el7.x86_64.rpm

执行安装

rpm -ivh mysql-community-common-5.7.26-1.el7.x86_64.rpm
rpm -ivh mysql-community-libs-5.7.26-1.el7.x86_64.rpm
rpm -ivh mysql-community-client-5.7.26-1.el7.x86_64.rpm

通过mysql-client连接集群

mysql -uroot -h<任一frontend节点IP地址> -P9030 -p<创建集群时设置的密码>

udoris-link

以上命令将进入交互模式。用户名默认root、端口默认9030,节点IP可到集群详情查看。

创建数据库及数据表

使用mysql-client进入交互模式连接集群执行DDL语句

建库建表
CREATE DATABASE IF NOT EXISTS ssb;
CREATE TABLE `lineorder` (
  `lo_orderkey` bigint(20) NOT NULL COMMENT "",
  `lo_linenumber` bigint(20) NOT NULL COMMENT "",
  `lo_custkey` int(11) NOT NULL COMMENT "",
  `lo_partkey` int(11) NOT NULL COMMENT "",
  `lo_suppkey` int(11) NOT NULL COMMENT "",
  `lo_orderdate` int(11) NOT NULL COMMENT "",
  `lo_orderpriority` varchar(16) NOT NULL COMMENT "",
  `lo_shippriority` int(11) NOT NULL COMMENT "",
  `lo_quantity` bigint(20) NOT NULL COMMENT "",
  `lo_extendedprice` bigint(20) NOT NULL COMMENT "",
  `lo_ordtotalprice` bigint(20) NOT NULL COMMENT "",
  `lo_discount` bigint(20) NOT NULL COMMENT "",
  `lo_revenue` bigint(20) NOT NULL COMMENT "",
  `lo_supplycost` bigint(20) NOT NULL COMMENT "",
  `lo_tax` bigint(20) NOT NULL COMMENT "",
  `lo_commitdate` bigint(20) NOT NULL COMMENT "",
  `lo_shipmode` varchar(11) NOT NULL COMMENT ""
)
PARTITION BY RANGE(`lo_orderdate`)
(PARTITION p1992 VALUES [("-2147483648"), ("19930101")),
PARTITION p1993 VALUES [("19930101"), ("19940101")),
PARTITION p1994 VALUES [("19940101"), ("19950101")),
PARTITION p1995 VALUES [("19950101"), ("19960101")),
PARTITION p1996 VALUES [("19960101"), ("19970101")),
PARTITION p1997 VALUES [("19970101"), ("19980101")),
PARTITION p1998 VALUES [("19980101"), ("19990101")))
DISTRIBUTED BY HASH(`lo_orderkey`) BUCKETS 10
PROPERTIES (
"replication_num" = "3"
);

udoris-create-database

udoris-create-table

准备数据并导入

创建csv文件lineorder.csv放到之前创建的云主机数据盘/data目录下

1|2|28720|133109|1289|19960502|3-MEDIUM|0|44|5025240|11485668|8|4623220|68526|0|19960722|RAIL
2|3|28720|152761|373|19960502|3-MEDIUM|0|3|544128|11485668|4|522362|108825|1|19960602|MAIL
3|1|6415|176345|1060|19970713|4-NOT SPECI|0|50|7106700|6890656|4|6822432|85280|1|19970907|FOB
4|1|11090|25360|43|19930728|3-MEDIUM|0|24|3084864|9275090|2|3023166|77121|3|19931007|MAIL
5|2|11090|10463|1321|19930728|3-MEDIUM|0|46|6317916|9275090|8|5812482|82407|6|19930921|RAIL
6|1|22681|7272|1235|19930725|1-URGENT|0|32|3773664|6321665|7|3509507|70756|1|19930930|REG AIR
7|2|22681|6452|1387|19930725|1-URGENT|0|7|950915|6321665|4|912878|81507|0|19930923|SHIP
8|3|22681|37131|1202|19930725|1-URGENT|0|18|1922634|6321665|4|1845728|64087|1|19930828|FOB
9|1|22013|32255|305|19960831|2-HIGH|0|5|593625|3762529|4|569880|71235|3|19961119|MAIL
10|2|22013|96127|478|19960831|2-HIGH|0|28|3144736|3762529|1|3113288|67387|2|19961001|AIR

使用Stream load命令导入数据

curl --location-trusted -u root:<创建集群时设置的密码> -H "column_separator:|" -T /data/lineorder.csv http://<任一Frontend节点IP地址>:8030/api/ssb/lineorder/_stream_load

查询数据

使用mysql-client非交互模式

mysql -uroot -h<任一Frontend节点IP地址> -P9030 -p<创建集群时设置的密码> -e "select * from ssb.lineorder";

udoris-select

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/126958.html

相关文章

  • 概览 数据仓库 UDW Doris

    摘要:概览概览概览产品动态产品介绍什么是云数据仓库产品优势应用场景基本概念使用限制快速上手操作指南管理集群配置升降级节点扩容重启实例重置管理员密码删除集群连接集群数据导入本地数据导入数据导入通过导入开发指南数据类型语法创建库创建表创建视图插入数 概览概览产品动态产品介绍什么是云数据仓库UDoris产品优势应用场景基本概念使用限制快速上手操作指南管理集群Backend配置升降级Frontend节点扩...

    ernest.wang 评论0 收藏1705
  • 聚合函数 数据仓库 UDW Doris

    摘要:聚合函数函数名称描述语法统计行数或者非值个数求最小值求最大值统计行数或者非值个数去重计算输入的并集,返回新的计算输入的并集,返回其基数计算和类型的列中不同值的个数,返回值和相同非精确快速去重列的类型不能是或者且表为模型聚合函数函数名称描述语法 sum统计行数或者非NULL值个数sum(expr)min求最小值min(column)max求最大值max(column)count统计行数或...

    ernest.wang 评论0 收藏146
  • 重启集群 数据仓库 UDW Doris

    摘要:重启集群重启集群重启集群当您需要重启集群时,登录账号进入到用户控制台,在全部产品下搜索或者数据仓库下选择数据仓库,进入到数据仓库控制台下,选择操作重启注意重启集群为高危操作,集群将处于重启中持续数秒,建议无必要时不要随意重启实例,这将会 重启集群当您需要重启集群时,登录UCloud账号进入到用户控制台,在全部产品下搜索或者数据仓库下选择数据仓库 UDW Doris,进入到数据仓库UDoris...

    ernest.wang 评论0 收藏2903
  • 产品购买与使用 数据仓库 UDW Doris

    摘要:如何连接云数据仓库如何连接云数据仓库如何连接云数据仓库为保证安全,云数据仓库仅提供内网网络,您连接集群时可以配合同一地域的云主机或者网络产品使用。 产品购买与使用本篇目录为什么只提供一种云盘类型?配置升降级对集群有什么影响?配置升级有什么建议?如何连接云数据仓库UDoris?为什么只提供一种云盘类型?Doris的存储特性对磁盘吞吐量要求很高,为保证Doris的性能优势, 因此仅提供RSSD云...

    ernest.wang 评论0 收藏1167
  • 建表(Create Table) 数据仓库 UDW Doris

    摘要:数据排序使用的列数,取最前面几列,不能超过总的列数。示例创建一个动态分区表。创建外部表创建外部表在创建外部表的目的是可以通过访问外部数据库。创建表时,关于和的数量和数据量的建议。 建表(Create Table)创建表语法:CREATE TABLE [IF NOT EXISTS] [database.]table ( column_definition_list, [inde...

    ernest.wang 评论0 收藏1190
  • 概览 Greenplum数据仓库 UDW

    摘要:概览概览产品架构快速上手操作指南访问数据仓库数据导入开发指南优化指南表膨胀中类型接入第三方工具使用案例扩展功能迁移数据使用使用外部表数据仓库价格 概览产品架构快速上手操作指南访问UDW数据仓库数据导入开发指南udw优化指南表膨胀UDW中Json类型接入第三方 BI 工具UDW 使用案例Pxf 扩展功能迁移数据使用 pg_dump使用 pxf 外部表FAQs数据仓库价格

    ernest.wang 评论0 收藏1079

发表评论

0条评论

ernest.wang

|高级讲师

TA的文章

阅读更多
最新活动
阅读需要支付1元查看
<