数据仓库数据架构SEARCH AGGREGATION

首页/精选主题/

数据仓库数据架构

Greenplum

数据仓库(UDW Greenplum)是大规模并行处理数据仓库产品,基于开源的Greenplum开发的大规模并发、完全托管的PB级数据仓库服务。UDW可以通过SQL让数据分析更简单、高效,为互联网、物联网、金融、电信等行业提供丰富的业务分析...

数据仓库数据架构问答精选

大数据分布的架构怎么做调优呢?

回答:这个太范化了吧。大数据架构选择的方案就有很多,海量数据的即席查询本省就是业内目前的痛点,暂时没有太好的解决方案,kylin等框架也只是一个折中方案,如果你不是要求海量数据分析的秒级响应的话sparkSql、presto等都是不错的方案,分钟级别可以返回。

Paul_King | 422人阅读

高性能数据架构是您数字议程的重中之重吗?

回答:现在有幸参与传统银行数字化转型,负责技术架构部分的转型设计。高性能的数据架构(High Performance Data Architecture),正是我们架构转型的重点。随着科技的蓬勃发展、社交网络的广泛使用、线上消费的普及、数据挖掘的技术提升等大趋势,全球银行业正迎来一场声势浩大的数字化创新浪潮。数字化为消费者的生活及行为模式带来翻天覆地的变化,也孵化出一批新型的金融科技(Fintech)竞...

Lowky | 354人阅读

支撑日活百万用户的高并发系统,应该如何设计其数据库架构? ?

回答:以mysql为列:1:支撑高并发系统,一定会涉及事务,所以数据库引擎必选innodb,innodb支持事务,事务级别根据业务而定,如果业务数据一致性要求很高,事务就开启序列化级别,这样就完全隔离事务,但是会导致锁资源竞争加剧。mysql的性能有一定的降低。2:读写分离,数据库分成主库和从库,主库负责写数据,丛库负责读数据。注意主从数据库数据一致性问题。3:冷热数据分离,美团,饿了么部分设计采用冷热...

Vultr | 894人阅读

想买块机械硬盘当仓库用,存储孩子照片、视频,平时不上电,该不该买企业级机械硬盘?

回答:目前最可靠的仓库不是机械硬盘,不是ssd,不是u盘,是光盘,虽然,市面上已经很少见到光盘,但光盘目前还是最廉价最可靠的个人用存储介质,本人20年前刻录的dvd光盘,依然能读取数据,试问,还有多少人20年前的硬盘还健在?目前,容量最大的光盘是蓝光光盘,价格也很低廉,一片容量为23g的刻录光盘,最多3元钱,蓝光刻录光驱,也仅300元左右一台,仅仅是一块1t机械盘的价格,但它可存储的容量,就是它的刻录寿...

Neilyo | 1592人阅读

为什么不能在前端连接数据库呢?

回答:假如淘宝这么做了,那就得打通客户到数据库服务器的网络,同时在前端写明数据库账号密码实例名。我觉得挺好

zone | 885人阅读

软件产品架构中什么是单体架构、SOA架构、微服务架构?

回答:软件产品架构是不断迭代演化的,从单体服务架构发展到现在的服务化、微服务的架构。单体架构单体架构就是所有的业务模块都是耦合在一个项目中,开发、部署都在一起;如果其中一个模块需要上线升级,那么所有模块都要一起启停;在早期,单体架构的项目团队成员需要是全栈,因为前端、后端、数据库都是一波人负责,后来开始进行了逻辑分层,团队也分成了前端 UI 团队、后端和 DBA 团队,每个团队都有自己负责的职责。然而随...

khs1994 | 1511人阅读

数据仓库数据架构精品文章

  • 数据面临的挑战:当大数据遭遇云计算

    大数据正在彻底改变IT世界。那么,什么样的数据谈得上数据呢?   根据IDC的报告,未来十年全球大数据将增加50倍。仅在2011年,我们就将看到1.8ZB(也就是1.8万亿GB)的大数据创建产生。这相当于每位美国人每分钟写3条Tweet,而...

    forsigner 评论0 收藏0
  • 数据面临的挑战:当大数据遭遇云计算

           大数据正在彻底改变IT世界。那么,什么样的数据谈得上数据呢?  根据IDC的报告,未来十年全球大数据将增加50倍。仅在2011年,我们就将看到1.8ZB(也就是1.8万亿GB)的大数据创建产生。这相当于每位美国人每分钟写3条...

    Berwin 评论0 收藏0
  • TOP100summit:【分享实录】链家网大数据平台体系构建历程

    本篇文章内容来自2016年TOP100summit 链家网大数据部资深研发架构师李小龙的案例分享。编辑:Cynthia 李小龙:链家网大数据部资深研发架构师,负责大数据工具平台化相关的工作。专注于数据仓库、任务流调度、元数据管理、...

    Yu_Huang 评论0 收藏0
  • MVP应用架构模式

    ... Presenter层:主要作为View和Model的桥梁,它从Model层检索数据后,返回给View层,使得View和Model之间没有耦合,也将业务逻辑从View角色上抽离出来。 View层:用户界面,通常是指Activity、Fragment或者某个View控件,它含有一个Presenter...

    fyber 评论0 收藏0
  • 数据仓库架构的变迁

    ...为主题,云集了国内外顶尖专家,共同探讨云计算和大数据等技术背景下,如何通过架构创新及各种IT新技术来带动企业转型增效。作为一家专注于云端数据仓库的初创公司,酷克数据受邀在SACC2016 数据库平台架构及变迁...

    Raaabbit 评论0 收藏0
  • 打造 Laravel 优美架构 谈可维护性与弹性设计

    ... (有墙各位懂的) Laravel简单架构: 简单的小项目可能会把数据库查询,业务逻辑,数据传给View几乎所有操作都放在Controller,如何项目后期需求变大,最后Controller会变得很臃肿,难懂,不易维护(同样,有些会把所有增删改查,...

    Amio 评论0 收藏0
  • Sybase与美地森携手打造全球领先的云架构数据仓库平台

    大数据时代为数据存储带来压力,越来越多的组织需要在云计算的技术基础上搭建起能够存储大量结构化和非结构化数据的存储平台。云存储应云而生。   所谓云存储,是指通过集群应用、网格技术或分布式文件系统等...

    desdik 评论0 收藏0
  • 漫谈数据仓库之维度建模

    ...由于资历尚浅,难免会有很多错误,望批评指正! 概述 数据仓库包含的内容很多,它可以包括架构、建模和方法论。对应到具体工作中的话,它可以包含下面的这些内容: 以Hadoop、Spark、Hive等组建为中心的数据架构体系。 各...

    妤锋シ 评论0 收藏0
  • 云原生数据库如何打造业务弹性

    摘要: 云计算带来了业务弹性上的极大优势,阿里云数据库高级产品专家时慢从应用架构的变迁,客户实战案例,业务分析等方面详细介绍POLARDB,及如何利用POLARDB设计互联网创新型应用的数据库架构。 云计算带来了业务弹...

    fou7 评论0 收藏0
  • 6步搭建企业的数据仓库

    ...迎访问网易云社区,了解更多网易技术产品运营经验。 数据仓库作为企业提供决策支持而构建的集成化数据环境,本身并不产生或者消费数据,基本架构包含的是数据流入流出的过程,首先放上一张数据仓库的架构图。数据仓...

    Gemini 评论0 收藏0
  • 青云QingCloud 镜像仓库上线|最强 IaaS 驱动下的完整容器平台

    ...,比如说,容器管理、编排、应用打包、容器间的网络、数据快照等; 其次,当企业想构建一套网络方案,需要精通 Linux 提供的各种高级网络功能,这个技术门槛太高了。特别是对专注于业务开发的 Docker 用户而言,这类操作...

    AlienZHOU 评论0 收藏0
  • 美团DB数据同步到数据仓库架构与实践

    背景 在数据仓库建模中,未经任何加工处理的原始业务层数据,我们称之为ODS(Operational Data Store)数据。在互联网企业中,常见的ODS数据有业务日志数据(Log)和业务DB数据(DB)两类。对于业务DB数据来说,从MySQL等关系型数...

    vspiders 评论0 收藏0
  • 如何克服云端数据仓库数据迁移问题?

    云计算和数据仓库是合理的一对。云存储可以按需扩展,云可以将大量服务器贡献于某一具体任务。数据仓库通用功能是本地数据分析工具,受到计算和存储 资源的限制,同时也受到设计者考虑新数据源集成的能力的限制。如...

    sumory 评论0 收藏0
  • 一篇文看懂Hadoop:风雨十年,未来何去何从

    ...态,其中包含在各大发行版中的组件就有25个以上,包括数据存储、执行引擎、编程和数据访问框架等。Hadoop在2.0将资源管理从MapReduce中独立出来变成通用框架后,就从1.0的三层结构演变为了现在的四层架构:底层——存储层,...

    Hanks10100 评论0 收藏0
  • Rainbond 5.1.3发布,快速部署和运维spring cloud集群

    ...无法从源码识别出服务的依赖关系和对第三方服务(比如数据库)的依赖情况,因此还需要用户自行根据业务架构创建数据库服务和调整服务间的依赖关系。后续版本中将支持基于Rainbondfile文件定义服务依赖关系从而可以直接正...

    fanux 评论0 收藏0

推荐文章

相关产品

<