数据仓库架构师SEARCH AGGREGATION

首页/精选主题/

数据仓库架构师

Greenplum

数据仓库(UDW Greenplum)是大规模并行处理数据仓库产品,基于开源的Greenplum开发的大规模并发、完全托管的PB级数据仓库服务。UDW可以通过SQL让数据分析更简单、高效,为互联网、物联网、金融、电信等行业提供丰富的业务分析...

数据仓库架构师问答精选

到底怎样的程序员能称为架构师?

回答:到底怎样的程序员能称为架构师?首先要知道架构师是做什么的,架构师主要职责是确认和评估系统需求,给出开发规范,搭建系统实现的核心构架,并澄清技术细节、扫清主要难点的技术人员。那么怎样从一个程序员成为架构师呢,我总结了以下几个方面: 意识方面首先程序员自身想往架构师方向发展,然后换位思考与架构师的差距,该如何努力才能符合一个优秀的架构师,所以关注范围是不同的,程序员专注于具体细节,而架构师专注于宏观视...

edgardeng | 417人阅读

架构师必须掌握的如何思考设计SQL优化方案?

回答:大家在刚开始搭建项目的时候可能考虑的不够全面,随着产品的推广 、业务场景的复杂和使用用户越来越多 数据会呈现快速增长。当数据达到千万级的时候 就会发现 查询速度越来越慢 用户体验也就越来越差,那怎样提升千万级数据查询效率呢?小萌简单整理了一下,希望对大家有所帮助!优化数据库设计:数据字段类型使用varchar/nvarchar 替换 char/nchar,变长字段存储空间小,节省存储空间。在查询的...

phodal | 717人阅读

想成为腾讯的数据分析或数据挖掘师,需要积累哪些技能?

回答:其实根本就没有什么数据分析师,或者说,人人都是数据分析师。懂我这个意思吗?我的文章里,也写过很多数据行业的知识,你可以去看看,其实有时候想想,你就不一定非得从事这样的行业了。就拿数据挖掘来说吧,据我所知,厂商今年都混的不怎么样,为什么?客户需求很少,而且都是定制化的,整个项目的周期很长。还有就是一个企业里,互联网公司可能还好一点,数据分析师根本不需要那么多,你看看ucloud的数据分析报录比,20...

bingchen | 694人阅读

大数据分布的架构怎么做调优呢?

回答:这个太范化了吧。大数据架构选择的方案就有很多,海量数据的即席查询本省就是业内目前的痛点,暂时没有太好的解决方案,kylin等框架也只是一个折中方案,如果你不是要求海量数据分析的秒级响应的话sparkSql、presto等都是不错的方案,分钟级别可以返回。

Paul_King | 411人阅读

高性能数据架构是您数字议程的重中之重吗?

回答:现在有幸参与传统银行数字化转型,负责技术架构部分的转型设计。高性能的数据架构(High Performance Data Architecture),正是我们架构转型的重点。随着科技的蓬勃发展、社交网络的广泛使用、线上消费的普及、数据挖掘的技术提升等大趋势,全球银行业正迎来一场声势浩大的数字化创新浪潮。数字化为消费者的生活及行为模式带来翻天覆地的变化,也孵化出一批新型的金融科技(Fintech)竞...

Lowky | 343人阅读

支撑日活百万用户的高并发系统,应该如何设计其数据库架构? ?

回答:以mysql为列:1:支撑高并发系统,一定会涉及事务,所以数据库引擎必选innodb,innodb支持事务,事务级别根据业务而定,如果业务数据一致性要求很高,事务就开启序列化级别,这样就完全隔离事务,但是会导致锁资源竞争加剧。mysql的性能有一定的降低。2:读写分离,数据库分成主库和从库,主库负责写数据,丛库负责读数据。注意主从数据库数据一致性问题。3:冷热数据分离,美团,饿了么部分设计采用冷热...

Vultr | 874人阅读

数据仓库架构师精品文章

  • Hadoop十年 推动数据驱动型分析快速发展

    ...发布,第一批用户部署了该代码。为了纪念这些事件,大数据供应商的高管们为该分布式处理框架过去十年中在数据管理和分析处理上的影响给予了高度的赞誉。很多人在促使Hadoop落地中扮演了重要角色。Doug Cutting是该项技术的...

    Cristalven 评论0 收藏0
  • DBA职业发展之路:去“IOE”等挑战之下,DBA将何去何从?

    ...展?本文是个人对此问题的一些看法,仅供各位参考! 数据是核心 将DBA单词分解一下。其对应的 操作对象:数据 操作介质:库 操作角色:管理员 这里的核心是数据,也是DBA这一角色最大的价值所在。他们最了解数据、最懂...

    Yangyang 评论0 收藏0
  • DBA职业发展之路:去“IOE”等挑战之下,DBA将何去何从?

    ...展?本文是个人对此问题的一些看法,仅供各位参考! 数据是核心 将DBA单词分解一下。其对应的 操作对象:数据 操作介质:库 操作角色:管理员 这里的核心是数据,也是DBA这一角色最大的价值所在。他们最了解数据、最懂...

    Vultr 评论0 收藏0
  • DBA职业发展之路:去“IOE”等挑战之下,DBA将何去何从?

    ...展?本文是个人对此问题的一些看法,仅供各位参考! 数据是核心 将DBA单词分解一下。其对应的 操作对象:数据 操作介质:库 操作角色:管理员 这里的核心是数据,也是DBA这一角色最大的价值所在。他们最了解数据、最懂...

    anquan 评论0 收藏0
  • TOP100summit:【分享实录】链家网大数据平台体系构建历程

    本篇文章内容来自2016年TOP100summit 链家网大数据部资深研发架构师李小龙的案例分享。编辑:Cynthia 李小龙:链家网大数据部资深研发架构师,负责大数据工具平台化相关的工作。专注于数据仓库、任务流调度、元数据管理、...

    Yu_Huang 评论0 收藏0
  • Hadoop MapReduce:数据科学家的探索之路

    Forrester分析师James Kobielus在一篇关于大数据的博客中指出:关键不在于采用什么方法,而在于能够使用任意可用工具或方法真正地解决问题。     近几年在解决大数据问题的迫切感驱使下,许多组织的数据架构师开...

    xuweijian 评论0 收藏0
  • TOP100summit分享实录 | JFrog高欣:Kubernetes is hard!JFro

    ...。首先,要考虑如何处理足够多的日志文件,再分析哪些数据需要持久化存储,然后合理的处理sigterm信号,最后,要保障在上一次运行的遗留数据。 除了应用本身之外,Kubernetes的一个应用部署—高可用是新的标准配置。我们要...

    邹强 评论0 收藏0
  • 【推荐】最新200篇:技术文章整理

    ...的技术要点大扫盲MySQL:意外宕机不难解决,但你真的懂数据恢复吗MySQL:每秒57万的写入,带你飞MySQL:三大知识点,索引、锁、事务,原理分析MySQL:查询速度慢与性能差的解决方案MySQL:事务ACID特性的实现原理MySQL:大佬是怎...

    BicycleWarrior 评论0 收藏0
  • 【推荐】最新200篇:技术文章整理

    ...的技术要点大扫盲MySQL:意外宕机不难解决,但你真的懂数据恢复吗MySQL:每秒57万的写入,带你飞MySQL:三大知识点,索引、锁、事务,原理分析MySQL:查询速度慢与性能差的解决方案MySQL:事务ACID特性的实现原理MySQL:大佬是怎...

    Mr_houzi 评论0 收藏0
  • 【推荐】最新200篇:技术文章整理

    ...的技术要点大扫盲MySQL:意外宕机不难解决,但你真的懂数据恢复吗MySQL:每秒57万的写入,带你飞MySQL:三大知识点,索引、锁、事务,原理分析MySQL:查询速度慢与性能差的解决方案MySQL:事务ACID特性的实现原理MySQL:大佬是怎...

    tommego 评论0 收藏0
  • 2019年java架构视频

    ...Zookeeper集群模式下的请求处理流程源码解析(ZK是如何保证数据一致性的?)2019-3-7(65)-Zookeeper领导者选举介绍以及源码解析2019-3-10(66)-zookeeper实现分布式锁、分布式配置中心2019-3-12(67)-Dubbo框架全面介绍及使用快速入门2019-3-14(68)-Dubbo...

    Object 评论0 收藏0
  • 推进企业容器化持续创新,Rancher ECIC千人盛典完美收官

    ...正从初创期走向成熟期,变成一个被云计算服务提供商及数据中心广泛应用的商品。然而容器技术的发展而言是永无止境的,用户需求是容器发展的源动力,同时也是保持容器技术持续创新的关键要素。 Rancher联合创始人及CEO梁...

    mengbo 评论0 收藏0
  • 从事云计算职业的四个选择

    ...必查看潜在的雇主使用哪些语言,并将其添加到您的任务仓库中。获得主流云平台(如Amazon Web Services,Google和Azure)的实际开发经验。随着多云开始出现,熟悉各种平台以及它们之间的互操作性将为您带来好处。雇主需要确保您...

    GraphQuery 评论0 收藏0
  • 高级PHP(初级架构)面试题

    ...列表,以及参数的默认值。 描述下IoC (DI)的实现原理 数据库篇 搭建MySQL分布式,有哪些方式? MySQL主从同步,和主主同步有哪些区别,以及优劣势? Laravel中,多态一对多,多对多,数据库要怎么设计?比如一个关键词表t...

    haitiancoder 评论0 收藏0
  • 高级PHP(初级架构)面试题

    ...列表,以及参数的默认值。 描述下IoC (DI)的实现原理 数据库篇 搭建MySQL分布式,有哪些方式? MySQL主从同步,和主主同步有哪些区别,以及优劣势? Laravel中,多态一对多,多对多,数据库要怎么设计?比如一个关键词表t...

    longmon 评论0 收藏0

推荐文章

相关产品

<