大数据架构体系SEARCH AGGREGATION

首页/精选主题/

大数据架构体系

大数据平台

...rm(简称 USDP),是 UCloud 推出的云上智能化、轻量级的大数据基础服务平台,能够帮您快速构建起大数据的分析处理能力。 USDP 构建于 UCloud 的云服务上,无缝集成云端 IaaS 资源能力,通过自研的 USDP Manager 管理工具,支持用户...

大数据架构体系问答精选

大数据分布的架构怎么做调优呢?

回答:这个太范化了吧。大数据架构选择的方案就有很多,海量数据的即席查询本省就是业内目前的痛点,暂时没有太好的解决方案,kylin等框架也只是一个折中方案,如果你不是要求海量数据分析的秒级响应的话sparkSql、presto等都是不错的方案,分钟级别可以返回。

Paul_King | 421人阅读

高性能数据架构是您数字议程的重中之重吗?

回答:现在有幸参与传统银行数字化转型,负责技术架构部分的转型设计。高性能的数据架构(High Performance Data Architecture),正是我们架构转型的重点。随着科技的蓬勃发展、社交网络的广泛使用、线上消费的普及、数据挖掘的技术提升等大趋势,全球银行业正迎来一场声势浩大的数字化创新浪潮。数字化为消费者的生活及行为模式带来翻天覆地的变化,也孵化出一批新型的金融科技(Fintech)竞...

Lowky | 353人阅读

支撑日活百万用户的高并发系统,应该如何设计其数据库架构? ?

回答:以mysql为列:1:支撑高并发系统,一定会涉及事务,所以数据库引擎必选innodb,innodb支持事务,事务级别根据业务而定,如果业务数据一致性要求很高,事务就开启序列化级别,这样就完全隔离事务,但是会导致锁资源竞争加剧。mysql的性能有一定的降低。2:读写分离,数据库分成主库和从库,主库负责写数据,丛库负责读数据。注意主从数据库数据一致性问题。3:冷热数据分离,美团,饿了么部分设计采用冷热...

Vultr | 888人阅读

大数据时代,如何理解“大数据”?

回答:目前阶段大数据技术及体系已经逐渐趋于成熟,不再是以概念贯穿的模式,大数据越来越多的被使用,伴随互联网化的发展更多的企业信息化已经由IT时代转变为DT时代,以数据为核心,用数据进行决策,基于数据驱动企业的创新与发展,相信在将来大数据也会有更广泛的应用空间,对于大数据的理解主要分为以下几个层面。1.数据来源:对于大数据时代而言更多强调基于业务数据的沉淀,在一定规模的数据上进行进一步的分析、处理、转换,...

arashicage | 954人阅读

大数据开发、大数据分析、大数据运维主要工作各是什么?哪个好?

回答:在大数据领域大概有四个大的工作方向,除了大数据平台应用及开发、大数据分析与应用和大数据平台集成与运维之外,还有大数据平台架构与研发,除了以上四个大的工作方向之外,还有一个工作方向是大数据技术推广和培训,这部分工作目前也有不少人在从事。大数据平台架构与研发主要的工作内容是研发底层的大数据平台,这部分工作的难度较高,从事这部分工作的研发级岗位也并不多。现在不少技术研发团队都以Hadoop、Spark平...

zhangxiangliang | 2705人阅读

大数据究竟是什么?大数据有哪些技术呢?

回答:近几年,大数据的概念逐渐深入人心,大数据的趋势越来越火爆。但是,大数据到底是个啥?怎么样才能玩好大数据呢?大数据的基本含义就是海量数据,麦肯锡全球研究所给出的定义是:一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。数字经济的要素之一就是大数据资源,现在大家聊得最多的大数据是基于已经存在的...

khlbat | 521人阅读

大数据架构体系精品文章

  • 云计算和数据:成功组合指南

    ...艺术节上,Motley Fool的Tim Byers说过:在很多方面,云和大数据越来越密不可分且功能相似-云资源用来支撑大数据的存储及项目,而且大数据相对于云来说是一个庞大的业务案例。大数据和云技术的最终联姻,必定是天作之合。  ...

    XBaron 评论0 收藏0
  • ZB 级的数据探索与应用实践「附 PPT」

    据报告显示到 2025 年,全球将产生 180ZB 的数据。这些海量的数据正是企业进行数字化转型的核心生产因素,然而真正被有效存储、使用和分析的数据不到百分之十。如何从 ZB 级的数据中寻找分析有价值的信息并回馈到业务发展...

    YFan 评论0 收藏0
  • Java架构体系学习路线图,第六点尤为重要!

    ...Java和PHP。 后端服务,最常见的研发语言是Java和C/C++。 大数据,最常见的研发语言是Java和Python。 可以说,Java是现阶段中国互联网公司中,覆盖度最广的研发语言,掌握了Java技术体系,不管在成熟的大公司,快速发展的公司,...

    paulquei 评论0 收藏0
  • Java架构体系学习路线图,第六点尤为重要!

    ...Java和PHP。 后端服务,最常见的研发语言是Java和C/C++。 大数据,最常见的研发语言是Java和Python。 可以说,Java是现阶段中国互联网公司中,覆盖度最广的研发语言,掌握了Java技术体系,不管在成熟的大公司,快速发展的公司,...

    hufeng 评论0 收藏0
  • TOP100summit:【分享实录】链家网数据平台体系构建历程

    本篇文章内容来自2016年TOP100summit 链家网大数据部资深研发架构师李小龙的案例分享。编辑:Cynthia 李小龙:链家网大数据部资深研发架构师,负责大数据工具平台化相关的工作。专注于数据仓库、任务流调度、元数据管理、...

    Yu_Huang 评论0 收藏0
  • 跨越数据库发展鸿沟,谈分布式数据库技术趋势

    ...级的不同,这就使得国内外金融行业所面临的业务类型、数据量、并发量都存在巨大的差异,导致对整个IT基础设施的需求截然不同。 在最近的一两年中,国内部分科技领先的银行已经率先对微服务与分布式技术进行了探索,一...

    desdik 评论0 收藏0
  • 十年铲码,八体系超千篇数百万字技术笔记系列汇总(GitBook 悦享版)

    ...论、Web 与大前端、服务端开发与基础架构、云计算与大数据、数据科学与人工智能、产品设计等多个领域: 知识体系:《Awesome Lists | CS 资料集锦》、《Awesome CheatSheets | 速学速查手册》、《Awesome Interviews | 求职面试必备》、《A...

    MiracleWong 评论0 收藏0
  • 十年铲码,八体系超千篇数百万字技术笔记系列汇总(GitBook 悦享版)

    ...论、Web 与大前端、服务端开发与基础架构、云计算与大数据、数据科学与人工智能、产品设计等多个领域: 知识体系:《Awesome Lists | CS 资料集锦》、《Awesome CheatSheets | 速学速查手册》、《Awesome Interviews | 求职面试必备》、《A...

    Ashin 评论0 收藏0
  • 做了5年的Android,我转Java后台了!

    ...编码必备 Spring5,做应用必不可少的最新框架 MyBatis,玩数据库必不可少的组件 画外音:大家扪心自问,除了写业务代码,看过多少优秀开源代码? 二、分布式架构 随着业务越来越复杂,数据量越来越大,并发量越来越大,...

    shiweifu 评论0 收藏0
  • 支持Dubbo生态发展,阿里巴巴启动新的开源项目 Nacos

    ...以更方便的实现服务断路器。Nacos提供的强大的服务的元数据管理,路由及流量管理策略也能够帮助您更好的构建更强壮的微服务平台。 动态配置管理动态配置服务允许您在所有环境中以集中和动态的方式管理所有应用程序或服...

    cocopeak 评论0 收藏0
  • 珠峰前端架构师培养计划

    ...,编码必备Spring5,做应用必不可少的最新框架MyBatis,玩数据库必不可少的组件file画外音:大家扪心自问,除了写业务代码,看过多少优秀开源代码?二、分布式架构随着业务越来越复杂,数据量越来越大,并发量越来越大,单...

    seal_de 评论0 收藏0
  • 咕泡Java互联网高级架构师(SVIP涨薪班)

    ...,编码必备Spring5,做应用必不可少的最新框架MyBatis,玩数据库必不可少的组件file画外音:大家扪心自问,除了写业务代码,看过多少优秀开源代码?二、分布式架构随着业务越来越复杂,数据量越来越大,并发量越来越大,单...

    Java_oldboy 评论0 收藏0
  • 2019年微服务实践第一课,网易&谐云&蘑菇街&奥思技术咖深度分享

    ...各个微服务可被独立部署,服务间是松耦合的关系,以及数据和治理的去中心化管理。微服务能够帮助企业应对业务复杂、频繁更新以及团队规模庞大带来的挑战,实现IT对业务创新的驱动。 1月12日,网易云主办的微服务实践...

    genedna 评论0 收藏0
  • 分析:北京网络广播电视台私有云实践

    ...可以准备完毕。在赵志成看来,今天,也许还只是建立数据中心,但未来,针对广电应用适配业务,将资源迅速匹配给业务, 并针对业务匹配模式做定制化交互功能,迅速实现广电业务对基础平台资源弹性敏捷的部署需求,...

    hyuan 评论0 收藏0
  • 阿里如何做到百万量级硬件故障自愈?

    随着阿里大数据产品业务的增长,服务器数量不断增多,IT运维压力也成比例增大。各种软、硬件故障而造成的业务中断,成为稳定性影响的重要因素之一。本文详细解读阿里如何实现硬件故障预测、服务器自动下线、服务自...

    Sanchi 评论0 收藏0

推荐文章

相关产品

<