大数据技术架构SEARCH AGGREGATION

首页/精选主题/

大数据技术架构

大数据平台

...rm(简称 USDP),是 UCloud 推出的云上智能化、轻量级的大数据基础服务平台,能够帮您快速构建起大数据的分析处理能力。 USDP 构建于 UCloud 的云服务上,无缝集成云端 IaaS 资源能力,通过自研的 USDP Manager 管理工具,支持用户...

大数据技术架构问答精选

大数据分布的架构怎么做调优呢?

回答:这个太范化了吧。大数据架构选择的方案就有很多,海量数据的即席查询本省就是业内目前的痛点,暂时没有太好的解决方案,kylin等框架也只是一个折中方案,如果你不是要求海量数据分析的秒级响应的话sparkSql、presto等都是不错的方案,分钟级别可以返回。

Paul_King | 418人阅读

大数据究竟是什么?大数据有哪些技术呢?

回答:近几年,大数据的概念逐渐深入人心,大数据的趋势越来越火爆。但是,大数据到底是个啥?怎么样才能玩好大数据呢?大数据的基本含义就是海量数据,麦肯锡全球研究所给出的定义是:一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。数字经济的要素之一就是大数据资源,现在大家聊得最多的大数据是基于已经存在的...

khlbat | 515人阅读

大数据Spark技术是否可以替代Hadoop?

回答:1998年9月4日,Google公司在美国硅谷成立。正如大家所知,它是一家做搜索引擎起家的公司。无独有偶,一位名叫Doug Cutting的美国工程师,也迷上了搜索引擎。他做了一个用于文本搜索的函数库(姑且理解为软件的功能组件),命名为Lucene。左为Doug Cutting,右为Lucene的LOGOLucene是用JAVA写成的,目标是为各种中小型应用软件加入全文检索功能。因为好用而且开源(...

ctriptech | 627人阅读

有哪些和“架构崩溃”、“技术债务”类似的软件开发中的“术语”?

回答:1. XML 首先,你要了解XML。我不是说仅仅是XML规格本身,还包括一系列相关的基于XML的语言:最重要的是XHTML、XSLT、XSL、DTDs、XML Schema (XSD)、XPath、XQuery和SOAP。那些在过去5年内从未碰过键盘的人,可能不知道XML为何物。XML是一种文本文件,使用与HTML类似的标记。XML能定义一个树状结构,并能描述所含的数据。 XML最好的一点是既...

imtianx | 345人阅读

VMware提供技术支持的超融合基础架构可提供哪些优势呢?

回答:不同产品的局部升级,超融合架构对IT基础架构带来的提升是全面的,以下讲逐一解释。1、有效提升可靠性很多企业客户对于软件定义数据中心架构的一个常见误解:x86服务器构建的系统可靠吗?虽然 x86 服务器本身存在单点故障,但超融合本身是以集群方式工作的,而且其核心-分布式存储系统首先要解决的问题就是利用多副本等技术构建具备更高可靠性的大规模系统,这些技术都是构建软件定义数据中心的核心。不仅如此,分布式...

lanffy | 655人阅读

阿里是如何处理双11这么大的数据流量的?幕后有哪些故事?

回答:可能也在和我们一起买买买?开个玩笑,其实对于普通人而言,双11是坐在沙发上轻轻松松地买买买,而对于ucloud后台的技术人员则更像是一场大考。据说,今年光是ucloud云参与备战双11的就有500多人,分成了18个技术小分队来提供技术支持。为了应对双11这种突然出现很大峰值的场景,ucloud云团队专门设计了混合云方案,从计算、网络、存储、大数据多个层面全面推动整个集团基于云的基础技术架构统一,以...

ThreeWords | 681人阅读

大数据技术架构精品文章

  • 掌握新变革,解密新趋势|msup第29届MPD软件管理工作坊成功召开

    ...。一个让人眼前一亮的新功能,高可用强扩展的架构,大数据和个性化搜索引擎以及测试对产品质量的保障,都与产品的市场表现息息相关。当然,稳定的产品离不开优质的团队做支撑。 市场竞争的愈发激烈要求软件研发要更...

    lunaticf 评论0 收藏0
  • GIAC 2017全球互联网架构会最新日程

    ...应用都需要有 APM 体系,可以随时分析性能的情况;在大数据时代,随着数据规模的增加以及硬件计算能力的提升,数据库的使用也发生了重大的变化;最重要的,整个 DevOps 也在进化到人工智能时代,监控、服务治理、调度这...

    617035918 评论0 收藏0
  • GIAC 2017全球互联网架构会最新日程

    ...应用都需要有 APM 体系,可以随时分析性能的情况;在大数据时代,随着数据规模的增加以及硬件计算能力的提升,数据库的使用也发生了重大的变化;最重要的,整个 DevOps 也在进化到人工智能时代,监控、服务治理、调度这...

    Imfan 评论0 收藏0
  • 技术咖云集 GIAC 2017全球互联网架构会圆满落幕

    ...、微服务架构及 Serverless、中间件平台、容器、AI DevOps、数据库、大前端、Fintech、机器学习、人工智能、智能硬件、效率管理等 20 个技术专题。 史海峰、惠新宸、袁进辉、沈剑、陈皓等经验丰富的一线技术团队带头人现场分享...

    MoAir 评论0 收藏0
  • 技术咖云集 GIAC 2017全球互联网架构会圆满落幕

    ...、微服务架构及 Serverless、中间件平台、容器、AI DevOps、数据库、大前端、Fintech、机器学习、人工智能、智能硬件、效率管理等 20 个技术专题。 史海峰、惠新宸、袁进辉、沈剑、陈皓等经验丰富的一线技术团队带头人现场分享...

    Kylin_Mountain 评论0 收藏0
  • 云计算和数据:成功组合指南

    ...艺术节上,Motley Fool的Tim Byers说过:在很多方面,云和大数据越来越密不可分且功能相似-云资源用来支撑大数据的存储及项目,而且大数据相对于云来说是一个庞大的业务案例。大数据和云技术的最终联姻,必定是天作之合。  ...

    XBaron 评论0 收藏0
  • 专访58沈剑:除了架构,我还想认真谈谈管理

    ...系统,以及很多太短的通用平台与系统,主要关注架构、数据库、O2O等方面的技术。 壹佰案例: 作为同时负责过58同城和58到家业务的架构师,可否从架构方向谈下两项业务的技术难点有何不同? 沈剑:58同城是一个信息平台...

    masturbator 评论0 收藏0
  • 从小白程序员一路晋升为厂高级技术专家我看过哪些书籍?(建议收藏)

    ...出版的技术图书 即将出版的《深入理解XXXXXXXXX》 《海量数据处理与大数据技术实战》 《MySQL技术大全:开发、优化与运维实战》 《深入理解高并发编程》 《并发编程核心知识》 《冰河的渗透实战笔记》 《我要进大厂系列之面...

    sf_wangchong 评论0 收藏0
  • SegmentFault D-Day 北京:数据

    很开心在这么冷的天和大家相聚在熟悉的 3W 咖啡聊大数据,感谢北京小伙伴踩着冰渣子来参加本场大数据为主题的 D-Day 活动。此次沙龙由 SegmentFault 家 Adele 主持,这一次选择了一个相对陌生的主题,但仍然吸引了很多对大数...

    vspiders 评论0 收藏0
  • 什么是数据技术架构

    大数据的应用开发过于偏向底层,具有学习难度大,涉及技术面广的问题,这制约了大数据的普及。现在需要一种技术,把大数据开发中一些通用的,重复使用的基础代码、算法封装为类库,降低大数据的学习门槛,降低开...

    ningwang 评论0 收藏0
  • 58同城技术委员会执行主席沈剑:好的架构是进化来的,不是设计来的

    ...是几次的访问。此时网站架构的特点:请求量是比较低,数据量比较小,代码量也比较小。可能找几个工程师,很容易就做一个这样的站点,根本没什么「架构」可言。 其实,这也是很多创业公司初期面临的问题,最开始58同城...

    didikee 评论0 收藏0
  • 科普|物联网和数据、云计算之间的关系

    我们现在的社会正在步入物联网、大数据和云计算时代。这些技术中的每一个都会有瓶颈,例如可伸缩性差安全性问题以及传统信息技术框架中的安装困难,容错、维护和性能低下。因此,我们需要利用这些技术中的每一种来找...

    Tecode 评论0 收藏0
  • 从零到百亿互联网金融架构发展史

    ...项垂直业务系统搭建上线、产品端极大丰富用户投资、大数据平台研究并使用 第三代架构特点;SOA治理,使用zookeeper作为注册中心,dubbo做监控和调度中心;cas实现单点登录,使用shiro做权限控制 第四代架构特点;全面启用微服...

    mrcode 评论0 收藏0
  • 从零到百亿互联网金融架构发展史

    ...项垂直业务系统搭建上线、产品端极大丰富用户投资、大数据平台研究并使用 第三代架构特点;SOA治理,使用zookeeper作为注册中心,dubbo做监控和调度中心;cas实现单点登录,使用shiro做权限控制 第四代架构特点;全面启用微服...

    U2FsdGVkX1x 评论0 收藏0
  • DBA职业发展之路:去“IOE”等挑战之下,DBA将何去何从?

    ...展?本文是个人对此问题的一些看法,仅供各位参考! 数据是核心 将DBA单词分解一下。其对应的 操作对象:数据 操作介质:库 操作角色:管理员 这里的核心是数据,也是DBA这一角色最大的价值所在。他们最了解数据、最懂...

    Yangyang 评论0 收藏0

推荐文章

相关产品

<