大数据架构与设计SEARCH AGGREGATION

首页/精选主题/

大数据架构与设计

物理机租用

通过统一管理平台为企业用户提供服务器、网络、数据中心等基础资源的一体化交付和持续运维服务,像公有云一样使用基础资源。把繁琐冗长、重资产的企业IT基础设施建设打包成定制、便捷、轻资产的服务交付给用户,并整...

大数据架构与设计问答精选

支撑日活百万用户的高并发系统,应该如何设计其数据库架构? ?

回答:以mysql为列:1:支撑高并发系统,一定会涉及事务,所以数据库引擎必选innodb,innodb支持事务,事务级别根据业务而定,如果业务数据一致性要求很高,事务就开启序列化级别,这样就完全隔离事务,但是会导致锁资源竞争加剧。mysql的性能有一定的降低。2:读写分离,数据库分成主库和从库,主库负责写数据,丛库负责读数据。注意主从数据库数据一致性问题。3:冷热数据分离,美团,饿了么部分设计采用冷热...

Vultr | 894人阅读

大数据分布的架构怎么做调优呢?

回答:这个太范化了吧。大数据架构选择的方案就有很多,海量数据的即席查询本省就是业内目前的痛点,暂时没有太好的解决方案,kylin等框架也只是一个折中方案,如果你不是要求海量数据分析的秒级响应的话sparkSql、presto等都是不错的方案,分钟级别可以返回。

Paul_King | 422人阅读

架构师必须掌握的如何思考设计SQL优化方案?

回答:大家在刚开始搭建项目的时候可能考虑的不够全面,随着产品的推广 、业务场景的复杂和使用用户越来越多 数据会呈现快速增长。当数据达到千万级的时候 就会发现 查询速度越来越慢 用户体验也就越来越差,那怎样提升千万级数据查询效率呢?小萌简单整理了一下,希望对大家有所帮助!优化数据库设计:数据字段类型使用varchar/nvarchar 替换 char/nchar,变长字段存储空间小,节省存储空间。在查询的...

phodal | 723人阅读

假如Deepin把linux内核最内部部分代码在不改变架构逻辑设计前提下重写了,能算纯国产系统吗?

回答:没什么意义,关键是架构,你的架构和API用的是linux定义的,你再怎么改,还是linux。人家为什么敢叫linux,而不叫unix,那是人家虽然没有全改,但起码有自己的架构设计在里面,所以,别人才承认你是Linux,而不是unix换个皮。所以在操作系统里架构和API的改写和设计才是真正????B的地方。起码目前的中国,我还没见识过这种大神!

wqj97 | 701人阅读

数据库设计工具有哪些?

问题描述:该问题暂无描述

legendaryedu | 406人阅读

高性能数据架构是您数字议程的重中之重吗?

回答:现在有幸参与传统银行数字化转型,负责技术架构部分的转型设计。高性能的数据架构(High Performance Data Architecture),正是我们架构转型的重点。随着科技的蓬勃发展、社交网络的广泛使用、线上消费的普及、数据挖掘的技术提升等大趋势,全球银行业正迎来一场声势浩大的数字化创新浪潮。数字化为消费者的生活及行为模式带来翻天覆地的变化,也孵化出一批新型的金融科技(Fintech)竞...

Lowky | 354人阅读

大数据架构与设计精品文章

  • GIAC 2017全球互联网架构会最新日程

    ...应用都需要有 APM 体系,可以随时分析性能的情况;在大数据时代,随着数据规模的增加以及硬件计算能力的提升,数据库的使用也发生了重大的变化;最重要的,整个 DevOps 也在进化到人工智能时代,监控、服务治理、调度这...

    617035918 评论0 收藏0
  • GIAC 2017全球互联网架构会最新日程

    ...应用都需要有 APM 体系,可以随时分析性能的情况;在大数据时代,随着数据规模的增加以及硬件计算能力的提升,数据库的使用也发生了重大的变化;最重要的,整个 DevOps 也在进化到人工智能时代,监控、服务治理、调度这...

    Imfan 评论0 收藏0
  • 掌握新变革,解密新趋势|msup第29届MPD软件管理工作坊成功召开

    ...。一个让人眼前一亮的新功能,高可用强扩展的架构,大数据和个性化搜索引擎以及测试对产品质量的保障,都与产品的市场表现息息相关。当然,稳定的产品离不开优质的团队做支撑。 市场竞争的愈发激烈要求软件研发要更...

    lunaticf 评论0 收藏0
  • 从小白程序员一路晋升为厂高级技术专家我看过哪些书籍?(建议收藏)

    ...出版的技术图书 即将出版的《深入理解XXXXXXXXX》 《海量数据处理与大数据技术实战》 《MySQL技术大全:开发、优化与运维实战》 《深入理解高并发编程》 《并发编程核心知识》 《冰河的渗透实战笔记》 《我要进大厂系列之面...

    sf_wangchong 评论0 收藏0
  • 2017年TOP100summit15位咖担任联席主席甄选最值得学习的100个研发案例

    ...能,20年间软件研发行业趋势发生了翻天覆地的变化。大数据、云计算、AI等新兴领域逐渐改变我们的生活方式,Devops、容器、深度学习、敏捷等技术方式和工作理念对软件研发从业者提出更高要求。 由麦思博(msup)有限公司主...

    andot 评论0 收藏0
  • 2017年TOP100summit15位咖担任联席主席甄选最值得学习的100个研发案例

    ...能,20年间软件研发行业趋势发生了翻天覆地的变化。大数据、云计算、AI等新兴领域逐渐改变我们的生活方式,Devops、容器、深度学习、敏捷等技术方式和工作理念对软件研发从业者提出更高要求。 由麦思博(msup)有限公司主...

    EddieChan 评论0 收藏0
  • 2019年微服务实践第一课,网易&谐云&蘑菇街&奥思技术咖深度分享

    ...各个微服务可被独立部署,服务间是松耦合的关系,以及数据和治理的去中心化管理。微服务能够帮助企业应对业务复杂、频繁更新以及团队规模庞大带来的挑战,实现IT对业务创新的驱动。 1月12日,网易云主办的微服务实践...

    genedna 评论0 收藏0
  • Hadoop集群环境下的网络架构设计优化

      大数据时代,研究大数据的IT 厂商把研究重心放在优化大数据系统软件架构、优化业务逻辑、优化数据分析算法、优化节点性能等方向,而忽略了大数据环境基础设置中网络环节的评估和优化。本文介绍了思科公司在Hadoop ...

    Soarkey 评论0 收藏0
  • 中小型研发团队对于架构的选择思考

    ...。Redis 看起来非常简单,但它影响着系统的效率、性能、数据一致性。 用好它不容易,涉及到的问题包括:缓存时长(复杂多维度的计算)、缓存失效处理(主动更新)、缓存键(Hash 和方便人工干预)、缓存内容及数据结构的...

    xfee 评论0 收藏0
  • 活动预告:基于云计算的数据基础平台架构设计

    活动预告:基于云计算的大数据基础平台架构设计 本群嘉宾 —— 周小四 现任青云QingCloud大数据平台负责人,曾就职于美国FIU在线学习部门、IBM以及高德。在云计算、大数据领域有着丰富的经验。拥有美国FloridaInternationalUnive...

    Youngdze 评论0 收藏0
  • AI学习路线

    ...一、人工智能基础 - 高等数学必知必会 本阶段主要从数据分析、概率论和线性代数及矩阵和凸优化这四大块讲解基础,旨在训练大家逻辑能力,分析能力。拥有良好的数学基础,有利于大家在后续课程的学习中更好的理解机...

    xuweijian 评论0 收藏0
  • DBA职业发展之路:去“IOE”等挑战之下,DBA将何去何从?

    ...展?本文是个人对此问题的一些看法,仅供各位参考! 数据是核心 将DBA单词分解一下。其对应的 操作对象:数据 操作介质:库 操作角色:管理员 这里的核心是数据,也是DBA这一角色最大的价值所在。他们最了解数据、最懂...

    Yangyang 评论0 收藏0
  • DBA职业发展之路:去“IOE”等挑战之下,DBA将何去何从?

    ...展?本文是个人对此问题的一些看法,仅供各位参考! 数据是核心 将DBA单词分解一下。其对应的 操作对象:数据 操作介质:库 操作角色:管理员 这里的核心是数据,也是DBA这一角色最大的价值所在。他们最了解数据、最懂...

    Vultr 评论0 收藏0
  • DBA职业发展之路:去“IOE”等挑战之下,DBA将何去何从?

    ...展?本文是个人对此问题的一些看法,仅供各位参考! 数据是核心 将DBA单词分解一下。其对应的 操作对象:数据 操作介质:库 操作角色:管理员 这里的核心是数据,也是DBA这一角色最大的价值所在。他们最了解数据、最懂...

    anquan 评论0 收藏0
  • 架构 - 收藏集 - 掘金

    ...段。 不要整个系统宕机。 即使系统故障,也不要将错误数据展示出来。 尽量保持公平公正。 实现效果 秒杀开始前,抢购按钮为活动未开始。 秒杀开始时,抢购按钮可以点击下单。 秒杀结束后,按钮按钮变成秒杀已结束。 技...

    Riddler 评论0 收藏0

推荐文章

相关产品

<