文章库ARTICLE COLUMN

  • BREW手机中的相关参数说明(下)

    BREW手机中的相关参数说明(下)

    摘要:而且,随着手机硬件和软件的发展,手机照相机的性能也将会得到极大的提高,甚至在某些方面,完全可以取代传统的数码相机。 5 网络信息         手机的网络信息一般包括两个方面:电信网...

    MonoLogMonoLog 评论0 收藏0
  • 奈学大数据架构师

    奈学大数据架构师

    摘要:权威统计机构统计在所有软件开发类人才的需求中,对工程师的需求达到全部需求量的。开发是全球最大的智能手机操作系统,在国内的市场份额愈来愈额高。  权威统计机构统计在所有软件开发类人才的需求中,对Java工程...

    raoyiraoyi 评论0 收藏0
  • 移动互联网(5)——2.5代的移动通信

    移动互联网(5)——2.5代的移动通信

    摘要:通用分组无线业务在业界被称为代。解决了移动上网的带宽瓶颈制约,又是在现有的移动通信网基础上实现的,不需抛弃已有的网另起炉灶,因此被公认为向过渡的一种合理方案。 2.5代是介于第二代和...

    AndroidTravelerAndroidTraveler 评论0 收藏0
  • UCloud 数据传输服务 UDTS,一键解决数据迁移难题

    UCloud 数据传输服务 UDTS,一键解决数据迁移难题

    摘要:在安全可靠性方面,在公有云平台上进行数据迁移不仅支持外网的迁移,还提供内网的数据迁移。于是提供了迁移时重命名的功能,可以针对数据库也可以针对表,这样就帮助这类用户解决了数据整合的难题。背景 数据库作为核心数据的重要存储,很多时候都会面...

    张率功张率功 评论0 收藏0
  • ZB 级的大数据探索与应用实践「附 PPT」

    ZB 级的大数据探索与应用实践「附 PPT」

    摘要:宋体据报告显示到年,全球将产生的数据。月日技术沙龙大数据专场北京站邀请了位资深大数据技术专家分享他们对大数据的探索和应用实践。据报告显示到 2025 年,全球将产生 180ZB 的数据。这些海量的数据正是企业进行数字化转型的核心生产因素,然而真正...

    YFanYFan 评论0 收藏0
  • 大数据在人力资源管理当中的应用

    大数据在人力资源管理当中的应用

    摘要:对数字的利用在推动人类文明进步的时候都发挥了重大作用例如美国制宪会议。在随后的几十年内,摩尔定律被无数次的被印证。 大数据时代 数字与人类文明 数字是人类发明的最重要的概念之一,与整个人类文明进程相伴相生 早在8000年前美苏尔地区商人利用...

    dancedance 评论0 收藏0
  • 大数据分析&人工智能:技术内容价值观辨析

    大数据分析&人工智能:技术内容价值观辨析

    摘要:机器学习可以使得人工智能在人类基础重复决策领域代替人类参与决策。但是,人工智能却做不到这些。目前人们所研究的人工智能是狭义人工智能。 showImg("http://upload-images.jianshu.io/upload_images/13825820-6d74d35c65bf195d.jpg"); 随着技术的...

    eccozhoueccozhou 评论0 收藏0
  • 人工智能、物联网、大数据……78%受访者希望从事新职业

    人工智能、物联网、大数据……78%受访者希望从事新职业

    摘要:近日,中国青年报社社会调查中心联合问卷网,对名受访者进行的一项调查显示,的受访者看好新职业未来的发展,的受访者希望从事新职业。的受访者希望从事新职业,的受访者表示已经在从事新职业。 showImg("http://upload-images.jianshu.io/upload_imag...

    wuyangchunwuyangchun 评论0 收藏0
  • 【大数据】SparkSql连接查询中的谓词下推处理(一)

    【大数据】SparkSql连接查询中的谓词下推处理(一)

    摘要:能够完成数据过滤的主体有两个,第一是分布式层在阶段,第二个是数据源。所以这种情况下谓词是不能下推的。同时两表查询条件依然使用进行连接。试想,如果不能提前对两表进行过滤,那么会有非常巨量的数据要首先进行连接处理,这个代价是非常大的。 本...

    tommegotommego 评论0 收藏0
  • 用Q-learning算法实现自动走迷宫机器人

    用Q-learning算法实现自动走迷宫机器人

    摘要:技术沙龙期数据中台宜信敏捷数据中台建设实践宜信技术沙龙将于月日晚点线上直播,点击报名项目描述在该项目中,你将使用强化学习算法,实现一个自动走迷宫机器人。在强化学习中有五个核心组成部分,它们分别是环境智能体状态动作和奖励。 【技术沙龙00...

    ZoomZoom 评论0 收藏0
  • HBase浅度学习

    HBase浅度学习

    摘要:是中分布式存储和负载均衡的最小单元,即不同的可以分别在不同的上,但同一个是不会拆分到多个上。目前会有一个线程来负责的操作。当文件的数量增长到一定阈值后,系统会进行合并,在合并过程中会进行版本合并和删除工作,形成更大的。 简介 hbase是大...

    oliverhuangoliverhuang 评论0 收藏0
  • Kafka消息过长详解

    Kafka消息过长详解

    摘要:发送消息大小问题本文实验的版本为版本消息概述中的消息指的就是一条里面除了携带发送的数据之外还包含发往的发往的分区头信息数据数据时间戳生产消息过长在生产者发送消息的时候并不是上面所有的信息都算在发送的消息大小详情见下面代码上面的代码会将...

    zhigoozhigoo 评论0 收藏0
  • DataX在有赞大数据平台的实践

    DataX在有赞大数据平台的实践

    摘要:与大数据体系交互上报运行统计数据自带了运行结果的统计数据,我们希望把这些统计数据上报到元数据系统,作为的过程元数据存储下来。基于我们的开发策略,不要把有赞元数据系统的嵌入源码,而是在之外获取,截取出打印的统计信息再上报。 一、需求 有...

    kamushin233kamushin233 评论0 收藏0
  • 入门教程 | 5分钟从零构建第一个 Flink 应用

    入门教程 | 5分钟从零构建第一个 Flink 应用

    摘要:接着我们将数据流按照单词字段即号索引字段做分组,这里可以简单地使用方法,得到一个以单词为的数据流。得到的结果数据流,将每秒输出一次这秒内每个单词出现的次数。最后一件事就是将数据流打印到控制台,并开始执行最后的调用是启动实际作业所必需的...

    W4n9Hu1W4n9Hu1 评论0 收藏0
  • 从 Spark Streaming 到 Apache Flink : 实时数据流在爱奇艺的演进

    从 Spark Streaming 到 Apache Flink : 实时数据流在爱奇艺的演进

    摘要:从到爱奇艺主要使用的是和来进行流式计算。海量数据实时在爱奇艺这边所有用户在端上的任何行为都会发一条日志到服务器上,总量超过千万。实时计算平台流任务平台流任务平台是爱奇艺实时计算的底层平台,支持流任务的提交运行与管理。 作者:陈越晨 整...

    RebeccaZhongRebeccaZhong 评论0 收藏0
  • 专访宜信CTO向江旭:技术应当服务于场景,AI天生适合金融业

    专访宜信CTO向江旭:技术应当服务于场景,AI天生适合金融业

    摘要:宜信中台当前,宜信已将技术应用放在了重要的战略位置,并提出了金融拥抱的口号。在实施过程中,宜信除了构建数据中台,目前也在开发中台。以多年对行业的洞察和对技术趋势前瞻性的把握,向江旭很看好技术和金融行业的融合。采访嘉宾向江旭原文发布前线...

    lansheng228lansheng228 评论0 收藏0
  • 数据中台:宜信敏捷数据中台建设实践|分享实录

    数据中台:宜信敏捷数据中台建设实践|分享实录

    摘要:宜信的数据中台是由我们敏捷大数据团队基于四大开源平台开发建设的,因此我们将宜信的数据中台称之为敏捷数据中台。本次分享分为三个部分宜信敏捷数据中台的顶层设计。结合典型案例介绍宜信敏捷数据中台支持哪些数据方面的应用和实践。 内容来源:宜信...

    mtuniquemtunique 评论0 收藏0
  • Hadoop浅度学习指南(HDFS、YARN、MapReduce)

    Hadoop浅度学习指南(HDFS、YARN、MapReduce)

    摘要:显示目录,显示文件内容等。确认队列收到数据后发送确认,管线的所有的确认组成一个确认队列。为另一个正常的当前数据块指定一个新的标识,并将该标识传送给一遍故障在恢复后删除上面的不完整数据块从管线中删除故障并把余下的数据块写入余下正常的。 ...

    YuboonaZhangYuboonaZhang 评论0 收藏0
  • Hive集群合并之应用端的负载均衡算法

    Hive集群合并之应用端的负载均衡算法

    摘要:负载均衡算法的选择常用的负载均衡算法有哪些呢随机算法,轮询,算法,加权随机算法,加权轮询算法,一致性算法。首选,我们会有集群对应的的地址列表,然后我们通过某种算法这里指的就是负载均衡算法,获取其中一个的地址进行任务提交这就是任务调度。...

    loostudyloostudy 评论0 收藏0
  • ZooKeeper安装、效果演示

    ZooKeeper安装、效果演示

    摘要:高可用一个开源的分布式的为分布式应用提供服务的项目提供原语集合以便分布式应用可以在它之上构建更高层次的同步服务角色观察者模式领导者负责进行投票的发起及决议更新状态学习者接受客户端请求并发挥客户端返回结果参与投票接受请求转发给不参与投票...

    RyanHooRyanHoo 评论0 收藏0
  • 浅析 Spark Shuffle 内存使用

    浅析 Spark Shuffle 内存使用

    摘要:归并过程中的聚合计算大体也是差不多的过程,唯一需要注意的是键值碰撞的情况,即当前输入的各个有序队列的键值的哈希值相同,但是实际的键值不等的情况。这种情况下,需要额外的空间保存所有键值不同,但哈希值相同值的中间结果。 在使用 Spark 进行...

    iKcampiKcamp 评论0 收藏0
  • 袋鼠云数据中台专栏2.0 | 企业数据化认知:数据就是生产力!

    袋鼠云数据中台专栏2.0 | 企业数据化认知:数据就是生产力!

    摘要:一数据就是生产力。笔者两年前在袋鼠云做的国内某省一个交警项目上,面对着海量的车辆轨迹数据时,第一次感受到什么是数据的力量。袋鼠云从成立之初便伴随着数十个行业头部客户,一起进行企业全面数据化转型建设。 一、数据就是生产力。笔者两年前在袋...

    zhangfaliangzhangfaliang 评论0 收藏0
  • 程序员笔记|3个问题带你入门数据建模

    程序员笔记|3个问题带你入门数据建模

    摘要:性能聚集或预计算汇总表通常由多维数据库引擎建立并管理。在维度建模中,将度量称为事实,将环境描述为维度,维度是用于分析事实所需要的多样环境。 作者介绍:韩锋:宜信数据库开发与管理主任工程师ACMUG主席团成员,CCIA(中国计算机行业协会)常务...

    NoodlesNoodles 评论0 收藏0
  • 数据中台:宜信敏捷数据中台建设实践

    数据中台:宜信敏捷数据中台建设实践

    摘要:本期宜信技术沙龙以数据中台为主题,希望通过分享宜信的技术实践经验,为软件研发行业对数据中台的应用落地带来参考和启示。目前在宜信担任数据中台平台团队负责人,带领团队研发四大开源项目,并主导宜信数据中台平台的建设工作。 【宜信技术沙龙】是...

    liaoyg8023liaoyg8023 评论0 收藏0
  • Flume浅度学习指南

    Flume浅度学习指南

    摘要:简介公司开源的,贡献给基金会只能运行在系统上用来高效的收集聚合移动大量的日志数据有一个基于流式的简单的有弹性的传输模型有一个健壮的可容错的机制使用简单,可以扩展的数据模型运行使用到在线实时分析应用中简单体现在的配置及传输模型简单在线实...

    jsdtjsdt 评论0 收藏0
<