资讯专栏INFORMATION COLUMN

CIO如何利用Hadoop降低大数据分析成本

马龙驹 / 1807人阅读

摘要:大数据将成为代替云计算的新一代热门话题。大数据不会消失,不能忽略大块数据分析转换能力和分析数据趋势。大数据的角逐已经开始了。然而,对于已经跳入大数据领域并提取关键见解的们,全世界都将在他们的掌握之中。

       大数据将成为代替云计算的新一代热门话题。这是必然的结果:随着时间的推移,企业产生的数据量已经越来越大了,这些数据包括客户购买偏好趋势、网站访问和习惯、客户审查数据等等;那怎样才能把这么大的数据集整理成综合形式呢?传统的商业智能(BI)工具(关系型数据库和桌面数学计算包)在处理企业海量数据时已经有点不够用了。当然,数据分析行业也有开发工具和框架,支持数据研究人员和分析师们挖掘大数据集,并能承受得了信息负载。
 

  对于较大的公司来说,海量数据处理已经不是什么新鲜东西了。例如,Twitter和LinkedIn已经是大数据的著名用户了。这两家公司已经各自形成了一套明显的竞争优势,通过挖掘他们的大规模数据仓库来识别趋势。那么,中型企业CIO该怎么办呢?幸运的是,手边就有可用的工具。

 

  这些工具中有一款是免费的,即基于Java的Apache Hadoop编程框架。该框架在过去一年到一年半时间里在大数据领域获得了极大的市场。全球的行业专家和用户们都把Hadoop称为事实上的数据挖掘标准。纵观现存其它大数据产品的表现,再考虑到Apache Hadoop1.0版是在2011年11月底才发布的这一事实,Hadoop获得这样的认可确实令人惊讶。Hadoop是如此流行,以至于Hortonworks公司CEO Eric Baldeschwieler预测在2017年它将处理全世界数据的半数之多。在接下来的这一年,Hadoop将会以某种方式靠近您的组织的几率非常大。

 

  Hadoop主要面向开发人员。其主要框架MapReduce支持编程者处理分布式计算机群的大规模数据量。缺点是它是非常重型的产品。而且,Hadoop可以把直接操作数据仓库的技术人群与数据消费人群和数据翻译员区分开来。

 

  考虑到中型企业CIO的预算限制,下面有一些建议可以帮助克服海量数据的挑战:

 

  不要忽略了趋势。大数据不会消失,不能忽略大块数据分析转换能力和分析数据趋势。花一些时间理解Hadoop以及其它大数据产品的功能和结构。思考一下你拥有数据的方式可以为你的公司带来改善。

 

  为合格的数据科学家寻找预算空间。这些人是您BI交响曲的打击乐器。市场上合格的数据科学家非常紧缺。甚至在去年11月份的Hadoop世界大会上,培训也成为了一个很大的话题。要使用你培训预算的自由额度聘请较好的人员,保持他们的数据分析技能是顶尖的。

 

  理解大量数据集的存储提示。大数据其实是从多个地方和多个数据库以近乎实时的速度挖掘海量数据,而不会受到结构的障碍。这就使得你基础设施中的存储工作方式更加复杂了。对于这些奴表,云存储可能会更灵活和敏捷吗?要与你的数据挖掘策略团队一起,使其优先理解利用Hadoop处理能力的存储需求类型和数量。

 

  准备好使用Hadoop的工具集。理解微软公司在这个领域的登场,试验一下Hadoop-Excel和Hadoop-SQL Server集成看看你能交付什么类型的结果。也要了解一下IBM公司的工具,看哪一款更适合您在桌面和终端用户软件方面的现有投入。

 

  大数据的角逐已经开始了。可能在数据挖掘变革中你已经落后了。忽略数据分析大势的CIO们实际上是在拿自己的职业冒险。然而,对于已经跳入大数据领域并提取关键见解的CIO们,全世界都将在他们的掌握之中。

原文出处:http://www.searchbi.com.cn/showcontent_60185.htm

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/3746.html

相关文章

  • 《福布斯》:数据带来高成本 Hadoop需继续完善

    摘要:在未来的到年,大数据已经成为私人和公共组织的战略关键。在大数据领域,的低成本和高扩展性是其关键因素。大数据带来了巨大的商业利益,但隐形成本和复杂性是现今发展的障碍。虽然大数据带来的好处显而易见,但和现在必须重新审视大数据的成本了。 现今我们已经进入了大数据时代,因为创新的数据管理技术的诞生,使得组织可以对所有的数据类型进行分析。这也使得企业每天都能够发掘出新的商业机会。随着互联网技术的发展,...

    imtianx 评论0 收藏0
  • 2016年那些看似不靠谱的云计算预测,有哪些成真了?

    摘要:目前,云竞争还处于起步的阶段,数据争夺战还没有正式打响。此前,阿里与数梦工场签署了战略合作协议,双方正式宣布建立是使命级合作伙伴关系。评论事实上,云计算存在着较大的隐形成本,迁移成本。年,欧盟欧洲法院宣布欧美数据安全港协议无效。 2016年已经过去大半,云计算市场也发展得风生水起,Tableau在今年春天曾对云计算市场做出的十大预测。本篇文章从国内视角对这些预测进行了一一复盘。1、云竞争的本...

    Amos 评论0 收藏0
  • 掌握方法 如何利用Hadoop廉价数据分析

    摘要:大数据将成为本年度的云计算。例如,和已经是大数据的著名用户了。大数据不会消失,不能忽略大块数据分析转换能力和分析数据趋势。然而,对于已经跳入大数据领域并提取关键见解的们,全世界都将在他们的掌握之中。   大数据将成为本年度的云计算。这是必然发生的结果:随着时间的推移,企业产生的数据集已经越来越大了,这些数据包括客户购买偏好趋势、网站访问和习惯、客户审查数据等等;那么您怎样才能把这么大量的数...

    woshicixide 评论0 收藏0
  • 360度透视Hadoop数据技术、案例及相关应用

    摘要:来自社区的大数据宣言为公司提供有效的业务分析工具和技术是首席信息官的首要任务。我们称这些为大数据。大数据性质的变化移动设备和其他技术的出现导致数据性质的根本性变化。因此,需要处理和分析大数据的新方法。 来自Wikibon社区的大数据宣言为公司提供有效的业务分析工具和技术是首席信息官的首要任务。有效的业务分析(从基本报告到高级的数据挖掘和预测分析)使得数据分析人员和业务人员都可以从数据中获得见...

    rottengeek 评论0 收藏0
  • 云计算走进企业 SaaS抢走CIO饭碗

    摘要:微软雅黑微软雅黑据咨询机构一项调查发现,中小企业采用了应用模式后,主管感到地位下降待遇不好占了,感觉境况没变化占,只有感觉处境比以前好,其它则表示无所谓。        利用信息化提升企业的核心竞争力已经成为企业领导者如今的共识,但对于大多数中小企业和部分大企业而言,在信息化方面仍然存在很多困境,企业管理软件高昂的价格和实施费用、与之相配合的硬件开销、后期维护和使用的人力及其它资源投入都成为...

    daryl 评论0 收藏0

发表评论

0条评论

最新活动
阅读需要支付1元查看
<