大数据将成为代替云计算的新一代热门话题。这是必然的结果:随着时间的推移,企业产生的数据量已经越来越大了,这些数据包括客户购买偏好趋势、网站访问和习惯、客户审查数据等等;那怎样才能把这么大的数据集整理成综合形式呢?传统的商业智能(BI)工具(关系型数据库和桌面数学计算包)在处理企业海量数据时已经有点不够用了。当然,数据分析行业也有开发工具和框架,支持数据研究人员和分析师们挖掘大数据集,并能承受得了信息负载。
对于较大的公司来说,海量数据处理已经不是什么新鲜东西了。例如,Twitter和LinkedIn已经是大数据的著名用户了。这两家公司已经各自形成了一套明显的竞争优势,通过挖掘他们的大规模数据仓库来识别趋势。那么,中型企业CIO该怎么办呢?幸运的是,手边就有可用的工具。
这些工具中有一款是免费的,即基于Java的Apache Hadoop编程框架。该框架在过去一年到一年半时间里在大数据领域获得了极大的市场。全球的行业专家和用户们都把Hadoop称为事实上的数据挖掘标准。纵观现存其它大数据产品的表现,再考虑到Apache Hadoop1.0版是在2011年11月底才发布的这一事实,Hadoop获得这样的认可确实令人惊讶。Hadoop是如此流行,以至于Hortonworks公司CEO Eric Baldeschwieler预测在2017年它将处理全世界数据的半数之多。在接下来的这一年,Hadoop将会以某种方式靠近您的组织的几率非常大。
Hadoop主要面向开发人员。其主要框架MapReduce支持编程者处理分布式计算机群的大规模数据量。缺点是它是非常重型的产品。而且,Hadoop可以把直接操作数据仓库的技术人群与数据消费人群和数据翻译员区分开来。
考虑到中型企业CIO的预算限制,下面有一些建议可以帮助克服海量数据的挑战:
- 不要忽略了趋势。大数据不会消失,不能忽略大块数据分析转换能力和分析数据趋势。花一些时间理解Hadoop以及其它大数据产品的功能和结构。思考一下你拥有数据的方式可以为你的公司带来改善。
- 为合格的数据科学家寻找预算空间。这些人是您BI交响曲的打击乐器。市场上合格的数据科学家非常紧缺。甚至在去年11月份的Hadoop世界大会上,培训也成为了一个很大的话题。要使用你培训预算的自由额度聘请最好的人员,保持他们的数据分析技能是顶尖的。
- 理解大量数据集的存储提示。大数据其实是从多个地方和多个数据库以近乎实时的速度挖掘海量数据,而不会受到结构的障碍。这就使得你基础设施中的存储工作方式更加复杂了。对于这些奴表,云存储可能会更灵活和敏捷吗?要与你的数据挖掘策略团队一起,使其优先理解利用Hadoop处理能力的存储需求类型和数量。
- 准备好使用Hadoop的工具集。理解微软公司在这个领域的登场,试验一下Hadoop-Excel和Hadoop-SQL Server集成看看你能交付什么类型的结果。也要了解一下IBM公司的工具,看哪一款更适合您在桌面和终端用户软件方面的现有投入。
大数据的角逐已经开始了。可能在数据挖掘变革中你已经落后了。忽略数据分析大势的CIO们实际上是在拿自己的职业冒险。然而,对于已经跳入大数据领域并提取关键见解的CIO们,全世界都将在他们的掌握之中。
我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。
我原创,你原创,我们的内容世界才会更加精彩!
【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】
微信公众号
TechTarget
官方微博
TechTarget中国
翻译
相关推荐
-
数据分析是关于文化,而非技术
在新加坡,Tableau公司新数据准备工具发布会上,发言人表示,数据分析日益盛行的原因在于数据量呈指数级增长以 […]
-
攻关克难:大数据系统中的预测技术
大数据分析近年来逐渐成为预测分析技术的代名词。这使得越来越多的人以为,任何用于预测分析的系统都必定涉及大数据; […]
-
让工业无忧 天泽智云发布工业智能应用孵化器GenPro
工业世界看似离我们遥远,却与我们的福祉紧密相连。数据和智能分析赋予我们更加广阔的视野,能够以预测的方式管理和避免还未发生的问题。
-
CardinalCommerce如何满足用户日益增长的数据分析需求?
通过使用Spark进行大数据分析,Visa全资附属公司CardinalCommerce在整个组织内加大了对数据的需求,并让更多的内部用户参与分析过程。