为了实施开源战略,基于大数据生态系统组件的应用程序必须加强,才能在生产中运行。 DevOps可能是其中的重要组成部分。 用户一直希望减少对供应商的依赖。但是,当了解了如今大数据生态系统的复杂环境时,他们至少在某种程度上将承担一定的责任。
新的数据工程要求对DevOps进行整体的调整,其实就是敏捷性方法的扩展,需要开发人员对创新应用在生产中的表现承担更多的责任。同时,工程师需要以更快的速度学习新的软件。 许多早期采用者不得不创建基于MapReduce的Hadoop应用程序,只能使用Spark处理引擎重新启动它们。 如今有各种开源产品用于分析,包括Hadoop SQL查询工具、机器学习和其他功能。
……
我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。
我原创,你原创,我们的内容世界才会更加精彩!
【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】
微信公众号
![TechTarget微信公众号二维码](/wp-content/uploads/res/images/spriteimg/ttweixin.jpg)
TechTarget
官方微博
![TechTarget中国官方微博二维码](/wp-content/uploads/res/images/spriteimg/ttweibo.jpg)
TechTarget中国
搞清楚你想要什么
回想一下,当供应商们作为唯一创新来源的日子里,用户往往处于被动地位。供应商仍然可能在大数据应用实施方面发挥很大的作用,但被动的用户就要承受更大的风险。 事实上,产品发布时间中至少有一些滞后时间与准备软件的供应商有关。开源大数据应用程序从概念验证到生产投入的艰难过程并非巧合。 随着数据商店开始对新的开源应用程序进行变革,数据工程需要大量的创新。 为了继续推进大数据工程,团队需要非常认真地追求DevOps的信条,或者称之为DataOps,尤其是要求数据工程师和IT架构师负责将创新思想运用到生产过程中。相关推荐
-
Cloudera-Hortonworks合并或将减少Hadoop用户的选择
近日大数据领域两家顶级供应商达成交易协议,这可能会影响Hadoop和其他开源数据处理框架,并使大数据用户的技术 […]
-
采矿设备制造商利用BI on Hadoop来挖掘数据
如果大数据要取得巨大成功,则需要提供给更多的最终用户群组。但广泛使用的商业智能工具尚不能轻松分析最大的大数据, […]
-
新Qlik Sense功能可用于云计算、AI和大数据
一年前,Qlik公司公布其长期计划,即将高级云计算、AI和大数据功能添加到其自助式BI和数据可视化软件中。现在 […]
-
Cambridge Analytica秘密收集Facebook数据表明对道德数据挖掘的需求
当有关Cambridge Analytica公司秘密收集Facebook数据的消息传出时,这暴露了一个薄弱环节 […]