IT和分析经理认为机器学习应用程序的最大挑战,包括数据准备和开发算法驱动的分析模型。 几十年来,机器学习已经成为高级分析场景的一部分,但是大数据平台和创建自动分析算法工具的出现使得机器学习变得更加重要。因此,越来越多的IT和分析团队面临着来自机器学习项目的挑战。 在许多组织中,机器学习计划需要在IT基础设施上进行大规模投资,往往涉及到Hadoop集群,Spark处理引擎和其他大数据技术的部署。
新的数据管理和分析过程往往还需要准备数据集进行分析,并开发算法实现数据运行。在许多情况下,这意味着要通过外部招聘或培训现有员工增加新的技能。 所谓深度学习应用程序,就是将人工智能与机器学习相结合,使组织能……
我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。
我原创,你原创,我们的内容世界才会更加精彩!
【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】
微信公众号
TechTarget
官方微博
TechTarget中国
IT和分析经理认为机器学习应用程序的最大挑战,包括数据准备和开发算法驱动的分析模型。
几十年来,机器学习已经成为高级分析场景的一部分,但是大数据平台和创建自动分析算法工具的出现使得机器学习变得更加重要。因此,越来越多的IT和分析团队面临着来自机器学习项目的挑战。
在许多组织中,机器学习计划需要在IT基础设施上进行大规模投资,往往涉及到Hadoop集群,Spark处理引擎和其他大数据技术的部署。新的数据管理和分析过程往往还需要准备数据集进行分析,并开发算法实现数据运行。在许多情况下,这意味着要通过外部招聘或培训现有员工增加新的技能。
所谓深度学习应用程序,就是将人工智能与机器学习相结合,使组织能更好地应对更复杂的分析工作。例如,解释图像信息以便更好地按照内容分类。需要强调的是,深度学习加大了数据科学家和统计学家通过自动算法建立预测模型的开发难度。
在2016年Hadoop峰会上,一些与会者分享了他们在机器学习项目中遇到的最大挑战,其中包括前期数据准备工作的复杂性和使用机器学习算法库作为模型开发过程的一部分。
可穿戴相机制造商GoPro的数据科学与工程高级经理Chester Chen表示:“最大的挑战是准备数据。所有这些数据以不同形式进入,在正确的数据管道获取正确的数据是一个相当艰巨的任务。”
移动和IoT分析服务提供商Webtrends公司首席技术官Peter Crossley分享了自己的体会:“获取以某种形式进行清理或管理的数据比较困难。你必须有一个规范化的数据集——可以在数据湖转储所有数据,但是数据沼泽很难进行分析。”
创新制药公司工程总监Murali Kaundinya说道:“数据分析师不想处理所有机器学习库。最大的挑战是为他们提供一个平台,即使他们没有成为机器学习方面的专家也可以使用这个平台。”
美国德克萨斯大学MD安德森癌症中心分析主管Bryan Lari认为:“你从不精确的数据开始分析,所以当它达到了足够高的数据精度,你也会相信你得到了准确的结果。”
雅虎云计算和大数据平台高级主管Sumeet Singh表示:“我们必须让它变得更加简单。在做任何事情之前,数据科学家可以花一个月或两个来评估一个特定的库。这的确是一个障碍。”
相关推荐
-
Tableau新功能包含NLP、AI和机器学习
Tableau Software公司在Tableau 2019中为其BI和数据可视化平台新增一系列智能功能,其 […]
-
Cloudera-Hortonworks合并或将减少Hadoop用户的选择
近日大数据领域两家顶级供应商达成交易协议,这可能会影响Hadoop和其他开源数据处理框架,并使大数据用户的技术 […]
-
采矿设备制造商利用BI on Hadoop来挖掘数据
如果大数据要取得巨大成功,则需要提供给更多的最终用户群组。但广泛使用的商业智能工具尚不能轻松分析最大的大数据, […]
-
2018.2版本更新 Tableau BI添扩展API
近日Tableau推出正式版Tableau 2018.2,这次更新带来扩展的分析功能和更简化的仪表板,扩大了T […]