“数据基础架构思路已经从一种架构支持多类应用向多种架构支持多类应用发展。”这是今年图灵奖获得者,著名数据库专家Michael Stonebraker的观点。在大数据时代的今天,RDBMS(关系型数据库管理系统)已经不能应对所有问题,之前企业把几乎所有应用都放在一个架构上的做法也不再可行。
当曾经稳健运行的IT架构在很多新问题面前束手无策时,人们开始感到惶恐,于是IT行业热词频出:大数据、物联网、移动化、云计算、社交化,包括“互联网+”,我们都在竭力描述我们今天所处的时代,众说纷纭。
但至少,我们达成了一个共识,那就是技术要革新。在今年两会的时候,全国人大代表,用友网络董事长王文京就提出,“企业转型升级的重要途径是技术进步”。技术的革新中有大数据时代人们耳熟能详的NoSQL、Hadoop等。
Hadoop采用分布式存储,以对非结构化数据的处理能力见长,能够帮助企业降低数据存储和扩展成本。NoSQL数据库包含键值存储、文档存储、列式存储和图型数据库等多种类型,能满足多种业务需求。以列式存储为例,它一改之前行式存储的方式,对数据进行列式存储,显然更能提高数据查询速度和压缩比。用友企业互联网开放平台iUAP的结构化数据引擎AE采用的列式存储技术,能够将查询响应时间提高到10倍以上,压缩比达到1:10,某些场景下的运算性能比传统数据库快100倍。
用友AE与Oracle特定场景下性能对比图
结构化数据引擎AE只是用友数据平台的一个组件,另外还包括大数据引擎UDH、数据挖掘DataInsight和数据同步工具CDC等。其中大数据引擎基于Hadoop开源产品体系,数据挖掘采用了可视化技术,部分功能基于开源R语言平台进行封装。
看到这里,我们不难发现,用友采用了很多新技术。这些新技术固然能弥补传统技术的不足,但同时也有新的问题,比如用户可能担心新技术发展不成熟,也可能缺乏掌握新技术的员工。
对此,用友集团iUAP中心数据平台总经理李长山认为:“一些新技术虽然没有关系型数据库历史悠久,但也发展了很长时间,自身技术也比较成熟。同时,用友在SQL-on-Hadoop方面做了很多努力,可以帮助企业用熟悉的SQL语言使用Hadoop。另外,用友在做的是集成管理器,解决自动化安装部署、运维监控、辅助工具、性能调优等这些企业更关注的事情。”
当我们谈论大数据时我们在谈论什么
上文提到的数据平台可以和用友BQ商业分析平台整合,形成完整的大数据处理与分析解决方案。那么,BQ是什么呢?
BQ是用友综合的商业分析平台产品和工具集,基于UAP平台,名字的全称是Business Quotient。延续IQ叫做智商,EQ叫做情商的叫法,我们可以说BQ是业务商,这倒提醒我们,是时候关照一下业务了。
用友集团iUAP中心商业分析产品经理王翀
我们每天都在谈论大数据,但是技术要归结于何处呢?用友集团iUAP中心商业分析产品经理王翀认为,技术的应用源于业务的需要,技术应该是辅助决策的,是支撑业务的。他举了大娘水饺的例子。
大娘水饺是一家餐饮连锁企业,它有着350多家门店、8000多员工、每年5千万消费者。随着企业规模的扩大,业务问题也越来越突出,比如信息碎片化、集团管控能力不足、数据分析效率低等。为了解决以上业务问题,大娘水饺选择了用友BQ8,建立了企业经营管理决策分析平台、以集中采购、销售管理、商业智能分析和人力资源管理构成的运营支撑平台和以办公自动化OA和集中核算构成的集团整体管控平台。有了这三大平台,门店经理每天仅需要十分钟就能了解各分店的最新动态。
总而言之,没有最好的技术,只有最适合自己的技术,笔者希望,当我们谈论大数据时,我们谈论的是业务。
我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。
我原创,你原创,我们的内容世界才会更加精彩!
【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】
微信公众号
TechTarget
官方微博
TechTarget中国
作者
相关推荐
-
Cloudera-Hortonworks合并或将减少Hadoop用户的选择
近日大数据领域两家顶级供应商达成交易协议,这可能会影响Hadoop和其他开源数据处理框架,并使大数据用户的技术 […]
-
采矿设备制造商利用BI on Hadoop来挖掘数据
如果大数据要取得巨大成功,则需要提供给更多的最终用户群组。但广泛使用的商业智能工具尚不能轻松分析最大的大数据, […]
-
新Qlik Sense功能可用于云计算、AI和大数据
一年前,Qlik公司公布其长期计划,即将高级云计算、AI和大数据功能添加到其自助式BI和数据可视化软件中。现在 […]
-
Cambridge Analytica秘密收集Facebook数据表明对道德数据挖掘的需求
当有关Cambridge Analytica公司秘密收集Facebook数据的消息传出时,这暴露了一个薄弱环节 […]