国内的云服务头部厂商都在积极拥抱大数据,为自家的云计算业务注入生命力。
2021年伊始,腾讯在大数据领域又有了新动作。近日,大数据公司星环信息科技(上海)股份有限公司(以下简称“星环科技”)与中金公司签署上市辅导协议,拟于科创板挂牌上市。
腾讯是星环科技IPO前最大机构投资方,前者入资数亿元的大数据公司东方金信目前也已进入上市辅导阶段。腾讯与星环科技、东方金信的合作有一个共同点:基于腾讯云能力,共建大数据生态。
在腾讯频频注资大数据公司的同时,阿里云“城市大脑”在大数据上的运用也驶上了快车道。经过十年发展,巨头们的大数据事业已经迎来高潮。
腾讯阿里巴巴征战大数据
腾讯与阿里巴巴两个大厂,从试水大数据至今,都已走过了十年。
十年之前,微信才刚刚普及,很多人知道淘宝,却不熟悉阿里巴巴。十年之后,腾讯利用在社交关系数据上的相对优势,在大数据领域打下了一片天地;而阿里巴巴通过淘宝为布局大数据业务打下了坚实的数据基础,成为今天为人熟知的阿里巴巴和阿里云。
在腾讯2020 Techo Park开发者大会上,腾讯云副总裁、腾讯数据平台部总经理蒋杰表示,经过10年的积累,腾讯大数据平台的算力资源池目前已有超过20万台的规模,每天实时数据计算量超过30万亿条。
腾讯的大数据资源池建立在自家产品生态上。从产品类型来看,腾讯的大数据产品主要分三类:分析类、工具类以及平台类。分析类包括腾讯移动分析、微信小程序分析等,可以进行实时统计、即时分析,提高产品决策效率;工具类有腾讯移动推送(信鸽)、云数据库等,使用高性能开源数据库,辅助用户快速开发业务;平台类有大数据处理套件、腾讯智能推荐等,赋予用户大数据处理与精准推荐能力。
可以看出,腾讯的这三类大数据产品是围绕互联网平台搭建的,主要服务群体集中在唱吧、36氪、京东到家以及腾讯自家产品生态等互联网应用上。这样的策略可以增强主营业务能力,同时有利于构建自己的互联网应用生态。
近三年来,腾讯陆续入资星环科技和东方金信,并表示将基于腾讯云在云计算和大数据方面的基础产品能力,在金融、政府、工业等方面与两家大数据公司形成优势互补,共同构建大数据生态圈。腾讯正以“云+大数据”融合发展为策略,提升自身的技术实力与影响力,拓展大数据行业市场。
如果说腾讯的重心在产品,那么阿里巴巴则侧重于数据管理。阿里巴巴在大数据上的自研能力、云市场上的拓展能力表现强劲。阿里巴巴于2010年推出Maxcompute(原ODPS),起跑大数据建设,致力于批量结构化数据的存储和计算,提供海量数据仓库的解决方案及分析建模服务。
据了解,经历十年发展后,MaxCompute已经可以承载EB级别的数据存储能力、百PB级的单日计算能力,在公共云上已经覆盖了国内外的十几个国家和地区,电商、工业、医疗、农业、气象、教育等诸多行业企业开始采用这项技术。
相较MaxCompute,阿里云的明星级产品“城市大脑”的名头更为响亮。
2009年,马云与王坚一拍即合,成立了阿里云,王坚随后背负无数的质疑和嘲讽深扎到当时暗潮涌动的大数据深礁之中。马云没有看错王坚,王坚也没有辜负马云10亿元的研发投资。今天,全球超过20个城市引入了阿里云“城市大脑”,覆盖交通、城管、文旅、卫健等11个领域。阿里云“城市大脑”对于大数据的使用,是用数据来解决过去的问题,数据资源会变成未来城市发展中一个非常重要的要素。
“城市大脑”能够获得今天的成功,离不开MaxCompute强大的算力与阿里云计算的有机结合。
IDC中国助理副总裁周震刚在接受《中国电子报》记者采访时指出,目前来看,云平台为大数据的管理和挖掘提供了强大的计算和存储能力。从技术上看,目前在公有云上的数据仓库和数据湖技术是各厂商发展重点。很多厂商也在考虑“湖仓一体”的解决方案,也就是结构化和非结构化数据统一管理的问题。
大数据负责高效处理数据,丰富云计算的能力;反之,云计算可以利用大数据的能力构建需求。腾讯、阿里在大数据领域深耕的十年,是“云+大数据”相辅相成发展的十年。
“云+大数据”将走向深度融合
随着企业上云意识的不断增强、云安全技术保障能力的持续提升,越来越多的企业愿意把数据存储及系统迁移到云上,数据中心服务商开始积极推进数据中心云化,云计算服务商则陆续推出大数据解决方案,云计算与大数据融合程度日益加深。
“云计算能为大数据提供更大的存储空间和更强的计算能力,使大数据的价值得到真正释放。”赛迪顾问大数据产业研究中心高级分析师张凡在接受《中国电子报》记者采访时表示。云计算+大数据融合发展比较适用于需要通过大量数据计算分析得到有价值信息的应用场景,如制造业中各制造环节的协同、基于生产环节数据优化行业对用户需求的精准挖掘,以及医疗领域基因测序、疫苗研发、药物研制等众多环节。
从IT建设角度来看,目前企业上云基本是主动行为,动作越慢以后会越被动。中国社会科学院数量经济与技术经济研究所研究员万相昱向《中国电子报》记者指出,全行业数字化转型加速,企业对数据的需求程度加深,在成本收益合理的情况下,基于云的大数据服务将是企业未来IT建设的理想选择。
谈到如何让云计算与大数据融合在商业价值上取得突破,万相昱和张凡都提到了商业智能,即用现代数据仓库技术、线上分析处理技术、数据挖掘和数据展现技术进行数据分析,帮助企业的管理层进行快速、准确的决策,迅速发现企业中的问题,提示管理人员加以解决。张凡指出,除此之外,利用“云+大数据”技术缩短产品研发周期、提升企业运营效率,一定程度上也能为企业创造商业价值。
谈到问题与挑战,周震刚认为,在公有云层面,数据隐私和数据控制是发展大数据的主要难点。用户现在越来越重视数据隐私问题,各个国家和地区出台了不同的数据隐私管理法律法规。用户选择云服务提供商时,能够掌控数据位置以符合数据隐私法规将成为关键的决策标准。企业需要评估云平台上的数据隐私风险,允许云服务提供商以符合隐私的方式分析数据、挖掘数据并展示出来,云服务提供商则需要能够通过分析工具支持复杂数据审核。
张凡认为,目前云计算和大数据的融合一方面需要解决数据确权、共享开放、隐私保护等方面政策、法规不完善的问题,另一方面面临如何更好地提升数据安全技术,如何开发出更贴合具体业务场景定制化解决方案的挑战。
无论是腾讯、阿里,还是任何一家积极拥抱大数据的云厂商,如果想要让技术健康生长,产品真正服务于用户,就要在关注自身成长以外,看到技术应用带来的问题,打消用户对于产品的疑问,这是每一个新兴技术产品化过程中都会遇到的问题,它们或将成为腾讯和阿里走向下一个大数据十年所面临的关键挑战。