发布日期 2021-04-08

大数据过时了?高德纳:小数据需要5-10年才能落地

原标题:大数据过时了?高德纳:小数据需要5-10年才能落地

《信息时代》记者孙伟

近日,高德纳发布了2021年十大数据与分析技术趋势。这十大趋势包括:第一,更智能、负责、可伸缩的AI;2.组装数据和分析架构;第三,利用数据编织解决数据资产的多样性、分散性、规模性和复杂性;第四,从大数据到小而广的数据;5.XOps智能运维;第六,工程决策智能;7.数据和分析成为核心业务功能;八、地图技术;9.增强数据消费者的数量增加;十、边缘计算的数据与分析。

疫情改变了商业环境,很多历史数据不再适用。与此同时,对数据和隐私的保护变得更加严格,用大数据解决问题的成本变得非常高。因此,小数据变得流行起来。

所谓小数据,就是用相对少的数据,仍然可以提供有见地的分析技术。

之前企业花了很多钱搭建大数据平台,却发现很多数据在实际生产中没有得到应用,这些数据变成了暗数据。小而广的数据可以减少企业对大数据的依赖,从而实现更丰富、更完整的态势感知。

疫情期间,很多AI技术供应商相继开发了AI读片的应用,即利用AI辅助影像医生看CT片来诊断患者是否患有新冠肺炎病,这是典型的小数据应用场景。最近,剑桥大学领导的一项新研究发现,62种AI算法存在算法偏差、可重复性等重大问题,没有一种算法具有新冠肺炎临床诊断价值。因为这62种算法有一个共同的问题:缺乏影像医生和临床医生的参与。AI的部署需要有业务知识的人参与。

"我们不应该过分尊重小数据."高德纳研究总监孙鑫表示,小数据落地需要5-10年,市场渗透率不到1%,但小数据对AI的影响是深远的。

在上海等城市的数字化转型过程中,小数据被多次提及,很多城市治理场景积累的数据量远远不够,比如老小区的衣杆改造。

Gartner预测,五年后,70%的企业将不得不将其关注点从大数据转移到小数据或大数据。届时,超过85%的技术供应商会在AI解决方案中加入方法和模型训练技术来丰富数据,而到2020年,只有不到5%的供应商会这样做。

至于公众非常关注的数据隐私,高德纳预测,到2023年,60%拥有20多名数据科学家的组织将被要求制定关露宏金融网于数据和人工智能道德使用的法规,作为行为准则。

疫情加速了企业的数字化转型。2020年,嵌入数据分析平台的企业数量最高。据高德纳观察,嵌入数据分析平台的企业比例从2018年的57%上升到2020年的70%。企业需要使数据分析功能更容易组装,以实现更快的能力建设和嵌入。组装数据分析架构也是高德纳今年十大数据和分析趋势之一。

聚合阅读