资讯专栏INFORMATION COLUMN

如何正确看待大数据与云计算技术?

Jrain / 646人阅读

摘要:我们已经进入了新一轮技术驱动的时代那如何理解大数据与云计算的关系在中国计算机学会大数据专家委员会副主任车品觉看来人工智能深度学习,这些都是二十年前就有的技术,但是二十年前没有大数据,没有可以关联的数据。

战国《风赋》:“夫风生于地,起于青苹之末,侵淫溪谷,盛怒于土囊之口,……”

DT时代,未来已来——数据“大爆炸”

首先要明白大家为何从前几年开始谈大数据了?这是一个基本问题,包含着对当下数据现实的基本认识。一个不可忽视的事实是,随着网络和信息技术的不断普及,人类产生的数据量正在呈指数级增长。大约每两年翻一番,这意味着人类在最近两年产生的数据量相当于之前产生的全部数据量。

数据“大爆炸”

对于如此巨量数据(而且单纯的增量数据都是一个巨量),与之相关的存储、分析、流转、使用到交易等等环节产生了一系列关联的问题,而在当下的时间节点,我们不得不明确面对,而不仅仅是先找个地方把数据存起来。

国家信息中心专家委员会主任宁家骏表示:大数据是指无法在一定时间内使用传统数据库软件工具对其内容进行抓取、管理和处理的数据集。大数据不仅仅是大,还有它的复杂性和沙里淘金的重要性。

以上是宁家骏从技术分析角度对数据与大数据做的区分,传统软件处理的数量主要是结构化数据,而且数量上相对小。当规模大到需要新的技术方案的时候,那正是我们重新认识它的时候。

在笔者看来,大数据有两大特点,一是数据来源多源,包括各种结构化数据和非结构化数据,如网络日志、视频、图片、地理位置信息等等,同时数量相对巨大,大数据中的‘大’本身就是一个相对的概念;二是数据处于“on line”即在线的状态,能够随时被吸取和关联,并进行分析。

一般来讲,更多智能硬件和这能设备的加入,更多数据实时产生,于是就需要大数据技术来实现对数据信息的价值挖掘。大数据技术包括了数据采集,数据存取,基础架构,数据处理,统计分析,数据挖掘,模型预测,结果呈现等八个方面。

而以上几个方面都离不开云平台和云计算能力,比如说数据采集之后的数据存储,现在很多非核心敏感数据都可以存储在云端;数据挖掘也是需要通过云计算和机器学习才能实现。那什么才是云计算呢?

云计算——低成本部署、随需使用的计算大脑

所谓云计算,非常教科书的说法是“能通过网络访问可扩展的、灵活的、可共享的物理或虚拟资源池,并按需自助获取和管理这些资源的模式。其中资源实例包括服务器、操作系统、网络、软件、应用和存储设备等。 ”

从以上概念可以看出其包括软件、硬件等资源,简单说云计算有三层云平台,第一个是Iaas(Infrastructure as a Service),基础设施即服务,以前这些资源都是企业固有资源,现在可以不再拥有,通过平台服务商提供,减轻部署成本;

第二个是Paas(Platform as a service),平台即服务,开放式的API可以由合作方提供行业和内容的服务;

第三个是SaaS(Software as a service),软件即服务。比如我们经常使用的手机APP等;

云计算有一个很重要的特点和优势就是资源池化,就是把Iaas,Paas,Saas层的资源(CPU、存储、网络等)放入到资源池中(云服务器),由云服务器进行集中管理。云计算里所有的服务都是通过资源池里的资源而提供的。

我们已经进入了新一轮技术驱动的时代

那如何理解大数据与云计算的关系?

在中国计算机学会大数据专家委员会副主任车品觉看来:人工智能、深度学习,这些都是二十年前就有的技术,但是二十年前没有大数据,没有可以关联的数据。所以大数据的故事从有了关联才真正开始。

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/4958.html

相关文章

  • 多云成功的最障碍是学习曲线

    摘要:例如,公司在年年初发布的年云计算全球安全趋势报告表明,将近一半的受访者表示,当前的工具在云计算中无法运行。云计算项目是一项值得关注的技术,因为它具有巨大的潜力。云计算供应商的基础设施拥有一支合格的专业人员团队,他们按照最佳实践维护云计算基础设施,并在发现新威胁和新方法时继续改进其安全架构。基于此,大多数云计算基础设施实际上比类似的内部部署更安全。人们都认为云计算值得探索,但绝大部分人并不是行...

    BLUE 评论0 收藏0
  • 雷锋网:破除计算中心化,UCloud的游戏新规则

    摘要:目前,的全栈边缘计算产品包括虚拟机安全容器和裸金属。契机之下,雷锋网对话了高级产品负责人曾凯源,听他阐述的边缘计算布局战略打法做与不做。曾凯源表示,边缘计算含在战略中,提供的是基础计算能力。云厂商推进边缘计算,已成有趣共识边缘计算的概念自2017年起就以摧枯拉朽之势裹挟着技术人和投资人追捧,还曾一度引发股市热炒和疯狂套现,渐渐形成与云计算分庭抗礼的格局,此后国内一大批边缘计算产业联盟破土而出...

    Tecode 评论0 收藏0
  • “5G+AI”到底有啥用?这篇漫画告诉你答案…

    摘要:今年月,他们携手中国电信华为,隆重发布了装备制造业首个全连接工厂。作为设备制造商,华为在自己的南方工厂实现了用制造。今年月,华菱湘钢和湖南移动华为公司共同发布了华菱湘钢数智工厂,并签署废钢定级合作协议。 根据工信部最新的数据,截至8月份,我国5G基站数量已超过百万,达到103.7万个。 ...

    hufeng 评论0 收藏0
  • AI、数据与云计算原来是这种关系

    摘要:说到,总是不可避免的联想到大数据与云计算,这三者可谓相辅相成,唯有全部结合起来,才有可能成为真正的人工智能。一句话概括大数据与云计算简单来说,是基于计算机软硬件,通过模拟人类思考和智能行为的一种理论方法和技术。说到AI,总是不可避免的联想到大数据与云计算,这三者可谓相辅相成,唯有全部结合起来,才有可能成为真正的人工智能。当然,本文只是以一个普通人的视角来探寻这三者之间的联系。一句话概括AI、...

    Shihira 评论0 收藏0
  • 唐电信提交两项数据与云计算标准在ITU-T获立项

    摘要:日前,在瑞士日内瓦举行的国际电信联盟第研究组的全会上,由大唐电信旗下大唐软件和中国联通联合提交的两项标准立项大数据的数据保留概览与需求和云业务生命周期管理的元数据框架获得正式立项,取得了在大数据和云计算技术领域国际标准制定中的又一突破。日前,在瑞士日内瓦举行的国际电信联盟(ITU-T)第13研究组的全会上,由大唐电信旗下大唐软件和中国联通联合提交的两项标准立项Y.BDDP-reqts:Big...

    alaege 评论0 收藏0

发表评论

0条评论

Jrain

|高级讲师

TA的文章

阅读更多
最新活动
阅读需要支付1元查看
<