标签:flume saas 资源 var 手机 services 解决问题 mapreduce str
一、什么是大数据
四个特性(4个V)
数据量大(Volume)
快速化(Velocity)
多样化(Varity)
数据类型繁多,大部分为非结构化数据。(文本,图像,视频等等等等)
价值密度低(Value)
二、大数据的影响
1、Jim Gary总结在科学研究上,人类从实验,理论,计算(计算机)发展到了数据时代。现代可以以数据为驱动,比如我们不知道问题是什么,可以仅仅通过分析数据,从而发现问题,并解决问题。
2、大数据颠覆了传统的思维方式
- 全样而非抽样
- 效率而非精确
- 相关而非因果
三、大数据的应用
典型应用实例
1、影视剧投资
例如:某公司对整个互联网作大数据分析,发现如果有导演大卫芬奇,影帝凯文史派西拍摄著名小说《纸牌屋》会取得成功,这也是美剧《纸牌屋》的由来。
2、谷歌预测流感
过去由各个医疗机构汇报趋势再汇总,判断是否有流感趋势,这个过程非常缓慢。
而谷歌拥有大量用户,从用户搜索流感药品的关键词,通过大数据技术,实时分析以后就可以得出是否有流感趋势,实时性非常高。
四、大数据关键技术
最关键的两点,两大核心技术:
大数据的计算模式
五、大数据与云计算、物联网的关系。
云计算:通过网络,以服务的方式为用户提供非常廉价的IT资源(不再需要自己底层构建设施:建机房,维护设备等等。云计算也有自己的数据中心,一般由数千个刀片服务器组成)。
云计算主要解决两个问题:
云计算的三种服务
IaaS(Infrastructure as a Service): Amazon EC2,IBM Blue Cloud,Sun Grid
Paas(Platform as a Service): IBM IT factory, Google App Engine, Force.com
SaaS(Software as a Service): Google Apps, Microsoft "Software + Services"
物联网(Internet of Things, IOT):物物相连的互联网,是互联网的延伸。比如掌上公交,可以用手机实时定位公交,等于把你的手机和公交实时连接在了一起。
物联网的关键技术
最关键的是感知技术:二维码,RFID,传感器等等。
总结:云计算为大数据提供了技术基础。大数据为物联网提供数据分析支撑。物联网为云计算提供了应用空间。
标签:flume saas 资源 var 手机 services 解决问题 mapreduce str
原文地址:https://www.cnblogs.com/learnwhileucan/p/10171290.html