5.1 认识大数据 学案.doc

第二十二讲认识大数据学习目标认识大数据及其特征理解数据对日常生活的影响学习内容在日常工作生活和学习等活动中人们的一举一动基本上都可以数字化例如从家中出门到达工作地点选择的交通工具路线和所用时间每刷一次微博拨打一次电话发送一条短信网上银行转账或者浏览相关网站甚至所在的地理位置信息等都产生了大量数据在第一章我们已经介绍了数据的基本概念与特征下面我们将学习大数据的基本概念与特征大数据大数据是指无法在可承受的时间范围内用常规软件工具进行高效捕捉管理和处理的数据集合是需要新处理模式才能具有更强的决策力洞察发现力和流程优化能力的海量高增长率和多样化的信息资产大数据的产生是与人类日益普及的网络行为所伴生的物联网云计算移动互联网车联网手机电脑以及遍布地球各个角落的各种各样的传感器无一不是数据的来源或是承载的方式互联网生成的数据量不仅远超此前一切人类所生成的数据量的总和而且在以大爆发性的速度不断增长在天气预报大气监测地球物理探矿和天体运动观测等科学实验和科学观察等活动中各种各样的传感器每时每刻都在产生大量的数据大数据已成为人们提取信息做出决策的重要依据是推动信息社会发展的重要资源大数据的特征我们正处于一个大数据时代大数据使人们的生活工作与思维方式等都产生了巨大的变革那么大数据究竟具有哪些特征探究活动分析仔细阅读以下案例分析大数据具有哪些特征案例某市交通智能化分析平台的数据来源于道路交通电信地理信息系统等各行各业例如交通卡刷卡每天产生万条记录手机定位数据每天产生万条出租车运营数据每天产生万条电子停车收费系统数据每天产生万条等等这些数据在体量和速度上都达到了大数据的规模案例搜索引擎公司通过跟踪网民对感冒症状以及治疗等关键词的搜索发现某个时段在某个区域内搜索数量急剧增长从而成功预测了甲型流感的暴发时间地域案例目前某基于大数据的网约车平台已覆盖全国多个城市涵盖出租车快车顺风车代驾专车试驾以及租车等多项业务为人们的出行带来极大的便利我们只需在网约车上输入或者说出目的地强大的智能系统就立刻分配订单即时通知附近司机借助定时定位系统我们可以看到司机的大致位置以及预计到达时间从互联网产生大数据的角度来看大数据具有特征大量多样低价值密度高速第一数据体量巨大从级别跃升到级别第二数据类型繁多如网络日志视频图片地理位置信息等第三价值密度低以视频为例在连续不间断的监控过程中有用的数据可能仅仅两秒第四变化速度快数据来自世界各地的网络终端且以秒为单位快速变化从互联网思维的角度来看大数据具有三个特征样本渐趋于总体精确让位于模糊相关性重于因果第一在大数据时代强调数据要全量而不是抽样即强调数据规模全量而不是强调数量巨大大数据时代有了更好的数据采集手段让获取全量数据成为可能第二大数据时代研究的数据如此之多追求的不是精确性而是模糊性在大数据时代只要掌握了大体的发展方向即可适当忽略微观层面上的精确度会让我们在宏观层面拥有更好的洞察力第三大数据时代不是因果关系而是相关关系在大数据时代无须再紧盯事物之间的因果关系而应该寻找事物之间的相关关系相关关系也许不能准确地告诉我们某件事情为何会发生但是会提醒我们这件事情正在发生从大数据存储与计算的角度来看大数据具有两个特征分布式存储和分布式并行计算第一大数据存储在互联网不同的服务器与各客户终端第二应用分布式并行计算处理互联网的大数据大数据对日常生活的影响大数据使人们日常生活更为便捷方便支付中国的移动支付发展得特别快在中国每三个手机用户就有两个在使用移动支付中国是全球最大的移动支付市场医院餐厅菜市场加油站甚至路边摊都在使用移动支付中国人今天的生活已经越来越有科技含量方便出行应用交通系统的大数据网络约车出行智能导航行车避免堵车无人驾驶智能地图方便寻路等等方便购物与产品推介网络购物不但节省人们出行购物的时间而且帮助企业有效判断用户的信息需求和消费需求对客户进行产品推介方便人们选购产品方便看病与诊病应用网络预约挂号减轻与节省患者排队挂号看病的辛劳与时间同时又方便医生提前分析患者的病史数据以便更科学诊病大数据对人们日常生活产生的负面影响个人信息泄露在大数据时代我们使用的手机计算机网络信用卡等信息科技都会产生数据这些数据时刻存在泄露的风险信息伤害与诈骗在大数据时代我们的网络信息随时都可能被不法分子窃取并对我们及身边的亲人造成伤害