大数据与云计算

大数据与云计算清华大学
自动化系范玉顺2020年8月11日，深圳提纲大数据的产生背景大数据的特征与思维转变大数据产业发展大数据应用云计算及其产业发展情况云计算应用23数据增长的速度保险公司美国航空联邦快递花旗银行沃尔玛谷歌脸谱网站信息技术的发展催生大数据热基础：计算机存储、计算能力的提升，数据存储成本下降1955年，1MB的存储器，6000美元1993年，1MB的存储器，1美元2010年，1MB的存储器，1美分大数据的来源1.交易数据，包括电子商务2.移动互联、社交网络3.物联网感知数据：海洋、天气、工业设备监控、物流跟踪4.政府开放数据离散制造业政府传媒业流程制造业银行业医疗业投资证券业专业服务业零售业教育业保险业交通业批发业共用事业服务资源行业消费娱乐业建筑业美国各行业数据存储量（PB）96684871569461943442936441126924322720219411610651沃尔玛2010数据库的大小为2500TB，大约2PB1. 交易数据淘宝1个月增加1.5PB数据Google从单纯的搜索引擎公司发展为目前包括blog、Email、网络分析、新闻、问答、数字图书、日历、SaaS、云计算、地图、广告、阅读、图片、视频等数十种服务的综合IoS服务提供商；搜索：至少拥有10亿用户；在线视频：每月>5亿的访问量；博客：4亿读者；Gmail：2亿用户；Android：智能手机OS的25%市场份额；Chrome：17%的市场份额。6Facebook14亿：注册用户100亿：分享的内容条数45亿：“赞”的数量，3.5亿：上传照片数600+TB：新产生的数据105TB：每半小时通过Hive扫描的数据300+PB：数据容量1.网络用户数据30亿互联网用户6.34亿个网站12000亿次谷歌搜索（2012年）14亿位Facebook用户2亿位Twitter用户2亿位LinkedIn用户1.35亿位Google+活跃用户2.社交媒体交互数据2012年共发布了1.75亿条Tweet信息全球90%的数据产生于过去两年3.移动端和影像20亿智能手机用户50亿手机用户2. 社交网络由于传感器大规模全方位的布网和高速高精度传感器的使用，物联网将产生海量的数据。截至2010年，全球RFID数量已经超过了300亿个。一个大型城市电力物