大数据技术的初步认识 - 图文

大数据技术调研 大数据研发小组

苏林东 2017/05

北京应用物理与计算数学研究所，大数据联合实验室，2017 目录 ? 什么是大数据技术？? 大数据技术发展历程? 大数据生命周期 ? 大数据技术生态 ? 大数据技术应用

2

什么是大数据技术？ ● 大数据技术 —— 在巨量的数据资源中提取到有价值的数据加以分析和处理

o 基础架构支持 o 数据采集 o 数据存储 o 数据计算

o 数据展现与交互

3

发展历程 上世纪90年代至 2003 – 2006年 2006 – 2009年 2010年以后 本世纪初 ?萌芽期 ?突破期

?成熟期 ?改变世界格局 ?数据挖掘 ?围绕非结构化 的技术的基石 ?数据仓库、专 数据自由探索 ?并行运算和分 布式系统 ?各行业颠覆性 家系统、知识 ?Facebook创立， 管理系统

社交网络流行 ?云计算、

创新的源动力 MapReduce、 和助推器

?引爆大数据时 Hadoop

代的两大事件

???Google的三篇论文 —— GFS（2003）、MapReduce（2004）、BigTable（2006） ???2005年，Yahoo工程师 Doug Cutting和 Mike Cafarella合作开发了 Hadoop。

4