大数据大数据技术BigData名词由来大数据的产生数量级概念数量级概念信息通讯进入新时代摩尔定律后摩尔时代计算机演进信息计算体系演进软件技术网络化演进传输技术的发展从移动数据到移动流媒体移动通信峰值速率的提升互联网发展：从电信到泛在服务联网主机数量电视网络化智能化与三网合一视频流量成为主流全球骨干网流量中国互联网干线带宽中国互联网用户移动终端功能的演进移动互联网加快普及智能终端引领后PC时代移动数据流量超过话音全球移动数据流量移动互联网流量互联网上1分钟互联网上的1天照片大数据时代到来大数据定义大数据例子科学研究催生大数据物联网催生大数据安全监控的数据量环境监测催生大数据医疗病历隐藏大数据国际关注大数据大数据的4V大数据的划分大数据技术挑战大数据技术挑战大数据平台技术分布式存储与架构大数据的并行处理大数据并行处理分析大数据可视化分析虚拟化与可视化大数据可视化目录Google云数据库Google云数据库Google云数据库Google云数据库Google云数据库Google云数据库Google云数据库Google云数据库Google云数据库Google云数据库GoogleVsHadoopHadoop发展编年Hadoop子项目Hadoop特性Hadoop物理部署Hadoop集群Hadoop用户HDFSHDFSHDFS能做什么HDFS组件HDFS主要组件功能HDFS架构HDFS文件HDFSNameNodeHDFSDataNodeHDFS可靠性保障HDFS可靠性保障HDFS可靠性保障提升性能的措施HDFS：节点失效是常态DataNode磁盘挂了DataNode机器挂了NameNode挂了Client挂了MR+HBaseWhyMapReduce?大规模数据分析大规模数据处理MR特性M+RMR编程单一Reduce处理多个Reduce处理MR流程目录数据挖掘技术的由来数据挖掘技术的由来数据挖掘技术的由来数据挖掘技术的由来数据挖掘技术的由来数据挖掘技术的由来数据挖掘的定义数据挖掘的定义数据挖掘的定义数据挖掘的定义数据挖掘的定义数据挖掘的定义数据挖掘的定义数据挖掘的定义数据挖掘的定义数据挖掘的定义数据挖掘的定义数据挖掘的定义数据挖掘应用数据挖掘应用数据挖掘应用数据挖掘应用数据挖掘应用数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本技术数据挖掘的基本算法目录BI理解BI概念信息孤岛帮助企业提高战略决策商务智能对企业的作用和价值Copyright©2005BusinessObjectsGreaterChina.Allrightsreserved.商务智能的5个后台数据处理工具数据仓库建设应以应用主题驱动完整的、统一的数据模型所有数据存储在单一数据库中提供单一的“实事”数据ThanksEmail:songhongjun@sdu.edu.cnMobile:15288929976