大数据知识体系

发表于 2014-7-2 21:32:03

马上注册，结交更多数据大咖，获取更多知识干货，轻松玩转大数据

您需要登录才可以下载或查看，没有帐号？立即注册

x

大数据”技术指的是由数量巨大、结构复杂、类型众多数据构成的数据集合，对大数据的采集、清洗、存储、查找、传输、分享、分析、可视化等操作超越了现有的关系数据库与数据处理软件的承受能力，所以大数据储存与处理的成本只有少数公司才能承担。Google公司为了存储和计算自己所需的海量互联网资源开发了GFS分布文件系统、BigTable数据库和MapReduce算法，并在2004年采用论文的方式公开的自己的研究成果。随着时间的推移，作为google类似技术替代者的开源软件hadoop以及建立于hadoop基础上的软件逐渐成为了大数据存储与处理技术的主流。现在我们指的“大数据技术”，一般特指对Hadoop集群的安装部署管理及在其上的Mapreduce编程计算，还包含大数据处理相关的算法与工具软件。

本课程即以Hadoop作为基础，讲解了包含Hadoop体系结构，安装管理，MapReduce编程以及基于Hadoop的上层软件Hive、Pig、HBase、Mahout等软件的管理和应用。在高级课程中将重点放在Hadoop在现实企业中与其他软件的连接与互动，并在课程中包含了大量的数据挖掘、数据分析的实例。使得学员不但掌握基本技术，并且可以从容面对企业应用场景，更快的融入到大数据的潮流中来。

大数据I 培训入学条件

具有一定经验的Java、C#程序员、Linux管理员、脚本开发人员、DBA及商务智能开发人员，我们专门为需要调整知识体系的学员提供了一个免费的预备课程，预备课程通常的形式是在报名大数据I的时候发放的免费DVD并由学员自主学习完成。