大数跨境
0
0

入门大数据,两天搞定Hadoop搭建

入门大数据,两天搞定Hadoop搭建 CDA数据分析师
2017-05-26
0
导读:本课程针对零基础想从事大数据相关工作或研究的学员,对大数据概念、框架、思维、Hadoop平台搭建技术进行全面的讲解。


作者    CDA 数据分析师

本课程针对零基础想从事大数据相关工作或研究的学员,对大数据概念、框架、思维、Hadoop平台搭建技术进行全面的讲解。让你把握时代脉博,掌握大数据时代前沿;全面掌握Hadoop的架构原理和使用场景;全面掌握Hadoop的三种架构方式及搭建过程;熟练掌握HDFS文件系统与MapReduce程序开发思想; 能利用hadoop平台进行大数据分析,能深入实际的项目案例进行大数据的实战开发。



课程安排

时间:北京:2017年7月22日-23日
地点:北京市海淀区厂洼街3号丹龙大厦B座3层
安排:上午9:00-12:00;下午1:30-4:30;答疑4:30-5:00
费用:现场:900元 (赠送录制视频);
          直播:500元 (赠送录制视频);


主讲人介绍

辛立伟 ;大数据高级讲师;Java高级软件工程师、Java高级培训讲师、认证高级讲师、系统架构师、SUN中国社区会员、JAVA技术专家。精通JAVA、JAVA EE6体系结构;精通Java企业级中间件技术设计、构建以及应用部署;畅销书《Java从初学到精通》(电子工业出版社,2010年6月)一书作者。目前专注于Java EE6、Java富互联网应用程序、Android 3G软件的研发、相关技术培训和企业咨询等。多次参与大数据分析课程教学。


教学要求

1.  电脑运行内存不低于8G

2.  使用Linux64位系统(提供虚拟机)

3.  讲解Hadoop2.8版本


课程内容

第一部分:大数据概述      

1)大数据的概念及技术

2)大数据的技术体系

 

第二部分:Linux操作系统

1)掌握Linux/Ubuntu操作系统的安装和配置

  •安装VMware虚拟机

  •在虚拟上安装Ubuntu操作系统

2)了解Linux文件系统

3)掌握常用的Linux文件操作命令

 

第三部分:Hadoop环境搭建_单机模式

1)Hadoop体系介绍: 核心组件HDFS、MapReduce

2)搭建Hadoop单机模式:

  •安装JDK,配置和测试环境变量

  •安装Hadoop,认识Hadoop 2.x的目录结构

3)在Hadoop单机模式下运行Hadoop程序

 

第四部分Hadoop环境搭建_伪分布模式

1)Ubuntu系统软件源的选择和更新

2)搭建Hadoop伪分布模式:

  •安装SSH服务,建立SSH信任关系,实现SSH无密码登录

  •配置Hadoop

  •格式化HDFS分布式文件系统

3)启动HDFS和YARN,在伪分布模式下运行Hadoop程序

 

第五部分:HDFS文件系统      

1)HDFS分布式文件系统介绍:

  •HDFS简介

  •HDFS主要组件和系统架构

  •HDFS的适用场景

2)HDFS操作方法:

  • HDFS读、写文件剖析

  • HDFS的常用操作"

 

第六部分:MapReduce离线计算框架,Yarn云操作系统

1)MapReduce离线运算框架:

  •MapReduce并行运算模式

  •MapReduce执行原理

  •MapReduce开发模型

2)Yarn云操作系统:

  • Yarn运行原理"

 

第七部分:Hadoop集群环境搭建      

1)Hadoop集群模式简介

2)搭建Hadoop集群模式:

  •配置集群中各节点的固定IP地址和DNS解析

  •安装SSH服务,建立SSH信任关系,配置本地无密码登陆和远程无密码登陆

  •安装JDK,配置环境变量

  •安装Hadoop,并配置

  •格式化HDFS分布式文件系统

3)启动HDFS和YARN,在集群模式下运行Hadoop程序

4)Hadoop集群的监控


点击下方二维码或点击阅读原文了解课程详情 

 

 

联系方式:

曹老师

QQ:2881989705

Tel:18010116775

Mail:caoliang@pinggu.org


推荐阅读


我分析了 6.5W 字的歌词,看到了这样的周杰伦!

柯洁又输了,关于人工智能AlphaGo你需要知道些什么

男性人口过剩:亚洲性别比例失衡远比你想象中严重

【书单】18本数据科学家必读的R语言和Python相关书籍

如何像数据科学家一样思考

北京VS上海,哪座城市人口更多?

我是如何一不小心阻止了勒索病毒的全球蔓延

用python抓取摩拜单车API数据并做可视化分析(源码)

2017年大数据和数据科学的六大发展趋势

你每天要花多少时间在手机上?

初级数据科学家求职时的 3 大必备能力

不可错过的优质深度学习课程

职场 | 数据库面试常问的一些基本概念

听说你最擅长“拖”,你“拖”得过Excel吗?

数据科学优质课程推荐#2:统计入门课程篇

歌手外科和猴姑,大数据告诉你白百何出轨后谁最惨

想学习数据科学?我们整理了一份优质编程入门课程清单

数据科学家在美国仍然是最热门工作的3大原因

一个优秀数据分析师的准则

【声明】内容源于网络
0
0
CDA数据分析师
🌸全国30万数据分析从业人员,有10万在CDA数据分析师 🌺CDA会员俱乐部有1000个数据库,成为持证人即可获得相关数据信息 🌹未来两样东西最有价值:一个是数据,一个是GPU
内容 9451
粉丝 0
CDA数据分析师 🌸全国30万数据分析从业人员,有10万在CDA数据分析师 🌺CDA会员俱乐部有1000个数据库,成为持证人即可获得相关数据信息 🌹未来两样东西最有价值:一个是数据,一个是GPU
总阅读1.4k
粉丝0
内容9.5k