文档详情

[hadoop大数据培训零基础学习hadoop-北京尚学堂.doc

发布:2017-01-13约8.47千字共14页下载文档
文本预览下载声明
北京尚学堂提供 问题导读: 1.hadoop编程需要哪些基础? 2.hadoop编程需要注意哪些问题? 3.如何创建mapreduce程序及其包含几部分? 4.如何远程连接eclipse,可能会遇到什么问题? 5.如何编译hadoop源码? ? 阅读此篇文章,需要些基础下面两篇文章 尚学堂_肖斌_hadoop经典视频教程 /2015/down_0526/41.html 尚学堂云计算极限班-云计算培训 /html/cloud/ 如果看过的话,看这篇不成问题,此篇讲hadoop编程篇。 hadoop编程,hadoop是一个Java框架,同时也是编程的一次革命,使得传统开发运行程序由单台客户端(单台电脑)转换为可以由多个客户端运行(多台机器)运行,使得任务得以分解,这大大提高了效率。 hadoop既然是一个Java框架,因为我们必须要懂Java,网上有大量的资料,所以学习Java不是件难事。但是学到什么程度,可能是我们零基础同学所关心的。 语言很多情况下都是相通的,如果你是学生,还处于打基础的阶段,那么难度对于你来说还是不小的。 1.初学者要求必须有理论基础,并且能够完成一个小项目,最起码能够完成几个小例子,例如图书馆里等。 初学者基本的要求: (1)懂什么是对象、接口、继续、多态 (2)必须熟悉Java语法 (3)掌握一定的常用包 (4)会使用maven下载代码 (5)会使用eclipse,包括里面的快捷键,如何打开项目 传统程序员,因为具有丰富的编程经验,因此只要能够掌握开发工具: (1)会使用maven下载代码 (2)会使用eclipse,包括里面的快捷键,如何打开项目 (3)简单熟悉Java语法 上面的只是基础,如果想开发hadoop,还需要懂得下面内容 (1)会编译hadoop (2)会使用hadoop-eclipse-plugin插件,远程连接集群 (3)会运行hadoop程序。 上面列出大概的内容,下面我们具体说一些需要学习的内容。 无论是传统开发人员还是学生,零基础下面都是需要掌握的: 我们就需要进入开发了。开发零基础,该如何,咱们提供了相关的内容分别介绍下面文章 尚学堂_肖斌_hadoop经典视频教程 /2015/down_0526/41.html 这一篇我们使用什么开发工具,甚至考虑使用什么操作系统。然后就是Java基础知识篇,包括变量、函数等。 一、考虑开发环境 上面是我们打基础,有了这些基础,我们就开始学习开发hadoop了,但是我们该怎么搭建环境,我们知道Windows有32、64位之分,jdk也有,那么该如何解决,我们在window32位上需要使用32位jdk,64位则使用64位jdk,同样如果Linux则使用Linux32位于64位。 更详细,可以参考 零基础利用Java开发hadoop需要考虑的问题 /thread-6824-1-1.html 二、使用J2SE、J2EE 使用Java我们需要整体了解Java语言,Java包含下面三种 J2EE java企业版,主要用于web开发 J2SE java 标准版,主要用于WEB开发,但是缺少企业版的一些特性,一般情况下java下的应用都是指J2SE的开发。 J2ME java 微小版,主要用于手机等的开发 因此如果我们想处理、并展示数据,可以使用J2EE,更详细参考 hadoop开发--Java零基础之J2EE、J2SE、J2ME的区别 /thread-6904-1-1.html 三、对Java有了一定的认识,我们开始使用Java 1.环境变量配置 对于惯用集成环境的开发者来讲,这有点不适应,比如.net,安装开发环境vs,直接开发就好了,为啥还需要配置环境变量。 环境变量可以让我们找到jdk的命令,这个或许.net的一点好处,就是都封装起来了。别的不用关心了。对于环境变量,我们 需要配置java_home,path路径,更详细参考: hadoop开发--Java零基础之开发工具环境变量配置 2.开发工具选择 开发工具有很多种,不同的人习惯不同,开发工具也不一样,这里列出个人认为比较常用 1.eclipse 2.MyEclipse 3.maven 更多工具参考hadoop开发—Java零基础,开发选择什么开发工具比较合适 /thread-6892-1-1.html 而其中maven可以和eclipse一起使用,也可以单独使用,后面开发中它还是比较常用的,比如我们下载hadoop源码,编译hadoop,都是需要maven来完成的。 maven的学习可以参考 源码编译maven系列视频教程汇总 /thread-7972-1-1.html 3.Java编译 Java可以一处编译处处运行,原因是因为jvm。编译后的效果,可以查看: J
显示全部
相似文档