BlogJava-itstarting:IT进行时-随笔分类-hadoop及云计算http://www.blogjava.net/itstarting/category/43133.html想自己所想，做自己所爱zh-cnTue, 15 Dec 2009 14:53:44 GMTTue, 15 Dec 2009 14:53:44 GMT60Hadoop-0.20.1+Ubuntu9.10实战http://www.blogjava.net/itstarting/archive/2009/12/15/306076.htmlIT进行时IT进行时Tue, 15 Dec 2009 14:46:00 GMThttp://www.blogjava.net/itstarting/archive/2009/12/15/306076.htmlhttp://www.blogjava.net/itstarting/comments/306076.htmlhttp://www.blogjava.net/itstarting/archive/2009/12/15/306076.html#Feedback0http://www.blogjava.net/itstarting/comments/commentRss/306076.htmlhttp://www.blogjava.net/itstarting/services/trackbacks/306076.html
目录：
一、环境准备 1
二、安装JDK6 1
三、配置SSH 2
四、安装配置hadoop 4
4.1下载及安装 4
4.2配置 4
4.2.1配置$HADOOP_HOME/conf/hadoop-env.sh 4
4.2.2配置$HADOOP_HOME/conf/core-site.xml 4
4.2.3配置$HADOOP_HOME/conf/mapred-site.xml 5
4.2.4格式化namenode 5
4.3启动及验证 5
五、跑第一个wordcount例子 7
4.1准备工作 7
4.2运行例子 8
4.3看结果 11
4.4在eclipse中调试/运行 12
4.5分析代码 15
六、改进的wordcount例子 17
参考 23
FAQ 23
1、xxx is not in the sudoers file解决方法 23
2、/etc/sudoers is mode 0640, should be 0440怎么回事？ 24
3、如何增加ubuntu的SWAP空间？ 24
4、bin/hadoop dfs到底有哪些命令？ 25

原文和文档我放在了javaeye，这里给个链接吧：
http://itstarting.javaeye.com/blog/520985

IT进行时 2009-12-15 22:46 发表评论
]]>Hadoop学习笔记：在Windows下搭建运行环境http://www.blogjava.net/itstarting/archive/2009/12/15/306074.htmlIT进行时IT进行时Tue, 15 Dec 2009 14:43:00 GMThttp://www.blogjava.net/itstarting/archive/2009/12/15/306074.htmlhttp://www.blogjava.net/itstarting/comments/306074.htmlhttp://www.blogjava.net/itstarting/archive/2009/12/15/306074.html#Feedback0http://www.blogjava.net/itstarting/comments/commentRss/306074.htmlhttp://www.blogjava.net/itstarting/services/trackbacks/306074.html——IT 进行时(Email & MSN:zhengxianquan AT hotmail.com)

说在前面的话： 作为一名技术人员，喜欢通过自己的实战去学习，也养成了写学习笔记的习惯。个人做企业应用更多，也涉及TB级别的非结构化数据，对于Hadoop倒是第一次接触，分布式计算总归有用武之地。但这个笔记只能说是自己的盲学，就是简单的看看。

Keywords：Hadoop; HDFS; 学习笔记

目录：
1. 准备工作 2
1.1. Supported Platforms 2
1.2. Hadoop需要的基础东西 2
1.3. 安装Cygwin注意事项 2
2. 单机上配置过程 3
2.1. 配置SSH 3
2.1.1. 配置服务 3
2.1.2. 启动Cygwin sshd服务 4
2.1.3. Setup authorization keys 5
2.2. 修订/配置/conf/core-site.xml 7
2.3. 修订/配置/conf/mapred-site.xml 9
2.4. 修订/配置\conf\masters和slaves 9
2.5. 修订/配置\conf\hadoop-env.sh 9
2.6. 其他数据节点类似，重复即可 10
3. 格式化及启动 10
3.1. 启动命令 10
3.2. 如何验证启动成功 11
4. 使用及开发 12
4.1. 常用命令行使用方法 12
4.2. 可以通过浏览器访问 15
5. FAQ 16
5.1. 为什么启动不了？ 16
5.2. 配置文件可能导致的问题 17
5.3. JobTracker一直有问题？ 19
5.4. 如何验证配置并启动成功？ 19
6. 常用命令 20
7. 参考 21

地址：http://itstarting.javaeye.com/blog/513659


IT进行时 2009-12-15 22:43 发表评论
]]>