上善若水
In general the OO style is to use a lot of little objects with a lot of little methods that give us a lot of plug points for overriding and variation. To do is to be -Nietzsche, To bei is to do -Kant, Do be do be do -Sinatra
posts - 146,comments - 147,trackbacks - 0
最近事情挺多的,好久不写博客了。今天在看hadoop的时候,突然心血来潮,想在windows的eclipse下跑hadoop的shell脚本,这样就方便多了,查了一个晚上,终于看似找到了,泪奔。记录&分享一下,如果有人也有这样的需求或者备以后自己看。

当然在windows下跑shell当然是要先安装cygwin了,关于这个cygwin的安装就不在这里说了,另外关于如何在cygwin配置hadoop貌似已经有人写过了,也不在这里介绍了,有兴趣的童鞋可以参考:http://blog.csdn.net/yanical/article/details/4474830

所以本文只关注如何将cygwin引入到eclipse中以运行shell脚本。
在eclipse中,通过External Tools方式来支持嵌入包括cygwin在内的其他工具,以下是这些步骤:
1. eclipse->Run->External Tools->External Tools Configuration....
2. 在配置页面中,那么可以按你的爱好随便指定,如cywin_hadoop,location是指externl tools的地址,这里就是解释shell的bash,简单一点的,可以直接指定:C:\cygwin\bin\bash.exe,这样可以执行一些简单的命令,但是如果要引用其他解释器,那就有问题了,比如执行hadoop的shell文件,就会发现dirname命令找不到的提示。所以一种解决方法是自己写一个bat脚本,把需要用到的目录都写道PATH中,比如我编写了如下的bat脚本(当然如果需要其他更多其他目录的命令,可以往PATH中添加):
@echo off
rem 上一行关闭命令回显

PATH
=C:\cygwin\bin\;%PATH%

bash 
%1

rem 开启命令回显
echo on
然后把location指向该文件。
3. Work Directory是指工作目录,可以指定你脚本所在目录,如我的hadoop脚本在scripts下,那么我就指定了:${workspace_loc:/hadoop/scripts}
4. Arguments我指定了当前的文件名:${resource_name},如果在实际运行hadoop脚本时参数可以往后再添加。

这样就配置好了,直接点击Run就可以运行了。这样感觉以后开发就方便多了。

另外,还发现了一个非常有趣的东东,一同记录分享。
为了在windows下点击shell脚本文件就可以直接运行shell脚本,有人想出了如下命令(出自:http://stackoverflow.com/questions/105075/how-can-i-associate-sh-files-with-cygwin):
assoc .sh=bashscript

ftype bashscript
=C:\cygwin\bin\bash.exe --login --'cd "$(dirname "$(cygpath -u "%1")")"; bash "$(cygpath -u "%1")"'
即设置*.sh文件的默认执行软件是bash,如果在win7下需要用管理员身份打开cmd,然后运行这两个指令。可惜我好像木有运行成功,没有仔细找原因,不过我尝试了一下命令确实可以运行:
assoc .sh=bashscript
ftype bashscript
=C:\cygwin\bin\bash.exe %1
感觉挺好玩的。。。。
posted on 2012-04-12 00:38 DLevin 阅读(5756) 评论(0)  编辑  收藏 所属分类: Hadoop

只有注册用户登录后才能发表评论。


网站导航: