文档介绍:HDFS开发步骤
开发环境Eclipse。首先建立以一个Java Project。(举例名字为copyFile)
向Java Project中添加class文件(举例名字为copyFile),编辑代码。
右键工程选择build path,在弹出窗口中在Libraries一栏点击Add External JAR…添加hadoop-。
右键工程,选择build project,这时会生成一个相应的class文件。
右键工程,选择Export,弹出窗口选择java下面的Jar file。在弹出窗口中作如下图选择,并给JAR file命名。
在上一步生成的jar文件即可部署到hadoop上了,可以将jar文件拷贝到一个方便的位置。我是这么做的:在/home/nslab/HadoopInstall/hadoop 文件夹下创建文件夹myproject,然后将jar文件拷贝到这个目录下。
然后就可以执行jar文件了。举例代码如下;
import ;
import ;
import .*;
.;
..*;
public class copyFile {
static void usage ()
{
("Usage : copyFile <inputfile> <output file>");
(1);
}
static void printAndExit(String str)
{
(str);
(1);
}
public static void main (String[] argv) throws IOException
{
long times=0;
long start,end;
Configuration conf = new Configuration();
FileSystem fs = (conf);
if ( != 2)
usage();
Path inFile = new Path(argv[0]);
Path outFile = new Path(argv[1]);
try
{
start =