본문 바로가기
Programming/Hadoop

HDFS간단 예제.

by 기적 2011. 8. 10.

하둡 분산파일 시스템에서 기본적인 HDFS에 잇는 파일을 출력하는 코딩을 해보았다.
코드 작성후에 이것저것 해줄것이 있는데
이클립스를 사용하지 않아서 인지 손이 많이 갔다.

처음으로 CLASS를 만들어줘야한다.
JAR파일을 생성. 생성하기전에 package를 만들어줘야한다.
package my.example;
폴더를 생성해야한다.

나같은 경우에는 example 폴더에 class와 my라는 폴더를 만들었다.
그리고  my/example폴더에 java파일이 들어갔고 class폴더에는 jar파일과 my/example폴더 안에 class파일이  존재한다.
 
그리고나서 실행 jar파일이 있는 위치에서
hadoop jar my.jar my.example.FileSystemDoubleCat infiles/file01
hadoop jar 파일이름 클래스의 위치를 쓰고 hdfs에 폴더와 파일 이름을 쓰면 끝.

근대 이게 문제가 아니다

원하는 map과 reduce를 쓰려면 아직도....

댓글