샘플2 이클립스를 이용한 하둡 hadoop hdfs 파일전송 (샘플 소스) 이클립스를 이용하여 하둡 hdfs 파일전송을 하는 방법을 알아보자 먼저 하둡 hdfs 파일전송 프로젝트를 작성해야한다. 1. 이클립스 프로젝트 생성 2. Dependency jar 파일 추가 (하단 이미지 참조) 3. 소스 작성 샘플소스 >> import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FSDataInputStream; import org.apache.hadoop.fs.FSDataOutputStream; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.Path; public class HDFSCli.. 2013. 2. 25. Hive 사용법 및 쿼리 샘플코드 Hive 사용법 및 쿼리 샘플코드 hive 에서 사용하는 query 정리 지금까지 주로사용하는 것 위주로 정리했으며 지속적으로 업데이트 될 수 있음. hive 환경구축 안되있는 경우는~ Hive (하이브) 설치 및 환경구축하기 Hive 실행 $ $HIVE_HOME/bin/hive Hive 종료 hive> exit; 테이블 확인 show tables; bigmark.csv 파일의 데이터를 저장하는 테이블 "bigmark"을 정의하기 테이블 생성 hive> CREATE TABLE bigmark (id int, mark STRING) > ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' > LINES TERMINATED BY '\n'; 테이블에 파일삽입 hive> LOAD DA.. 2013. 1. 28. 이전 1 다음