[Hive] 쿼리결과 파일 추출

---

◾ hive -e 명령어 사용하여 파일 저장하는 방법

- beeline으로 select 결과를 출력할 경우 컬럼명과 테이블 형태도 같이 나오기 때문에,

outputformat=tsv2 옵션으로 제거할 수 있습니다.

hive --outputformat=tsv2 -e "select * from db.tb" > /local_path/test.dat

 

◾ delimiter 변경하여 파일 저장하는 방법 (hive to file)

- 아래내용에서 저장할 파일의 디렉토리 위치와 원하는 구분자, 쿼리 설정 후 hql 파일 저장

INSERT OVERWRITE LOCAL DIRECTORY './directory_name'
ROW FORMAT DELIMITED 
FIELDS TERMINATED BY '\t'
STORED AS TEXTFILE
SELECT * FROM table WHERE id > 100;

 

- 저장한 파일 실행

hive -f test.hql