하둡 Hive

• Hive는 Facebook에서 개발된 Hadoop 기반의 데이터 웨어하우스로, SQL query를 Hadoop 클러스터에서 구동되는 job으로 변경하여 HDFS에 저장된 데이터를 사용할 수 있게 해줍니다.

• Hive는 HiveQL이라는 쿼리 언어를 사용하며, 데이터를 테이블 형태로 저장하고 메타데이터는 metastore에 저장하여 관리합니다. 이를 통해 SELECT 등의 쿼리를 Hadoop job으로 변환하여 실행할 수 있습니다.

• 하이브는 HDFS와 MapReduce를 활용한 빅데이터 처리를 위한 데이터 웨어하우스로, schema on read 방식을 사용해 초기 로드 속도가 빠르고 유연한 장점이 있다.

• 다양한 SQL-on-Hadoop 대안들이 있으며, 하이브 테이블은 managed table과 external table로 구분되어 데이터 관리 및 처리에 따른 선택이 가능하다.