Hee'World

Running Hive Hive uses hadoop, so: you must have hadoop in your path OR export HADOOP_HOME= In addition, you must create /tmp and /user/hive/warehouse (aka hive.metastore.warehouse.dir) and set them chmod g+w in HDFS before you can create a table in Hive. Commands to perform this setup ? $ $HADOOP_HOME/bin/hadoop fs -mkdir /tmp $ $HADOOP_HOME/bin/hadoop fs -mkdir /user/hive/warehouse $ $HADOOP_H..

MySQL을 메타스토어로 구성하였으며, MySQL이 미리 설치가 되어 있어야 한다. 하이브 서비스의 설정을 세부적으로 수정하고 싶다면 conf디렉터리에 hive-site.xml 파일을 정의해야 한다. 하이브는 기본적으로 conf 디렉터리에 있는 hive-default.xml 파일을 이용해 환경설정을 진행한다. hive-site.xml에 hive-default.xml과 같은 속성이 있다면 hive-default.xml에 있는 속성을 무시하고, hive-site.xml에 정의도니 속성을 사용한다. 하이브의 중요 환경 설정 속성 속성 내용 hive.metastore.warehouse.dir 데이터웨어 하우스를 저장하는 기본 디렉터리 입니다. 기본값은 /user/hive/warehouse 이다 hive.exec..

-- 출처 wikibooks"시작하세요 하둡프로그래밍"-- HIVE는 HIVE QL 이라는 SQL문과 유사한 언어를 사용한다. 하지만 기존의 SQL문과는 차이가 있다. 1. 하이브에서 사용하는 데이터가 HDFS에 저장되는데, HDFS가 한번 저장한 파일은 수정할 수 없기 때문에 UPDATE와 DELETE를 사용할 수 없다. 같은 이유로 INSERT도 비어 있는 테이블에 입력을 하거나, 이미 입력된 데이터를 덮어 쓰는 경우에만 가능하다. 그래서 HIVESQL은 "INSERT OVERWRITE"라는 키워드를 사용하게 된다. 2. SQL은 어떠한 절에서도 서브쿼리를 사용할 수 있지만, 하이브QL은 FROM 절에서만 서브쿼리를 사용할 수 있다. 3. SQL의 뷰는 업데이트할 수 있고, 구체화된 뷰 또는 비구체화..

먼저 HIVE란? Hive 하둡 기반의 데이터웨어하우징용 솔루션입니다. 페이스북에서 개발됐으며, 오픈 소스로 공개되며 주목을 받은 기술입니다. SQL과 매우 유사한 HiveQL이라는 쿼리를 제공합니다. 그래서 자바를 모르는 데이터 분석가들도 쉽게 하둡 데이터를 분석할 수 있게 도와줍니다. HiveQL은 내부적으로 MapReduce 잡으로 변환되어 실행됩니다. (공식 사이트: http://hive.apache.org) 이제 HIVE를 설치해보겠습니다. 먼저 HIVE를 다운로드 합니다. 홈페이지에서 다운 받으셔도 되고 wget 명령어를 이용하여 받으셔도 됩니다. wget http://apache.mirror.cdnetworks.com/hive/hive-0.11.0.tar.gz 다운을 받으셨으면 다운 받은 압..