본문 바로가기

Hive

윈도우 하둡 하이브 외부 테이블 생성 에이브로 스키마 설정, Azure HDInsight Hive Create external table avro file read 윈도우 하둡 하이브 외부 테이블 생성 에이브로 스키마 설정, Azure HDInsight Hive Create external table avro file read HDInsight환경 hive에서 avro파일을 읽을수 있도록하는 create table 쿼리 입니다테스트하는 동안 발생한 에러들도 포함해서 적습니다에러로 찾아오시는 분들에게 도움이 되었으면 합니다 Azure HDInsight를 공부하면서 본 링크들을 정리했습니다http://paranwater.tistory.com/451 참고한 사이트apache hive에서 안내하는 문서 : https://cwiki.apache.org/confluence/display/Hive/AvroSerDeCreate 쿼리가 있는 [사이트 1] : http://www.m.. 더보기
hiveserver2 client 내용 정리 beeline hiveserver2 client 내용 정리 beeline HDInsight를 설치하면 서비스에 hiveserver2가 실행되고 있는데 이게 어떤건지 모르고 있다가 이번 Hortonworks 하둡 설치 메뉴얼을 보고 설치하는 중에 확인할 수 있었습니다 Hortonworks 하둡 설치 메뉴얼http://docs.hortonworks.com/HDPDocuments/HDP1/HDP-1.2.3.1/bk_installing_manually_book/content/rpm-chap1.html 아파치 hive 메뉴얼중 Hiveserver2https://cwiki.apache.org/confluence/display/Hive/HiveServer2+Clients hiveserver2에대한 내용을 정리합니다위 링크 페이지 .. 더보기
윈도우 하둡 HDInsight 0.4.0 클러스터 구성 - window hadoop HDInsight cluster setting 윈도우 하둡 HDInsight 0.4.0 클러스터 구성 - window hadoop HDInsight cluster setting HDInsight 포럼에 있는 글을 참고 하여 클러스터를 구성했습니다 http://social.msdn.microsoft.com/Forums/en-US/hdinsight/thread/885efc22-fb67-4df8-8648-4ff38098dac6 HDInsight Preview server download http://www.microsoft.com/web/gallery/install.aspx?appid=HDINSIGHT-PREVIEW 구성 환경 - VirtualBox, Window Server 2012, 메모리 3G, 호스트 전용 네트워크 - master 1개, slave.. 더보기
HDInsight hive ODBC 0.4.0이전 버전과 이후 버전 비교 HDInsight hive ODBC 0.4.0이전 버전과 이후 버전 비교입니다 정확하게 언제 바뀐 ODBC인지는 모르겠습니다다만 2013년 3월 25일 HDInsight가 0.4.0.0으로 업데이트 되면서 hiveODBC를 새로 받아 봤는데 변경된 내용들이 있어서 정리합니다 아래 설명은 제가 확인한 3월 25일 기준으로 눴습니다 그림으로 보시면 이렇습니다예전 Hive ODBC버전에서는 0.4.0.0에 접근이 안됩니다3월 25일 버전에서 HDInsight 0.3.0버전에도 접근 안될거라는 예상을 해 봅니다 추가로 엑셀 2013에 hive버튼이 보이지 않습니다 아래는 그와 관련해서 해결해보려고 시도한 내용을 정리 했습니다 ODBC접근 테스트는 엑셀에서 해봤습니다 EXCEL 옵셕 -> 추가기능 -> 관리 ->.. 더보기