본문 바로가기

inbrein

HDInsight hadoop streaming C# map reduce test C#으로 맵 리듀스 코딩해서 HDInsight hadoop streaming 사용하는 방법 입니다HDInsight hadoop streaming C# map reduce test 관련된 다른 글hadoop streaming 소개Hadoop Streaming 구조HDInsight hadoop streaming C# map reduce test HDInsight hadoop-streaming-1.1.0-SNAPSHOT.jar을 이용 hadoop dfs -rmr a/hadoop dfs -mkdir a/hadoop dfs -put map.exe a/hadoop dfs -put reduce.exe a/hadoop dfs -put pic.txt a/필요한 파일을 하둡으로 put hadoop jar hadoop-st.. 더보기
hadoop streaming 소개 hadoop streaming 소개 영문 원문 주소http://hadoop.apache.org/docs/stable/streaming.html 위 영문 문서 위쪽 기본 내용을 번역 했습니다 관련된 다른 글hadoop streaming 소개Hadoop Streaming 구조HDInsight hadoop streaming C# map reduce test Hadoop streaming 하둡 스트리밍은 Hadoop배포와 함께 제공되는 유틸리티입니다이 유틸리티는 당신이 스크립트 또는 실행 파일로 만든 mapper 및 reduce로 Map/Reduce job을 작성하고 실행할 수 있습니다 $HADOOP_HOME/bin/hadoop jar $HADOOP_HOME/hadoop-streaming.jar -input m.. 더보기
HDInsight hive ODBC 0.4.0이전 버전과 이후 버전 비교 HDInsight hive ODBC 0.4.0이전 버전과 이후 버전 비교입니다 정확하게 언제 바뀐 ODBC인지는 모르겠습니다다만 2013년 3월 25일 HDInsight가 0.4.0.0으로 업데이트 되면서 hiveODBC를 새로 받아 봤는데 변경된 내용들이 있어서 정리합니다 아래 설명은 제가 확인한 3월 25일 기준으로 눴습니다 그림으로 보시면 이렇습니다예전 Hive ODBC버전에서는 0.4.0.0에 접근이 안됩니다3월 25일 버전에서 HDInsight 0.3.0버전에도 접근 안될거라는 예상을 해 봅니다 추가로 엑셀 2013에 hive버튼이 보이지 않습니다 아래는 그와 관련해서 해결해보려고 시도한 내용을 정리 했습니다 ODBC접근 테스트는 엑셀에서 해봤습니다 EXCEL 옵셕 -> 추가기능 -> 관리 ->.. 더보기