본문 바로가기

인브레인

HDInsight hadoop streaming C# map reduce test C#으로 맵 리듀스 코딩해서 HDInsight hadoop streaming 사용하는 방법 입니다HDInsight hadoop streaming C# map reduce test 관련된 다른 글hadoop streaming 소개Hadoop Streaming 구조HDInsight hadoop streaming C# map reduce test HDInsight hadoop-streaming-1.1.0-SNAPSHOT.jar을 이용 hadoop dfs -rmr a/hadoop dfs -mkdir a/hadoop dfs -put map.exe a/hadoop dfs -put reduce.exe a/hadoop dfs -put pic.txt a/필요한 파일을 하둡으로 put hadoop jar hadoop-st.. 더보기
hadoop streaming 소개 hadoop streaming 소개 영문 원문 주소http://hadoop.apache.org/docs/stable/streaming.html 위 영문 문서 위쪽 기본 내용을 번역 했습니다 관련된 다른 글hadoop streaming 소개Hadoop Streaming 구조HDInsight hadoop streaming C# map reduce test Hadoop streaming 하둡 스트리밍은 Hadoop배포와 함께 제공되는 유틸리티입니다이 유틸리티는 당신이 스크립트 또는 실행 파일로 만든 mapper 및 reduce로 Map/Reduce job을 작성하고 실행할 수 있습니다 $HADOOP_HOME/bin/hadoop jar $HADOOP_HOME/hadoop-streaming.jar -input m.. 더보기
HDInsight hive ODBC 0.4.0이전 버전과 이후 버전 비교 HDInsight hive ODBC 0.4.0이전 버전과 이후 버전 비교입니다 정확하게 언제 바뀐 ODBC인지는 모르겠습니다다만 2013년 3월 25일 HDInsight가 0.4.0.0으로 업데이트 되면서 hiveODBC를 새로 받아 봤는데 변경된 내용들이 있어서 정리합니다 아래 설명은 제가 확인한 3월 25일 기준으로 눴습니다 그림으로 보시면 이렇습니다예전 Hive ODBC버전에서는 0.4.0.0에 접근이 안됩니다3월 25일 버전에서 HDInsight 0.3.0버전에도 접근 안될거라는 예상을 해 봅니다 추가로 엑셀 2013에 hive버튼이 보이지 않습니다 아래는 그와 관련해서 해결해보려고 시도한 내용을 정리 했습니다 ODBC접근 테스트는 엑셀에서 해봤습니다 EXCEL 옵셕 -> 추가기능 -> 관리 ->.. 더보기
인브레인 힐링 캠프 (미라클 워터월드 오토캠핑장) 인브레인 힐링 캠프 후기 입니다 현충일이 휴일이라는 점을 이용해 현충일 전날 퇴근을 캠핑장으로 했습니다. 이번 힐링 캠프에서는 수원에서 일하시는 직원 모두 모여 업무의 스트레스를 풀고 친목 도모를 위한 시간을 가졌습니다. 먼저 선발대가 마트에서 장을 보면서 필요한 물품을 구입했습니다 물품을 꼼꼼히 챙기면서 시간을 최대한 아끼기 위해 각자 맡은 물품을 각각 챙겨오는 방식으로 최대한 효율적인 장을 봤습니다 12인 분의 장을 처음본 저는 식재료가 쌓이는것을 보면서 많은 양에 입을 다물수가 없었습니다. 매장 직원 분들도 이렇게 많이 사는것을 보면서 모임 크게 하시나봐요? 라고 놀란 질문도 해주셨습니다 이날 저희가 간곳은 미라클워터월드 오토캠핑장 입니다http://miraclewaterworld.com/twate.. 더보기