블로그
- (대기업)빅데이터 관련 플랫폼 개발 인력 01 2016.6.17 (대기업)빅데이터 관련 플랫폼 개발 인력 (1) 담당업무 - 하둡 플랫폼(HDFS/Yarn/Hive/Impala) 등 Big data 인프라(플랫폼) 설계/설치 /이슈 분석 (2) 소요스펙 - 전공 : 산업공학/통계학/컴퓨터공학 - 자격요건 ※ 하둡 플랫폼(HDFS/Yarn/Hive/Impala)구축, 운영 경력 ※ SQL on Hadoop
- Hadoop 설치 단종된 것인가;; 무튼 필자는 다음과 같은 싸이트에 책에서 기술한 버전과 같은 것이 있음을 알 수 있었다. https://archive.apache.org/dist/hadoop/core /hadoop-1.0.3/ 다운로드를 받으면 /home/계정명/다운로드 폴더에 받아지게 된다.
- [Hadoop#3] Hadoop 설치 환경 구성하기 Hadoop 설치 환경 구성하기클라우드 환경에서 Hadoop 1.2.1 버전과 2.2.0 HA 설치를 해보도록 하겠습니다. 이용하여 Hadoop 1.2.1과 2.2.0 버전을 구성해 보도록 하겠습니다. 1.2.x 설치 환경 구분 사양호스트명Name Node8 vCore, 16 GBnamenode.ucloudSecondary
- [Hadoop#4] 환경 설정 파일 [Hadoop#4] 환경 설정 파일 이번시간에는 Hadoop Cluster 환경 설정을 해보도록 하겠습니다. 설치 폴더export HADOOP_HOME=하둡 설치 폴더export HADOOP_MAPRED_HOME=$HADOOP_HOMEexport HADOOP_COMMON_HOME=$HADOOP_HOMEexport
- Hadoop 설치 hadoop 설치 하둡다운로드wget http://archive.apache.org/dist/hadoop/core/hadoop-1.0.3/hadoop-1.0.3.tar.gz 자바 설치 설치확인 bin/hadoop jar hadoop-example~.jar wordcount README.txt ~/wordcount-output 의사 분산 모드 설치conf/hadoop-env.sh