블로그
- (대기업)빅데이터 관련 플랫폼 개발 인력 NO. 01 2016.6.17 (대기업)빅데이터 관련 플랫폼 개발 인력 (1) 담당업무 - 하둡 플랫폼(HDFS/Yarn/Hive/Impala) 등 Big data 인프라(플랫폼) 설계/설치/이슈 분석 (2) 소요스펙 - 전공 : 산업공학/통계학/컴퓨터공학 - 자격요건 ※ 하둡 플랫폼(HDFS/Yarn/Hive/Impala)구축, 운영 경력 ※ SQL on Hadoop
- 하둡 설치 요약 (아직은 만드는 중이라.. 나중에 빠른 시일내로 요약파일을 올리겠습니다.) 하둡의 구조를 이해하는 것과 이를 실전에서 스스로 구현해보는 것은 많은 차이가 있었다. 리눅스를 접해보지 않은 나로써는 명령어들이 생소했고(이제 학교에서 리눅스를 배우기는 하지만..), 서버4대를 구입하는 과정
- 8. Hadoop 설치 책에서는 하둡 설치 계정의 홈 디렉터리로 미리 옮겨 놓으라고 하는데 처음엔 이게 무슨말이었는지..;; 나중에 알고 보니 계정 홈 디렉터리 즉 /home/계정명 디렉터리를 말하는 것이다
- [Hadoop#4] 환경 설정 파일 하둡 설정은 Cluster, Daemon, Job, 개별 설정의 4 부분으로 되어 있습니다. 폴더export HADOOP_HOME=하둡 설치 폴더export HADOOP_MAPRED_HOME=$HADOOP_HOMEexport HADOOP_COMMON_HOME=$HADOOP_HOMEexport
- Hadoop 설치 hadoop 설치 하둡다운로드wget http://archive.apache.org/dist/hadoop/core/hadoop-1.0.3/hadoop-1.0.3.tar.gz 자바 설치 (ubuntu)sudo apt-get install openjdk-6-jdk 환경변수와 PATH 등록~/.bashrc 파일 하단에 등록HADOOP_HOME=하둡 설치 디렉토리PATH