BIG Data 컴퓨터응용과학부 20051257 박진완
목 차 Data Base Big Data RDBMS 와 Big Data 플렛폼 비교 개발환경 Word count 후기
DataBase?
Data 의 증가
Big Data
RDBMS VS HDFS
환경 비교
개발환경 개발환경 Linux version Ubuntu 12.04 LTS server Java version Jdk7 Computer spec HDD 160GB RAM 4GB CPU Intel Core2 Duo 4대 NameNode 1대 HDFS의 마스터 역할을 수행 SecondaryNameNode 네임노드의 에디트 로그를 주기적으로 축약시켜주는 역할을 수행 DataNode 2대 실행될 때마다 노드에 추가되는 스토리지를 관리한다
Java 및 hadoop 설치 Hadoop 다운로드 http://ftp.daum.net/apache/hadoop/common 접속 후 원하는 version 다운 JAVA 설치 Linux terminal 접속 Sudo apt-add-repository ppa:webupd8team/java Sudo apt-get update Sudo apt-get install oracle-jdk7-installer 자바 위치 usr/lib/jvm 에 위치함
Hadoop 설정
Hadoop 환경설정
Hadoop 예제 실행 120mb 영문file , 240mb 영문 file
Word Count flow chart
WordCount 예제
WordCount 예제
Word Count 결과
졸업프로젝트 후기