입출력 성능 가속을 지원하는 분산 파일 시스템 SW 버전 1.0 IT R&D Global Leader 입출력 성능 가속을 지원하는 분산 파일 시스템 SW 버전 1.0 ETRI Technology Marketing Strategy 김홍연 (kimhy@etri.re.kr) 저장시스템연구팀 소프트웨어연구부문 ETRI OOO연구소(단, 본부)명
목 차 ---------------------------------------------- 1. 기술의 개요 목 차 ---------------------------------------------- 1. 기술의 개요 2. 기술이전 내용 및 범위 3. 경쟁기술과 비교 4. 기술의 사업성 - 활용분야 및 기대효과 5. 국내외 시장 동향 소프트웨어연구부문
성능 가속 지원 분산 파일 시스템 SW 기술 목표 1. 기술의 개요 활용 분야: 클라우드 컴퓨팅, 빅데이터 분석, 고성능 컴퓨팅 기술 목표 수천에서 수만 대의 보급형 서버들을 스토리지 서버로 이용 하여 - 스토리지 TCO를 최소화 시키면서도 - 높은 성능 과 - 장애에 대한 효율적인 통제 능력 을 갖는 분산 파일 시스템 SW
성능 가속 분산 파일 시스템 SW 특징 1. 기술의 개요 고성능 (High Performance) 초당 1만 메타데이터 연산 처리 (파일 생성, 삭제 등) 스토리지 서버당 1GBps 순차 입출력, 10만 IOPS 임의 입출력 처리 고확장성 (High Scalability) 스토리지 서버 증설에 따른 입출력 성능의 선형적 증가 스토리지 서버 가상화를 통한 단일 이미지 (페타급 데이터 저장) 고가용성 (High Availability) 메타데이터 클러스터링 (Active/Standby MDS) N-way 데이터 복제 (replication) 응용 워크로드 최적화 응용에 따른 하이브리드 입출력 최적화 지원 - 순차 입출력 프로토콜: Read intensive & large sequential I/O - 랜덤 입출력 프로토콜: 4KB Random I/O 워크로드 표준 POSIX compliant APIs를 통한 기존 응용 호환성 확보 지능형 자율 관리 Self-* management self-monitoring/self-tuning/self-healing one-point deployment IP transparency no kernel dependency 검정색 표기 부분은 “글로벌 파일 시스템 SW 버전 3.0”의 범위 소프트웨어연구부문
2. 기술이전 내용 및 범위 기술 이전 내용 및 범위 메타데이터 연산 성능 가속 기술 데이터 입출력 성능 가속 기술 메타데이터 저장 관리에 특화된 독자 개발 엔진을 활용하여 DBMS 기반의 기존 메타데이터 서버 대비 약 10배의 성능 향상 (초당 1만개 이상의 메타데이터 연산 지원) 데이터 입출력 성능 가속 기술 순차 입출력에 최적화된 프로토콜과 랜덤 입출력에 최적화된 입출력 프로토콜을 동시에 포함하는 하이브리드 입출력 프로토콜 기반으로 기존 데이터 서버 대비 약 5배의 성능 향상 (스토리지 서버 당 약 1GBps, 4만 IOPS 성능 지원) “글로벌 파일 시스템 SW 버전 3.0”에 대한 기술이전 선행 필요 소프트웨어연구부문
2. 기술이전 내용 및 범위 기술 개발 현황 메타데이터 연산 성능 가속 기술 시제품 단계 파일 개방 성능(ops/sec) 15,000 예상 (달성 목표) 25,000 (발표 성능, 달성 목표) 9,000 (Lustre 실측 성능) 파일 생성 성능(ops/sec) 파일 개방 성능(ops/sec) 글로벌 파일 시스템 SW 3.0 대비 약 12배 Lustre 대비 약 4.6배 성능 개선 글로벌 파일 시스템 SW 3.0 대비 약 20배 Lustre 대비 약 3.4배 성능 개선 소프트웨어연구부문
2. 기술이전 내용 및 범위 기술 개발 현황 데이터 입출력 성능 가속 기술 시제품단계 소프트웨어연구부문
SAN/NAS 스토리지 SW 솔루션 비교 우위 3. 경쟁기술과 비교 SAN/NAS 스토리지 SW 솔루션 비교 우위 저비용 PC급 서버를 스토리지 저장 서버로 활용하기에 스토리지 구축을 위한 투자 비용 최소화 스토리지 용량 확장성이 기존 스토리지 솔루션에 비해 뛰어남 스토리지 자율 관리 기술로 인해 TCO 비용 최소화 공개 SW 기반 분산 파일 시스템 솔루션 비교 우위 10억개 이상의 파일을 성능 저하 없이 저장 가능 약 10배의 메타데이터 성능 및 약 5배의 입출력 성능 제공 소프트웨어연구부문
4. 기술의 사업성 예상 응용 제품 및 서비스 클라우드 컴퓨팅, 빅데이터 분석, 고성능 컴퓨팅 등 대규모 스토리지 인프라를 필요로 하는 제품 및 서비스 글로벌 기업들과 경쟁력을 갖기 위하여 국내 중대형 인터넷 서비스 기업들의 동영상 기반 인터넷 서비스와 최적으로 통합된 저비용 대규모 스토리지 플랫폼으로 활용 IDC 센터에 대용량 자료 저장을 위한 저비용 대규모 스토리지 플랫폼으로 채택하여 저비용으로 자료 보관 공간을 일반 사용자에게 제공하는 유틸리티 컴퓨팅 비즈니스 플랫폼으로 활용 국내 중대 규모의 엔터프라이즈 스토리지 시스템으로 활용 소프트웨어연구부문
5. 국내외 시장 동향 시장 전망 세계 시장 2013년 기준으로 238억$로 추산되고, 2017년까지 약 390억$로 성장 전망, 연평균 13% (IDC, 2007. 3.) 국내 시장 국내 스토리지 SW 2007년 시장은 10.2%의 성장률을 기록하며 1,521억 원대 시장을 형성할 것으로 예상되며, 향후 5년간 연평균 9.5%의 성장률을 전망 (한국 IDC, 2007. 2) 소프트웨어연구부문
5. 국내외 시장 동향 기술 현황 국외 기술 현황 국내 기술 현황 대용량 스토리지 구축을 위한 고확장성, 고성능 스토리지 시스템 SW가 IBM, HP, EMC 등에서 제품으로 출시되었으나, 고가의 HW 장비에 대한 의존도가 크고, 구축 비용 부담이 높음 클라우드 컴퓨팅, 빅데이터 분석 등의 응용에서 Hadoop 솔루션(공개)이 활용됨 고성능 컴퓨팅 응용에서는 Lustre, Panasas, GPFS가 활용됨 국내 기술 현황 국내 스토리지 기업들 대부분이 중소규모 시장에서 스토리지 용량 확장이 제한적인 NAS 시스템용 네트워크 파일 시스템 SW 제품 개발 소프트웨어연구부문
감사합니다. www.etri.re.kr ♣ 연락처 :소프트웨어연구부문 클라우드컴퓨팅연구부 김홍연 책임 (042-860-5538, kimhy@etri.re.kr) ETRI OOO연구소(단, 본부)명