The Status Report on CDF Data Processing

Slides:



Advertisements
Similar presentations
Lee Hoon Copyright(c) 2008 LeeHoon All rights reserved. 제7강제7강.
Advertisements

1 핵 · 입자물리 계산과학 조기현 2015 계산과학연구 워크샵. 세계 수준의 초고성능 컴퓨팅 활용 우수한 과학적 성과 R&D 파트너 수행 계산과학 분야 실험 - 이론 - 시뮬레이션 융합 연구 Beyond Discovery 행복한 사회 R&D 파트너.
판매사 사내한 해외주식펀드 비과세 적용펀드 하나 UBS China 증권자투자신탁 [ 주식 ] Q 내재가치와 성장성이 큰 중국 (H 주 ) 기업에 투자합니다. * 본 자료는 판매사 직원에 대한 정보 제공 목적으로 작성된 것으로서, 고객에게 제시되거나 제공될 수.
0 Sytem Architecture Eric Lim AKAON. 1/44 Ⅰ. 아키텍처 개요 Ⅱ. 아키텍처 물리 설계 Ⅲ. 아키텍처 구성도 ( 예 ) Ⅳ. 고려사항.
( Creative HR Solutions ) 上海力德企业 管理咨询有限公司 WE MAKE YOUR LIFE EASIER
MrDataBld 2.x 제품 소개 2007.
㈜맥스무비 영화관 발권 전산망 시스템.
Chapter 1. 운영체제의 개요 이태호.
Chapter 7 ARP and RARP.
Data Interface, Data mart Technology
Business Proposal HAIRSTUDIO & OKTOUR CO-MKT 제휴 제안
기술 표준 6대 필수 기술 요소에 대해 지정한 그룹 IT 기술 표준에 따라 DBMS는 MS SQL과 Oracle에 대해 검토 함 구분 OS DBMS WAS Web Sever 검토대상 종합의견 x86 기반 OS(64bit 권장) 성능, 안정성 및 HW의 확장성 향상으로.
소프트웨어와 운영체제.
서비스의 특성 서비스(service)의 정의 서비스(service)의 특성 서비스의 생산
Chapter 7 Networking.
Ablecom Type-7 IVR 에이블컴 기술연구소.
정보통신실습 및 특강(5)
2016 KAUL DATA SYSTEM Company Profile 가을디에스 회사소개서.
1. 설비종합효율과 6대로스 조 업 시 간 계획 부 하 시 간 휴지 정지 고장로스 가 동 시 간 준비작업로스 로스 성능
ORAS 온라인 채용대행 솔루션 제안서 (Online Recruiting Application Service)
Operating Systems Overview
EPG Rendering Service ㈜ 이 파 워 게 이 트.
DVR HD-1600M 1 제품 소개 시스템 구성도 H 채널 HD-SDI Stand Alone 타입 DVR
1. 회사소개 사업분야 Solution 부문 제조산업부문 MES(Manufacturing Execution System)
LOGO 네트워크 운용(2).
컴퓨터 과학 개론 √ 원리를 알면 IT가 맛있다 컴퓨터 과학도를 위한 첫 전공서 ehanbit.net.
Chapter 2 OSI 모델과 TCP/IP 프로토콜.
SK Telecom Platform연구원
e-Science for High Energy Physics
Socket & Plug 기반의 u-Banking Platform
Unified Communications Cisco Korea
- Make Processes Manageable -
For Security, For Stability, For Reliability
(Network Transaction Application Server)
2 운영체제 소개.
DVR HD-400H 1 제품 소개 시스템 구성도 H.264 4채널 실시간 HD-SDI Stand Alone 타입 DVR
Grid Computing 컴퓨터 공학과 김우진 박기민.
핵심서비스 무료제공을 통한 고객유치&만족의 중요성
리스크감시시스템 개발현황 및 OLM 활용 방안
홍 길 동 (洪 吉 童) 홍 길 동 (洪 吉 童) 홍 길 동 (洪 吉 童)
SYSMAC GATEWAY 간이 매뉴얼.
운영체제(Operating System)
Cyber Portal Banking System
1. 원가절감의 필요성 1) 의의 2) 원가절감 인식 무한 경쟁시대를 맞이하고 있습니다.
NTAS 소개 (Network Transaction Application Server)
홍 길 동 (洪 吉 童) 홍 길 동 (洪 吉 童) 홍 길 동 (洪 吉 童)
myfood.com 상명대 맛집 홈페이지 구축 제안서
제7강 PC정비사 1급(필기) Lee Hoon Copyright(c) 2008 LeeHoon All rights reserved.
Hijacking Bitcoin : Routing Attacks on Cryptocurrencies Maria Apostolaki Aviv Zohar Laurent Vanbever Presentor Geun Woo Lim Many parts of.
SPS2003의 서버 구성 요소 SPS2003은 서버 컴포넌트가 각 역할별로 분리되어 있다. Web Component
Internet & WWW Protocols
국가과학기술연구망(KREONET) 현황 HEP 지원
전략적 원가관리 (7) (원가절감) Wisdom21 Management Consulting
KISTI (Korea Institute of Science and Technology)
가속기 충돌 현상론 및 데이터 시뮬레이션 융합 국제공동연구
e-Science Applications Research and Development Team KISTI
제 2장 프로세스 관리와 CPU 스케줄링 2.1 프로세스의 개념 2.2 CPU 스케줄링의 목적과 유형
핵·입자물리연구회 조기현.
▣가동 Loss 및 Line 분석작업 1.”주체작업에 부수적으로 매 사이클 마다 발생되지만 일의 목적에는 간접적으로 기여하는 요소” 위의 설명이 가르키는 작업의 분류에 속하는 것은? 가.주체작업 나.준비작업 다.부수작업 라.요소작업 2.다음은 여유에 대한 설명이다.
The current status of CDF Grid
기술 진화와 진보.
KISTI Supercomputing Center 명훈주
평생 저축해도 강남 아파트 못산다 학 과 : 회계학과 1학년 B반 과 목 : 회계학원론 담당교수: 박성환 교수님
아시아 4룡의 경제발전 김태환 박기용 공새미 이수정.
경영학의 상황학파에 대해서… 경제학과 3학년 최준용 회계학과 4학년 진현빈
내 마음 다해 내마음다해 주이름찬양해- 주사랑 깊어 말로다못하 네 주앞서 1-4.
מעבד פסולת מזון ECO-SMART Co. Ltd. טל: יורם וינר
The 3rd International HEP DataGrid Workshop KOREN E2E Performance:
7/25/2019 경계선 방어 기술 공급원 May
BI-Bank 사업계획서.
Presentation transcript:

The Status Report on CDF Data Processing KPS, April 23-24, 2009 Daejeon Convention Center, Daejeon, Korea The Status Report on CDF Data Processing 정민호, 조기현*, 김현우 (KISTI 고에너지물리연구팀), 김동희, 양유철, 서준석, 공대정, 김지은, 장성현, 칸 아딜 (경북대 물리 및 에너지학부), 김수봉, 이재승, 이영장, 문창성, 정지은 (서울대, 물리학부), 유인태, 임규빈 (성균관대 물리학과), 주경광 (전남대 물리학과), 김현수 (전북대 물리학과) 오영도 (포항공대 물리학과), 전은주 (세종대 물리학과) * Corresponding author December 1, 2018

2018년 12월 1일

Ref. Dr. Donatella Lucchesi

CDF Grid (2009.4] Grid CAF Head node Work node Grid Middleware Method Data Handling NAM CAF Fermilab (USA) USSD (USA), etc. OSG Condor over Globus CDF Grid Fermilab (USA) Fermilab (USA), etc. Condor over Globs Lcg CAF CNAF (Italia) IN2P3 (France), etc. gLite WMS (Workload Management System) CNAF CAF (Iltaia) gLIte GlideinWMS Partially SAM+SRM Pac CAF AS (Taiwan) KISTI (Korea) Etc. OSG, gLite 4 4

Grid Site (KR-KISTI-HEP) Grid Farm (Pacific CAF) Pac CAF at KISTI Service Component Legend Repository Grid CAF Boundary Grid Site Boundary Grid Pool Job Data Transportation Control Data Grid Site (KR-KISTI-HEP) Worker Node (hep015) … (hep004) Work Node (hep003) dCache Pool (se-hep) Grid Farm (Pacific CAF) VOMS Authentication Glideins dCache User Interface CafGui CafSubmit CafMon CAF Head Node Submitter Monitor Collector Negotiator Schedd Globus .... Job Submission Web monitoring Job Output Condor CE (hep001) 25 core processors 30 TB 5 5

Monitoring of Pac CAF 6 6

Networks Mathis Equation BW: Upper bound of TCP throughput KEK GLORIAD-KR/10Gbps Hong Kong CSTNet-APAN-JP/1Gbps Fermilab Seattle ESnet/10Gbps CERN/ IN2P3 GLORIAD/1Gbps Chicago StarLight/10Gbps KISTI Mathis Equation KISTI is connected with KEK by 1 Gbps via Hongkong. KISTI is connected with Fermilab via 10 Gbps. KISTI is connected is CERN via 1 Gbps via Chicago. The bottle neck is inside of USA between Seattle and Chicago. Mathis Equation shows Bandwidth depends on Round Trip time and Packet Loss. Therefore, we study the packet loss and Round trip time. BW: Upper bound of TCP throughput MSS: Max Segment Size RTT: Round Trip Time P: Packet Loss

KISTI-Fermilab Jan. 6~20, 2009 (2 weeks) Packet loss is zero. RTT is stable. We avoid Chicago area congestions by direct network from Seattle. 2018년 12월 1일

CDF Resource Usage - Total Ref. Dr. Donatella Lucchesi 2018년 12월 1일

Offsite Usage – USA & Asia => CGCC (CDF Grid Computing Center) Donatella clearly mentioned about KISTI in International Finance Committee Meeting on November ’08.

CDF Grid Computing Center @ KISTI PacCAF vs. CGCC Pacific CAF @ KISTI CGCC @ KISTI Head node paccaf.phys.sinica.edu.tw New Head node VOMS server voms.cnaf.infn.it same Work nodes 25 core processes (gLite) 500 core processes (gLite, OSG) Storage 30 T byte 250 T byte Data Handling N/A Available 11

대용량 실험데이터 센터 (2009.4] - CDF, Belle, ALICE, DMRC, … CPU Storage 현재: 240 core process (run) 추가: 300 core process (5월말) Storage 현재: 50 TB (run) 추가: 200 TB (6월말) 계획: 그리드 연동 (12월말) Experiments CDF: 100 core + α (plan) ⇒ CGCC ALICE: 128 core (run) => ALICE Tier2 Belle: 64 core + batch (run) DMRC: 32 core + batch (run)

Summary Data processing for CDF has been developed from CAF (Central Analysis Farm) to Grid. KISTI is one of leading institutes of CDF data processing.

Thank you. (http://hep.kisti.re.kr)