‘Submission Deadline’ 데이터 수집을 위한 웹 크롤링 프로그램 공모전

Presentation on theme: "‘Submission Deadline’ 데이터 수집을 위한 웹 크롤링 프로그램 공모전"— Presentation transcript:

1 ‘Submission Deadline’ 데이터 수집을 위한 웹 크롤링 프로그램 공모전
Conference.city ‘Submission Deadline’ 데이터 수집을 위한 웹 크롤링 프로그램 공모전 by GonCamp

2 소개 ‘Conference.city’는 전 세계의 conference를 도시 별로 분류해 정보를 제공하는 웹 서비스입니다.
by GonCamp

3 소개 도시를 선택하여 원하는 conference를 클릭하면 해당되는 정보를 알 수 있습니다. by GonCamp

4 공모전 상세정보 ‘Conference.city’에서는 아래의 ‘Submission Deadline’에 대한 정보를 효율적으로 크롤링 할 수 있 는 웹 크롤링 프로그램을 공모합니다. by GonCamp

5 공모전 상세정보 Submission Deadline이란 논문의 ‘초록 제출 마감 기한’입니다.
각 conference의 해당 사이트에 들어가면 아래와 같은 Submission Deadline 정보를 볼 수 있습니다. by GonCamp

6 공모전 상세정보 Submission Deadline은 conference 사이트의 홈에 나타나지 않기도 합니다.
아래와 같은 사이트는 ‘Abstract Submission’ 카테고리에 들어가면 정보를 확인할 수 있습니다. by GonCamp

7 공모전 상세정보 또한 ‘Submission Deadline’은 아래와 같이 ‘Abstract Submission’이나 ‘Abstract Submission Deadline’, ‘Abstract due date’, ‘Submission due date’ 등과 같이 뜻하는 바는 같지만 다양하게 쓰입니다. by GonCamp

8 공모전 상세정보 다음은 웹 크롤링 프로그램의 아이디어에 대한 예시입니다. 시작
해당 사이트의 url로 들어가 html 파일을 DB에 저장 html 태그 제거 날짜Set을 이용하여 날짜를 추출 각각의 추출된 날짜 앞, 뒤 20글자를 확인 ‘abstract’, ‘submission’ 문자열이 모두 존재하면 후보로 채택 여러 후보 중 ‘abstract’, ‘submission’ 단어와 가까운 후보를 정답으로 DB에 저장 by GonCamp

9 공모전 상세정보 참가대상: 인천대학교 학부생 신청방법: www.ideaboom.net을 통해 일괄접수
시상내역: 대상 50만원(1명) 제출양식: 소속, 성명, 연락처 기재 / 프로그램 코딩을 첨부 홈페이지: 문의: / by GonCamp

10 공모전 상세정보 평가방법 위에서 소개한 예시는 공모전 취지의 이해를 위해 만든 것으로 예시를 참고하여 아이디어를 제시할 필요는 없습니다. 제출한 프로그램은 정확성과 효율성을 바탕으로 채점합니다. 평가자가 제출자 의 프로그램을 이용하여 10분 동안 웹 크롤링을 진행하였을 때, ‘얼마나 정확한 정보를 가져왔는가’와 ‘얼마나 일을 수행했는가’를 통해 평가합니다. 공모하는 프로그램에 사용한 알고리즘을 순서도를 기반으로 자세하고 구체적으 로 제시할 시 가산점이 부여될 수 있습니다. by GonCamp

11 참고사이트 https://www.youtube.com/watch?v=L6hIf-w6izY
by GonCamp