말뭉치 기반 형태소 및 의미 태깅 시스템 발표자 : 신준철

Slides:



Advertisements
Similar presentations
컴퓨터공학과. 이세돌 vs 인공지능 알파고 컴퓨터공학과 인생은 실험과 도전의 연속 인생은 실험과 도전의 연속.
Advertisements

품사. 의미 기능형태 기능에 따라 분류해 봅니다 조사와 결합하는데 ? 형태가 변하지 않아 ^^ 체언.
Ⅱ 세포의 주기와 생명의 연속성 Ⅱ 세포의 주기와 생명의 연속성 - 1. 세포주기와 세포분열.
1 넷스팟 MAC ID 설정 방법 ( 서울캠퍼스 기준 ) 각종 스마트폰의 WiFi 를 이용시 각종 스마트폰의 WiFi 를 이용시 MAC ID 설정을 하는 방법 입니다. 아이폰의 경우는 별도의 설정없이 바로 사용이 가능하오니, 사용이 어려울 경우, 고객센터로 문의하시면 됩니다.
아이폰 사용자를 위한 문자메시지 앱 소개 아이폰에 적합한 앱 선택 … 아이폰 메시지 앱은 앱스토어에 많이 올라와 있습니다. 이 중에서 스마트콘에 접합한 아이폰 앱을 위해 여러 가지를 테스트한 결과 간단하고 쓰기 편한 앱을 소개하려고 합니다. 이.
식생활지침 ..
형태소 분석 형태소의 정의 형태소 분석 의미가 있는 최소의 단위 (minimally meaningful unit)
컴퓨터와 인터넷.
Model : CHEVI-SPARK PAPER VERSION 1.0
말뭉치 기반 형태소 및 의미 태깅 시스템 발표자 : 신준철
2. 잎까지 운반된 물은 어떻게 될까? 학습목표: 증산작용을 설명할 수 있다..
제 7 장 함수 사용을 통해 엑셀 정복하기.
마태복음 22장 37절 말씀 뜻을 다하여 네 마음을 다하고 주 너의 하나님을 목숨을 다하고 사랑하라.
사랑 받고 살아 왔 - 는 데 - 사랑 받고 살고 있 - 는 데 - 1. 사랑 받고 2.사랑 인줄 3. 혼자인 듯
㈜디아이씨 SSLVPN 협력사 접속방법 2017년 4월.
Ⅱ. 측정(Measure) (2) Gage R&R (Crossed) – ANOVA 방법 [1] Data 입력
Hybrid INDIGO project 중간보고
KN A (Rev.1.0) BIXOLON MOBILE PRINTER
Vector Bubble 충돌 검출 게임 설계 3조 강준순, 김훈석, 복현태.
SqlParameter 클래스 선문 비트 18기 발표자 : 박성한.
7. 자극과 반응 7-2. 신경계 2. 신경계의 구성.
KHS JDBC Programming 4 KHS
4-6. 광합성 작용(1).
♠ 비타민 비타민이란 ? * 지용성 비타민 : A,D,E,K * 수용성 비타민 : B군, C
먹이사슬 제작 6-2한인희,김도윤 부족해도 잘봐주세요..
7가지 방법 PowerPoint에서 공동 작업하는 다른 사용자와 함께 편집 작업 중인 사용자 보기
자료구조: CHAP 7 트리 –review 순천향대학교 컴퓨터공학과 하 상 호.
38 놀라운 그 사랑 1 꿈 속 같 은 길 에 서 하 늘 보 화 찾- 았 - 네
체 세 포 분 열 배 수 경 중3 과학.
시스템이해 행동이해 개체군이해 생물다양성 + GIS 친환경생태계관리 곤충생태학연구실 국립 안동대학교
식물은 어떻게 자손을 남길까(1) <생각 열기> 사과, 배, 복숭아 등의 과수나무를 재배하거나
[2] 식품안전성 수업목표1. 수업목표2. 수업목표3. GMO가 만들어지는 원리를 설명할 수 있다.
생각열기 – 흰 장미꽃을 파란 장미꽃으로 만들려면 어떻게 해야 할까?
Zeeman Effect 정혜연.
Clean.
연산자 (Operator).
3D 프린팅 프로그래밍 01 – 기본 명령어 강사: 김영준 목원대학교 겸임교수.
논리회로 설계 및 실험 5주차.
신경계의 구성(2) 몸속 네트워크 신경계의 구성 중추 신경계의 구성 말초 신경계의 구성.
COMPUTER ANIMATION (Key Frame Animation)
국가 간 불평등 현상과 해결방안 본 연구물은 학교 수업을 위해 개발된 것으로 교육 이외의 목적으로 사용될 수 없습니다.
※ 인터넷 옵션 조치 방법 ※ ★ 신뢰사이트 등록 (1) ★ 우리들을 신뢰해주세요^^* 방법이 복잡해 보일지 모르지만
보고서 #7 (기한: 6/2) 2개의 스택, stk1, stk2를 이용하여 큐를 구현하라.
고등학교 생물 학습자료 이 자료는 고등학교 ‘생물’ 의 “생명의 연속성” 단원에서 세포 분열에 관한 수업을 위한 것입니다.
※ 편리한 사이버 연수원 사용을 위한 인터넷 최적화 안내 ※
텍스트 분석 기초.
2012년 4학년 1반 길라잡이 1.
식물의 광합성 식물은 어떻게 영양분을 만들까요? 김 수 기.
과목명 : 과학 1학년 2학기 소화와 순환 > 영양소 [ 1 / 12 ] 영양소에는 어떤 것들이 있을까?
III. 아름다운 분자 세계 3. 탄소 화합물 … 01. 다양한 탄소 화합물 02. 탄화수소의 다양한 구조
영양소와 검출 시약의 정색 반응을 말할 수 있다. 2. 검출 시약을 이용해 음식물 속의 영양소 를 검출할 수 있다.
디버깅 관련 옵션 실습해보기 발표 : 2008년 5월 19일 2분반 정 훈 승
나는 주의 화원에 어린 백합 꽃-이니 은혜 비를 머- 금고 고-이 자라 납니다 은혜 비를 머- 금고 고-이 자라 납니다
4장. 데이터 표현 방식의 이해. 4장. 데이터 표현 방식의 이해 4-1 컴퓨터의 데이터 표현 진법에 대한 이해 n 진수 표현 방식 : n개의 문자를 이용해서 데이터를 표현 그림 4-1.
1 영양소에는 어떤 것들이 있는가? 영양소 탄수화물 단백질.
장미의 궁금증을 풀어보자! 만든이:장유나.
Support Vector Machine
광합성에 영향을 미치는 환경 요인 - 생각열기 – 지구 온난화 해결의 열쇠가 식물에 있다고 하는 이유는 무엇인가?
225장-실로암 샘물가에 핀 298.
멀티미디어시스템 제 5 장. 멀티미디어 데이터베이스 개념 IT응용시스템공학과 김 형 진 교수.
P 양분의 전환과 이용.
8장 선택 논리 II 1. 논리연산자 1.1 논리연산자 : AND (&&) 1.2 논리연산자 : OR (||)
1. BlueSoleil 프로그램 설치 및 SETUP 사항
적용 가능 시간표 무한 생성 기계 2007/06/18 최석훈.
자연언어 처리 인지과학 입문.
오늘의 강의 제목을 입력하세요 소 속 : 인문대학 국어국문학과 이 름 : 홍길동 교수 1.
6 객체.
Ⅳ. 광합성 4. 식물도 동물처럼 호흡할까?.
이 은 Tyler 교육과정 개발 모형 이 은
생산성 증대 효율성 향상 측정 수행 능력.
Presentation transcript:

말뭉치 기반 형태소 및 의미 태깅 시스템 발표자 : 신준철 UTagger 말뭉치 기반 형태소 및 의미 태깅 시스템 발표자 : 신준철 안녕하세요 UTagger 태깅 시스템을 발표하게될 신준철입니다.

차례 아이디어 전체 시스템 시연

복잡한 한국어 형태소 시작 용언 어간 접두사 부사 선어말어미 어미 명사 접미사 감탄사 관형사 보조용언 … 조사 끝 한국어에서 형태소에 대한 개념은 상당히 복잡합니다. 때문에 최소한의 형태소 사전만을 가지고 분석기를 만들겠다면 반드시 코드가 복잡해지게 되는데요. 이를 우회할 수 있는 첫번째 방법이 기분석 사전입니다. Ex) 사람인가 사람이 + ㄴ가/EF 사람+이/VCP+ㄴ가/EF 사람/NNG+이/VCP+ㄴ가/EF

기분석 사전 Full Word Morpheme Dictionary(FWD) 전체 어절의 형태소 분석 결과 저장 입력 어절의 94% 처리 나머지 6%는 처리 불가

부분 어절 기분석 사전 Partial Word Morpheme Dictionary(PWD) 입력 : 사람인가 분리 검색 : 사람 검색 : 인가 사람+은 명물+이+ㄴ가 사람+이+ㄴ가

PWD 복합명사 고급한자인가 고급한 자인가 고급하+ㄴ+자+이+ㄴ가 점수 계산 -> 점수가 낮음 3개로 분리 시도

PWD 설계의 어려운 점 입력 : 달린다면서 … 달리+ㄴ다면서 린 = 리+ㄴ 음절 분리 =형태소의 분리? PWD 구축 방법 린은 2개의 형태소와 연결됩니다. PWD 구축 방법 알고리즘 설계 PWD 구조 결정

PWD 교차 검색 입력 : 달린다면서 분리 검색 : 달린* 검색 : *린다면서 달리+ㄴ다 걸리+ㄴ다면서 달리+ㄴ다면서 교차 검색 시에는 별표를 줘서 검색합니다. 별표에 의미는 린 음절이 2개의 형태소와 연결된다는 것입니다. 달리+ㄴ다면서

말뭉치로 PWD 구축 사 람 인 가 사람 이 ㄴ가 멀리가 멀리 가 아 표층형 원형 사람인가 사람+이+ㄴ가 사람인* 사람+이 *인가 ㄴ가 사 람 인 가 사람 이 ㄴ가 표층형 원형 멀리가 멀리+가+아 멀리가* 멀리+가 멀리 가 가+아 *가 아 멀리가 빨간 줄 긋는 부분이 비교적 힘든 부분. 표층형과 원형의 음절단위 연결 멀리 가 아

복합명사 의미분석 사과인사차 사과절차 사과예의 사과정신 사과행동 사과행동이었겠지만 예문 씨__01 3 껍질 1 해__01 1 나무__01 2 감__01 1 맛__01 2 덕성__99 1 교목__02 2 원산지 4 일반적 1 귤 1 시__18 2 월__02 7 생물계 1 종자식물 1 과육 4 수__02 2 밤__02 1 크림 1 균류 2 영양__05 2 겉껍질 1 아시아 2 인디애나 1 달걀 2 이남__02 1 산형 2 붉은색 2 사과__05 20 곡식 1 농약 1 질__08 1 우리나라 1 저장력 1 생활 1 선태식물 1 현상__04 1 지방__05 1 타원형 2 허천 1 향기__01 3 피해__01 1 대개__03 3 갈래 1 셀룰로오스 1 가지__01 2 사과나무 3 톱니 2 원료__02 1 단맛 3 품종 11 분홍색 1 밖 1 사이__01 1 병__04 1 속__01 4 해__11 1 신경__04 1 비타민 2 좌우__01 1 노란빛 1 꽃차례 2 열매__01 10 생식__03 1 동물 1 생장__01 1 상순__01 2 제철__01 1 과즙 1 주__05 1 광합성 1 능금나무 2 서부__01 2 조류__03 1 낙과__01 1 증식 1 잎__01 4 조직 1 진홍색 1 끝__01 2 후__08 3 잎겨드랑이 2 씨방 3 바나나 1 동남__01 2 배__08 1 물체 1 평양 1 포도__06 1 배__03 1 세균 2 일생__01 1 하나 11 개량종 2 품질__03 2 엽록소 1 식물__02 7 감각__02 1 홍옥__01 2 살__01 1 동안__01 1 세포막 1 빛 2 신맛 7 알__01 1 조생종 1 체제__02 1 낙엽 2 가운데 1 북아메리카 1 물__01 2 사람 1 과실__01 1 하순__01 1 미생물 1 기관__10 1 이동력 1 고깔 1 개량__01 2 홀씨주머니 1 것__01 3 금강__99 1 수분__01 1 자주색 1 병충해 1 빛깔 1 향__03 1 벌레__01 3 세포벽 1 생명 1 양치식물 1 국광__02 2 꽃__01 3 장미과__02 3 운동__02 1 유럽__02 2 모양__02 3 미국__03 1 잘못 3 내용__02 1 사람 2 태도__03 1 일__01 6 자신__01 1 기준__03 1 상상__07 1 사물__10 2 과정__03 1 것__01 1 용서__01 2 자극__01 1 대궐__02 1 뜻 1 가시나무 1 개념 1 죄__03 3 판단 1 기억__02 1 자기__04 1 작용__01 1 황궁 1 까닭 1 용어__02 1 판정 1 일련__01 1 말__01 2 지각__04 1 포괄적 1 논리 1 등__01 1 정신__12 1 등__05 1 머리__01 1 사과__08 3 추리__04 1 행동 1 예문 사과인사차 사과절차 사과예의 사과정신 사과행동 사과행동이었겠지만 사과바나나 사과음식 사과요리 사과파이 사과과즙 사과과자

전체 시스템 입력 세종 말뭉치 입력 학습 데이터 학습 FWD 검색 PWD 검색-조합 사용자 학습 학습 데이터 HMM 태깅 실시간 사용자 데이터 출력

옵션 기능들

성능 정확률 96.27% 설정 초당 처리 어절 수 1어절 8bytes 분석 40,000 320KB 분석+속성명사 9,000 분석+태깅 15,000 120KB 분석+속성명사+태깅 6,600 52KB

시연 : 기본 기능 http://nlplab.ulsan.ac.kr UTaggerWR.exe 입력 예문 고마웠겠지만 수영했습니다. 멀리가버린 나는아파서. 배를 먹고 배를 타서 배가 아팠다. 예문 사과인사차 사과절차 사과예의 사과정신 사과행동 사과행동이었겠지만 사과바나나 사과음식 사과요리 사과파이 사과과즙 사과과자

시연 : 사용자 사전 간단하면서 강력하다. 예문 미등록어 수영했을런가 학습 : 사랑했을런가 테스트 : ~~했을런가 갤럭시탭 사랑하/VV+었/EP+을런가/EF 테스트 : ~~했을런가 미등록어 갤럭시탭 아이패드 뮤비