어절사전 및 형태소사전과 휴리스틱 방법을 이용한 Hybrid 한국어 띄어쓰기 모듈

띄어쓰기는 어절과 어절을 구분하는 것을 의미하며, 한국어 문장에서 의미 전달의 명확성과 가독성을 높이는 중요한 요소이다. 이는 형태소 분석 이전에 수행되는 전처리 과정으로, 띄어쓰기 오류는 자연어 처리 시스템 전반의 오류를 유발할 수 있어 그 중요성이 크다.

연구 결과, 본 논문에서 제안하는 띄어쓰기 모듈은 어절 사전과 형태소 사전 기반의 통계적 방법론과 휴리스틱을 이용한 규칙 기반 방식의 하이브리드 접근법을 사용한다. 특히, 한 음절로 이루어진 어절에 대한 추가적인 휴리스틱을 적용하여 성능을 개선하는 데 주력한다.

학술대회자료

저널정보: Korean Institute of Information Scientists and Engineers 한국정보과학회 학술발표논문집 한국정보과학회 2018 한국소프트웨어종합학술대회 논문집

오류 신고하기

피인용 0

검색

초록·키워드

본 논문에서는 말뭉치에서 추출한 어절과 형태소 정보를 이용하여 각각 어절사전과 형태소사전을 만들어서 띄어쓰기가 전혀 되어 있지 않은 문자열을 입력 받아서 사전정보를 이용하여 자동으로 띄어쓰기를 한 후에 휴리스틱을 ... 전체 초록 보기

구분	그룹	데이터 항목
AI 학습용 데이터	기본 메타	발행기관명, 간행물명, 권호명, 권(vol), 호(issue), 통권, 발행연도, 발행월, 논문명, 저자명, 시작페이지, 종료페이지, 전체페이지, 상세페이지URL
상세 메타 데이터	발행기관 메타	발행기관 이명, 영문명, 창립연도, 홈페이지URL, 발행기관 소개
	간행물 메타	부제목, 간행물 유형, ISSN, ISBN, 최초발행연도, 폐간연도, 간행빈도, 발행주기, 등재사항, 이용수, 피인용수, 권호수, 논문수, 표지이미지
	논문 메타	작성 언어, 부제목, 대등제목, 목차, 키워드, 초록, 이미지, 참고문헌, 이용수, 피인용수, 논문활용도, DBpia통합주제분류, KDC분류, DDC분류, 한국연구재단분류, UCI, DOI
	저자 메타	소속기관, 소속부서, 직급, 연구분야, 연구키워드, 이용수, 피인용수, 저자 논문활용도

구분	그룹	데이터 항목
※ 결합형/맞춤형 메타 데이터는 신청 내용에 따라 다양하게 제공 가능
이용순위 정보	주제분야별 많이 이용된 논문	“인문학”에서 많이 이용된 논문 TOP100
	이용기관별 많이 이용된 논문	“중고등학교”에서 많이 이용된 논문 TOP100
	세부기관별 많이 이용된 논문	“서울대학교”에서 많이 이용된 논문 TOP100
	키워드별 많이 이용된 논문	“Chat GPT”에서 많이 이용된 논문 TOP100
키워드 정보	많이 이용된 키워드	특정기간/분야/저널 내 많이 이용된 키워드
	많이 발행된 키워드	특정기간/분야/저널 내 많이 발행된 키워드
	많이 검색된 키워드	특정기간/분야/저널 내 많이 검색된 키워드
	연구 트렌드 키워드	특정 키워드 연관 연구동향 분석 데이터 키워드