소개글
"1. 컴퓨터 언어학의 정의 2. 컴퓨터언어학과 언어연구"에 대한 내용입니다.
목차
1. 서론
2. 자연언어처리
2.1. 자연언어처리의 개념과 정의
2.2. 자연언어처리의 목적
2.3. 자연언어처리의 과정
2.3.1. 형태소분석 단계
2.3.2. 구문분석 단계
2.3.3. 의미분석 단계
2.3.4. 실용분석단계
2.4. 톰스키가 정의한 문법
3. 컴퓨터 언어학
3.1. 컴퓨터 언어학의 개념과 정의
3.2. 컴퓨터언어학의 역사
3.3. 기호처리와 확률처리
3.4. 컴퓨터언어학과 언어연구
3.4.1. 맞춤법 검사와 교정
3.4.2. 문법 검사와 교정
3.4.3. 음성합성과 음성인식
3.4.4. 기계번역
3.5. 언어연구와 컴퓨터, 디지털 인문학
3.6. 언어학과 컴퓨터언어학
4. 결론
5. 참고 문헌
본문내용
1. 서론
현대는 정보사회이다. 정보사회에서 컴퓨터는 우리 생활뿐만 아니라 많은 영역에서도 큰 영향을 미치고 있으면 없어서는 안될 도구가 되어있다. 자연과학, 음악, 미술, 나아가 인문학과 철학 분야에까지 컴퓨터는 기존의 접근법을 벗어나 새로운 접근법을 제시하며 인류의 발전에 꼭 필요한 분야이다. 컴퓨터의 이러한 발전에는 언어의 연구를 빼놓을수 없다. 아주 오래전부터 인류는 상호간의 의사소통을 언어로 사용해왔으며 또 발달해왔다. 현대사회로 문명이 발달하며 컴퓨터가 등장하며 기계와 인간의 의사소통으로 다양하고 많은 컴퓨터 언어 또한 같이 발달해왔다. 이번 과제를 통해 언어학의 연구와 발달이 컴퓨터언어학에 어떠한 영향과 상호작용을 해왔는지 알아보며 공부해볼 것이다.
2. 자연언어처리
2.1. 자연언어처리의 개념과 정의
'자연언어'는 이름과 같이 자연발생적 언어이며, 중복 또한 모호한(때로는 약간 모순된) 표현을 포함하는 것은 극히 보통이다. 자연언어처리는 이러한 자연언어를 컴퓨터가 처리하도록 하는 것을 말한다. 즉, 회화 등에서 사용되는 자연의 언어를 컴퓨터가 처리하도록 하는 것이 자연언어처리의 개념이다. 자동번역기 등의 자연언어처리는 인공지능을 구성하는 중요한 요소의 하나로서 컴퓨터를 보다 사용하기 쉽고, 유능하게 만드는 것을 목적으로 한다. 자연언어처리의 핵심은 언어의 의미를 기계에 이해시키는 것이다."
2.2. 자연언어처리의 목적
자연언어처리의 목적은 크게 세 가지로 요약할 수 있다.
첫째, 대량의 자연어 데이터를 처리하는 것이다. 대량의 자연어 데이터를 처리하면 언어 데이터가 가지고 있는 다양한 언어의 수, 단어의 빈도 분포, 문자 종류의 빈도 분포 등과 같은 통계 데이터를 수집하고 분석할 수 있다"".
둘째, 컴퓨터에 자연어를 이해시켜 주는 자연어 이해 시스템(natural language understanding system)을 연구하는 것이다. 자연어 이해 시스템은 컴퓨터와 인간 사이에 존재하는 사용 언어의 차이로 인해 생기는 불편함을 해소하는 것이 목적이다"".
셋째, 컴퓨터 상에서 자연어 처리의 모델을 작성함으로써 인간의 언어 이해 과정을 설명하는 것이다. 컴퓨터 상에 언어 이해의 모델을 작성하고 그 움직임을 관찰하여 인간의 언어 이해 과정을 미루어 추측하는 것이 최근 인지과학의 큰 연구과제가 되고 있다"".
2.3. 자연언어처리의 과정
2.3.1. 형태소분석 단계
형태소분석 단계는 단어를 의미를 가지는 최소 단위인 형태소로 분리하는 단계이다. 언어를 기계가 처리할 수 있도록 하기 위해서는 우선 단어를 최소 단위인 형태소로 분석하는 것이 필요하다.
형태소 분석은 명사, 조사 등으로 단어를 분리하는 단계로, 이를 통해 단어의 의미와 품사 정보를 얻을 수 있다. 영어의 경우 형태소 분석이 상대적으로 해결된 편이지만, 한국어와 같이 조사와 어미가 발달한 언어에서는 형태소 분석이 쉽지 않다.
한국어 형태소 분석을 위해서는 어휘 사전과 형태소 규칙이 필요하다. 어절 내의 각 형태소를 정확히 분석하기 위해서는 품사 정보와 활용 정보 등이 포함된 대규모 어휘 사전이 구축되어야 하며, 형태소 결합 규칙, 음운 변화 규칙 등의 형태소 분석 규칙도 함께 마련되어야 한다. 최근에는 기계학습 기반의 형태소 분석기도 개발되고 있으며, 대용량 말뭉치를 활용한 통계적 접근으로 정확도를 높이고 있다.
형태소 분석은 자연언어처리의 기본 단계로, 이후의 구문분석, 의미분석 등 상위 단계 처리의 기반이 된다. 따라서 형태소 분석의 정확도는 전체 언어처리 시스템의 성능에 큰 영향을 미치므로, 지속적인 연구와 개선이 필요한 핵심 기술이라고 할 수 있다.
2.3.2. 구문분석 단계
구문분석 단계는 형태소들이 결합하여 문장이나 구절을 만드는 구문 규칙에 따라서, 문장 내에서 각 형태소들이 가지는 역할을 분석하는 단계이다.
예를 들어, '직장인은 휴일을 쉰다'라는 문장에서 '직장인은'은 주어, '쉰다'는 서술어의 역할을 한다. 이와 같이 각 형태소가 문장 내에서 어떤 문법적 기능을 수행하는지 분석하는 것이 구문분석 단계이다.
구문분석은 문법적 지식을 바탕으로 이루어지며, 통사론에서 연구되는 문장 구조와 문장 성분 간 관계에 대한 이해가 필수적이다. 예를 들어 'the man took the book'이라는 문장은 주어 'the man', 동사 'took', 목적어 'the book'으로 구성되어 있다. 이와 같은 문장 구조와 성분 간 관계를 파악하는 것이 구문분석의 핵심이라고 할 수 있다.
이처럼 구문분석 단계에서는 형태소 분석 결과를 바탕으로 문장의 구조와 성분들의 문법적 관계를 분석하게 된다. 이를 통해 문장의 통사적 구조를 파악할 수 있으며, 이는 자연언어 처리에서 매우 중요한 과정이라고 할 수 있다.
2.3.3. 의미분석 단계
의미분석 단계는 형태소분석과 구문분석 단계에서 얻어낸 결과를 토대로 문장이나 문구의 전반적인 의미를 파악하는 단계이다. 이 단계에서는 단어와 단어 간의 의미관계, 문장 구성요소들의 의미관계 등을 종합적으로 분석하여 문장 전체의 의미를 파악한다.
형태소분석과 구문분석이 문장을 구성하는 요소들의 형식적 구조를 분석했다면, 의미분석 단계에서는 이들 요소들이 어떤 의미적 관계를 맺고 있는지를 해석한다. 예를 들어 "아름다운 경치 속의 나"라는 문장에서 '아름답다'가 '경치'를 수식하는지 '나'를 수식하는지를 구문분석만으로는 판단하기 어렵다. 하지만 의미분석을 통해 '아름답다'가 '경치'를 수식한다는 것을 파악할 수 있다.
이처럼 의미분석 단계에서는 문장의 문법적 구조를 바탕으로 단어 간 의미관계, 문장 전체의 의미 등을 종합적으로 분석하여 문장의 의미를 정확히 파악하고자 한다. 이를 위해 어휘의미론, 논리의미론, 화용론 등의 언어학 이론이 활용된다.
어휘의미론은 개별 단어의 의미를 분석하는 데 초점을 맞춘다. 한 단어가 지니는 다양한 의미들 간의 관계를 살펴보고, 유의어나 반의어 관계 등을 파악한다. 논리의미론은 문장 내 구성요소들 간의 의미적 관계를 논리적으로 분석한다. 주어와 술어의 관계, 논리 연산자의 역할 등을 분석한다. 화용론은 문장의 문맥과 사용 상황을 고려하여 의미를 해석한다. 같은 문장이라도 맥락에 따라 다른 의미로 해석될 수 있다는 점에...
참고 자료
강범모(2011) 언어, 컴퓨터, 코퍼스 언어학, 고려대학교출판부
길이만, 시정곤, 최숙희(2006) 인간 컴퓨터 언어
김혜숙(1997) 언어의 이해, 태학사
https://terms.naver.com/ 네이버 지식백과
http://encykorea.aks.ac.kr/ 한국민족문화대백과사전
강범모(2005), 『언어－풀어쓴 언어학개론』, 한국문화사.
이정복, 2017, 사회적 소통망(SNS)의 언어문화 연구, 소통.
권재일(2013), 『세계 언어의 이모저모』, 박이정.
길이만 외(2006). 인간, 컴퓨터, 언어. 역락.
정진수(2003). 컴퓨터 통신언어 연구. 청주대학교 대학원 박사학위논문.
고창수 외, 『인공지능 대화시스템 연구』, 지식과 교양, 2012.
김경민 외, "어휘기능 정보를 이용한 트위터 감성분석" 한국정보과학회 학술발표논문집, 2014.
김가현(2011), 통신언어 형태 분석 및 쓰임 연구: 문자메시지와 인터넷 기반 통신 중심으로, 성균관대학교 대학원 석사학위논문.
권재일(2015). 언어의 이해. 한국방송통신대학교출판문화원.
강범모(2011). 언어, 컴퓨터, 코퍼스 언어학. 고려대학교출판부.
김진호(2019). 언어의 이해. 역락.
김경학(2017). 언어의 이해와 활용. 신아사.
바르가브 스리니바사 디지칸. 마창수 역(2019). 자연어 처리와 컴퓨터 언어학. 에이콘출판.
