자연어 처리에서 키워드 빈도 TF-IDF에 대한 조사

목차

1. 정의
2. 용도
3. TF 계산방법
4. 역문서 빈도
5. TF-IDF의 계산값
6. 계산값의 의미
7. 참고문헌

본문내용

1. 정의
- Term Frequency-Inverse Document Frequency의 약자이다.
- 정보 검색과 텍스트마이닝에서 이용하는 가중치로 여러 문서로 이루어진 문서군이 있을 때 어떤 단어가 특정 문서내에서 얼마나 중요한 것인지를 나타내는 통계적 수치이다.

2. 용도
- 문서의 핵심어를 추출
- 검색 엔진에서 검색 결과의 순위를 결정
- 문서들 사이의 비슷한 정도를 추출하는 용도로 사용

3. TF 계산방법
1) 문서내 총빈도수
- tf(t,d)=f(t,d)

참고 자료

Salton G. et al(1983), Introduction to modern information retrieval, McGraw-Hill
http://blog.daum.net/dongyu48/12381479