[ML] TF-IDF (Terms Frequency-Inverse Document Frequency)
TF-IDF (Terms Frequency-Inverse Document Frequency) 는 흔히 "말뭉치"라고 불리는 문서 모음과 비교해 문서에서 단어의 중요도를 평가하는 데 사용되는 통계적 척더로, 한 문서에서는 흔하지만 전체 말뭉치에서는 드문 단어가 중요할 가능성이 높다는 것이 TF-IDF의 기본 개념이다. TF-IDF는 두 가지로 구성되는데 바로 TF (Terms Frequency, 용어 빈도) 와 IDF (Inverse Document Frequency, 역문서 빈도) 다. TF : 문서에서 용어가 얼마나 자주 나타나는지를 측정한다. IDF : 모든 문서에서 단어가 얼마나 드물거나 흔한지를 측정한다. 많은 문서에 나타나는 단어는 적은 문서에서 나타나는 단어보다 IDF가 낮다. TF-IDF =..
기술(Tech, IT)/머신 러닝(Machine Learning)
2023. 10. 3. 07:44
공지사항
최근에 올라온 글
최근에 달린 댓글
- Total
- Today
- Yesterday
링크
TAG
- machine learning
- socket programming
- 티스토리챌린지
- 이코노미스트
- leetcode
- 딕셔너리
- Android
- vertex shader
- min heap
- I2C
- 소켓 프로그래밍
- DICTIONARY
- Computer Graphics
- join
- tf-idf
- 리트코드
- 안드로이드
- 이코노미스트 에스프레소
- 파이썬
- 머신 러닝
- defaultdict
- ml
- The Economist
- C++
- 오블완
- Hash Map
- The Economist Espresso
- 투 포인터
- java
- Python
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
글 보관함
반응형