๋ฐ์ํ
250x250
Notice
Recent Posts
- Today
- Total
๋ชฉ๋กn-gram (1)
DATA101
๐ ๋ชฉ์ฐจ1. N-gram ๊ฐ๋ 2. N-gram ๋ฑ์ฅ ๋ฐฐ๊ฒฝ3. N-gram ์ข ๋ฅ 4. N-gram ๊ธฐ๋ฐ ๋จ์ด ์์ธก 5. N-gram์ ํ๊ณ์ 1. N-gram ๊ฐ๋ ์ธ์ด ๋ชจ๋ธ(Language Model)์ ๋ฌธ์ฅ ๋ด ์์ ๋ฑ์ฅํ ๋จ์ด๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ์ด์ด์ ๋ฑ์ฅํ ์ ์ ํ ๋จ์ด๋ฅผ ์์ธกํ๋ ๋ชจ๋ธ์ ๋๋ค. ์ธ์ด ๋ชจ๋ธ์ ํฌ๊ฒ ํต๊ณํ ๊ธฐ๋ฐ์ ์ธ์ด ๋ชจ๋ธ(Statistical Language Model, SLM)๊ณผ ์ธ๊ณต์ ๊ฒฝ๋ง(Artificial Neural Network, ANN) ๊ธฐ๋ฐ์ ์ธ์ด ๋ชจ๋ธ์ด ์์ต๋๋ค. N-gram์ ํต๊ณํ ๊ธฐ๋ฐ์ ์ธ์ด ๋ชจ๋ธ ์ค ํ๋์ ๋๋ค. N-gram ์ธ์ด ๋ชจ๋ธ์ ์ด์ฒ๋ผ ๋ค์ ๋จ์ด๋ฅผ ์์ธกํ ๋ ๋ฌธ์ฅ ๋ด ๋ชจ๋ ๋จ์ด๋ฅผ ๊ณ ๋ คํ์ง ์๊ณ ํน์ ๋จ์ด์ ๊ฐ์(\(N\))๋ง ๊ณ ๋ คํฉ๋๋ค. ์ฆ, N-gram์ \(N\)..
AI & ๋น
๋ฐ์ดํฐ/์์ฐ์ด์ฒ๋ฆฌ(NLP)
2022. 4. 4. 16:50