- Today
- Total
๋ชฉ๋ก์ ์ฒด ๊ธ (350)
DATA101

๋ณธ ํฌ์คํ ์์๋ ์นด์ดํธ ๊ธฐ๋ฐ์ ๋จ์ด ํํ๋ฐฉ๋ฒ ์ค ํ๋์ธ ๋ฌธ์ ๋จ์ด ํ๋ ฌ(DTM)์ ๊ฐ๋ ์ ๋ํด ์์๋ด ๋๋ค.๐ ๋ชฉ์ฐจ1. DTM ๊ฐ๋ 2. DTM ์์ 3. DTM ํ๊ณ์ 1. DTM ๊ฐ๋ ๋ฌธ์ ๋จ์ด ํ๋ ฌ(Document-Term Maxtrix, DTM)์ ๋ค์์ ๋ฌธ์ ๋ฐ์ดํฐ(=Corpus)์์ ๋ฑ์ฅํ ๋ชจ๋ ๋จ์ด์ ์ถํ ๋น๋์(frequency)๋ฅผ ํ๋ ฌ๋ก ํํํ ๊ฒ์ ๋๋ค. ์ฆ, DTM์ ๋ค์์ ๋ฌธ์ ๋ฐ์ดํฐ์ ๋ํ Bag of Words(BoW)๋ฅผ ํ๋ ฌ๋ก ํํํ ๊ฒ์ ๋๋ค. DTM์ ๊ตญ์ ํํ(Local Representation) ๋๋ ์ด์ฐ ํํ(Discrete Representation)์ ์ผ์ข ์ผ๋ก ์นด์ดํธ ๊ธฐ๋ฐ์ ๋จ์ด ํํ๋ฐฉ๋ฒ์ ๋๋ค.2. DTM ์์DTM ์์๋ฅผ ๋ค์ด๋ณด๊ฒ ์ต๋๋ค. ์๋์ ๊ฐ์ด 4๊ฐ์ ๋ฌธ์๊ฐ ์๋ค..

๋ณธ ํฌ์คํ ์์๋ ์นด์ดํธ ๊ธฐ๋ฐ์ ๋จ์ด ํํ ๋ฐฉ๋ฒ์ธ Bag of Words(BoW) ๊ฐ๋ ๊ณผ ์์ฑ ๋ฐฉ๋ฒ์ ์์๋ด ๋๋ค.๐ ๋ชฉ์ฐจ1. BoW ๊ฐ๋ 2. BoW ํน์ง3. BoW ์์ฑ ์ ์ฐจ4. BoW ์์ฑ ์ค์ต1. BoW ๊ฐ๋ Bag of Words(BoW)๋ ๋จ์ด๋ฅผ ์์นํํ๋ ๋ฐฉ๋ฒ ์ค ํ๋๋ก, ๋ฌธ์ ๋ด ๋จ์ด์ ์์์ ์๋ฏธ๋ ๊ณ ๋ คํ์ง ์๊ณ ์ค์ง ์ถํ ๋น๋(frequency)๋ง ๊ณ ๋ คํ์ฌ ๋จ์ด๋ฅผ ํํํ๋ ๋ฐฉ๋ฒ์ ๋๋ค. BoW๋ ๊ตญ์ ํํ๋ฐฉ๋ฒ(Local Representation) ๋๋ ์ด์ฐ ํํ๋ฐฉ๋ฒ(Discrete Representation)์ ์ผ์ข ์ผ๋ก ์นด์ดํธ ๊ธฐ๋ฐ์ ๋จ์ด ํํ๋ฐฉ๋ฒ(Count-based Word Representation)์ด๋ผ๊ณ ๋ถ๋ฆ ๋๋ค(๊ทธ๋ฆผ 1 ์ฐธ๊ณ ).2. BoW ํน์งBoW๋ ์ด๋ค ๋จ์ด๋ค์ด ๋ช ํ..

๋ณธ ํฌ์คํ ์์๋ ํผ์ ํธ๋ก (Perceptron) ํ์ต(train)์ ์๋ฏธ์ ์ ์ฐจ์ ๋ํด ์์๋ด ๋๋ค. ๐ ๋ชฉ์ฐจ 1. ํผ์ ํธ๋ก ์ ๊ฐ๋ 2. ํผ์ ํธ๋ก ํ์ต์ ์๋ฏธ 3. ํผ์ ํธ๋ก ํ์ต ๋ฐฉ๋ฒ 4. ํผ์ ํธ๋ก ํ์ต ์ ์ฐจ 1. ํผ์ ํธ๋ก ์ ๊ฐ๋ ํผ์ ํธ๋ก ์ ํ์ต ์ ์ฐจ๋ฅผ ์์๋ณด๊ธฐ ์ ์ ํผ์ ํธ๋ก ๊ฐ๋ ์ ๋ํด ์์๋ด ๋๋ค. ํผ์ ํธ๋ก ์ ์ด์ง ๋ถ๋ฅ(Binary Classification) ๋ชจ๋ธ์ ํ์ตํ๊ธฐ ์ํ ์ง๋ํ์ต(Supervised Learning) ๊ธฐ๋ฐ์ ์๊ณ ๋ฆฌ์ฆ์ ๋๋ค. ์ด์ง๋ถ๋ฅ๋ ์๋ฅผ ๋ค์ด ์ธ๊ณต์ง๋ฅ(AI)์๊ฒ ๋ฌด์์๋ก ๋๋ฌผ ์ฌ์ง์ ๋ณด์ฌ์ฃผ์์ ๋ ๊ณ ์์ด ์ฌ์ง์ธ์ง, ๊ฐ์์ง ์ฌ์ง์ธ์ง ๋ถ๋ฅํ๋ ๋ฌธ์ ์ ๋๋ค. ์ฌ๊ธฐ์ ๊ณ ์์ด, ๊ฐ์์ง์ ๊ฐ์ ์ ํ์ง๋ฅผ ํด๋์ค(Class)๋ผ๊ณ ๋ถ๋ฅด๊ณ ์ ํ์ง๊ฐ 2๊ฐ์ธ ๊ฒฝ์ฐ๋ฅผ ์ด์ง ๋ถ๋ฅ๋ผ๊ณ ํฉ๋๋ค. ์ํ์ ์ธ ์ธก..

๋ณธ ํฌ์คํ ์์๋ ์ธ๊ณต์ ๊ฒฝ๋ง์ ์ด๊ธฐ ํํ์ด์ ๊ตฌ์ฑ ์์์ธ ํผ์ ํธ๋ก (Perceptron)์ ๊ฐ๋ ์ ๋ํด ์์๋ด ๋๋ค.๐ ๋ชฉ์ฐจ1. ํผ์ ํธ๋ก ๊ฐ์ 2. ์๋ฌผํ ๋ด๋ฐ์ ์ญํ ๊ณผ ๋์๊ณผ์ 3. ํผ์ ํธ๋ก ์ ์ญํ ๊ณผ ๋์๊ณผ์ 4. ํผ์ ํธ๋ก ์ ์ข ๋ฅ 4.1. ๋จ์ธต ํผ์ ํธ๋ก 4.2. ๋ค์ธต ํผ์ ํธ๋ก 1. ํผ์ ํธ๋ก (Perceptron) ๊ฐ์ํผ์ ํธ๋ก (Perceptron)์ ์ธ๊ณต ์ ๊ฒฝ๋ง(Aritificial Neural Network, ANN)์ ๊ตฌ์ฑ ์์(unit)๋ก์ ๋ค์์ ๊ฐ์ ์ ๋ ฅ๋ฐ์ ํ๋์ ๊ฐ์ผ๋ก ์ถ๋ ฅํ๋ ์๊ณ ๋ฆฌ์ฆ์ ๋๋ค. Perceptron์ perception๊ณผ neuron์ ํฉ์ฑ์ด์ด๋ฉฐ ์ธ๊ณต ๋ด๋ฐ์ด๋ผ๊ณ ๋ ๋ถ๋ฆ ๋๋ค. ์ฆ, ํผ์ ํธ๋ก ์ ์๋ฌผํ์ ์ธ ์ ๊ฒฝ๊ณ(Neual Network)์ ๊ธฐ๋ณธ ๋จ์์ธ ์ ๊ฒฝ์ธํฌ(=๋ด๋ฐ)์ ๋์..

๋ณธ ํฌ์คํ ์์๋ SAP(ABAP)์์ ๊ตฌ๊ตฌ๋จ์ ํ ์ด๋ธ์ ์ ์ฅํ๊ณ ์ถ๋ ฅํ๋ ์์ ์ฝ๋๋ฅผ ๊ณต์ ํฉ๋๋ค. ๐ ๋ชฉ์ฐจ 1. ์คํ๊ฒฐ๊ณผ 2. ํ ์ด๋ธ Fields 3. ์ ์ฒด ์ฝ๋ 4. ์ฝ๋ ์ค๋ช 5. ์คํ๊ฒฐ๊ณผ 1. ์คํ๊ฒฐ๊ณผ ์คํ๊ฒฐ๊ณผ ๋จผ์ ๊ณต์ ํฉ๋๋ค. ์์ ๊ฐ์ด 1๋จ๋ถํฐ 9๋จ๊น์ง์ ๊ตฌ๊ตฌ๋จ์ ์ถ๋ ฅํ๋ ํ๋ก๊ทธ๋จ์ ๋ง๋ค๊ณ ์ ํฉ๋๋ค. ๋ณธ ํ๋ก๊ทธ๋จ์ ๊ฐ ์๋ฆฟ์์ ๊ฐ๊ณผ ์ฐ์ฐ์(*), ๊ทธ๋ฆฌ๊ณ ๊ฒฐ๊ด๊ฐ๊น์ง๋ฅผ ๋ชจ๋ Internal Table์ ์ ์ฅํ๋ ํ๋ก์ธ์ค๋ฅผ ๋ฐ๋ณตํฉ๋๋ค. ๋ํ, ํ ์ด๋ธ ๋ด ํ(ROW) ๋ฐ์ดํฐ๋ฅผ ํ๋์ฉ ์ ๊ทผํ์ฌ ์ถ๋ ฅํ๋๋ก ๋ฐ๋ณตํฉ๋๋ค. ์ด์ด์ง๋ ์น์ ์์ ํด๋น ํ๋ก๊ทธ๋จ ๊ตฌํ์ ์ํ ๊ธฐ๋ณธ์ ์ธ ์ธํ ๋ฐฉ๋ฒ๊ณผ ์ฝ๋๋ฅผ ๊ณต์ ํฉ๋๋ค. 2. ํ ์ด๋ธ Fields ํ ์ด๋ธ Fields๋ ์์ ๊ฐ์ด ๊ตฌ์ฑํ์์ต๋๋ค. ๊ตฌ๊ตฌ๋จ์์ ์ฒซ ๋ฒ์งธ ์ซ์๋ฅผ STR..

๋ณธ ํฌ์คํ ์์๋ Function Group, View๋ฅผ ์์ฑํ๋ ๋ฐฉ๋ฒ๊ณผ Table Maintenance Generator ์์ฑ์ ์ธํ ํ๋ ๋ฐฉ๋ฒ์ ๋ํด ์์๋ด ๋๋ค. ๋ชฉ์ฐจ 1. Function Group ์์ฑ 2. View ์์ฑ 3. Table Maintenance Generator ์์ฑ ์ธํ 1. Function Group ์์ฑ T-CODE SE80์์ ํจํค์ง ์ด๋ฆ ๋ง์ฐ์ค ์ฐ์ธก ํด๋ฆญ-Create-Function Group์ ์์ฐจ์ ์ผ๋ก ์ ํํ์ฌ Function Group ์์ฑ ์ฐฝ์ ์คํํฉ๋๋ค. Function Group ์ด๋ฆ๊ณผ Short Description์ ๊ฐ๊ฐ ์ ๋ ฅํฉ๋๋ค. ํจํค์ง๋ฅผ ์ ํํฉ๋๋ค. CTS๋ฅผ ์ ํํฉ๋๋ค. ๋ค์๊ณผ ๊ฐ์ด Function Group์ด ์์ฑ๋ ๊ฒ์ ํ์ธํ ์ ์์ต๋๋ค. 2. View..

๋ณธ ํฌ์คํ ์์๋ ๊ตฌ์กฐ์ฒด์ ๊ฐ๋ ๋ถํฐ ์์ฑ ๋ฐฉ๋ฒ, ํ ์ด๋ธ์ ๊ตฌ์กฐ์ฒด๋ฅผ ์ฐ๊ฒฐํ๋ ๋ฐฉ๋ฒ๊น์ง ์์๋ด ๋๋ค. 1. ๊ตฌ์กฐ์ฒด๋? ๊ตฌ์กฐ์ฒด๋ ํ ์ด๋ธ๊ณผ ๋์ผํ๊ฒ ํ๋๋ก ๊ตฌ์ฑ๋์ง๋ง, ์์ฒด์ ์ผ๋ก ๋ฐ์ดํฐ๋ฅผ ์ ์ฅํ ์ ์๋ ๊ฐ์ฒด ์ข ๋ฅ์ ๋๋ค. ๊ตฌ์กฐ์ฒด๋ ํน์ ์ฉ๋์ ๊ตฌ์กฐ๋ฅผ ์ฌํ์ฉํ ์ ์๊ธฐ ๋๋ฌธ์ ์์ฐ์ฑ ํฅ์์ ํฐ ๋์์ด ๋ฉ๋๋ค. ํ ์ด๋ธ์์ ๊ตฌ์กฐ์ฒด๋ INCLUDE๋ฅผ ํตํด ์ฌ์ฉํ ์ ์์ผ๋ฉฐ, ์ค์ DB์ ์์ฑ๋์ง ์๊ณ ABAP Dictionary์๋ง ์กด์ฌํฉ๋๋ค. 2. ๊ตฌ์กฐ์ฒด ์์ฑ ์๋์ ๊ฐ์ ์์๋ก ๊ตฌ์กฐ์ฒด ์์ฑ ์ฐฝ์ ์คํํฉ๋๋ค. 1) T-CODE SE80 ์ด๋ 2) ํจํค์ง ์ด๋ฆ ๋ง์ฐ์ค ์ฐ์ธก ํด๋ฆญ 3) Create 4) Dictionary Object 5) Structure ๊ตฌ์กฐ์ฒด ์ด๋ฆ์ ์ ๋ ฅํฉ๋๋ค. Short Description์ ์์ฑํฉ..

๐จ๐ป ๋ค์ด๊ฐ๋ฉฐ๋ณธ ํฌ์คํ ์์๋ LDA ํ ํฝ ๋ชจ๋ธ๋ง์ ๊ฐ๋ , ๊ฐ์ , ์๊ณ ๋ฆฌ์ฆ ํ๋ก์ธ์ค์ ๋ํด ์์๋ด ๋๋ค. ํนํ, ์ํ์ ์ธ ์์ ์์ด LDA ํ ํฝ ๋ชจ๋ธ๋ง์ ๋ฉ์ปค๋์ฆ์ ์ฌ์ด ์์์ ํจ๊ป ๋น ๋ฅด๊ฒ ์ดํดํ๋ ๋ฐ ์ด์ ์ ๋ก๋๋ค. LDA ํ ํฝ ๋ชจ๋ธ๋ง ๊ด๋ จ ์ค์ต์ ์๋ ํฌ์คํ ์ ์ฐธ๊ณ ํด ์ฃผ์๊ธธ ๋ฐ๋๋๋ค.https://heytech.tistory.com/401 [NLP] LDA ํ ํฝ ๋ชจ๋ธ๋ง์ ํ์ฉํ ์ฑ ๋ฆฌ๋ทฐ ๋ถ์ ํ๋ก์ ํธ๐ ๋ชฉ์ฐจ 1. ๊ฐ์ 2. ๋ฐ์ดํฐ์ 3. LDA ํ ํฝ ๋ชจ๋ธ๋ง ๊ฐ๋ 4. LDA ํ ํฝ ๋ชจ๋ธ๋ง ์๊ฐํ 5. ์ ์ฒด ์ฝ๋ 6. ์ฝ๋ ์ค๋ช 7. ๊ฒฐ๊ณผ ํด์๋ฐฉ๋ฒ 8. ์ธ์ฌ์ดํธ ๋์ถ 1. ๊ฐ์ ๋ณธ ํ๋ก์ ํธ๋ ๊ฑด๊ฐ๊ด๋ฆฌ ์ฑ ๋ฆฌ๋ทฐ ํ ์คํธ๋ง์ด๋heytech.tistory.com๐ ๋ชฉ์ฐจ 1. LDA ํ ํฝ ๋ชจ๋ธ๋ง์ ๊ฐ๋ 2...