๊ด€๋ฆฌ ๋ฉ”๋‰ด

๋ชฉ๋ก์ „์ฒด ๊ธ€ (350)

DATA101

์ฃผํ”ผํ„ฐ ๋…ธํŠธ๋ถ ํ…Œ๋งˆ ๋ณ€๊ฒฝํ•˜๋Š” ๋ฐฉ๋ฒ•(๋‹คํฌ๋ชจ๋“œ ๋“ฑ)

1. ํ…Œ๋งˆ ๋‹ค์šด๋กœ๋“œ pip install jupyterthemes 2. ๋ณ€๊ฒฝ๊ฐ€๋Šฅํ•œ ํ…Œ๋งˆ ๋ฆฌ์ŠคํŠธ ํ™•์ธ jt -l # ๋ณ€๊ฒฝ๊ฐ€๋Šฅํ•œ ํ…Œ๋งˆ ๋ฆฌ์ŠคํŠธ๋ฅผ ๋ณด์—ฌ์ค๋‹ˆ๋‹ค. ์ด 9๊ฐœ์˜ ํ…Œ๋งˆ๋ฅผ ์ง€์›ํ•ฉ๋‹ˆ๋‹ค. - chesterish - grade3 - gruvboxd - gruvboxl - monokai - oceans16 - onedork - solarizedd - solarizedl 3. ํ…Œ๋งˆ ๋ณ€๊ฒฝํ•˜๊ธฐ jt -t [๋ณ€๊ฒฝํ•˜๊ณ  ์‹ถ์€ ํ…Œ๋งˆ ์ด๋ฆ„ ์ž…๋ ฅ] ๋ณ€๊ฒฝํ•˜๊ณ  ์‹ถ์œผ์‹  ํ…Œ๋งˆ ์ด๋ฆ„์„ ๊ด„ํ˜ธ ์•ˆ์— ๋„ฃ์–ด์„œ ๋ช…๋ น์–ด๋ฅผ ์ž…๋ ฅํ•ด ์ฃผ์„ธ์š”. ์ฃผํ”ผํ„ฐ ๋…ธํŠธ๋ถ ์ฐฝ์„ ์ƒˆ๋กœ๊ณ ์นจ ํ•˜์‹œ๋ฉด ํ…Œ๋งˆ๊ฐ€ ๋ณ€๊ฒฝ๋œ ๊ฒƒ์„ ํ™•์ธํ•˜์‹ค ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค :) # ์˜ˆ์‹œ jt -t chesterish # ์ฝ”๋“œ ์ž…๋ ฅ ํ›„ ์ฃผํ”ผํ„ฐ ๋…ธํŠธ๋ถ ์ƒˆ๋กœ๊ณ ์นจ! 4. (Optional) ํ…Œ๋งˆ ๊ด€๋ จ ๋ช…๋ น์–ด ๋ชจ์Œ ..

SW ๊ฐœ๋ฐœ/Python 2021. 1. 25. 16:46
[NLP] KoNLPy Mecab ๊ณ ์œ ๋ช…์‚ฌ ๋“ฑ๋ก ๋ฐฉ๋ฒ•

๋ณธ ํฌ์ŠคํŒ…์—์„œ๋Š” KoNLPy ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ ๋‚ด Mecab ํ˜•ํƒœ์†Œ ๋ถ„์„๊ธฐ์˜ ๊ณ ์œ ๋ช…์‚ฌ ์ถ”๊ฐ€ ๋ฐฉ๋ฒ•์„ ์•Œ์•„๋ด…๋‹ˆ๋‹ค.๋ชฉ์ฐจ1. Mecab ๊ณ ์œ ๋ช…์‚ฌ ์‚ฌ์ „ ์ ‘๊ทผ2. ๊ณ ์œ ๋ช…์‚ฌ ์‚ฌ์ „ ๋“ฑ๋กํ•˜๊ธฐ3. ๊ณ ์œ ๋ช…์‚ฌ ์‚ฌ์ „ ์—…๋ฐ์ดํŠธ4. (Optional) ๊ณ ์œ ๋ช…์‚ฌ ์‚ฌ์ „ ๋“ฑ๋ก์—ฌ๋ถ€ ํ™•์ธ1. Mecab ๊ณ ์œ ๋ช…์‚ฌ ์‚ฌ์ „ ์ ‘๊ทผMecab ํด๋” ์ ‘๊ทผcd /Users/[USER_NAME]/mecab-ko-dic-2.1.1-20180720๋จผ์ €, ํ„ฐ๋ฏธ๋„/์ปค๋งจ๋“œ๋ผ์ธ์„ ํ†ตํ•ด mecab ์„ค์น˜ ์œ„์น˜์— ์ ‘๊ทผํ•ด ์ค๋‹ˆ๋‹ค. mecab ์„ค์น˜ ์‹œ์— ํŒŒ์ผ ๊ฒฝ๋กœ๋ฅผ ๋ฐ”๊พธ์‹œ์ง€ ์•Š์•˜๋‹ค๋ฉด ์œ„์™€ ๊ฐ™์ด PC ์‚ฌ์šฉ์ž ID ํด๋”์— ์œ„์น˜ํ•ด ์žˆ์Šต๋‹ˆ๋‹ค. ์ €์™€ mecab ๋ฒ„์ „์ด ๋‹ฌ๋ผ ํด๋” ์ด๋ฆ„์ด ๋‹ค๋ฅผ ์ˆ˜ ์žˆ์œผ๋‹ˆ ์ฐธ๊ณ ๋งŒ ํ•˜์‹œ๊ธธ ๋ฐ”๋ž๋‹ˆ๋‹ค.๊ณ ์œ ๋ช…์‚ฌ ์‚ฌ์ „ ์ ‘๊ทผcd user-dicvi nnp.csvํ„ฐ๋ฏธ..

[ํŒŒ์ด์ฌ] pandas๋ฅผ ํ™œ์šฉํ•œ ์—ด, ํ–‰ ์„ ํƒํ•˜๊ธฐ

์˜ค๋Š˜์€ ํŒŒ์ด์ฌ pandas ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ๋ฅผ ํ†ตํ•ด ์—‘์…€์—์„œ ํŠน์ • ์—ด(column)์ด๋‚˜ ํ–‰(row)์„ ๋ถˆ๋Ÿฌ์˜ค๋Š” ๋ฐฉ๋ฒ•์„ ๊ณต์œ ํ•ด ๋“œ๋ฆฝ๋‹ˆ๋‹ค. ๋ฐ”๋กœ ์‹œ์ž‘ํ•˜์ฃ ! 1. pandas ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ import import pandas as pd pandas ์„ค์น˜๊ฐ€ ์•ˆ๋œ ๊ฒฝ์šฐ: ์•„๋ž˜ ์ฝ”๋“œ๋ฅผ ์ปค๋งจ๋“œ๋ผ์ธ/ํ„ฐ๋ฏธ๋„/์ฃผํ”ผํ„ฐ๋…ธํŠธ๋ถ ํ™˜๊ฒฝ ์ค‘์—์„œ ์„ค์น˜๋ถ€ํ„ฐ ์ง„ํ–‰ํ•ด ์ฃผ์„ธ์š”. pip install pandas 2. ๋ฐ์ดํ„ฐ์…‹ ๋ถˆ๋Ÿฌ์˜ค๊ธฐ # ํŒŒ์ผ์ด xlsx ํ˜•์‹์ธ ๊ฒฝ์šฐ, dataset = pd.read_excel([ํŒŒ์ผ๊ฒฝ๋กœ], sheet_name = [๋ถˆ๋Ÿฌ์˜ฌ ์‹œํŠธ ์ด๋ฆ„]) # ํŒŒ์ผ์ด csv ํ˜•์‹์ธ ๊ฒฝ์šฐ, dataset = pd.read_csv([ํŒŒ์ผ๊ฒฝ๋กœ], sheet_name = [๋ถˆ๋Ÿฌ์˜ฌ ์‹œํŠธ ์ด๋ฆ„]) ํŒŒ์ผ ๊ฒฝ๋กœ๋ฅผ ๋Œ€๊ด„ํ˜ธ([]) ์•ˆ์— ๋”ฐ์˜ดํ‘œ('')์•ˆ์— ..

[SQLite] SELECT: ๋ฐ์ดํ„ฐ ์ถœ๋ ฅํ•˜๊ธฐ! (Feat. LIMIT)

์•ˆ๋…•ํ•˜์„ธ์š”, ์˜ค๋Š˜๋ถ€ํ„ฐ SQLite Studio ํ™˜๊ฒฝ์—์„œ SQL ๊ตฌ๋ฌธ์„ ์—ฐ์Šตํ•ด ๋ณด๋Š” ์‹œ๊ฐ„์„ ๊ฐ–๋„๋ก ํ•˜๊ฒ ์Šต๋‹ˆ๋‹ค. SQLite Studio ๋ฐ ์—ฐ์Šต์šฉ ๋ฐ์ดํ„ฐ๋ฒ ์ด์Šค๋ฅผ ์•„์ง ์„ค์น˜ํ•˜์ง€ ์•Š์œผ์‹  ๋ถ„๋“ค์€ ์•„๋ž˜ ํฌ์ŠคํŒ…์„ ์ฐธ๊ณ ํ•ด ์ฃผ์„ธ์š” :) heytech.tistory.com/11 [SQL] SQLite ๋ฐ ์—ฐ์Šต์šฉ ๋ฐ์ดํ„ฐ์…‹ ์„ค์น˜ํ•˜๊ธฐ! ์˜ค๋Š˜๋ถ€ํ„ฐ SQLite ๋ฐ์ดํ„ฐ๋ฒ ์ด์Šค๋ฅผ ํ™œ์šฉํ•˜์—ฌ SQL์˜ ๊ธฐ๋ณธ์ ์ธ ๋ฌธ๋ฒ•์„ ๋น ๋ฅด๊ณ  ์‰ฝ๊ฒŒ ์ „๋‹ฌํ•ด ๋“œ๋ฆฝ๋‹ˆ๋‹ค. ๋ฐ”๋กœ ์‹œ์ž‘ํ•˜์ฃ ! ๋ชฉ์ฐจ 1. SQLite๋ž€? 2. SQLite ์„ค์น˜ 3. SQLite Studio ์„ค์น˜ 4. ์—ฐ์Šต์šฉ DB ์„ค์น˜: Baseball Databank.. heytech.tistory.com ๊ทธ๋Ÿผ ๋ฐ”๋กœ ์‹œ์ž‘ํ•˜์ฃ ! SELECT: ์ถœ๋ ฅ ๋ฐ์ดํ„ฐ ์„ ํƒ SELECT * FROM Salaries L..

[SQLite] SQLite ๋ฐ ์—ฐ์Šต์šฉ ๋ฐ์ดํ„ฐ์…‹ ์„ค์น˜ํ•˜๊ธฐ!

์˜ค๋Š˜๋ถ€ํ„ฐ SQLite ๋ฐ์ดํ„ฐ๋ฒ ์ด์Šค๋ฅผ ํ™œ์šฉํ•˜์—ฌ SQL์˜ ๊ธฐ๋ณธ์ ์ธ ๋ฌธ๋ฒ•์„ ๋น ๋ฅด๊ณ  ์‰ฝ๊ฒŒ ์ „๋‹ฌํ•ด ๋“œ๋ฆฝ๋‹ˆ๋‹ค. ๋ฐ”๋กœ ์‹œ์ž‘ํ•˜์ฃ ! ๋ชฉ์ฐจ 1. SQLite๋ž€? 2. SQLite ์„ค์น˜ 3. SQLite Studio ์„ค์น˜ 4. ์—ฐ์Šต์šฉ DB ์„ค์น˜: Baseball Databank 1. SQLite๋ž€? SQLite๋Š” ํ”ํžˆ ์•„์‹œ๋Š” MySQL์ด๋‚˜ PostgreSQL๊ณผ ์œ ์‚ฌํ•œ *๊ด€๊ณ„ํ˜• ๋ฐ์ดํ„ฐ๋ฒ ์ด์Šค(Relational Database, RDB) ๊ด€๋ฆฌ ์‹œ์Šคํ…œ์˜ ์ผ์ข…์ž…๋‹ˆ๋‹ค. * ๊ด€๊ณ„ํ˜• ๋ฐ์ดํ„ฐ๋ฒ ์ด์Šค๋ž€? ๊ด€๊ณ„ํ˜• ๋ฐ์ดํ„ฐ๋ฒ ์ด์Šค๋Š” ์„œ๋กœ ๊ด€๊ณ„(relataionship)๊ฐ€ ์žˆ๋Š” ์—ฌ๋Ÿฌ ํ…Œ์ด๋ธ”(table)๋“ค์„ ํฌํ•จํ•œ ๋ฐ์ดํ„ฐ ์ง‘ํ•ฉ์„ ์˜๋ฏธํ•ฉ๋‹ˆ๋‹ค. ๋”๋ณด๊ธฐ ์œ„์˜ ์Šคํฌ๋ฆฐ์ƒท ์† ๋ฐ์ดํ„ฐ๋ฒ ์ด์Šค๋Š” ์•ž์œผ๋กœ ๋‹ค๋ฃจ๊ฒŒ ๋  ์˜คํ”ˆ์†Œ์Šค ๋ฐ์ดํ„ฐ๋ฒ ์ด์Šค๋กœ์„œ ๋ฏธ๊ตญ ์ตœ๋Œ€ ์•ผ๊ตฌ๋ฆฌ๊ทธ์ธ ๋ฉ”์ด์ €๋ฆฌ..

[ํŒŒ์ด์ฌ/NLP] ๋น ๋ฅด๊ฒŒ ํ•œ๊ตญ์–ด ํ˜•ํƒœ์†Œ ๋ถ„์„ํ•˜๋Š” ๋ฐฉ๋ฒ• (feat. KoNLPy)

๐Ÿ“š ๋ชฉ์ฐจ1. KoNLPy setup 1.1. KoNLPy ์„ค์น˜ 1.2. KoNLPy import 1.3. ํ˜•ํƒœ์†Œ ๋ถ„์„๊ธฐ ๋น„๊ต 2. ํ˜•ํƒœ์†Œ๋ณ„ ํ† ํฐํ™”(tokenization)ํ•˜๊ธฐ 2.1. ํ† ํฐํ™” without ํ’ˆ์‚ฌ ํƒœ๊น… 2.2. ํ† ํฐํ™” with ํ’ˆ์‚ฌ ํƒœ๊น… 2.3. ๋ช…์‚ฌ๋งŒ ์ถ”์ถœํ•˜๊ธฐ1. KoNLPy setup1.1. KoNLPy ์„ค์น˜KoNLPy ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ๊ฐ€ ์„ค์น˜๋˜์–ด ์žˆ์ง€ ์•Š๋Š” ๋ถ„๋“ค์€ ์•„๋ž˜ ๋งํฌ๋ฅผ ์ฐธ๊ณ ํ•˜์…”์„œ ์„ค์น˜ํ•ด ์ฃผ์‹œ๊ธธ ๋ฐ”๋ž๋‹ˆ๋‹ค.heytech.tistory.com/3 [Python/NLP] MacOS์—์„œ KoNLPy ์„ค์น˜ํ•˜๊ธฐ์˜ค๋Š˜์€ ํ•œ๊ตญ์–ด ์ž์—ฐ์–ด์ฒ˜๋ฆฌ(NLP)๋ฅผ ์œ„ํ•œ ํŒŒ์ด์ฌ ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ KoNLPy๋ฅผ MacOS์—์„œ ์„ค์น˜ํ•˜๋Š” ๋ฐฉ๋ฒ•์„ ๊ณต์œ ํ•ฉ๋‹ˆ๋‹ค. 1. ์‚ฌ์ „ ์„ค์น˜ํ•ญ๋ชฉ 1.1. ..

[Github] ํ„ฐ๋ฏธ๋„์—์„œ ์ƒˆ๋กœ์šด branch ๋งŒ๋“ค๊ธฐ

์•ˆ๋…•ํ•˜์„ธ์š”, ์˜ค๋Š˜์€ ํ„ฐ๋ฏธ๋„์—์„œ ์ƒˆ๋กœ์šด branch๋ฅผ ๋งŒ๋“œ๋Š” ๋ฐฉ๋ฒ•์— ๋Œ€ํ•ด ๊ณต์œ ํ•ด ๋“œ๋ฆฝ๋‹ˆ๋‹ค. branch๋Š” ๋ฒ„์ „ ๊ด€๋ฆฌ ๋ฐ ์—ฌ๋Ÿฌ ํŒ€์›๊ณผ ํ˜‘์—…ํ•˜๋Š” ๋ฐ ๋งค์šฐ ์œ ์šฉํ•ฉ๋‹ˆ๋‹ค. ๊ทธ๋Ÿผ ๋ฐ”๋กœ ์‹œ์ž‘ํ•˜์ฃ ! ๋ชฉ์ฐจ 1. branch ์ƒ์„ฑํ•˜๊ธฐ 2. ํŠน์ • branch์— ํŒŒ์ผ ์—…๋กœ๋“œํ•˜๊ธฐ 1. branch ์ƒ์„ฑํ•˜๊ธฐ git checkout -b [์ƒˆ๋กœ์šด branch ์ด๋ฆ„] ์ €๋Š” "01.additionalFiles"๋ผ๋Š” ์ด๋ฆ„์˜ branch ๋ฅผ ์ƒˆ๋กญ๊ฒŒ ์ƒ์„ฑํ–ˆ์œผ๋ฉฐ, ์ž๋™์œผ๋กœ ํ˜„์žฌ branch๋Š” ์ƒ์„ฑํ•œ branch๋กœ ์„ค์ •๋˜๋Š” ๊ฒƒ์„ ํ™•์ธํ•˜์‹ค ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. 2. ํŠน์ • branch์— ํŒŒ์ผ ์—…๋กœ๋“œํ•˜๊ธฐ git push origin [branch ์ด๋ฆ„] ์œ„์˜ ๋ช…๋ น์–ด๋ฅผ ํ†ตํ•ด origin ์ด๋ผ๋Š” ์ €์žฅ์†Œ ๋‚ด ํŠน์ • branch์— ํŒŒ์ผ์„ ์—…๋กœ๋“œํ•ฉ๋‹ˆ๋‹ค. ํฌ์ŠคํŒ… ๋‚ด์šฉ์—..

SW ๊ฐœ๋ฐœ/Git 2021. 1. 18. 18:35