selenium

    [Python] λŒ€ν•œλ―Όκ΅­ μ •μ±…λΈŒλ¦¬ν•‘ λ³΄λ„μžλ£Œ 크둀링(SN, BS4, Pd)

    1. λŒ€ν•œλ―Όκ΅­ μ •μ±…λΈŒλ¦¬ν•‘ μ •λΆ€μ—μ„œλŠ” λ§€λ…„ μˆ˜λ§Žμ€ 정책듀을 λ°œν‘œν•˜λŠ”λ°, 이λ₯Ό κ΅­λ―Όλ“€μ—κ²Œ 널리 μ•Œλ¦¬κΈ° μœ„ν•΄ 각 λΆ€μ²˜λ§ˆλ‹€ ν™ˆνŽ˜μ΄μ§€ 및 SNS채널을 μš΄μ˜ν•˜κ³  μžˆμŠ΅λ‹ˆλ‹€. λ˜ν•œ μ΄λŸ¬ν•œ 정보듀을 ν•œκ³³μ— λͺ¨μ•„λ‘” μ‚¬μ΄νŠΈκ°€ λ°”λ‘œ 'λŒ€ν•œλ―Όκ΅­ μ •μ±…λΈŒλ¦¬ν•‘' μ΄λΌλŠ” μ›Ήμ‚¬μ΄νŠΈμž…λ‹ˆλ‹€. 각 λΆ€μ²˜, μ§€λ°©μžμΉ˜λ‹¨μ²΄ λ“±μ—μ„œ λ°œν–‰ν•˜λŠ” ν–‰μ • μžλ£Œλ“€μ„ μ—΄λžŒν•  수 있으며, μ΅œμ‹ ν™”λœ 언둠보도 λ˜ν•œ 확인 ν•  수 μžˆμŠ΅λ‹ˆλ‹€. https://www.korea.kr/main.do λŒ€ν•œλ―Όκ΅­ μ •μ±…λΈŒλ¦¬ν•‘ λ¬Έν™”μ²΄μœ‘κ΄€κ΄‘λΆ€ κ΅­λ―Όμ†Œν†΅μ‹€ 운영, μ •μ±…λ‰΄μŠ€, μ •λΆ€ λ³΄λ„μžλ£Œ, ν•΄λͺ…μžλ£Œ, κ΅­μ •κ³Όμ œ, λŒ€ν•œλ―Όκ΅­ μ •λΆ€ μ†Œκ°œ λ“± 제곡 www.korea.kr μ΄λŸ¬ν•œ κ΅­κ°€ μ •μ±…μ •λ³΄ν¬ν„Έλ‘œμ„œ μ£Όμš”λ‰΄μŠ€μ™€ λ³΄λ„μžλ£Œλ₯Ό 파이썬 크둀링 μž‘μ—…μœΌλ‘œ 쒀더 쉽고 λΉ λ₯΄κ²Œ 보고 μ‹Άμ—ˆμŠ΅λ‹ˆλ‹€. μ§€λ‚œ κ²Œμ‹œκΈ€μ—μ„œ 넀이버..

    [Python] λ„€μ΄λ²„λ‰΄μŠ€ 크둀링 2 (μ…€λ ˆλ‹ˆμ›€, BS4, pandas)

    1. 넀이버 λ‰΄μŠ€ 크둀링 ν™˜κ²½μ„€μ • πŸ“Œ 이전 κΈ€ ν™•μΈν•˜κΈ° 더보기 πŸ“Œ1. [Python] 파이썬 κ°œλ°œν™˜κ²½ ꡬ좕(for. Mac) πŸ“Œ2. [Python] 파이썬 BeautifulSoup4 μ„€μΉ˜(for.Mac) πŸ“Œ3. [Python] 파이썬 Selenium(μ…€λ ˆλ‹ˆμ›€) μ„€μΉ˜(for.Mac) πŸ“Œ4. [Python] λ„€μ΄λ²„λ‰΄μŠ€ 크둀링 1 (μ…€λ ˆλ‹ˆμ›€, BS4) 이전 κΈ€μ—μ„œλŠ” 넀이버 κ²€μƒ‰μ°½μ—μ„œ ν‚€μ›Œλ“œλ₯Ό μž…λ ₯ν•˜κ³ , λ‰΄μŠ€ νƒ­μœΌλ‘œ λ„˜μ–΄κ°€μ„œ κΈ°μ‚¬μ˜ 제λͺ©μ„ λΆˆλŸ¬μ˜€λŠ” μž‘μ—…μ„ ν•˜μ˜€μŠ΅λ‹ˆλ‹€. 이번 κΈ€μ—μ„œλŠ” ν‚€μ›Œλ“œμ™€ μˆ˜μ§‘ 건수λ₯Ό μ„€μ •ν•˜κ³ , 제λͺ©κ³Ό 기사링크λ₯Ό λ©”λͺ¨μž₯κ³Ό 엑셀을 μžλ™ μ €μž₯ν•˜λŠ” μ½”λ“œλ₯Ό μ•Œμ•„λ³΄κ² μŠ΅λ‹ˆλ‹€. 이번 넀이버 λ‰΄μŠ€ 크둀링(μŠ€ν¬λž˜ν•‘)에 κ΄€ν•œ λͺ¨λ“ˆμ„ κ°€μ Έμ˜€λ„λ‘ ν•˜κ² μŠ΅λ‹ˆλ‹€. ➜ Selenium, BeautifulSoup4, tim..

    [Python] λ„€μ΄λ²„λ‰΄μŠ€ 크둀링 1 (μ…€λ ˆλ‹ˆμ›€, BS4)

    1. μ›Ή 크둀링 ν™˜κ²½μ„€μ • μ›ΉνŽ˜μ΄μ§€ 링크 뢄석을 ν•˜λ©΄ νŒŒμ‹±(Parsing)이 μˆ˜μ›”ν•΄μ§„λ‹€. ν•„μš”ν•œ λͺ¨λ“ˆ λ‘œλ”©μ„ μœ„ν•΄ μ•„λž˜ μ½”λ“œ 블둝 μž…λ ₯ (μ…€λ ˆλ‹ˆμ›€, BS4, Time) #Part 1. λͺ¨λ“ˆ κ°€μ Έμ˜€κΈ° from selenium import webdriver from selenium.webdriver.common.by import By from selenium.webdriver.common.keys import Keys from selenium.webdriver.common.service import Service from bs4 import BeautifulSoup import time 2. 크둬 λ“œλΌμ΄λ²„ μ„€μ • 및 μ›Ή νŽ˜μ΄μ§€ 검색 빅데이터 검색 ν›„ λ‰΄μŠ€νƒ­μœΌλ‘œ 이동 #Part 1. λͺ¨λ“ˆ κ°€μ Έμ˜€κΈ° from sel..

    [Python] 파이썬 Selenium(μ…€λ ˆλ‹ˆμ›€) μ„€μΉ˜(for.Mac)

    1. Selenium (μ…€λ ˆλ‹ˆμ›€) μ„€μΉ˜ μ•„λž˜ μ½”λ“œ 블둝을 터미널에 μž…λ ₯ pip3 install selenium 더보기 β€» ν¬λ‘¬λΈŒλΌμš°μ € 버전에 λ§žλŠ” ν¬λ‘¬λ“œλΌμ΄λ²„ μ„€μΉ˜ β˜… 일일이 맀번 싀행을 ν•˜κΈ°λ³΄λ‹¨ ipyhton을 μ ‘μ†ν•˜λ©΄ μ½”λ“œ ν•œμ€„ν•œμ€„ ν™•μΈν•˜λ©΄μ„œ ν•  수 있음. 2. Selenium ν™˜κ²½μ„€μ • ν•„μš”ν•œ λͺ¨λ“ˆ λ‘œλ”© μž‘μ—… μ•„λž˜ μ½”λ“œ 블둝을 VSC 터미널에 μž…λ ₯ from selenium import webdriver from selenium.webdriver.common.by import By 3. Selenium ν¬λ‘¬λ“œλΌμ΄λ²„ μ„€μ • ν¬λ‘¬λ“œλΌμ΄λ²„ 기초 μ„€μ • 각자 PCν™˜κ²½μ˜ ν¬λ‘¬λ“œλΌμ΄λ²„ 경둜λ₯Ό 넣어야함 μ•„λž˜ μ½”λ“œ 블둝을 VSC 터미널에 μž…λ ₯ from selenium import webdriver from seleniu..