목록파이썬 크롤링 (4)

흰둥이는 코드를 짤 때 짖어 (왈!왈!왈!왈!왈!왈!왈!왈!왈!왈!왈!)

(Python) 픽사베이 이미지 크롤링

1. 이미지 수집하기 픽사베이 In [1]: import chromedriver_autoinstaller import time from selenium import webdriver from selenium.webdriver.common.by import By from urllib.request import Request, urlopen In [3]: driver = webdriver.Chrome() driver.implicitly_wait(3) url = 'https://pixabay.com/ko/images/search/바다/' driver.get(url) time.sleep(3) In [5]: image_xpath = '/html/body/div[1]/div[1]/div/div[2]/div[3]/d..
파이썬 크롤링 2023. 6. 9. 16:23
(Python) 인스타그램 크롤링

In [13]: import chromedriver_autoinstaller import time from selenium import webdriver from selenium.webdriver.common.by import By # XPath 상수화 In [14]: driver = webdriver.Chrome() 1. 로그인 하기 In [15]: driver.implicitly_wait(3) url='https://www.instagram.com/' driver.get(url) id = '아이디' pw = '비밀번호' # /html/body/div[2]/div/div/div[1]/div/div/div/div[1]/section/main/article/div[2]/div[1]/div[2]/form/d..
파이썬 크롤링 2023. 6. 9. 16:22
(Python) 셀레니옴

1. 셀레니움(Selenium) 셀레니움은 브라우저를 컨트롤 할 수 있도록 지원하는 라이브러리 In [1]: !pip install selenium Collecting selenium Downloading selenium-4.9.1-py3-none-any.whl (6.6 MB) Collecting urllib3[socks]=1.26 Downloading urllib3-2.0.2-py3-none-any.whl (123 kB) Collecting certifi>=2021.10.8 Downloading certifi-2023.5.7-py3-none-any.whl (156 kB) Collecting trio-websocket~=0.9 Downloading trio_websocket-0.10.2-py3-none-..
파이썬 크롤링 2023. 6. 9. 16:19
(Python) 크롤링

크롤링(Crawling): 인터넷의 데이터를 활용하기 위해 정보들을 분석하고 활용할 수 있도록 수집하는 행위 스크레이핑(Scraping): 크롤링 + 데이터를 추출해서 가공하는 최종 목표 1. Basic English Speaking In [ ]: import requests from bs4 import BeautifulSoup In [ ]: site = 'https://basicenglishspeaking.com/daily-english-conversation-topics/' request = requests.get(site) print(request) # print(request.text) In [ ]: soup = BeautifulSoup(request.text) In [ ]: divs = soup..
파이썬 크롤링 2023. 6. 9. 16:17
이전 Prev 1 Next 다음