파이썬) 웹 스크래핑(크롤링)
·
파이썬 탐구
crawling 필요한 라이브러리 requests 웹에 접속하게 해주는 역할 beaufifulsoup4 필요한 데이터만 가져오는 역할 크롤링 기본 코드 import requests from bs4 import BeautifulSoup headers = {'User-Agent' : 'Mozilla/5.0 (Windows NT 10.0; Win64; x64)AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36'} data = requests.get('URL입력',headers=headers) soup = BeautifulSoup(data.text, 'html.parser') # 코딩 시작 크롤링 준비하기 1. 가상환경 만들기 여러 ..