selenium으로 웹 크롤링
실시간으로 올라오는 데이터를 수집하기 위해 크롤링을 시작하기로..! 언어는 python을 사용했고 여러 개의 창으로 나뉘어 있어 반복해서 수집하되, 30초 간격으로 수집을 수행하였다. from selenium import webdriver #웹크롤링을 수행해주는 놈! from bs4 import BeautifulSoup #웹크롤링을 수행해주는 놈22! import csv import time path="chromedriver.exe 설치 경로" #검색해서 파일 위치 열어서 그대로 복사! 없으면 다운받기! page = ['A04','A01','A02','A03','A05','A06'] #창이 여러개인데 뒤에 숫자만 달라서 배열로 저장 pageName = ['a','b','c','d','e','f'] #파일..
2021. 3. 8.