파이썬

크롤링) Selenium을 이용하여 크롤링하기

이소금 2020. 5. 11. 00:42
반응형

Selenium을 이용하여 크롤링을 해보았습니다. 해먹남녀 사이트에서 크롤링으로 재료 검색을 하면 자동으로 5페이지까지 넘겨가며 음식 이름만을 크롤링 해오는 것이죠. 이걸 장고랑 연동해서 프론트엔드로 띄우고 싶은데.. 이제 이걸 연구해 봐야겠습니다. 일단 이 코드를 베이스로 원하는 데이터 형태로 파싱할 수도 있으나 일단은 print로 넘겼습니다. Beautifulsoup으로 태그를 찾고 xpath로 위치 지정하였습니다.

www.github.com/SunkyeongLee/CrawlingWithPython

 

SunkyeongLee/CrawlingWithPython

Crawling the website with Python. Contribute to SunkyeongLee/CrawlingWithPython development by creating an account on GitHub.

github.com

 

내일도 열공!

반응형