개발 기록 (~2023)
크롤링) Selenium을 이용하여 크롤링하기
이소금
2020. 5. 11. 00:42
반응형
Selenium을 이용하여 크롤링을 해보았습니다. 해먹남녀 사이트에서 크롤링으로 재료 검색을 하면 자동으로 5페이지까지 넘겨가며 음식 이름만을 크롤링 해오는 것이죠. 이걸 장고랑 연동해서 프론트엔드로 띄우고 싶은데.. 이제 이걸 연구해 봐야겠습니다. 일단 이 코드를 베이스로 원하는 데이터 형태로 파싱할 수도 있으나 일단은 print로 넘겼습니다. Beautifulsoup으로 태그를 찾고 xpath로 위치 지정하였습니다.
www.github.com/SunkyeongLee/CrawlingWithPython
SunkyeongLee/CrawlingWithPython
Crawling the website with Python. Contribute to SunkyeongLee/CrawlingWithPython development by creating an account on GitHub.
github.com
내일도 열공!
반응형