맛있는 개발 레시피

Beautifulsoup으로 크롤링한 데이터를 장고 DB에 넣어보았습니다. 백엔드는 항상 어려우나 해결하는 즐거움이 있는 것 같습니다. 시간만 덜 걸리면 좋으려만 그래도 여러 삽질 끝에 얻는 지식은 너무 소중한 것 같습니다. 우선 코딩 전문입니다. # -*- coding: utf-8 -*- import urllib.request import urllib.parse import ssl from bs4 import BeautifulSoup import os os.environ.setdefault("DJANGO_SETTINGS_MODULE", "backend.settings") import django django.setup() from api.models import Search_Recipe def getR..

이런 에러 메시지가 뜹니다. Non-ASCII character '\xea' in file ... but no encoding declared; 이럴 때는, 아래 빨간 줄을 추가해주시면 해결 됩니다. 이는 파이썬이 코드 내 한글을 읽지 못해서 생기는 문제입니다. 단, 주석 처리를 빼시면 안됩니다! 그대로 추가해주셔야 합니다. # -*- coding: utf-8 -*- 그럼, 즐코하세요!

Selenium을 이용하여 크롤링을 해보았습니다. 해먹남녀 사이트에서 크롤링으로 재료 검색을 하면 자동으로 5페이지까지 넘겨가며 음식 이름만을 크롤링 해오는 것이죠. 이걸 장고랑 연동해서 프론트엔드로 띄우고 싶은데.. 이제 이걸 연구해 봐야겠습니다. 일단 이 코드를 베이스로 원하는 데이터 형태로 파싱할 수도 있으나 일단은 print로 넘겼습니다. Beautifulsoup으로 태그를 찾고 xpath로 위치 지정하였습니다. www.github.com/SunkyeongLee/CrawlingWithPython SunkyeongLee/CrawlingWithPython Crawling the website with Python. Contribute to SunkyeongLee/CrawlingWithPython de..

셀레니움으로 크롤링을 도전하려고 호기롭게 시작하였으나.. 항상 환경설정에 많은 시간을 뺏기고 애를 먹습니다.. 이래서 도커를 사용해야 하는가 봅니다. 분명 크롬 드라이버를 버전에 맞게 설치를 하였으나 이런 에러 메시지가 뜹니다. session not created: This version of ChromeDriver only supports Chrome version 81 크롬 버전은 URL 창에 chrome://version/을 검색하시면 첫 줄에서 확인하실 수 있습니다. 크롬 드라이버 다운받기 www.sites.google.com/a/chromium.org/chromedriver/downloads Downloads - ChromeDriver - WebDriver for Chrome WebDriver ..