목록web (1)

새벽코딩

web crawler 준비] import requests, import ps4

먼저, Web crawler 란? 특정 website에서 데이터를 가져와서 자동으로 데이터를 정리, 저장해주는 프로그램이다. 만드는 순서는 1. Python을 이용하여 데이터를 수집하고자 하는 웹페이지에 접속 2. 해당 페이지에 있는 HTML을 전부 다운받음 3. 원하는 글자 (tag 등)이 있는 부분을 찝어냄 4. 저장 또는 해당 데이터 사용 Web crawler (웹크롤러)를 위해서 두가지 라이브러리를 설치해야한다. 터미널에 아래와 같이 입력하여 설치 진행 pip install requests pip install bs4 나는 windows10를 사용 중인데, 설치가 완료되었음에도 불구하고 ImportError: No module named requests ImportError: No module n..
Programming/Python_crawler 2022. 9. 25. 18:24
이전 Prev 1 Next 다음