파이썬 웹크롤링 #1. requests 리퀘스트 라이브러리 -1

앞으로 배우게 될 내용 1. 가장 일반적인 HTTP methods 를 사용하여 requests 만들기 2. query string 쿼리 문자열과 메세지 본문을 이용하여 요청의 헤더 및 데이터 사용자 지정 3. 인증된 요청 만들기 4. requests 와 responses 로 부터 데이터 검사하기 5. 애플리케이션이 백업되거나 느려지지 않도록 요청을 구성 THE GET request requests.get('요청하려는 사이트 URL') THE Response response = requests.get('요청하려는 사이트 URL') Response의 인스턴스인 get()의 반환 값을 캡처하여 response라는 변수에 저장했다. 이제 response 를 사용하여 GET 요청 결과에 대한 많은 정보를 볼 수 ..

2021.10.01

파이썬 웹 크롤링 공부를 시작하며

사실 파이썬은 한번도 공부해 본적이 없는 언어이기 때문에 파이썬 문법도 잘 모르면서 웹 크롤링을 시작하는 게 뭔가 무모하게(?) 느껴지지만 정부의 일경험 프로젝트로 회사에서 일하게 되면서 웹 크롤링을 하게 되었다. 간단한 페이지는 구글링을 하면서 크롤링을 해냈기 때문에 본격적으로 공부를 해서 복잡한 페이지를 크롤링 해보고 싶어졌다. 열심히 해보자 화이팅

2021.10.01