웹 크롤링을 위한 HTTP 필수 지식
웹 크롤링을 제대로 하기 위해서는 웹 브라우저 주소창에 http://
와 같이 등장하는 HTTP에 대한 이해가 필요합니다.
HTTP는 웹 브라우저와 서버 간의 통신을 담당하는 프로토콜
(통신 규칙)로, 요청과 응답을 통해 데이터를 주고 받기 위한 약속
입니다.
이번 수업에서는 HTTP의 기본 개념과 요청과 응답의 개념에 대해 알아보겠습니다.
HTTP는 어떻게 동작할까요?
HTTP는 클라이언트
(웹 브라우저)가 서버에 데이터를 요청(Request)하고, 서버
가 클라이언트에 데이터를 응답(Response)하는 방식으로 동작합니다.
웹 크롤링은 주로 HTTP 요청
을 통해 웹 페이지의 데이터를 가져오는 과정으로, 이를 위해서는 HTTP 요청과 응답에 대한 이해가 필요합니다.