목록웹크롤링 1

취보특개

[python] Web Crawling Step-By-Step

인문쪽 친구들이 많이 묻는게 '내가 웹크롤러 만들어보려하는데-' 이다. 그럴때마다 '그거 정말 별거없는데!?'라고 말하는데. 진짜 별거없어서 작성해보는 글 먼저 모든 페이지에는 현재의 페이지를 표시하는 코드가 있다. 이 코드를 이제 HTML이라고 부를꺼다. 그냥 쉽게 웹에서 쓰는 언어라고 생각하면된다. 뭔가 어려워지는 것 같지만 어차피 우리가 원하는건 거창한 구조 같은 것이 아닌 내눈에 보이는 텍스트들이기 때문에 겁먹을거 없다. 음.. 이 글을 보는 사람에게 어느정도 수준으로 설명해야할지 모르겠다. 어느정도 PYTHON은 알고있는 사람이라 생각하면되겠지? 1. Requests 우리가 특정 웹페이지를 들어갈때, 클릭할 때 마다 웹서버에 '여기(url)에 해당하는 코드(HTML) 줘'하는 요청(request..
Gaebal/Python 2020. 11. 25. 16:57
Prev 1 Next