🌱 → 🌳

#11. 동적 크롤링 ② 📌크롤링 대상 사이트 살펴보기 오늘은 파파고를 사용한 번역기를 만들어 봄 그러기 위해 파파고에 접속하여 직접 사이트를 살펴봄 https://papago.naver.com/ 네이버 파파고 번역을 부탁해 파파고 papago.naver.com 1️⃣ 동적크롤링 진행 순서 동적크롤링의 경우, 데이터를 즉시 수집하지 못하기 때문에 데이터를 얻기 위한 순서를 생각하는 것이 중요 파파고에 접속해서 번역을 받기 위해, 아래 작업을 거침 번역할 내용을 왼쪽 창에 입력 번역 버튼을 클릭 번역 결과를 수집 (파파고는 번역 버튼을 누르지 않아도 자동으로 번역 결과가 나오지만 누락 될 경우를 방지하기 위해 번역 버튼을 클릭하는 작업을 포함) 2️⃣ 필요한 요소의 태그 및 선택자 확인 파파고의 html ..

📌 선택자 웹 페이지를 표현하는 데이터 모두가 태그로 이루어져 있기떄문에, 그 중 서로 동일한 태그가 존재할 수 있음 이렇게 동일한 태그를 분간해 주기 위해, HTML에서는 선택자라는걸 사용해 각 태그를 구별할 수 있는 일종에 주소를 부여함 📌 선택자의 필요성 아래와 같은 HTML 문서가 있다고 가정해 보면, 파이썬 크롤링 C언어 게임 해당 웹 페이지에서 언어 (language)와 관련된 데이터만 필요하다고 생각해 보자. 만약 태그로만 해당 데이터를 선택한다면, 태그 을 사용할 수 있다. 하지만 태그 에 언어 정보 뿐만 아니라 프로젝트 정보 (크롤링, 게임만들기)도 포함된다. 이러한 경우, 프로젝트 정보를 제외하고 언어 정보만을 특정하기 위해 선택자를 사용 파이썬 크롤링 c언어 게임 이렇게 class =..

3일차부터 갑자기 어려워진 느낌이다 근데 어려워진만큼 재밌다 ! 어제 생활코딩에서 배웠던 HTML과도 연결이 되는 내용이라 더 흥미있게 공부할 수 있었다. 정적크롤링 정적크롤링 할 때 파이썬의 두 가지 라이브러리: requests, beautifulsoup4(beautifulsoup) requests 기존에 어려운 HTTP 요청을 쉽게 사용하기 위해 만들어진 라이브러리 쉽게 말해, 파이썬과 웹을 연결하기 위해 사용 beautifulsoup4 requests로 받아온 HTML 데이터를 다루기 위해 사용되는 라이브러리 쉽게 말해, 웹에 있는 다양한 데이터 중 필요한 데이터만 뽑아내기 위해 사용

✔ 정적 크롤링-정적인 데이터를 수집 장점: 수집속도가 빠르다. 단점: 수집대상에 한계가 있다. ✔ 동적 크롤링-동적인 데이터를 수집 장점: 수집대상에 한계가 없다. 단점: 수집속도가 느리다.