🌱 → 🌳

📌 선택자 웹 페이지를 표현하는 데이터 모두가 태그로 이루어져 있기떄문에, 그 중 서로 동일한 태그가 존재할 수 있음 이렇게 동일한 태그를 분간해 주기 위해, HTML에서는 선택자라는걸 사용해 각 태그를 구별할 수 있는 일종에 주소를 부여함 📌 선택자의 필요성 아래와 같은 HTML 문서가 있다고 가정해 보면, 파이썬 크롤링 C언어 게임 해당 웹 페이지에서 언어 (language)와 관련된 데이터만 필요하다고 생각해 보자. 만약 태그로만 해당 데이터를 선택한다면, 태그 을 사용할 수 있다. 하지만 태그 에 언어 정보 뿐만 아니라 프로젝트 정보 (크롤링, 게임만들기)도 포함된다. 이러한 경우, 프로젝트 정보를 제외하고 언어 정보만을 특정하기 위해 선택자를 사용 파이썬 크롤링 c언어 게임 이렇게 class =..

이거 시간도 얼마 안걸리도 되게 재밌다 오늘 4일차 하는데 너무 재밌고, 흥미로워서 그냥 한 번에 다 해 버릴까 하다가 참았을 정도,, 오늘은 HTML 구조에 대해 배웠다. 📌 웹페이지와 HTML HTML(HyperText Markup Language)은 '마크로 둘러싸인 언어'라는 뜻으로, 웹 페이지의 구조를 나타내는 언어 다시 말해, 웹 페이지를 만들 때 쓰는 언어라고 이해해도 무방 F12 버튼을 클릭해 개발자 도구 창을 보면 (크롬 브라우저가 아는 사람은 구글에 [브라우저 이름] 페이지 소스라고 검색) 뜨는 코드들이 HTML이다. 📌 HTML 태그 확인 코뮤니티 카페의 '출석체그' 페이지를 활용하여 HTML 태그를 직접 확인하여 보았는데 위 사진의 select 버튼을 사용하여 페이지 구성 요소의 h..

3일차부터 갑자기 어려워진 느낌이다 근데 어려워진만큼 재밌다 ! 어제 생활코딩에서 배웠던 HTML과도 연결이 되는 내용이라 더 흥미있게 공부할 수 있었다. 정적크롤링 정적크롤링 할 때 파이썬의 두 가지 라이브러리: requests, beautifulsoup4(beautifulsoup) requests 기존에 어려운 HTTP 요청을 쉽게 사용하기 위해 만들어진 라이브러리 쉽게 말해, 파이썬과 웹을 연결하기 위해 사용 beautifulsoup4 requests로 받아온 HTML 데이터를 다루기 위해 사용되는 라이브러리 쉽게 말해, 웹에 있는 다양한 데이터 중 필요한 데이터만 뽑아내기 위해 사용

✔ 정적 크롤링-정적인 데이터를 수집 장점: 수집속도가 빠르다. 단점: 수집대상에 한계가 있다. ✔ 동적 크롤링-동적인 데이터를 수집 장점: 수집대상에 한계가 없다. 단점: 수집속도가 느리다.

크롤링이란? 크롤링(crawling)이란 인터넷에서 데이터를 검색해 필요한 정보를 색인하는 것을 의미 사용자가 데이터를 하나씩 검색하여 정보를 얻는 것부터 저장, 가공하는 과정을 대신해주는 기술 이러한 크롤링을 해주는 프로그램을 '크롤러'라고 함 크롤링할 수 있는 크롤러를 파이썬으로 구현하는 방법을 배울 예정 ! 업무의 자동화로 인한 업무 효율화