정적 수집 도구1 [Data Science] 크롤링 라이브러리 (파이썬) 데이터 수집을 할 때 사용하는 기법 중 대표적인 것으로 "크롤링"이 있죠!그리고 이 크롤링은 일반적으로 파이썬으로 수행하게 되는데요,이는 파이썬에 크롤링을 돕는 라이브러리들이 잘 구축되어 있기 때문입니다! 그렇다면 파이썬의 크롤링 라이브러리에는 어떤 것들이 있고, 어떤 역할을 하는지 살펴보겠습니다!📌 크롤링 라이브러리라이브러리설명Requests- 정적 수집도구- 단순한 형태의 문법, 인코딩 확인, 헤더 파악, 텍스트 전환이 용이하고, 딕셔너리 형태로 데이터 전송Urllib- 정적 수집도구- 데이터를 바이너리 형태로 인코딩하여 데이터 전송Selenium- 동적 수집도구- 웹 브라우저 드라이버 설치 필요, 동적인 여러가지 상호작용으로 데이터 수집BeautifulSoup- 본문 파싱을 위한 도구- HTML .. 2024. 12. 5. 이전 1 다음