파이썬웹크롤링1 [Crowling] python 웹 크롤링 전 포스팅에서 공공데이터 API를 활용하여 정책들을 받아왔었다.그거 하는 것도 꽤나 애먹었는데 내가 필요한 정보들이 아니었다.그래서 여러 사이트를 검색해보던 중 청년 정책들을 잘 소개해주는 사이트를 발견했다.카테고리 주거분야로 들어가면 주거 관련 정책들만 쫙 모아주니 여기서 데이터를 받아오면 좋겠다 생각했다.그래서 이번에는 웹 크롤링을 시도해봤다. 이것저것 정말 많이 해보는 ... (vsCode 사용했습니다.) 내가 할 것은 1. 위의 사이트에서 정책 제목들을 가져오는 것2. 해당 정책의 상세보기에 접근할 수 있는 '사업 안내' 버튼 URL을 가져오는 것1. 필요한 라이브러리 설치크롤링에 기본이 되는 라이브러리들이다.pip install requestspip install beautifulsoup파이.. 2024. 3. 17. 이전 1 다음
