크롤러1 무신사 홈페이지에서 키워드 수집해오기 (Python_Crawler) BeautifulSoup Crawler(크롤러)란? 크롤러는 땅을 파는 굴삭기를 이르는 명칭으로 최근에는 웹에서 정보를 자동화된 방식으로 수집하는 걸 웹 크롤러라고 부른다. 그렇다면 크롤러란 프로그램을 사용해서 얻을 수 있는 점이 무엇이 있는가 하면 정보의 홍수와도 같은 웹 상에서 더 많은 데이터를 수집하고 더 빨리 얻을 수 있게 하기 위하여 주로 크롤러를 사용하는데 이 분야가 적용될 수 있는 범위는 정말로 무궁무진 하다. 크롤러를 제작할 때에는 웹 분야에서 널리 쓰이는 Python 기반으로 만드는데 크롤러 기능을 제공하는 두 개의 모듈을 설치하면 된다. 1.BeautifulSoup HTML&XML 파일 parsing library 하지만 html 코드로 나오기 때문에 추가적인 다듬기 작업이 필요하다. 2.Requests res.. 2020. 12. 19. 이전 1 다음
