R is well

목차 개념 설명 전체 코드 상세 설명 마무리 1. 개념 설명 이번에는 앞서 html 구조를 활용하여 Webcrawling을 하는 것은 맞지만,다른 패키지를 사용하여 더 쉽게 crawling 하게 만들었으며, csv파일로 저장해서 결과물을만들어 보았습니다.이번에 사용한 주요 패키지는 bs4로 BeautifulSoup를 가지고 있습니다.BeautifulSoup는 html 코드의 가독성을 높여주며 find 함수를 이용해 필요한 정보를 crawling할 수 있게 합니다. 2. 전체 코드 이번에는 Amazon에서 물품의 리뷰 데이터를 가져오는 코드를 만들어 보았습니다. # cmd 창에 chcp 65001 실행 import re, requests, csv from bs4 import BeautifulSoup fro..

목차 개념 설명 전체 코드 상세 설명 1. 개념 설명 Webcrawling Webcrawling은 Webcrawler를 통해 웹상에서 정보를 끌어오는 행위를 의미하며, Webcrawler는 다음과 같이 정의 됩니다. 웹 크롤러(web crawler)는 조직적, 자동화된 방법으로 월드 와이드 웹을 탐색하는 컴퓨터 프로그램이다. 웹 크롤러에 대한 다른 용어로는 앤트(ants), 자동 인덱서(automatic indexers), 봇(bots), 웜(worms), 웹 스파이더(web spider), 웹 로봇(web robot) 등이 있다. 출처 : 위키백과 P.S. 요약 웹상의 데이터를 자동화된 방법으로 수집하는 것! Cssselector Cssselector를 설명드리기에 앞서 CSS(Cascading Sty..