코드 없이 무료로 웹사이트 데이터 추출 크롤링하는 방법

코드 없이 웹사이트 데이터를 엑셀 파일로 무료 추출하는 방법에 대해 소개드립니다. 예시로 유튜브 데이터 추출하는 방법도 함께 소개드립니다.

필요한 도구는 listly과 Instant Data Scraper라는 크롬 확장프로그램입니다.

먼저 크롬 웹스토어에서 listly과 Instant Data Scraper를 검색해 크롬 브라우저에 설치합니다. (검색 귀찮으신 분은 아래 링크 클릭하셔서 설치하시면됩니다.)

https://chrome.google.com/webstore/detail/instant-data-scraper/ofaokhiedipichpaobibbnahnkdoiiah

Instant Data Scraper

 

https://chrome.google.com/webstore/detail/listly-free-data-scraper/ihljmnfgkkmoikgkdkjejbkpdpbmcgeh

리스틀리 - 무료 데이터 추출, 스크래핑, 크롤링

 

데이터 추출 도구 사용 방법도 아주 간단한데요.

먼저 데이터 추출하고자 하는 페이지를 열어줍니다.

저는 예시로 유튜브 검색 결과를 한번 추출해 보겠습니다.

유튜브 검색창에서 "경제"를 입력하고 경제 관련 최근 1개월 업로드된 영상 결과를 엑셀 파일로 다운로드 해보려고 합니다.

검색창에 "경제"입력하고 필터를 열어 업로드 날짜를 "이번 달"로 지정합니다.

이번다 경제 유튜브 영상 검색

검새 결과를 확인 후 확장 프로그램을 이용해서 검색 결과를 다운로드합니다.

Instant Data Scraper 클릭하면 자동으로 다운로드 가능한 데이터 범위가 인식이되는데요, 만약 자동으로 잡힌 범위가 내가 다운받고 싶은 범위가 아닐 경우 "Locate 'Next' button"클릭하면 스크롤 범위가 자동으로 변경됩니다. 

"Start cawing"버튼 누르면 자동으로 결과를 읽기 시작하고 읽는 도중에 중단할 수도 있습니다. 결과 읽기 종료되면 옆에 초록새 버튼을 클릭해서 파일로 다운로드 하거나 결과를 보사할 수 있습니다.

저는 XLSX 엑샐 파일로 저장했습니다.

Instant Data Scraper로 데이터 추출 하기

Instant Data Scraper을 이용해 총 783개 결과 모두 다운로드 받았고 유튜브 영상 링크/썸네일 링크/유튜브 채널 주소/유튜브 채널 이름/채널 인증 상태/조회수/영상 길이/업로드 시간/영상 해시태그/영상 설명 등 데이터들을 모두 다운로드되었습니다.

Instant Data Scraper의 장점은 사용하기 진짜 간편하고 간단합니다. 컴알못도 이용 가능하고 데이터 다운로드 제한 없고 로그인 없고 완전 무료입니다...음 무료가 더 비싼건가? 아무튼 저는 Instant Data Scraper 잘 쓰고 있습니다.

Listly는 한국 회사에서 만든 프로그램이고 제가 계정 아이디 생각이 안나서 소개는 안할게요 ㅋㅋ

일단 listly도 사용 가능하고 단점은 로그인 필수 그리고 무료로 1페이지인지만 다운로드 가능한 것으로 알고 있습니다. 

찾아보니 맞네요. 

Listly 제품 가격

 

둘 다 체험해 보시고 필요하신걸로 사용 추천합니다.