웹 크롤링 도구 추천부탁드립니다.

정의석   
   조회 3466   추천 0    

웹 크롤링(스크랩핑) 도구를 찾고 있습니다.

파이썬으로 프로그램밍 하면 되기는 하지만,, 특정 상황에서 1회성으로 쓰는지라 그때마다 코딩하기가 번거럽(다고 쓰지만, 어려워서요. ㅠㅠ)네요.

No Coding Scrapping Tool 이라고 부르는거 같습니다.

현재까지 인터넷 검색해서 몇몇 사용 해 봤습니다.

Octoparse, WebHarvy, OutWit Hub등의 프로그램과 브라우저 익스텐션인 Web Scrapper, NoCoding Data Scraper를 사용 해 봤습니다.

사용하기엔 프로그램형태로 되어 있는게 더 나은거 같기는 합니다.

주로 게시판형태의 제목등을 크롤링 하면 됩니다. 다음페이지 넘어가는 기능 있어야 하고요.

 저렴하거나 무료(그대신 페이지 제한은 없었으면 좋겠습니다.) 프로그램 중 추천 부탁드립니다.

짧은글 일수록 신중하게.
WGET, HTTRACK 쓰고 있습니다.
두어게 더 쓰던게 있는데 생각이 안나네요 .


QnA
제목Page 877/5730
2014-05   5266475   정은준1
2015-12   1791391   백메가
2020-12   2534   삐돌이슬픔이
2020-12   2723   Sikieiki
2020-12   4261   AMD빌런
2020-12   3352   반성만
2020-12   3244   다이다이
2020-12   4290   알수없는힘
2020-12   2831   먹짱이
2020-12   3055   카이제린
2020-12   3110   JYC1040
2020-12   5398   iroo
2020-12   3484   Noname1
2020-12   3568   Sakura24
2020-12   4819   inquisitive
2020-12   3138   헥사코어
2020-12   5370   정의한
2020-12   6943   장동건2014
2020-12   4728   guest1
2020-12   2941   guest1
2020-12   3136   블랙펄
2020-12   6203   까치산개꿀탱