씨형 2015-05

제가 관심있어하던 당시만해도
웹페이지 검색에 꾀나 유용했던것으로 알고있습니다.

웹페이지 검색에 노출이되려면
2cpu(웹사이트 또는 커뮤니티 등등)같은 오랜시간 정보가 꾸준히 쌓인 데이터베이스가 필요한데
(그것도 봇들이 좋아하는, 개미들이 먹잇감을 찾듯이 검색잘되는)
사실 단순히 검색트래픽만 높이자고 이바닥?에 뛰어든 사람들은 그런 데이터가 없죠

즉 가라로 만들어내야한다는건데
그럴려면 기존의 다양한 (남의)웹데이터를 긁어와서
별도로 데이터베이스를 구축하면 그럴싸한 웹페이지검색 결과물을 만들 수 있습니다.

물론 크롤러만드는 이유야 다양하겠지만
제가 알던 부류의 사람들은 이러한 용도로 활용했던걸로 알고 있습니다.

저렇게 노출만 잘되면 남부럽지 않은 트래픽을 모을 수 있고
결국 광고수익 창출로 이끌어낼 수 도 있거든요



그런데 검색봇들도 여러해를 거듭하며 물갈이?되고
더 지능적으로 변하고해서
요새도 그런게 필요한지는 잘 모르겠네요

쉽게말해 요새도 가라데이터가 먹히는지는 잘 모르겠습니다.
구글링해보면 대부분이 효용성있는것들이라....


다른 용도의 답은 아래분들께서.....


대충  쓰자면 이런 이야기네요

강희환 2015-05

범용적인 웹수집기는 만들기 어렵지만, 특정 사이트를 위한 수집기를 만들기는 그다지 어렵지는 않은데요.
구입하는 사람들이 프로그래머는 아닐 것 같네요.

목적이야 다양하겠죠.
사진사이트에 올라온 사진들을 모두 긁어 오고 싶다거나,
장터 게시물이나 특정 키워드가 올라오면 알람을 받고 싶다거나..
다음/네이버의 인물 정보를 모두 긁어오고 싶다거나.
특정 인물들의 SNS의 사진들을 모두 가져오고 싶다거나.

근데 내가 프로그래밍 기술은 없고, 프로그래머를 고용할 수도 없으면 그런 제품을 구입 해야죠.
그나저나 어느정도 퀄리티의 프로그램이 어느정도 가격으로 팔리는지 정말 궁금하네요.