웹파서가 필요한 이유..?

윈도우10   
   조회 3331   추천 0    


웹프로그래밍 하면서도 잘 몰랐었는데

게시판 파서라는게 알음알음으로 꽤나 고가에 팔리고 있었네요...

웹프로그래머라면 남의 오픈소스 게시판 퍼와서 저장하는 크롤러 만드는게 전혀 어렵지 않지만

저게 왜 팔려나가고 돈이 되는지 모르겠습니다. 부수입으로 꽤 하는가 봅니다.

무엇때문에 그런가요/?
짧은글 일수록 신중하게.
씨형 2015-05
제가 관심있어하던 당시만해도
웹페이지 검색에 꾀나 유용했던것으로 알고있습니다.

웹페이지 검색에 노출이되려면
2cpu(웹사이트 또는 커뮤니티 등등)같은 오랜시간 정보가 꾸준히 쌓인 데이터베이스가 필요한데
(그것도 봇들이 좋아하는, 개미들이 먹잇감을 찾듯이 검색잘되는)
사실 단순히 검색트래픽만 높이자고 이바닥?에 뛰어든 사람들은 그런 데이터가 없죠

즉 가라로 만들어내야한다는건데
그럴려면 기존의 다양한 (남의)웹데이터를 긁어와서
별도로 데이터베이스를 구축하면 그럴싸한 웹페이지검색 결과물을 만들 수 있습니다.

물론 크롤러만드는 이유야 다양하겠지만
제가 알던 부류의 사람들은 이러한 용도로 활용했던걸로 알고 있습니다.

저렇게 노출만 잘되면 남부럽지 않은 트래픽을 모을 수 있고
결국 광고수익 창출로 이끌어낼 수 도 있거든요



그런데 검색봇들도 여러해를 거듭하며 물갈이?되고
더 지능적으로 변하고해서
요새도 그런게 필요한지는 잘 모르겠네요

쉽게말해 요새도 가라데이터가 먹히는지는 잘 모르겠습니다.
구글링해보면 대부분이 효용성있는것들이라....


다른 용도의 답은 아래분들께서.....


대충  쓰자면 이런 이야기네요
강희환 2015-05
범용적인 웹수집기는 만들기 어렵지만, 특정 사이트를 위한 수집기를 만들기는 그다지 어렵지는 않은데요.
구입하는 사람들이 프로그래머는 아닐 것 같네요.

목적이야 다양하겠죠.
사진사이트에 올라온 사진들을 모두 긁어 오고 싶다거나,
장터 게시물이나 특정 키워드가 올라오면 알람을 받고 싶다거나..
다음/네이버의 인물 정보를 모두 긁어오고 싶다거나.
특정 인물들의 SNS의 사진들을 모두 가져오고 싶다거나.

근데 내가 프로그래밍 기술은 없고, 프로그래머를 고용할 수도 없으면 그런 제품을 구입 해야죠.
그나저나 어느정도 퀄리티의 프로그램이 어느정도 가격으로 팔리는지 정말 궁금하네요.
로그인 하시면 댓글을 남길 수 있습니다


QnA
쓰기
제목Page 4462/5683
2015-12   1491403   1  백메가
2014-05   4954900   1 정은준1
2017-04   3346   1 페르세우스
2020-06   3346   1 찬이
2020-08   3346   1 가빠로구나
2017-07   3346   1 마통
2017-05   3346   1 하셀호프
2017-03   3345   1 신은왜
2018-07   3345   1 팬도라
2020-06   3345   1 이지포토
2015-10   3345   1 김건우
2014-02   3345   1  회원K
2020-07   3345   1 twopaik
2017-08   3345   1 범군
2020-01   3345   1 다온
2015-03   3345   1 이문영
2018-03   3345   1 김건우
2014-05   3345   1  무아
2019-01   3345   1 서버전문가…
2016-07   3345   1 땅땅
2020-03   3345   1 알선업체
2017-08   3345   1 c4066
목록
쓰기