robots.txt 와 meta 테그를 사용한 봇 접근 제한

견적 more

쓰기

robots.txt 와 meta 테그를 사용한 봇 접근 제한

무아

2011-06

2011-06-02 20:18:11

조회 7187 추천 0

웹 루트 폴더에 robots.txt 를 두고 모든 검색 봇이 검색 못하게 설정해두면 봇 규정상 검색않고 나가야 되는거죠?

User-agent: *

Allow: /

이렇게 해뒀는데

트래픽이 이상하게 많아서 봤더니

robots.txt 적용한게 올해 3월 중순인데

NHN 에서 트래픽을 유발하던 건 3월 이후 사라졌는데

구글에서는 계속 트래픽을 만드네요. 왜그런거죠?

...

짧은글 일수록 신중하게.



정희섭 2011-06 Disallow 로 하셔야죠 ^^; 지금 설정은 말그대로 제발좀 긁어가세요 세팅입니다 Disallow 로 하셔야죠 ^^; 지금 설정은 말그대로 제발좀 긁어가세요 세팅입니다



박동권 2011-06 헉.... 그렇네요. 그런데.. NHN은 저걸보고 안들어온건... 미리 쫄아버린 걸까요???? 헉.... 그렇네요. 그런데.. NHN은 저걸보고 안들어온건... 미리 쫄아버린 걸까요????

로그인 하시면 댓글을 남길 수 있습니다

쓰기

QnA

쓰기

1273/5596

번호	제목Page 1273/5596	글쓴이	날짜	조회	추천
	(광고) 단통법 시대의 인터넷가입 가이드(ver2.0) (228)	백메가	2015-12	1051216	25
(광고) 단통법 시대의 인터넷가입 가이드(… (228) 2015-12 1051216 1 백메가
	[필독] 처음 오시는 분을 위한 안내 (718)	정은준1	2014-05	4498972	0
[필독] 처음 오시는 분을 위한 안내 (718) 2014-05 4498972 1 정은준1
86466	robots.txt 와 meta 테그를 사용한 봇 접근 제한 (2)	무아	2011-06	7188	0
robots.txt 와 meta 테그를 사용한 봇 접… (2) 2011-06 7188 1 무아
86465	한성 노트북 바이오스 추출 방법? (4)	반성만	2018-05	7188	0
한성 노트북 바이오스 추출 방법? (4) 2018-05 7188 1 반성만
86464	랜카드 문의 (3)	한성호	2015-01	7188	0
랜카드 문의 (3) 2015-01 7188 1 한성호
86463	HP ProLiant MicroServer Gen8 공동구매 안하나요? (19)	테돌아이	2014-08	7188	0
HP ProLiant MicroServer Gen8 공동구매 … (19) 2014-08 7188 1 테돌아이
86462	기존설치되어있는 시스템의 해상도가 현재 연결하고자 하는 모니터의 표현 해상도 … (1)	김건우	2010-06	7187	0
기존설치되어있는 시스템의 해상도가 현… (1) 2010-06 7187 1 김건우
86461	dell 과 hp 의 차이 (5)	제스퍼즈	2015-10	7187	0
dell 과 hp 의 차이 (5) 2015-10 7187 1 제스퍼즈
86460	학교에서 사용되는 서버를 모니터링 하고싶은데요 (2)	Hilm	2010-06	7187	0
학교에서 사용되는 서버를 모니터링 하고… (2) 2010-06 7187 1 Hilm
86459	[질문] Tyan S1837UANG-L 입니다. (2)	고대준	2004-12	7187	14
[질문] Tyan S1837UANG-L 입니다. (2) 2004-12 7187 1 고대준
86458	용산에서 ide용 3.5"외장케이스를 사려면 (4)	서미	2013-11	7187	0
용산에서 ide용 3.5"외장케이스를 사… (4) 2013-11 7187 1 서미
86457	SAS 2.5인치 를 컨버터를 써서 3.5로 연결할때 성능저하 있을까요? (5)	블랙	2011-03	7187	0
SAS 2.5인치 를 컨버터를 써서 3.5로 연결… (5) 2011-03 7187 1 블랙
86456	이런 아이템이 필요 합니다. (5)	행아범	2013-10	7187	0
이런 아이템이 필요 합니다. (5) 2013-10 7187 1 행아범
86455	서버컴퓨터 수냉시스템 어떻게 생각하시나요? (11)	클래식	2016-08	7187	0
서버컴퓨터 수냉시스템 어떻게 생각하시나… (11) 2016-08 7187 1 클래식
86454	pc캠으로 CCTV마냥 쓸 수 있는 프로그램 뭐 없을까요? (6)	박광덕	2008-05	7186	20
pc캠으로 CCTV마냥 쓸 수 있는 프로그램 … (6) 2008-05 7186 1 박광덕
86453	오래된 아파트로 인한 욕실에 콘센트가 없는데..가설하는데 문제가 있을까요? (방수… (11)	김건우	2017-04	7186	0
오래된 아파트로 인한 욕실에 콘센트가 없… (11) 2017-04 7186 1 김건우
86452	바이러스.....관련 (1)	그래피아	2010-11	7186	0
바이러스.....관련 (1) 2010-11 7186 1 그래피아
86451	G형 클램프 파는 곳? (5)	마이코코	2011-07	7186	0
G형 클램프 파는 곳? (5) 2011-07 7186 1 마이코코
86450	개조제온에 대한 조언 부탁드립니다, ..ㅜ.ㅜ (20)	v레드베어v	2016-08	7186	0
개조제온에 대한 조언 부탁드립니다, ..ㅜ… (20) 2016-08 7186 1 v레드베어v
86449	서울지역 이명치료 받아본 회원 계시나요? (5)	monan	2013-09	7185	0
서울지역 이명치료 받아본 회원 계시나요? (5) 2013-09 7185 1 monan
86448	갑자기 원격 데스크탑 연결이 안됩니다. (9)	장태주	2006-06	7185	10
갑자기 원격 데스크탑 연결이 안됩니다. (9) 2006-06 7185 1 장태주
86447	아마퀘스트 6300B쓰시는 분께 문의 드립니다. (4)	윤치열	2004-05	7185	9
아마퀘스트 6300B쓰시는 분께 문의 드립니… (4) 2004-05 7185 1 윤치열