Adsense in contents

Robots.txt 몰랐던 부분

robots.txt 관련 글을 읽어보면 이해가 된다. 하지만 실제로 내가 원하는 방향으로 설정하려면 맞게 한 것인지 검증을 할 곳이 없이 애매할 때가 종종 있었습니다. 오늘은 제가 평상시 애매했던 부분을 알게 되어 기록 형으로 포스팅을 남깁니다.

하나를 제외한 모든 크롤러 허용/차단하기

아래 내용을 풀이하면…Googlebot-image만 차단이 되며 나머지 크롤러 봇은 사이트에 접근할 수 있다는 뜻이다.

user-agent: Googlebot-image
Disallow: /

user-agent: *
Allow: /

아래 내용을 풀이하면, 위와 반대로 Googlebot-image만 허용이 되며 나머지 크롤러 봇은 사이트에 접근이 차단된다는 뜻이다.

user-agent: Googlebot-image
Allow: /

user-agent: *
Disallow: /

Leave a Comment

함께보면 유용한 글


텍스트박스 글자 클립보드로 복사하는 방법 1가지

텍스트박스 글자 클립보드로 복사하는 방법을 찾아보다가 챗GPT와 함께 만들어 봤습니다. 복사하기 버튼에 마우스 오버시 tooltips 까지 나옵니다. 아래 포스팅은 기록형으로 추후 참고하기 위해 작성되었습니다. 필요하신 분들은 사용하셔도 됩니다.

간헐적 단식 다이어트 이런건가? 13일째 결과

간헐적 단식 들어는 봤나요? 오늘 이 다이어트 방식을 강제로 하게 되었네요. 퇴근 후 집에와서 밥을 먹으면 너무 늦어 저녁 해결 후 출발 하려고 했는데 그걸 놓쳤네요. 그래서 오늘은 저녁까지 스킵하게 ... Read more

판촉물제작 쇼핑몰 어디가 좋은가?

판촉물제작 생각 하시나요? 판촉물제작 쇼핑몰 찾고 있으신가요? 오늘 알아볼 내용은 기업홍보를 위해 필요한 판촉물 선정에 관한 유용한 팁 입니다. 홍보대상 선정 가장 먼저 어떤 대상을 상대로한 홍보물을 만들 것인가? 아니면 ... Read more

새로운 블로그 시작

2022년 2월 내 인생의 새로운 블로그를 시작 합니다. 이젠 더이상 헤메지 말고 이곳에 정착 할 수 있도록 해주세요