robots.txt

gigablast.com이라는 검색 서비스가 이구아수 블로그에 며칠 동안 수 백 MB의 트래픽을 발생시켰다. .htaccess에서 막아 뒀는데 설정을 잘못했는지 며칠 동안 계속 접근을 했다. 다시 설정을 바꾸고 이왕 하는 김에 robots.txt 파일도 만들었다. 이 파일에는 딱 두 줄만 들어가 있다.

User-agent: Gigabot
Disallow: /

인간의 언어로 풀이하면 이런 내용이다, "너 기가봇이지? 꺼져!"

이 파일을 추가하고 "tail *.log"로 기가봇이 접근하는 지 확인하는데 미친듯이 내 블로그에 접속하고 있던 기가봇이 이 파일이 생성된 후 2분 정도 지났을 때 딱 robots.txt를 읽는 것을 확인했다. 로그 파일에 그 내용이 있었다. 또한 인간의 언어로 풀이하면 이렇다,

"기가봇이 robots.txt를 읽다."

그리고 더 이상 이 놈들은 내 블로그에 접근하지 않는다. 왜 며칠 동안 내 블로그에 그렇게 미친 듯 접근했는 지 알 수 없지만 기가봇은 내가 정확하게 의사를 표현하자 더 이상 접근을 멈췄다.

갑자기 cool한 연애관을 이야기하던 누군가가 떠 올랐다. 그러고보면 프로그래밍 언어도 그렇고, 스크립트도 그렇고, HTML도 그렇고, XML도 그렇고, 계약서도 그렇고... 다들 우리가 일상에서 말하는 어떤 대화를 함축한 약속이다. 그 약속을 지킬 때 비로소 cool하다는 말을 듣게 되는 것 같다. 그래도 거기엔 아날로그적인 감정이 없다. 일상이었다면 문제를 일으킨 기가봇에게 먼저 이렇게 물어봤을 것이다,

"너 도대체 왜 이러는 거야?"