생각의 파편

저는 리퍼러 목록을 공지처럼 이용하고 있습니다. 이 블로그에 방문하는 사람들은 어떤 검색 결과를 통해 들어오는지에 대한 자료를 꾸준히 모으고 싶었거든요. 그런데 이 리퍼러 목록에 맹점이 있는 것을 발견했습니다. 물론 지금까지도 우려는 하고 있었지만, 막상 닥치고 나니 그리 기분이 좋지는 않아요. 무엇인가 하면, 리퍼러 목록에 있는 단어들이 검색 엔진에 의해 다시 검색됨으로써 일종의 '인기 검색어' 악순환을 만드는 것입니다. 예를 들어, 많은 사람들이 미군부대와 관련해서 자주 제 블로그를 찾아오는데, 실제로 검색 엔진에서 상위에 나타나는 검색 결과는 미군부대에 대한 포스트가 아닌, 리퍼러 목록 그 자체가 되었다는 점입니다. 게다가 이런 식으로 반복되는 검색 결과는 리퍼러 목록에도 반복되어 기록되므로 리퍼러 목록 페이지 자체는 '미군부대'라는 단어를 상당히 많이 포함한 일종의 '인기 페이지'가 되고 마는 것입니다.

현재 리퍼러 목록을 바탕으로 제 블로그의 주제를 결정해보자면 미군부대, 에스코트걸, 엑셀 정도겠네요. 특히 에스코트걸 따위로 들어오는 사람들을 보면 역시 인터넷은 그렇고 그런 쪽으로 상당히 많이 활용되고 있다는 것을 느끼며(게다가 저는 아무 생각 없이 미군부대 에스코트가 포함된 포스트를 올렸다가 이런 검색 결과를 대하고서야 에스코트걸이라는 직업(?)이 존재함을 알게 되었을 정도니까요), 아무도 답변을 해주지 않았던 엑셀 관련 문제 역시 많은 사람들이 비슷한 문제로 인터넷을 헤매이고 있다는 것을 알게 되었습니다. 미군부대 출입증에 대해 찾아오는 사람들이 많은 것을 보면 역시 미군부대는 별천지라는 제 생각이 조금은 맞는 것 같다는 생각도 하게 되지요.

아무튼 리퍼러 목록은 계속 갱신하고 싶고, 그렇다고 리퍼러 목록 자체가 인기 페이지가 되는 것은 바라지 않는데, 무슨 해결책이 없을까요? robot.txt를 이용하면 될 것 같다고 어렴풋이 생각은 하지만, robot.txt의 정확한 문법을 몰라서 어떻게 추가하고 있지 못하는 상태입니다. 게다가 Google은 몰라도 Daum이 robot.txt를 준수하는지는 미지수네요. 어떻게 하면 좋을까요. ^^