주말을 이용해 정부 기관 사이트(정당 포함)를 광범위하게 조사해본 결과 81개 사이트 가운데 청와대를 비롯해 국정홍보처, 재정경제부, 국세청, 법무부, 정보통신부 등 국민들이 정보에 대한 기대 수준이 높은 37개 사이트들이 검색엔진의 접근을 막고 있더군요.
그런데 조사하다 보니 흥미로운 결과가 있어서 소개해드릴까 합니다. robots.txt를 막는다고 막고 있는 곳에서 얼마나 생각이 없이 이 파일을 적용하고 있는지를 확인할 수 있을 겁니다.
일단 제가 조사한 결과에 대해서는
링블로그에 게시해 놓았으니 참고하시구요. 별도의
칼럼도 올렸습니다. 정부에 대해 약간은 비판적인 시각으로 썼지만 사실 우리나라 정부 기관만 robots.txt를 사용하는 것은 아닙니다.
계속읽기