robots.txt 이용한 검색로봇 차단

위키피디아에 아주 깔끔하게 정리되어있다. http://en.wikipedia.org/wiki/Robots_Exclusion_Standard User-agent: * Disallow: / 모든 로봇에 대해 모든 디렉토리를 차단하는 구문이다. 하지만 “purely advisory”하기 때문에 robots.txt 파일을 확인하지 않고 크롤링하는 로봇은 차단할 수가 없다. 읽다보니 … Continue Reading →

Dropbox 용량 늘리기

많은 클라우드 저장 서비스들이 제공되고 있지만, API를 일찍부터 개방해서 많은 프로그램들이 연동되는 Dropbox가 게중 잘 나가는 녀석이 아닐까 싶다. 무료 용량이 2기가밖에 안돼서 (처음 나왔을때는 대단한 용량이었지만) 아쉬웠다면 다음 2가지로 … Continue Reading →