본문 바로가기
생활일기/trend

[블로그 리포트] 블로그 600만개 아이디 추적을 시작으로...

by 액션신 신일석 2006. 8. 9.

블로그 600만개 아이디 추적을 시작으로...

초기 seed 블로그 추적과 신규글 추적, 그리고 다시 이 블로그를 가지고 확장추적하면서 꾸준히 살펴본 결과 현재 600만개정도의 블로그 아이디를 찾아내었습니다.

운영 중간에 DB서버를 날린 까닭에 많은 아이디를 잃어버려 아이디별 추적일을 살펴 볼순 없으나 그럭저럭 현재 사용중인 블로그나 인터넷에서 검색으로 찾을 수 있는 블로그는 찾아낸듯 합니다.

그러나 이 통계는 단순 수집에 의한 통계로 전수가 아니기 때문에 실제 블로그수와 많은 차이가 날수 있음을 유의해 주시고...



지금 시점에 이렇게 1단락 지으려는 이유는 이 블로그를 가지고 다시 다른 블로그를 확장검색하려는 2단계 프로그램을 돌릴예정이기 때문입니다.

그렇게 되면 지금보다 훨씬 많은 아이디들을 추적할 수 있으리라 봅니다.



한국내 블로그를 추적하는 것을 목적으로 하였기 때문에 msn이나 blogspot은 신경쓰지 않았으나 msn, blogspot에도 한국어 블로그가 존재할 수 있다는 가정하에서 일부러 배제하지는 않았습니다. 따라서 msn, blogspot의 블로그는 수는 아주 적은 수치만 발견되었을 뿐 아니라 아직까지는 한국어 추출을 하지 않았기 때문에 한국어 블로그 수는 아닙니다.



동시에 해당 블로그들의 글들도 추적해 왔지만 5월중에 서버 다운으로 모든 데이터를 다 날렸기 때문에 수천만건의 블로그 글들은 복구 불능,

현재의 글들은 6월 18일 부터 재 수집을 하였던고로 국내 블로그 포스트(글) 수 중 2천 3백만건 정도만 존재합니다.



국내 블로그 글 수만 하더라도 2억건 이상이 존재할 것으로 추정되는데 아직까지 스토리지 미비로 많은 데이터를 수집하기에 주저주저하고 있는 상황입니다.

지금 추적되는 것으로 봐서는 대략 하루 25만건이상, 년간 1억정도의 신규 글들이 국내에서도 쏟아지고 있는것으로 잡힙니다.

실제 수치는 이것보다 많겠지요.



블로그 통계와 흐름이 재미있을지 없을지는 모르나 시도해볼만한 과제라 생각합니다.



모니터링에 잡힌 블로그수

naver.com 2,481,145

msn.com 1,041,689

blogspot.com 903,385

daum.net 557,115

nate.com 375,627

yahoo.com 244,910

paran.com 157,557

empas.com 122,371

egloos.com 51,597

chosun.com 41,139

onblog.com 25,879

joins.com 24,054

tattertools 20,934

dreamwiz.com 11,964

blogin.com 9,168

ohmynews.com 2,815

godpeople.com 2,691

news.go.kr 1,918

jinbo.net 1,814

mediamob.com 870

hanapos.com 392

yonhapnews.co.kr 128

총개수 6,079,162

댓글0