Archive for the 'FTP' Category

ftp.daum.net은 매번 새로운 버전이 출시될때마다 홍역을 앓습니다. 최근에는 평상시에도 정상적인 이용이 불가능할정도로 엄청난 트래픽에 고생하고 있는데요.

많이 알려지고 유명해지니 그런거라고 위안을 삼지만 문제는 이로인해 다른 분들까지 정상적인 이용이 불가능하다는 점. 현재 ftp.daum.net에는 우분투, 이클립스외에도 모질라, 최근에는 오픈수세까지, 다양한 팩키지를 호스팅하고 있습니다. 어느 한 프로젝트 또는 어느 한 국가때문에 다른 분들마저 정상적인 이용이 곤란한 것은 결코 바람직한 일이 아닙니다. 따라서 보다 많은 분들이 편리하게 이용할 수 있도록 당분간 특정 국가와 특정 프로젝트에 속도 제한을 둡니다.

특정 국가는 전체 접속자의 90% 이상을 차지하는 중국이며, 중국 사용자들의 대량 트래픽은 ftp.daum.net이 수용할 수 있는 임계치를 매번 초과하므로 당분간 중국에서 접근은 다운로드 속도에 제한을 둡니다. 특정 프로젝트는 오픈수세이며 현재 11.0 버전 출시와 함께 4.2기가의 거대한 파일을 공식 홈페이지에서 다운로드 할 수 있도록 제공하고 있는데, 마찬가지로 오픈수세 프로젝트의 다운로드 속도에 제한을 둡니다.

7월 1일을 기해 임시로 적용해 테스트를 끝냈으며 오늘 최종 적용합니다. 앞으로는 보다 많은 분들이 ftp.daum.net을 훨씬 더 쾌적하게 이용할 수 있으리라 생각합니다. 한결 더 빨라진 ftp.daum.net. 많은 이용 바랍니다.

ftp.daum.net은 KAIST와 함께 국내 공개 FTP로는 해외 정식 미러로 등록된 몇 안되는 미러입니다. 정식 미러로 등록되기 위해서는 각 프로젝트별 정해진 양식에 따라 신청서를 제출하거나 메일링 리스트 가입 또는 관리자에게 직접 요청 메일등을 보내게 되는데요. 등록 방법 또한 제각각일뿐더러 대부분은 FTP에 일부 문제가 있더라도 크게 개의치 않습니다. 더군다나 아시아의 작은 미러라면 더더욱 말이지요.

하지만 최근 아주 특이한 분을 발견했습니다. 오픈수세 R&D 부서의 Dr. Peter Poeml입니다.

그와 지금까지 15통의 메일을 주고 받았습니다. 처음에는 rsync 메인 서버인 stage.opensuse.org의 접속 권한을 요청하기 위해서였습니다. 하지만 그는 ftp.daum.net의 문제점을 하나하나 꼼꼼히 체크했고, 아파치 2.0.x에 4G가 넘는 파일이 보이지 않는 문제가 있다, 권한 문제가 있다등. 문제가 있을때마다 원인과 해결책을 상세한 URL과 함께 알려주었고, 결국 서버를 아파치에서 lighttpd로 서버를 변경했을때는 좋은 결정이었다며 박수를 보내기까지 했습니다.

지나치게 많은 것을 체크하고 문제를 지적하니 적잖이 피곤했던 것도 사실이지만 문제를 하나 둘 수정해 나갈때마다 더욱 안정적으로 변해가는 FTP 서버를 바라보며 그에게 새삼 고마움을 느꼈습니다.

비록 오픈수세는 아주 유명한 배포본은 아니지만 이런 꼼꼼하고 세심한 관리자가 있다면 오픈수세의 앞날은 밝을 것이라 확신합니다. 아울러 오픈수세의 11.0 버전이 막 출시됐습니다. 이에 따라 ftp.daum.net도 살짝 느려졌으니 참고하길 바라며 오픈수세 11.0 대박나길 기원합니다.

서버를 교체한 후에도 ftp.daum.net이 눈에 띄게 느려졌습니다. 그 이유는 우분투 8.04 출시를 즈음하여 중국으로부터 엄청난 트래픽이 유입된 탓입니다. 보시다시피 현재도 동시 접속자가 2,000명을 넘어서는 엄청난 수치를 보여주고 있습니다.

그리고 이 많은 접속의 대부분은 중국입니다.

혹시나 불법적인 접근이 있진 않은지 노심초사 지켜보고 있습니다만 특정 IP에서 지나치게 많은 커넥션을 생성하는 것 외엔 아직까지 별다른 징후는 보이지 않고 있습니다. 중국에 우분투 사용자가 이렇게 많은지 새삼 놀라고 있는 중입니다.

전세계를 대상으로 하는 오픈소스 미러링 서버인 만큼 어느 국가에서 접속하든 관계는 없지만 이렇게 특정 국가에서 대량의 트래픽이 유입되는 모습이 썩 바람직해 보이진 않습니다. 한가지 확실한 점은 ftp.daum.net은 한국 기업이 후원하고 한국인이 관리하며 한국에 위치한 한국 서버란 점 입니다.

한국에서 가장 빠른 오픈 소스 미러링 서버 ftp.daum.net의 인기가 대단합니다. 상당한 고사양의 서버지만 늘어나는 이놈의 인기 덕분에 트래픽을 감당하지 못해 힘들었는데요.

그간 ftp.daum.net은 웹 서버로 만국 공통 아파치를 사용했습니다. 그런데 아파치는 최대 접속량에 한계가 있습니다. 소스 코드를 수정하여 재컴파일 하지 않고는 확장이 불가능한 문제입니다. 게다가 2.0.x 버전의 버그로 2G가 넘는 파일이 보이지 않는 문제도 있어 OpenSUSE 공식 미러 등록이 보류되기도 했습니다.

때마침 우분투 8.04 출시와 함께 폭증하는 트래픽을 견디다 못해 ftp.daum.net의 웹 서버를 빠르기로 소문난 lighttpd로 교체하기로 마음 먹었습니다.

좌측은 아파치로 구동할때 동시 접속 현황, 오른쪽은 lighttpd로 교체후 동시접속 현황입니다. 아파치는 동시 접속자를 512명밖에 처리해주지 못했으나 lighttpd는 8배나 늘어난 3800여명의 동시 접속을 받아들이고 있습니다. 아시다시피 ftp.daum.net은 대용량 파일을 전송하다 보니 대부분이 Waiting 상태에서 전송을 수행하고 있고 초당 40회 정도의 새로운 요청을 꾸준히 받아들이고 있습니다.

웹 서버의 병목이 줄어든 덕분에 CPU랑 하드 디스크는 예전보다 더욱 열심히 몸살이 날 정도로 돌고 있습니다. 열심히 일해주니 기쁩니다만 어서 빨리 우분투 8.04 열풍이 지나가고 평화가 되돌아 오길 바랄뿐입니다.