IDC 장애건들 정리

[truefeel]

언론 기사를 토대로 IDC의 장애발생 현황을 정리했습니다.
언론에 보도 되지 않은 부분적인 장애들도 있습니다. 2-3단계를 걷쳐서 들은 얘기라 적지 않습니다.

실제 장애시간은 언론보도에 나온 것보다 길겁니다.
IDC장애가 해결되어도 입주한 업체들의 시스템들은 복구, 종합적인 점검, 서비스 오픈 등의 과정을 거치다 보면
당연히 늦어질테닌깐요. 거기에 H/W장애, HDD fail등의 문제도 발생한 경우도 더러 있구요.
이런 장애가 발생할 때는 반드시 IDC의 서비스 수준 협약(Service Level Agreement, SLA)를 읽어보고 보상을 어떻게
받아야 하는지 확인해보세요.

여기에 없는 장애건에 대해 아시는 것 있으면 적어주세요. 또는 그 현장에서 고생했거나 들은 얘기도...

1. 호스트웨이 IDC 전체 전원 장애 (2006.9.26 16시26분)

- 26일 경기도 과천 변전소 화재로 인해 호스트웨이의 인터넷데이터센터(IDC) 전체 정전 사태 발생
- 오후 4시26분 정전 -> 수초 후 다시 전원 가동
- 호스트웨이를 이용하고 있는 사이트는 머니투데이, iMBC, SK증권, 메리츠증권, 코원시스템 등을 비롯해 5만여곳
-> 올블로그, jobkorea, maxmp3, 그리고 엠파스 일부 등도 호스트웨이에 있습니다.

[ 장애 원인 ]
- 정전 사태 원인에 대해 호스트웨이측은 한국전력에서 공급된 이상 전압 전류 때문이라고
- 한국전력은 본래 기준치인 60Hz에서 오차범위 ±0.4Hz 이내의 일정한 전압으로 전력을 공급.
　하지만 과천-의왕의 송전탑 화재로 인해 전압이 고르지 못해 오차범위 ±0.4Hz가 넘는 이상 전압이 반복해 공급.
　이 같은 현상이 반복되면 IDC에서는 정전이 아니더라도 IDC내의 시스템 보호를 위해
　무정전시스템(UPS)으로 전원 시스템이 자동 전환된다. 그 절체 순간이 0.2초 정도 걸린다.

　문제는 무정전시스템(UPS)으로 전원 시스템이 자동 전환되는 0.2초의 짧은 순간에 다시 한번 이상 전압이
　흘렀다는 것. 그에 따라 순간 전압 강하가 발생했고, 이로 인해 UPS가 장애를 일으켰다고 호스트웨이측은 분석

-> 그러나 바로 옆의 KT IDC는 장애가 발생하지 않습니다. ^^*
-> 들은 얘기로는 IDC내는 마치 전쟁터를 방불케했다고 합니다. 커피닉스도 시스템 이상이 생겼고,
후원업체의 도움으로 그 다음날 복구가 되었습니다.

* [현장 속으로] 그날 IDC에선 무슨 일이 있었나 ( 아이뉴스24, 2006-09-29 )
* 이상전류로 인한 서비스 일시 장애 공지 (호스트웨이 공지사항, 2006-09-26 )
* 과천변전소 화재 IT업계 `불똥` ( 디지털타임스, 2006-09-28 )
* 과천 변전소 화재로 인터넷 사이트 불통 ( 머니투데이, 2006-09-26 )

2. 논현 KIDC 장비 고장으로 부분 장애 (2006.8.10 17시)

- 10일 오후 5시 30분께 네트워크 스위치 장비 중 1개가 고장 나 이 장비에 연결된
　업체 20여 곳의 웹사이트가 접속이 불가능해지는 문제가 발생. 장애는 2시간여만에 복구
- 장애 지속시간은 이날 오후 5시30분 전후부터 7시 40분까지 약 2시간 동안

* 통신사 인터넷 잇단 장애 발생 ( 내일신문, 2006-08-11 )
* 데이콤 인터넷데이터센터 `2시간 장애`(종합) ( 이데일리, 2006-08-10 )

3. 오늘과내일의 네트워크 장애 (2006.7.19)

- 서초 하나로IDC 내의 네트워크 장애로 인해 7.19일 14시~15:20(약 01:20분)동안 일부 네트워크가 중단되는 사고
- (주)오늘과내일'(www.tt.co.kr)에 웹호스팅을 맡긴 200여개 언론사와 인터넷 기업 피해

* 200여개 인터넷신문 '접속대란' ( 미디어오늘, 2006-07-20 )

4. 하나로텔레콤 IDC(엔진)내 항온항습기 고장 (2005.8.10)

- 하나로 IDC(엔진)내 항온항습기 고장으로 서버 14개가 과열 정지하는 사고가 발생
- 하나로텔레콤의 IDC인 하나로IDC(엔진) 지하 2층에서 지난 9일 새벽 6시부터 9시 40분까지 항온항습기 고장으로
　서버 약 14개가 과열, 다운되는 사태가 발생
- 10일 전산실 내부의 급격한 온도 상승으로 주로 게임 업체의 서버 수십 대가 수시간 동안 불통

* 전산실 설비관리 `FMS` 뜬다 ( 디지털타임스, 2006-07-05 )
* 잇따른 IDC사고…IT인프라가 흔들린다 ( 전자신문, 2005-08-11 )

5. KT 목동 IDC 전원 장애 (2005.5~2005.6)

- KT 목동 IDC에는 지난 5월 9일, 20일, 25일과 6월 5일, 19일 정전으로 인한 장애가 발생
* KT 목동 IDC 장애 보상, 업체별 제각각 ( 디지털데일리, 2005-07-03 )

- KT 목동 IDC에 입주해 있는 80여개 회사들은 5월 9일, 25일에 이어 6월 5일에도 전원 정전사태가 발생한 것으로
　뒤늦게 밝혀졌다. 5월 9일과 25일에는 전원공급시스템(UPS) 장애로 인해 KT 목동 IDC에 입주해 있는 80여
　고객사의 서버가 다운되는 사태가 발생. 하지만 6월 5일 오전 8시 50분경에 엘리베이터까지 멈추는 건물 전체
　전원공급이 중단돼 80여 고객사의 서버가 다운되는 사태가 발생
* KT 상대 ‘피해보상 금액’ 눈덩이처럼 불어나 (디지털데일리, 2005-06-15 )

- KT 목동 IDC의 정전사태는 지난달 9일과 20일, 25일에 이어 최근에만 4번째로 발생한 장애
　KT 목동 IDC는 지난 5일 새벽 UPS 장비를 교체했으나 이날 오전 8시 50분경 13층 전원공급에 이상이 발생
　UPS 장비 교체가 완료된 이후 KT-IDC 13층의 전원공급에 이상이 생겼으며
　장애는 8시50분경부터 10시 50분까지 약 2시간 가량 발생한 것으로
　UPS 교체 작업으로 KT 목동 IDC 13층, 14층, 15층에 입주해 있는 80여개 고객사의 장비는
　해당 시간동안 전원공급이 중단.
* KT 목동IDC, 5일에도 ‘장애’ 또 발생 ( 디지털데일리, 2005-06-07 )

6. 기타

- 2000년에는 동원증권 전산실이 침수돼 거래가 중단되는 초대형 사고가 터지기도. (디지털타임스 2006-07-05)

[truefeel]

모 결제업체에서 17:05~17:20까지 KIDC의 네트웍 장애로 인해 결제 서비스에 문제가 있었다라는 메일 한통을 받았습니다.
확인하니 다음 접속이 잘 안되었다고 말하시는 분이 있었고, 기사 검색 결과, 역시나 한건 나오는군요.
지난 8월 10일에도 비슷한 시간대에 장애가 생겼습니다. 요즘 IDC에서 이런저런 장애가 자주 발생해서 불안한 마음이 점점 커집니다.

출처 : 이데일리, 2006.11.22 http://news.empas.com/show.tsp/cp_ed/20061122n11494/

[kaien]

2번 으로 피해를 봤었어요 ㅠ.ㅠ

[truefeel]

8월 KIDC장애로 kaien님 고생하셨군요... 저런...


KIDC의 장애리포트 메일입니다.