synology / self-hosting / security / performance

운영 요령

DSM 정상 표시와 달랐던 RAID5 검사 실패와 SSD 캐시 수명

DS918+ RAID5에서 전체 오류 0 뒤에 드러난 sdd 확장 SMART 검사 실패와 DSM 표시와 달랐던 읽기 캐시 SSD의 자체 수명 지표를 비교했습니다.

스토리지 상태를 볼 때 DSM의 정상 표시와 전체 SMART 판정만으로는 디스크 상태를 끝낼 수 없었습니다. 네 개 디스크의 전체 SMART 판정은 모두 OK였고, Btrfs dev stats와 dmesg에서도 디스크 오류가 없었습니다. 그런데 RAID5 구성원인 sdd의 확장 SMART 검사는 끝내 read failure로 종료됐습니다.

같은 점검에서 읽기 전용 SSD 캐시는 DSM에 잔여 수명 100%, 정상으로 표시됐습니다. 반면 SSD가 직접 내보낸 수명 지표는 보증 수명을 넘은 상태였고, 신뢰성 저하 경고도 보고하고 있었습니다. 디스크와 캐시 모두 화면의 요약 상태와 세부 지표를 분리해서 볼 필요가 있었습니다.

전체 OK 판정과 sdd에 남은 UNC 이력은 서로 다른 신호였습니다

점검 대상은 Synology DS918+의 디스크 네 개였습니다. sda는 중복 구성 없는 단일 디스크로 volume1을 제공했고, sdb·sdc·sdd는 스토리지 풀 1의 RAID5로 volume2를 제공했습니다. RAID5 안에는 회전수가 다른 디스크가 섞여 있었습니다.

초기 확인 당시 디스크별 지연은 읽기와 쓰기 모두 정상 범위였고, 사용률도 과도하지 않았습니다. 파일시스템 오류나 커널 로그 오류가 없다는 점은 당장의 입출력 장애가 뚜렷하지 않다는 뜻으로 받아들였습니다. 그러나 이것이 개별 드라이브의 표면 상태까지 보증하지는 않았습니다.

sdd에는 과거 ATA 오류가 UNC로 남아 있었습니다. 오류 뒤 확장 검사가 한 번 통과한 이력은 있었지만, 그 이후 드라이브 자체 self-test 기록이 없었습니다. 과거 통과 결과를 현재 상태로 간주하지 않고, sdd에 확장 검사를 다시 실행하기로 한 이유입니다.

SMART 정보는 root 권한이 필요해서 nsenter 일회용 컨테이너에서 읽었습니다. 검사 진행 상태, self-test 이력, 속성값을 따로 조회해 요약 판정에서 빠질 수 있는 흔적을 나눠 확인했습니다.

smartctl -d sat -c /dev/sdd
smartctl -d sat -l selftest /dev/sdd
smartctl -d sat -A /dev/sdd

sda·sdb·sdc에는 short test를 실행해 통과를 확인했고, sdd에는 extended test를 시작했습니다. RAID5에 상시 I/O가 있는 상태여서 sdd 검사는 빠르게 끝나지 않았습니다. 시작 다음 날에도 진행률이 거의 움직이지 않아, 검사 중이라는 상태만으로 통과 여부를 판단하지 않고 최종 결과를 다시 확인했습니다.

상시 I/O 아래에서 느리던 확장 검사는 읽기 실패로 끝났습니다

나중에 확인한 sdd의 최종 self-test 상태는 Completed: read failure였습니다. 검사 화면에서 남은 비율이 크게 보이던 구간에 실패했으므로, 넓은 검사 범위를 끝까지 읽지 못한 결과였습니다. 단순 short test 통과와 확장 검사 결과를 같은 의미로 취급하지 않았습니다.

sdd 확장 검사 경과와 속성 변화
확인 항목9월 점검10월 30~31일 실측
확장 SMART 검사9월 27일 시작, 9월 28일 02:51에도 90% remainingCompleted: read failure
검사 실패 지점진행 중90% remaining 시점, 시작 후 약 10% 구간
Current_Pending_Sector88
Offline_Uncorrectable4546
Reallocated_Sector_Ct확인값 없음0
가동 시간오류 발생 시점 42,393시간, 당시 확인 시점 54,886시간55,694시간

이전에는 대기 섹터가 재할당 섹터로 넘어가거나 대기 섹터 자체가 늘어나면 교체한다는 기준을 세웠습니다. 이번 결과에서는 재할당 섹터가 없어도 대기 섹터와 오프라인 정정 불가 섹터가 남아 있었고, 새 확장 검사도 실패했습니다. 재할당 수치 하나만 보고 보류하기에는 신호가 겹친 상태였습니다.

volume2는 웹사이트, 사진, 사용자 폴더를 담고 있으며 사용 중인 RAID5 볼륨입니다. RAID5는 디스크 하나의 고장까지만 견딜 수 있습니다. 다른 디스크에 문제가 생겨 재구성하는 동안 sdd의 불량 섹터를 만나면 volume2 전체를 잃을 수 있다는 점을 교체 판단에 포함했습니다.

sdb와 sdc도 같은 시기 디스크여서 sdd 하나의 상태만 떼어 놓고 볼 수 없었습니다. 재구성은 남은 구성원에 읽기 부담을 더하는 작업이므로, 교체 자체보다 먼저 복구 가능한 사본을 갖추는 순서가 필요했습니다.

DSM의 정상 표시는 SSD가 직접 보고한 마모 지표와 달랐습니다

SSD 캐시는 Samsung 960 EVO 500GB 단일 NVMe로, volume2에 연결한 읽기 전용 캐시였습니다. 초기 구성에서는 WRITE_AROUND로 동작했고 캐시 사용률도 높았습니다. 9월에는 smartctl로 NVMe SMART를 읽지 못했기 때문에, 이후 확보한 SSD 자체 보고값을 DSM 요약 화면과 따로 비교했습니다.

읽기 캐시 SSD의 화면 표시와 자체 보고값
항목확인값
DSM SSD 상태잔여 수명 100%, 정상
Percentage Used111%
누적 쓰기량약 359TB
960 EVO 500GB 보증 쓰기량200TBW
Critical Warning0x4
Media errors0
캐시 읽기 적중률43%

이 조합에서는 DSM의 수명 표시보다 SSD가 직접 보고한 마모와 경고 상태를 더 무겁게 봤습니다. 미디어 오류가 없더라도, 보증 수명을 지난 수치와 신뢰성 저하 경고가 함께 나온 캐시를 계속 성능 전제로 두기는 어려웠습니다.

다만 이 캐시는 읽기 전용입니다. 확인 시점에 하드에 아직 쓰이지 않은 dirty 데이터도 없었기 때문에, SSD가 멈춰도 캐시된 데이터 때문에 볼륨 데이터가 사라지는 구성은 아니었습니다. 순간적으로 볼륨 반응이 버벅일 수 있는 영향과 데이터 손실 위험은 구분해서 판단했습니다.

읽기 적중률도 압도적으로 높은 수준은 아니었습니다. 캐시를 유지해 얻는 성능 이득보다 마모된 단일 SSD를 계속 운용하는 부담이 더 크다고 봤고, 교체를 기다리지 않고 제거할 수 있는 선택지로 남겼습니다.

sdd는 추가 디스크가 아니라 교체 대상으로 정했습니다

새 하드는 네 번째 디스크를 더하는 용도가 아니라 기존 sdd를 교체하는 용도로 정했습니다. 조건은 14TB 이상 NAS용 CMR 디스크이며, WD Red Plus와 Seagate IronWolf를 후보로 두었습니다. 기존 RAID5의 용량과 구성 방식을 유지하면서 문제 드라이브를 바꾸려는 판단입니다.

교체 전에 중요한 데이터부터 외부로 백업하는 순서를 잡았습니다. RAID 재구성에는 하루에서 이틀 정도가 걸릴 수 있고, 그동안 남은 디스크에 부담이 커집니다. RAID5가 살아 있다는 사실을 외부 백업이 있다는 뜻으로 바꾸어 해석하지 않기로 했습니다.

SSD 캐시는 DSM에서 제거할 수 있습니다. 읽기 전용 캐시이므로 데이터 이동 작업이 아니라 캐시 연결을 해제하는 조치이며, 필요하면 다음 경로에서 처리합니다.

스토리지 관리자 → 스토리지 풀 1 → SSD 캐시 → 제거

스토리지 풀과 볼륨의 번호가 어긋난 점도 그대로 유지하기로 했습니다. DSM이 생성 순서대로 번호를 붙인 결과이며, 번호만 맞추려면 볼륨을 지우고 다시 만들어야 했습니다. 식별자를 보기 좋게 맞추는 일보다 현재 데이터를 건드리지 않는 선택이 우선이었습니다.

교체 전에는 재구성 위험과 백업 범위를 먼저 확인합니다

남은 우선순위는 sdd 교체, 변경 불가 스냅샷, 외부 백업, 여유가 생길 때의 볼륨 통합입니다. sdd 교체를 미루는 동안에는 확장 검사 실패와 불량 섹터 관련 속성이 계속 위험 신호로 남습니다. 캐시 제거는 이 위험을 해결하는 작업이 아니라, 별도의 마모된 장치를 운용에서 빼는 작업입니다.

비슷한 상태를 만나면 먼저 스토리지 풀과 볼륨의 연결 관계를 확인해 단일 디스크와 RAID 구성을 구분합니다. 그다음 전체 SMART 판정, self-test 이력, 확장 검사 최종 상태, 대기·정정 불가 섹터를 서로 다른 항목으로 확인합니다. 파일시스템 오류와 커널 로그가 깨끗하더라도 확장 검사가 실패했다면 개별 디스크 판단을 다시 해야 합니다.

읽기 전용 SSD 캐시는 DSM 상태 화면만 보지 않고 Percentage Used, Critical Warning, 누적 쓰기량, 적중률을 함께 확인합니다. RAID5 구성원 교체가 필요하다고 판단되면 재구성 전에 외부 사본을 우선 확보합니다. RAID는 장애 허용 구성이지만, 데이터의 별도 보관 수단은 아니기 때문입니다.