Semplice mdadm RAID 1 non triggersndo il ricambio

Ho creato due partizioni HDD 2TB ( /dev/sdb1 e /dev/sdc1 ) in un arrays RAID 1 chiamato /dev/md0 utilizzando mdadm su Ubuntu 12.04 LTS Preciso Pangolin.

Il command sudo mdadm --detail /dev/md0 utilizzato per indicare entrambe le unità come sincronizzazione triggers .

Quindi, per il test, ho fallito /dev/sdb1 , l'ho rimosso, quindi l'ho aggiunto nuovamente con il command sudo mdadm /dev/md0 --add /dev/sdb1

watch cat /proc/mdstat mostrato una barra di avanzamento della ricostruzione dell'arrays, ma non passerei ore a guardarlo, quindi ho supposto che il software sapesse cosa stava facendo.

Dopo che la barra di avanzamento non è più visualizzata, il cat /proc/mdstat visualizza:

 md0 : active raid1 sdb1[2](S) sdc1[1] 1953511288 blocks super 1.2 [2/1] [U_] 

E sudo mdadm --detail /dev/md0 mostra:

 /dev/md0: Version : 1.2 Creation Time : Sun May 27 11:26:05 2012 Raid Level : raid1 Array Size : 1953511288 (1863.01 GiB 2000.40 GB) Used Dev Size : 1953511288 (1863.01 GiB 2000.40 GB) Raid Devices : 2 Total Devices : 2 Persistence : Superblock is persistent Update Time : Mon May 28 11:16:49 2012 State : clean, degraded Active Devices : 1 Working Devices : 2 Failed Devices : 0 Spare Devices : 1 Name : Deltique:0 (local to host Deltique) UUID : 49733c26:dd5f67b5:13741fb7:c568bd04 Events : 32365 Number Major Minor RaidDevice State 1 8 33 0 active sync /dev/sdc1 1 0 0 1 removed 2 8 17 - spare /dev/sdb1 

Mi è stato detto che mdadm sostituisce automaticamente le unità rimosse con parti, ma /dev/sdb1 non viene spostato nella posizione attesa, RaidDevice 1 .


UPDATE (30 maggio 2012): Un test di lettura-scrittura distruttivo di badblocks dell'integer /dev/sdb non ha prodotto errori come previsto; entrambi gli HDD sono nuovi.

A partire dall'ultima modifica, ho assemblato l'arrays con questo command:

 sudo mdadm --assemble --force --no-degraded /dev/md0 /dev/sdb1 /dev/sdc1 

L'output è stato:

 mdadm: /dev/md0 has been started with 1 drive (out of 2) and 1 rebuilding. 

La ricostruzione sembra che sta procedendo normalmente:

 md0 : active raid1 sdc1[1] sdb1[2] 1953511288 blocks super 1.2 [2/1] [U_] [>....................] recovery = 0.6% (13261504/1953511288) finish=2299.7min speed=14060K/sec unused devices: <none> 

Ora sto aspettando questa ricostruzione, ma mi aspetto che /dev/sdb1 diventi un ricambio come le cinque o sei volte che ho cercato di ribuild prima.


AGGIORNAMENTO (31 maggio 2012): Sì, è ancora un ricambio. Ugh!


UPDATE (01 giugno 2012): Sto provando il command suggerito da Adrian Kelly :

 sudo mdadm --assemble --update=resync /dev/md0 /dev/sdb1 /dev/sdc1 

Aspettando la ricostruzione ora …


AGGIORNAMENTO (02 giugno 2012): Nope, ancora un ricambio …


UPDATE (04 giugno 2012): PB ha sollevato una preoccupazione che ho trascurato: forse /dev/sdc1 sta incontrando errori di I / O. Non mi sono preoccupato di controllare /dev/sdc1 perché sembrava funzionare bene ed era nuovo, ma gli errori di I / O verso la fine dell'unità sono una possibilità razionale.

Ho comprato questi HDD in vendita, quindi non sarebbe una sorpresa che uno di loro sta già fallendo. Inoltre, nessuno di loro ha supporto per SMART , quindi non c'è da stupirsi che siano stati così economici …

Ecco la procedura di recupero dei dati che ho appena costituito e sto seguendo:

  1. sudo mdadm /dev/md0 --fail /dev/sdb1 modo da poter estrarre /dev/sdb1 .
  2. sudo mdadm /dev/md0 --remove /dev/sdb1 per rimuovere /dev/sdb1 dall'arrays.
  3. /dev/sdc1 è montato su /media/DtkBk
  4. Formatta /dev/sdb1 come ext4.
  5. Montare /dev/sdb1 in /media/DtkBkTemp .
  6. cd /media per lavorare in quella zona.
  7. sudo chown deltik DtkBkTemp per darmi (username deltik ) diritti alla partizione.
  8. Copia di tutti i file e directory: sudo rsync -avzHXShP DtkBk/* DtkBkTemp

UPDATE (06 giugno 2012): Ho eseguito un test distruttivo in scrittura di tipo /dev/sdc , seguendo le seguenti procedure:

  1. sudo umount /media/DtkBk per consentire la distruzione della matrix.
  2. sudo mdadm --stop /dev/md0 per arrestare l'arrays.
  3. sudo badblocks -w -p 1 /dev/sdc -s -v per eliminare l'hard disk sospetto e nel process controllare gli errori di I / O. Se ci sono errori di I / O, questo non è un buon segno. Spero che posso get un rimborso …

Ora ho confermato che non ci sono problemi di input / output su HDD .

Da tutto ciò che indaga, le mie due domande originali sono ancora in piedi.


Le mie domande sono:

  1. Perché l'unità di ricambio non è sincronizzazione triggers?
  2. Come posso triggersre l'unità di ricambio?

Facendo questo semplicemente chiude l'unità nell'arrays senza effettuarne nulla con esso, vale a dire che è un membro dell'arrays ma non è attivo in esso. Per impostazione predefinita, questo lo trasforma in un ricambio:

 sudo mdadm /dev/md0 --add /dev/sdb1 

Se si dispone di un ricambio, è ansible crescere costringendo il numero di unità triggers per l'arrays a crescere. Con 3 drive e 2 attesi per essere attivi, è necessario aumentare il numero attivo a 3.

 mdadm --grow /dev/md0 --raid-devices=3 

Il driver della matrix di raid noterà che sei "corto" un'unità e quindi cercare un ricambio. Trovando il ricambio, lo integrerà nell'arrays come unità triggers. Aprire un terminal di riserva e lasciare eseguire questa linea di command piuttosto cruda, per tenere le tabs sul progresso di sincronizzazione. Assicurati di digitarlo come una row o utilizzare il carattere di interruzione di linea (\) e una volta completata la ricostruzione, basta digitare Ctrl-C nel terminal.

 while true; do sleep 60; clear; sudo mdadm --detail /dev/md0; echo; cat /proc/mdstat; done 

Il tuo arrays ora avrà due unità attive in sincronia, ma perché non ci sono 3 unità, non sarà 100% pulito. Rimuovere l'unità guasta, quindi ridimensionare l'arrays. Si noti che la bandiera della --grow è un po 'di un nome improprio: può significare sia crescere che ridursi:

 sudo mdadm /dev/md0 --fail /dev/{failed drive} sudo mdadm /dev/md0 --remove /dev/{failed drive} sudo mdadm --grow /dev/md0 --raid-devices=2 

Per quanto riguarda gli errori, un problema di collegamento con l'unità (ad esempio il connettore PATA / SATA, cavo o connettore di unità) non è sufficiente per triggersre un failover di un riserva di calore, in quanto il kernel si spegnerà normalmente utilizzando l'altra "buona" unità mentre reimposta il collegamento all'unità "ctriggers". Lo so perché gestisco un arrays a 3 azionamenti, 2 hot, 1 spare, e uno dei drive appena recentemente ha deciso di barattare un po 'nei registri. Quando ho testato tutti gli azionamenti dell'arrays, tutti 3 passarono la versione "lunga" del test SMART, quindi non è un problema con i piatti, i componenti meccanici o il controller di bordo che lascia un cavo di collegamento ctriggers port SATA. Forse è questo che stai vedendo. Provare a commutare l'unità su una port della scheda madre diversa, oppure utilizzare un cavo diverso e vedere se migliora.


Un follow-up: ho completato la mia espansione dello specchio a 3 unità, non riuscito e ho rimosso l'unità fiaba dalla matrix md, ho scambiato il cavo per un nuovo (la scheda madre lo support) e ha aggiunto nuovamente l'unità. Al re-aggiunta, ha subito avviato una sincronizzazione dell'unità. Finora non è apparso un solo errore nel registro, nonostante l'unità è stata fortemente utilizzata. Quindi, sì, i cavi di azionamento possono diventare fiocidi.

Ho avuto esattamente lo stesso problema, e nel mio caso ho scoperto che il disco di raid attivo ha subito errori di lettura durante la sincronizzazione. Pertanto il nuovo disco è stato sincronizzato più successivamente e quindi è stato mantenuto contrassegnato come riserva.

Potrebbe essere utile controllare i tuoi / var / log / messaggi e altri registri di sistema per errori. Inoltre, potrebbe anche essere una buona idea controllare lo stato SMART del disco:
1) Esegui il breve test:

"smartctl -t short / dev / sda"

2) Visualizzare i risultati del test:

"smartctl -l selftest / dev / sda"

Nel mio caso questo ha restituito qualcosa di simile:

=== INIZIO DI LEGGERE SMART DATA SEZIONE ===
SMART Revision number 1 della struttura di registro di autocontattamento
Num Test_Description Stato rimanente LifeTime (ore) LBA_of_first_error
1 Extended offline Completato: leggere il fallimento 90% 7564 27134728
2 Short offline Completato: manca il guasto 90% 7467 1408449701

Ho dovuto caricare un distro dal vivo e copiare manualmente i dati dal disco difettoso al nuovo (attualmente "riservato").

Ho avuto un problema simile e ho risolto la crescita della quantità di dischi RAID da 1 a 2.

 mdadm --grow --raid-devices=2 /dev/md1 

Ho avuto esattamente lo stesso problema e ho sempre pensato che il mio secondo disco, che ho voluto aggiungere nuovamente all'arrays, aveva degli errori. Ma era il mio disco originale che aveva letto degli errori.

Potresti controllare con smartctl -t short /dev/sdX e vedere i risultati alcuni minuti dopo con smartctl -l selftest /dev/sdX . Per me sembrava così:

 === START OF READ SMART DATA SECTION === SMART Self-test log structure revision number 1 Num Test_Description Status Remaining LifeTime(hours) LBA_of_first_error # 1 Short offline Completed: read failure 20% 25151 734566647 

Ho cercato di risolvere questi problemi con questo manuale . È stato divertente :-). So che hai controllato entrambi i dischi per errori, ma penso che il tuo problema è che il disco che è ancora in md arrays ha letto errori, quindi aggiungere un secondo disco non riesce.

Aggiornare

È necessario eseguire ulteriormente un smartctl -a /dev/sdX Se vedi Current_Pending_Sector> 0 qualcosa è sbagliato

197 Current_Pending_Sector 0x0012 098 098 000 Old_age Sempre – 69

Per me è stato sicuramente il problema che ho rimosso un disco da raid solo per il test e la resyncing non potrebbe essere fatto a causa di lettura guasti. La sincronizzazione ha interrotto metà strada. Quando ho controllato il mio disco che era ancora nel raid arrays smartctl ha riportto problemi.

Potrei fissarli con il manuale sopra e ho visto il numero di settori in sospeso ridotti. Ma ci sono stati molti e è una procedura lunga e noiosa, quindi ho usato il mio backup e ripristinato i dati su un server diverso.

Poiché non hai avuto l'opportunità di utilizzare SMART, credo che il tuo test di auto non ha mostrato quei settori rotti.

Per me è una lezione imparata: controlla i tuoi dischi prima di rimuovere uno dalla tua matrix.

UPDATE (24 maggio 2015): Dopo tre anni, ho esaminato la vera causa dell'arena RAID 1 degradata.

Un'unità era ctriggers e non l'avevo notata perché avevo eseguito solo una prova completa sulla buona strada.

Tre anni fa, non pensavo di controllare i registri relativi a problemi di I / O. Se avessi pensato di controllare /var/log/syslog , avrei visto qualcosa di simile quando mdadm abbandonò la ricostruzione dell'arrays:

 May 24 14:08:32 node51 kernel: [51887.853786] sd 8:0:0:0: [sdi] Unhandled sense code May 24 14:08:32 node51 kernel: [51887.853794] sd 8:0:0:0: [sdi] May 24 14:08:32 node51 kernel: [51887.853798] Result: hostbyte=DID_OK driverbyte=DRIVER_SENSE May 24 14:08:32 node51 kernel: [51887.853802] sd 8:0:0:0: [sdi] May 24 14:08:32 node51 kernel: [51887.853805] Sense Key : Medium Error [current] May 24 14:08:32 node51 kernel: [51887.853812] sd 8:0:0:0: [sdi] May 24 14:08:32 node51 kernel: [51887.853815] Add. Sense: Unrecovered read error May 24 14:08:32 node51 kernel: [51887.853819] sd 8:0:0:0: [sdi] CDB: May 24 14:08:32 node51 kernel: [51887.853822] Read(10): 28 00 00 1b 6e 00 00 00 01 00 May 24 14:08:32 node51 kernel: [51887.853836] end_request: critical medium error, dev sdi, sector 14381056 May 24 14:08:32 node51 kernel: [51887.853849] Buffer I/O error on device sdi, logical block 1797632 

Per get l'output nel registro, ho cercato il primo problema problematico (14381058, nel mio caso) con questo command:

 [email protected] [~]# dd if=/dev/sdi of=/dev/zero bs=512 count=1 skip=14381058 dd: error reading '/dev/sdi': Input/output error 0+0 records in 0+0 records out 0 bytes (0 B) copied, 7.49287 s, 0.0 kB/s 

Non c'è da stupirsi che md ha rinunciato! Non riesce a ribuild una matrix da un'unità difettosa.

La nuova tecnologia (migliore compatibilità hardware di smartmontools ?) Mi ha permesso di get informazioni SMART dall'unità, inclusi gli ultimi cinque errori (di 1393 errori finora):

 [email protected] [~]# smartctl -a /dev/sdi smartctl 6.2 2013-07-26 r3841 [x86_64-linux-3.13.0-43-generic] (local build) Copyright (C) 2002-13, Bruce Allen, Christian Franke, www.smartmontools.org === START OF INFORMATION SECTION === Model Family: Hitachi Deskstar 5K3000 Device Model: Hitachi HDS5C3020ALA632 Serial Number: ML2220FA040K9E LU WWN Device Id: 5 000cca 36ac1d394 Firmware Version: ML6OA800 User Capacity: 2,000,398,934,016 bytes [2.00 TB] Sector Size: 512 bytes logical/physical Rotation Rate: 5940 rpm Device is: In smartctl database [for details use: -P show] ATA Version is: ATA8-ACS T13/1699-D revision 4 SATA Version is: SATA 2.6, 6.0 Gb/s (current: 3.0 Gb/s) Local Time is: Sun May 24 14:13:35 2015 CDT SMART support is: Available - device has SMART capability. SMART support is: Enabled === START OF READ SMART DATA SECTION === SMART STATUS RETURN: incomplete response, ATA output registers missing SMART overall-health self-assessment test result: PASSED Warning: This result is based on an Attribute check. General SMART Values: Offline data collection status: (0x84) Offline data collection activity was suspended by an interrupting command from host. Auto Offline Data Collection: Enabled. Self-test execution status: ( 0) The previous self-test routine completed without error or no self-test has ever been run. Total time to complete Offline data collection: (21438) seconds. Offline data collection capabilities: (0x5b) SMART execute Offline immediate. Auto Offline data collection on/off support. Suspend Offline collection upon new command. Offline surface scan supported. Self-test supported. No Conveyance Self-test supported. Selective Self-test supported. SMART capabilities: (0x0003) Saves SMART data before entering power-saving mode. Supports SMART auto save timer. Error logging capability: (0x01) Error logging supported. General Purpose Logging supported. Short self-test routine recommended polling time: ( 1) minutes. Extended self-test routine recommended polling time: ( 358) minutes. SCT capabilities: (0x003d) SCT Status supported. SCT Error Recovery Control supported. SCT Feature Control supported. SCT Data Table supported. SMART Attributes Data Structure revision number: 16 Vendor Specific SMART Attributes with Thresholds: ID# ATTRIBUTE_NAME FLAG VALUE WORST THRESH TYPE UPDATED WHEN_FAILED RAW_VALUE 1 Raw_Read_Error_Rate 0x000b 100 100 016 Pre-fail Always - 0 2 Throughput_Performance 0x0005 136 136 054 Pre-fail Offline - 93 3 Spin_Up_Time 0x0007 172 172 024 Pre-fail Always - 277 (Average 362) 4 Start_Stop_Count 0x0012 100 100 000 Old_age Always - 174 5 Reallocated_Sector_Ct 0x0033 100 100 005 Pre-fail Always - 8 7 Seek_Error_Rate 0x000b 100 100 067 Pre-fail Always - 0 8 Seek_Time_Performance 0x0005 146 146 020 Pre-fail Offline - 29 9 Power_On_Hours 0x0012 097 097 000 Old_age Always - 22419 10 Spin_Retry_Count 0x0013 100 100 060 Pre-fail Always - 0 12 Power_Cycle_Count 0x0032 100 100 000 Old_age Always - 161 192 Power-Off_Retract_Count 0x0032 100 100 000 Old_age Always - 900 193 Load_Cycle_Count 0x0012 100 100 000 Old_age Always - 900 194 Temperature_Celsius 0x0002 127 127 000 Old_age Always - 47 (Min/Max 19/60) 196 Reallocated_Event_Count 0x0032 100 100 000 Old_age Always - 8 197 Current_Pending_Sector 0x0022 100 100 000 Old_age Always - 30 198 Offline_Uncorrectable 0x0008 100 100 000 Old_age Offline - 0 199 UDMA_CRC_Error_Count 0x000a 200 200 000 Old_age Always - 2 SMART Error Log Version: 1 ATA Error Count: 1393 (device log contains only the most recent five errors) CR = Command Register [HEX] FR = Features Register [HEX] SC = Sector Count Register [HEX] SN = Sector Number Register [HEX] CL = Cylinder Low Register [HEX] CH = Cylinder High Register [HEX] DH = Device/Head Register [HEX] DC = Device Command Register [HEX] ER = Error register [HEX] ST = Status register [HEX] Powered_Up_Time is measured from power on, and printed as DDd+hh:mm:SS.sss where DD=days, hh=hours, mm=minutes, SS=sec, and sss=millisec. It "wraps" after 49.710 days. Error 1393 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours) When the command that caused the error occurred, the device was active or idle. After command completion occurred, registers were: ER ST SC SN CL CH DH -- -- -- -- -- -- -- 40 51 06 02 70 db 00 Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058 Commands leading to the command that caused the error were: CR FR SC SN CL CH DH DC Powered_Up_Time Command/Feature_Name -- -- -- -- -- -- -- -- ---------------- -------------------- 25 00 08 00 70 db 40 00 1d+03:59:34.096 READ DMA EXT 25 00 08 00 70 db 40 00 1d+03:59:30.334 READ DMA EXT b0 d5 01 09 4f c2 00 00 1d+03:57:59.057 SMART READ LOG b0 d5 01 06 4f c2 00 00 1d+03:57:58.766 SMART READ LOG b0 d5 01 01 4f c2 00 00 1d+03:57:58.476 SMART READ LOG Error 1392 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours) When the command that caused the error occurred, the device was active or idle. After command completion occurred, registers were: ER ST SC SN CL CH DH -- -- -- -- -- -- -- 40 51 06 02 70 db 00 Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058 Commands leading to the command that caused the error were: CR FR SC SN CL CH DH DC Powered_Up_Time Command/Feature_Name -- -- -- -- -- -- -- -- ---------------- -------------------- 25 00 08 00 70 db 40 00 1d+03:59:30.334 READ DMA EXT b0 d5 01 09 4f c2 00 00 1d+03:57:59.057 SMART READ LOG b0 d5 01 06 4f c2 00 00 1d+03:57:58.766 SMART READ LOG b0 d5 01 01 4f c2 00 00 1d+03:57:58.476 SMART READ LOG b0 d5 01 00 4f c2 00 00 1d+03:57:58.475 SMART READ LOG Error 1391 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours) When the command that caused the error occurred, the device was active or idle. After command completion occurred, registers were: ER ST SC SN CL CH DH -- -- -- -- -- -- -- 40 51 06 02 70 db 00 Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058 Commands leading to the command that caused the error were: CR FR SC SN CL CH DH DC Powered_Up_Time Command/Feature_Name -- -- -- -- -- -- -- -- ---------------- -------------------- 25 00 08 00 70 db 40 00 1d+03:56:28.228 READ DMA EXT 25 00 08 00 70 db 40 00 1d+03:56:24.549 READ DMA EXT 25 00 08 00 70 db 40 00 1d+03:56:06.711 READ DMA EXT 25 00 10 f0 71 db 40 00 1d+03:56:06.711 READ DMA EXT 25 00 f0 00 71 db 40 00 1d+03:56:06.710 READ DMA EXT Error 1390 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours) When the command that caused the error occurred, the device was active or idle. After command completion occurred, registers were: ER ST SC SN CL CH DH -- -- -- -- -- -- -- 40 51 06 02 70 db 00 Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058 Commands leading to the command that caused the error were: CR FR SC SN CL CH DH DC Powered_Up_Time Command/Feature_Name -- -- -- -- -- -- -- -- ---------------- -------------------- 25 00 08 00 70 db 40 00 1d+03:56:24.549 READ DMA EXT 25 00 08 00 70 db 40 00 1d+03:56:06.711 READ DMA EXT 25 00 10 f0 71 db 40 00 1d+03:56:06.711 READ DMA EXT 25 00 f0 00 71 db 40 00 1d+03:56:06.710 READ DMA EXT 25 00 10 f0 70 db 40 00 1d+03:56:06.687 READ DMA EXT Error 1389 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours) When the command that caused the error occurred, the device was active or idle. After command completion occurred, registers were: ER ST SC SN CL CH DH -- -- -- -- -- -- -- 40 51 06 02 70 db 00 Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058 Commands leading to the command that caused the error were: CR FR SC SN CL CH DH DC Powered_Up_Time Command/Feature_Name -- -- -- -- -- -- -- -- ---------------- -------------------- 25 00 08 00 70 db 40 00 1d+03:56:06.711 READ DMA EXT 25 00 10 f0 71 db 40 00 1d+03:56:06.711 READ DMA EXT 25 00 f0 00 71 db 40 00 1d+03:56:06.710 READ DMA EXT 25 00 10 f0 70 db 40 00 1d+03:56:06.687 READ DMA EXT 25 00 f0 00 70 db 40 00 1d+03:56:03.026 READ DMA EXT SMART Self-test log structure revision number 1 Num Test_Description Status Remaining LifeTime(hours) LBA_of_first_error # 1 Extended offline Completed: read failure 90% 21249 14381058 SMART Selective self-test log data structure revision number 1 SPAN MIN_LBA MAX_LBA CURRENT_TEST_STATUS 1 0 0 Not_testing 2 0 0 Not_testing 3 0 0 Not_testing 4 0 0 Not_testing 5 0 0 Not_testing Selective self-test flags (0x0): After scanning selected spans, do NOT read-scan remainder of disk. If Selective self-test is pending on power-up, resume after 0 minute delay. 

Ahh … che lo farebbe.

Ora, ho risolto questa domanda in tre semplici fasi:

  1. Diventa amministratore di sistema in tre anni.
  2. Controllare i registri.
  3. Torna a Super User e ridere al mio approccio da tre anni fa .

AGGIORNAMENTO (19 luglio 2015): Per chiunque sia curioso, l'unità infine è uscito da settori per rimodellare:

 [email protected] [~]# smartctl -a /dev/sdg smartctl 6.2 2013-07-26 r3841 [x86_64-linux-3.13.0-43-generic] (local build) Copyright (C) 2002-13, Bruce Allen, Christian Franke, www.smartmontools.org === START OF INFORMATION SECTION === Model Family: Hitachi Deskstar 5K3000 Device Model: Hitachi HDS5C3020ALA632 Serial Number: ML2220FA040K9E LU WWN Device Id: 5 000cca 36ac1d394 Firmware Version: ML6OA800 User Capacity: 2,000,398,934,016 bytes [2.00 TB] Sector Size: 512 bytes logical/physical Rotation Rate: 5940 rpm Device is: In smartctl database [for details use: -P show] ATA Version is: ATA8-ACS T13/1699-D revision 4 SATA Version is: SATA 2.6, 6.0 Gb/s (current: 3.0 Gb/s) Local Time is: Sun Jul 19 14:00:33 2015 CDT SMART support is: Available - device has SMART capability. SMART support is: Enabled === START OF READ SMART DATA SECTION === SMART STATUS RETURN: incomplete response, ATA output registers missing SMART overall-health self-assessment test result: FAILED! Drive failure expected in less than 24 hours. SAVE ALL DATA. See vendor-specific Attribute list for failed Attributes. General SMART Values: Offline data collection status: (0x85) Offline data collection activity was aborted by an interrupting command from host. Auto Offline Data Collection: Enabled. Self-test execution status: ( 117) The previous self-test completed having the read element of the test failed. Total time to complete Offline data collection: (21438) seconds. Offline data collection capabilities: (0x5b) SMART execute Offline immediate. Auto Offline data collection on/off support. Suspend Offline collection upon new command. Offline surface scan supported. Self-test supported. No Conveyance Self-test supported. Selective Self-test supported. SMART capabilities: (0x0003) Saves SMART data before entering power-saving mode. Supports SMART auto save timer. Error logging capability: (0x01) Error logging supported. General Purpose Logging supported. Short self-test routine recommended polling time: ( 1) minutes. Extended self-test routine recommended polling time: ( 358) minutes. SCT capabilities: (0x003d) SCT Status supported. SCT Error Recovery Control supported. SCT Feature Control supported. SCT Data Table supported. SMART Attributes Data Structure revision number: 16 Vendor Specific SMART Attributes with Thresholds: ID# ATTRIBUTE_NAME FLAG VALUE WORST THRESH TYPE UPDATED WHEN_FAILED RAW_VALUE 1 Raw_Read_Error_Rate 0x000b 099 099 016 Pre-fail Always - 2 2 Throughput_Performance 0x0005 136 136 054 Pre-fail Offline - 93 3 Spin_Up_Time 0x0007 163 163 024 Pre-fail Always - 318 (Average 355) 4 Start_Stop_Count 0x0012 100 100 000 Old_age Always - 181 5 Reallocated_Sector_Ct 0x0033 001 001 005 Pre-fail Always FAILING_NOW 1978 7 Seek_Error_Rate 0x000b 086 086 067 Pre-fail Always - 1245192 8 Seek_Time_Performance 0x0005 146 146 020 Pre-fail Offline - 29 9 Power_On_Hours 0x0012 097 097 000 Old_age Always - 23763 10 Spin_Retry_Count 0x0013 100 100 060 Pre-fail Always - 0 12 Power_Cycle_Count 0x0032 100 100 000 Old_age Always - 167 192 Power-Off_Retract_Count 0x0032 092 092 000 Old_age Always - 10251 193 Load_Cycle_Count 0x0012 092 092 000 Old_age Always - 10251 194 Temperature_Celsius 0x0002 111 111 000 Old_age Always - 54 (Min/Max 19/63) 196 Reallocated_Event_Count 0x0032 001 001 000 Old_age Always - 2927 197 Current_Pending_Sector 0x0022 100 100 000 Old_age Always - 33 198 Offline_Uncorrectable 0x0008 100 100 000 Old_age Offline - 0 199 UDMA_CRC_Error_Count 0x000a 200 200 000 Old_age Always - 2 SMART Error Log Version: 1 ATA Error Count: 2240 (device log contains only the most recent five errors) CR = Command Register [HEX] FR = Features Register [HEX] SC = Sector Count Register [HEX] SN = Sector Number Register [HEX] CL = Cylinder Low Register [HEX] CH = Cylinder High Register [HEX] DH = Device/Head Register [HEX] DC = Device Command Register [HEX] ER = Error register [HEX] ST = Status register [HEX] Powered_Up_Time is measured from power on, and printed as DDd+hh:mm:SS.sss where DD=days, hh=hours, mm=minutes, SS=sec, and sss=millisec. It "wraps" after 49.710 days. Error 2240 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours) When the command that caused the error occurred, the device was active or idle. After command completion occurred, registers were: ER ST SC SN CL CH DH -- -- -- -- -- -- -- 10 51 f0 18 0f 2f 00 Error: IDNF 240 sectors at LBA = 0x002f0f18 = 3084056 Commands leading to the command that caused the error were: CR FR SC SN CL CH DH DC Powered_Up_Time Command/Feature_Name -- -- -- -- -- -- -- -- ---------------- -------------------- 35 00 f0 18 0f 2f 40 00 00:25:01.942 WRITE DMA EXT 35 00 f0 28 0e 2f 40 00 00:25:01.168 WRITE DMA EXT 35 00 f0 38 0d 2f 40 00 00:25:01.157 WRITE DMA EXT 35 00 f0 48 0c 2f 40 00 00:25:01.147 WRITE DMA EXT 35 00 f0 58 0b 2f 40 00 00:25:01.136 WRITE DMA EXT Error 2239 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours) When the command that caused the error occurred, the device was active or idle. After command completion occurred, registers were: ER ST SC SN CL CH DH -- -- -- -- -- -- -- 10 51 5a 4e f7 2e 00 Error: IDNF 90 sectors at LBA = 0x002ef74e = 3077966 Commands leading to the command that caused the error were: CR FR SC SN CL CH DH DC Powered_Up_Time Command/Feature_Name -- -- -- -- -- -- -- -- ---------------- -------------------- 35 00 f0 b8 f6 2e 40 00 00:24:57.967 WRITE DMA EXT 35 00 f0 c8 f5 2e 40 00 00:24:57.956 WRITE DMA EXT 35 00 f0 d8 f4 2e 40 00 00:24:57.945 WRITE DMA EXT 35 00 f0 e8 f3 2e 40 00 00:24:57.934 WRITE DMA EXT 35 00 f0 f8 f2 2e 40 00 00:24:57.924 WRITE DMA EXT Error 2238 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours) When the command that caused the error occurred, the device was active or idle. After command completion occurred, registers were: ER ST SC SN CL CH DH -- -- -- -- -- -- -- 10 51 40 a8 c6 2e 00 Error: IDNF 64 sectors at LBA = 0x002ec6a8 = 3065512 Commands leading to the command that caused the error were: CR FR SC SN CL CH DH DC Powered_Up_Time Command/Feature_Name -- -- -- -- -- -- -- -- ---------------- -------------------- 35 00 f0 f8 c5 2e 40 00 00:24:49.444 WRITE DMA EXT 35 00 f0 08 c5 2e 40 00 00:24:49.433 WRITE DMA EXT 35 00 f0 18 c4 2e 40 00 00:24:49.422 WRITE DMA EXT 35 00 f0 28 c3 2e 40 00 00:24:49.412 WRITE DMA EXT 35 00 f0 38 c2 2e 40 00 00:24:49.401 WRITE DMA EXT Error 2237 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours) When the command that caused the error occurred, the device was active or idle. After command completion occurred, registers were: ER ST SC SN CL CH DH -- -- -- -- -- -- -- 10 51 ea be ba 2e 00 Error: IDNF 234 sectors at LBA = 0x002ebabe = 3062462 Commands leading to the command that caused the error were: CR FR SC SN CL CH DH DC Powered_Up_Time Command/Feature_Name -- -- -- -- -- -- -- -- ---------------- -------------------- 35 00 f0 b8 ba 2e 40 00 00:24:39.263 WRITE DMA EXT 35 00 f0 c8 b9 2e 40 00 00:24:38.885 WRITE DMA EXT 35 00 f0 d8 b8 2e 40 00 00:24:38.874 WRITE DMA EXT 35 00 f0 e8 b7 2e 40 00 00:24:38.862 WRITE DMA EXT 35 00 f0 f8 b6 2e 40 00 00:24:38.852 WRITE DMA EXT Error 2236 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours) When the command that caused the error occurred, the device was active or idle. After command completion occurred, registers were: ER ST SC SN CL CH DH -- -- -- -- -- -- -- 10 51 86 c2 2a 2e 00 Error: IDNF 134 sectors at LBA = 0x002e2ac2 = 3025602 Commands leading to the command that caused the error were: CR FR SC SN CL CH DH DC Powered_Up_Time Command/Feature_Name -- -- -- -- -- -- -- -- ---------------- -------------------- 35 00 f0 58 2a 2e 40 00 00:24:25.605 WRITE DMA EXT 35 00 f0 68 29 2e 40 00 00:24:25.594 WRITE DMA EXT 35 00 f0 78 28 2e 40 00 00:24:25.583 WRITE DMA EXT 35 00 f0 88 27 2e 40 00 00:24:25.572 WRITE DMA EXT 35 00 f0 98 26 2e 40 00 00:24:25.561 WRITE DMA EXT SMART Self-test log structure revision number 1 Num Test_Description Status Remaining LifeTime(hours) LBA_of_first_error # 1 Short captive Completed: read failure 50% 23763 869280 # 2 Extended offline Completed without error 00% 22451 - # 3 Short offline Completed without error 00% 22439 - # 4 Extended offline Completed: read failure 90% 21249 14381058 1 of 2 failed self-tests are outdated by newer successful extended offline self-test # 2 SMART Selective self-test log data structure revision number 1 SPAN MIN_LBA MAX_LBA CURRENT_TEST_STATUS 1 0 0 Not_testing 2 0 0 Not_testing 3 0 0 Not_testing 4 0 0 Not_testing 5 0 0 Not_testing Selective self-test flags (0x0): After scanning selected spans, do NOT read-scan remainder of disk. If Selective self-test is pending on power-up, resume after 0 minute delay. 

Nel mio caso, era anche il disco di origine difettosa. Anche se ha guardato il tempo come se non fosse (il / proc / mdstat ha superato il 99,9% normalmente – ma ha effettivamente fallito al 99,97% che concludeva con quando finiva la sincronizzazione normale). Quindi è necessario controllare l'output dmesg(1) – vi dirà se ci sono errori di lettura.

Puoi vedere i dettagli del mio caso nel bug Debian # 767243 . Ho finalmente riuscito a finire la sincronizzazione con la forza-sovrascrivere alcuni settori difettosi sul disco di origine (che sono stati fortunatamente non utilizzati nel mio caso, altrimenti ci sarebbe stata la perdita di dati)

Potresti provare

 sudo mdadm --assemble --update=resync /dev/md0 /dev/sdb1 /dev/sdc1 

per aggiornare le unità e riselezionarle.

Not sure if it will work since you already --add ed the disk but --re-add appears to be the option you need.

Or perhaps you need to --grow the device to 2 active disks, mdadm --grow -n 2 ? Not tested so be careful.

I would recommend removing sdc1, zeroing the super block on sdc1 and then re-adding it.

 mdadm /dev/md0 -r /dev/sdc1 mdadm --zero-superblock /dev/sdc1 mdadm /dev/md0 -a /dev/sdc1