Dezuplicarea datelor este o tehnologie populară și populară de stocare care optimizează capacitatea de stocare. Elimină datele redundante prin eliminarea datelor duplicate din setul de date, lăsând o singură copie. Așa cum este prezentată în figura de mai jos. Această tehnologie poate reduce mult nevoia de spațiu de stocare fizică pentru a satisface cererea în creștere pentru stocarea datelor.
| (1) | Îndeplinește cerințele ROI (rentabilitatea investițiilor)/TCO (costul total al proprietății); |
| (2) | Creșterea rapidă a datelor poate fi controlată eficient; |
| (3) | Creșteți spațiul de stocare eficient și îmbunătățiți eficiența stocării; |
| (4) | Economisiți costurile totale de stocare și costul de gestionare; |
| (5) | Salvați lățimea de bandă a rețelei de transmisie a datelor; |
| (6) | Economisiți costuri de funcționare și întreținere, cum ar fi spațiu, alimentare cu energie electrică. |
Tehnologia Dedupe este utilizată pe scară largă în sistemele de backup și arhivare a datelor, deoarece există o mulțime de date duplicate după mai multe copii de rezervă ale datelor, care este foarte adecvată pentru această tehnologie. În realitate, tehnologia dedupe poate fi utilizată în multe situații, inclusiv date online, date aproape de linie și sisteme de stocare a datelor offline. Poate fi implementat în sisteme de fișiere, manageri de volum, NAS și SANS.DEDUPE poate fi, de asemenea, utilizat pentru recuperarea dezastrelor de date, transmiterea datelor și sincronizarea, deoarece o tehnologie de compresie a datelor poate fi utilizată pentru ambalarea datelor.
Dedupe are două dimensiuni principale: raporturi de deduplocare și performanță. Performanța depinde de tehnologia de implementare specifică, în timp ce rata dedupe este determinată de caracteristicile datelor în sine și a modelelor de aplicații, așa cum se arată în tabelul de mai jos. Vânzătorii de stocare raportează în prezent ratele de deduplicare, de la 20: 1 până la 500: 1.
| Rata mare de deduplicare | Rata scăzută de deduplicare |
| Date create de utilizator | Date din lumea naturală |
| Date rata scăzută de modificare | Date rata mare de schimbare |
| Date de referință, date inactive | Date active |
| Aplicația scăzută a ratei de modificare a datelor | Aplicație ridicată a ratei de modificare a datelor |
| Backup complet de date | Backup de date incrementale |
| Date stocare pe termen lung | Date stocare pe termen scurt |
| O gamă largă de aplicații de date | Gamă mică de aplicații de date |
| Prelucrarea continuă a afacerilor datelor | Prelucrarea generală a afacerilor datelor |
| Segmentare a datelor mici | Segmentarea datelor mari |
| Segmentarea datelor alungite | Segmentarea datelor cu lungime fixă |
| Conținutul de date perceput | Conținut de date necunoscut |
| Deduplicarea datelor de timp | Deduplicarea datelor spațiale |
Puncte de implementare Dedupe
Ar trebui luați în considerare diverși factori atunci când se dezvoltă sau se aplică tehnologia dedupe, deoarece acești factori afectează în mod direct performanța și eficacitatea acesteia.
| (1) | Ce | Ce date sunt dezactivate? |
| (2) | Când | Când va fi eliminată greutatea? |
| (3) | Unde | Unde este eliminarea greutății? |
| (4) | Cum | Cum se reduce greutatea? |
Tehnologia cheie Dedupe
Procesul de deduplicare al sistemului de stocare în general este acesta: În primul rând, fișierul de date este împărțit într -un set de date, pentru fiecare bloc de date pentru a calcula amprenta digitală, apoi pe baza cuvintelor cheie de căutare a hash -ului de amprente, potrivirea indică datele pentru blocurile de date duplicate, numai stocurile de date ale blocului de date și crearea informațiilor de metație. Reprezentarea logică a unui set de metadate FP. Când citiți fișierul, citiți mai întâi fișierul logic, apoi în conformitate cu secvența FP, scoateți blocul de date corespunzător din sistemul de stocare, restaurați copia fișierului fizic. Se poate vedea din procesul de mai sus, că tehnologiile cheie ale dedupei includ în principal segmentarea blocului de date, datele de calcul ale blocului de calcul și retrăirea blocului de date.
(1) Segmentarea blocului de date de fișiere
(2) Calculul amprentei blocului de date
(3) Recuperarea blocului de date
Pentru a găsi aceste modele de recomandări pentru a începe deduplicarea pachetelor de rețea:
MyLinking ™ Network Packet Broker (NPB) ML-NPB-640048*10GE SFP+ Plus 4*40GE/100GE QSFP28, MAX 880GBPS
MyLinking ™ Network Packet Broker (NPB) ML-NPB-56606*40ge/100ge qsfp28 plus 48*10ge/25ge SFP28, max 1,8TBPS
MyLinking ™ Network Packet Broker (NPB) ML-NPB-506048*10GE SFP+ Plus 2*40GE QSFP, MAX 560 Gbps
MyLinking ™ Network Packet Broker (NPB) ML-NPB-486048*10GE SFP+, MAX 480 Gbps, Function Plus
MyLinking ™ Network Packet Broker (NPB) ML-NPB-481048*10GE SFP+, MAX 480GBPS
MyLinking ™ Network Packet Broker (NPB) ML-NPB-2410P24*10GE SFP+, MAX 240 Gbps, funcție DPI
MyLinking ™ Network Packet Broker (NPB) ML-NPB-6400
48*10GE SFP+ Plus 4*40GE/100GE QSFP28, MAX 880GBPS
Timpul post: 18-2022 oct
