Deduplicarea datelor este o tehnologie de stocare populară și populară care optimizează capacitatea de stocare. Elimină datele redundante prin eliminarea datelor duplicate din setul de date, lăsând o singură copie. După cum se arată în figura de mai jos. Această tehnologie poate reduce foarte mult nevoia de stocare fizică. spațiu pentru a satisface cererea tot mai mare de stocare a datelor. Tehnologia deduplicare poate aduce multe beneficii practice, incluzând în principal următoarele aspecte:
| (1) | Îndeplinește cerințele ROI (Return On Investment)/TCO (Total Cost of Ownership); |
| (2) | Creșterea rapidă a datelor poate fi controlată eficient; |
| (3) | Creșteți spațiul de stocare eficient și îmbunătățiți eficiența stocării; |
| (4) | Economisiți costul total de stocare și costul de gestionare; |
| (5) | Salvați lățimea de bandă a rețelei de transmisie de date; |
| (6) | Economisiți costurile de operare și întreținere, cum ar fi spațiul, alimentarea cu energie și răcirea. |
Tehnologia deduplicare este utilizată pe scară largă în sistemele de backup și arhivare a datelor, deoarece există o mulțime de date duplicat după mai multe copii de siguranță ale datelor, ceea ce este foarte potrivit pentru această tehnologie. date aproape de linie și sisteme de stocare a datelor offline. Poate fi implementat în sisteme de fișiere, manageri de volum, NAS și sans. Dedupe poate fi, de asemenea, utilizat pentru recuperarea datelor în caz de dezastru, transmiterea și sincronizarea datelor, deoarece o tehnologie de compresie a datelor poate fi utilizată pentru ambalarea datelor. Tehnologia Dedupe poate ajuta multe aplicații să reducă stocarea datelor, economisiți lățimea de bandă a rețelei, îmbunătățiți eficiența stocării, reduceți fereastra de rezervă și economisiți costuri.
Deduplicarea are două dimensiuni principale: rapoartele de deduplicare și performanța. Performanța deduplicării depinde de tehnologia de implementare specifică, în timp ce rata de deduplicare este determinată de caracteristicile datelor în sine și de modelele aplicațiilor, așa cum se arată în tabelul de mai jos. Furnizorii de stocare raportează în prezent rate de deduplicare variind de la 20:1 la 500:1.
| Rată mare de deduplicare | Rată scăzută de deduplicare |
| Date create de utilizator | Date din lumea naturală |
| Rată scăzută de modificare a datelor | Rată mare de modificare a datelor |
| Date de referință, date inactive | Date active |
| Aplicație cu rată scăzută de modificare a datelor | Aplicație cu viteză mare de schimbare a datelor |
| Backup complet de date | Backup de date incremental |
| Stocarea datelor pe termen lung | Stocarea datelor pe termen scurt |
| Gamă largă de aplicații de date | Gamă mică de aplicații de date |
| Procesarea continuă a datelor de afaceri | Prelucrare generală a datelor de afaceri |
| Segmentare mică a datelor | Segmentarea datelor mari |
| Segmentarea alungită a datelor | Segmentarea datelor cu lungime fixă |
| Conținutul de date perceput | Conținutul datelor necunoscut |
| Deduplicarea datelor de timp | Deduplicarea datelor spațiale |
Deduplați punctele de implementare
La dezvoltarea sau aplicarea tehnologiei Dedupe trebuie luați în considerare diverși factori, deoarece acești factori afectează direct performanța și eficacitatea acesteia.
| (1) | Ce | Ce date sunt deponderate? |
| (2) | Când | Când va fi eliminată greutatea? |
| (3) | Unde | Unde este eliminarea greutății? |
| (4) | Cum | Cum să reducă greutatea? |
Tehnologia de deduplare a cheii
Procesul de deduplicare a sistemului de stocare în general este acesta: în primul rând fișierul de date este împărțit într-un set de date, pentru fiecare bloc de date pentru a calcula amprenta digitală, iar apoi pe baza cuvintelor cheie de căutare Hash de amprentă digitală, potrivirea indică datele pentru duplicat blocuri de date, stochează doar numărul de index al blocului de date, altfel înseamnă că blocul de date este singura bucată dintr-un bloc de date nou, stocarea unui bloc de date și creează meta informații relevante. Astfel, un fișier fizic în sistemul de stocare corespunde unei reprezentări logice a unui set de metadate FP. Când citiți fișierul, citiți mai întâi fișierul logic, apoi, conform secvenței FP, scoateți blocul de date corespunzător din sistemul de stocare, restaurați copia fișierului fizic. Poate fi văzut din procesul de mai sus că tehnologiile cheie ale Dedupe includ în principal segmentarea blocurilor de date ale fișierelor, calcularea amprentei blocului de date și recuperarea blocurilor de date.
(1) Segmentarea blocurilor de date ale fișierelor
(2) Calculul amprentei bloc de date
(3) Preluare bloc de date
Pentru a găsi aceste modele recomandate pentru a începe Deduplicarea pachetelor de rețea:
Mylinking™ Network Packet Broker (NPB) ML-NPB-640048*10GE SFP+ plus 4*40GE/100GE QSFP28, Max 880Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-56606*40GE/100GE QSFP28 plus 48*10GE/25GE SFP28, Max 1,8 Tbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-506048*10GE SFP+ plus 2*40GE QSFP, Max 560Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-486048*10GE SFP+, Max 480Gbps, Function Plus
Mylinking™ Network Packet Broker (NPB) ML-NPB-481048*10GE SFP+, Max 480 Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-2410P24*10GE SFP+, Max 240Gbps, Funcție DPI
Mylinking™ Network Packet Broker (NPB) ML-NPB-6400
48*10GE SFP+ plus 4*40GE/100GE QSFP28, Max 880Gbps
Ora postării: 18-oct-2022
