Odstranjevanje podvajanja podatkov je priljubljena in priljubljena tehnologija shranjevanja, ki optimizira zmogljivost shranjevanja. Odpravlja odvečne podatke tako, da iz nabora podatkov odstrani podvojene podatke in pusti samo eno kopijo. Kot je prikazano na spodnji sliki. Ta tehnologija lahko močno zmanjša potrebo po fizičnem shranjevanju prostora za izpolnjevanje naraščajočega povpraševanja po shranjevanju podatkov. Tehnologija dedupe lahko prinese številne praktične koristi, ki vključujejo predvsem naslednje vidike:
| (1) | Izpolnite zahteve glede ROI (donosnost naložbe)/TCO (skupni stroški lastništva); |
| (2) | Hitro rast podatkov je mogoče učinkovito nadzorovati; |
| (3) | Povečajte učinkovit prostor za shranjevanje in izboljšajte učinkovitost shranjevanja; |
| (4) | Prihranite skupne stroške skladiščenja in stroške upravljanja; |
| (5) | Prihranite pasovno širino omrežja za prenos podatkov; |
| (6) | Prihranite stroške delovanja in vzdrževanja, kot so prostor, napajanje in hlajenje. |
Tehnologija dedupe se pogosto uporablja v sistemih za varnostno kopiranje in arhiviranje podatkov, saj je po večkratnem varnostnem kopiranju podatkov veliko podvojenih podatkov, kar je zelo primerno za to tehnologijo. Pravzaprav se lahko tehnologija dedupe uporablja v številnih situacijah, vključno s spletnimi podatki, podatki v bližini črte in sistemi za shranjevanje podatkov brez povezave. Lahko se implementira v datotečne sisteme, upravljalnike nosilcev, NAS in sans. Dedupe se lahko uporablja tudi za obnovitev podatkov po katastrofi, prenos podatkov in sinhronizacijo, saj se lahko tehnologija stiskanja podatkov uporablja za pakiranje podatkov. Tehnologija Dedupe lahko mnogim aplikacijam pomaga zmanjšati shranjevanje podatkov, prihranek pasovne širine omrežja, izboljšanje učinkovitosti shranjevanja, zmanjšanje okna za varnostno kopiranje in prihranek stroškov.
Dedupe ima dve glavni razsežnosti: razmerja deduplokacije in zmogljivost. Dedupe zmogljivost je odvisna od specifične izvedbene tehnologije, medtem ko je stopnja Dedupe določena z značilnostmi samih podatkov in vzorci aplikacij, kot je prikazano v spodnji tabeli. Prodajalci shranjevanja trenutno poročajo o stopnjah deduplikacije v razponu od 20:1 do 500:1.
| Visoka stopnja deduplikacije | Nizka stopnja deduplikacije |
| Podatki, ki jih ustvari uporabnik | Podatki iz naravnega sveta |
| Nizka stopnja spreminjanja podatkov | Visoka stopnja spreminjanja podatkov |
| Referenčni podatki, neaktivni podatki | Aktivni podatki |
| Aplikacija z nizko stopnjo spreminjanja podatkov | Aplikacija z visoko stopnjo spreminjanja podatkov |
| Popolna varnostna kopija podatkov | Inkrementalno varnostno kopiranje podatkov |
| Dolgoročno shranjevanje podatkov | Kratkoročno shranjevanje podatkov |
| Širok nabor podatkovnih aplikacij | Majhen nabor podatkovnih aplikacij |
| Kontinuirana poslovna obdelava podatkov | Splošna poslovna obdelava podatkov |
| Majhna segmentacija podatkov | Segmentacija velikih podatkov |
| Podaljšana segmentacija podatkov | Segmentacija podatkov s fiksno dolžino |
| Zaznana vsebina podatkov | Vsebina podatkov neznana |
| Deduplikacija časovnih podatkov | Deduplikacija prostorskih podatkov |
Dedupe Implementation Points
Pri razvoju ali uporabi tehnologije Dedupe je treba upoštevati različne dejavnike, saj ti dejavniki neposredno vplivajo na njeno delovanje in učinkovitost.
| (1) | Kaj | Kateri podatki so odtehtani? |
| (2) | kdaj | Kdaj bo teža odpravljena? |
| (3) | kje | Kje je izguba teže? |
| (4) | kako | Kako zmanjšati težo? |
Dedupe Key Technology
Postopek deduplikacije sistema za shranjevanje je na splošno naslednji: najprej je podatkovna datoteka razdeljena na nabor podatkov, za vsak blok podatkov za izračun prstnega odtisa, nato pa na podlagi ključnih besed iskanja Hash prstnega odtisa ujemanje označuje podatke za dvojnik. podatkovnih blokov, shranjuje samo indeksno številko podatkovnega bloka, sicer to pomeni, da je podatkovni blok edini del novega, shranjevanja podatkovnega bloka in ustvarja ustrezne metainformacije. Tako fizična datoteka v sistemu za shranjevanje ustreza logični predstavitvi niz metapodatkov FP. Ko berete datoteko, najprej preberite logično datoteko, nato v skladu z zaporedjem FP vzemite ustrezen podatkovni blok iz sistema za shranjevanje, obnovite kopijo fizične datoteke. To je razvidno iz zgornjega postopka da ključne tehnologije Dedupe vključujejo predvsem segmentacijo podatkovnih blokov datotek, izračun prstnih odtisov podatkovnih blokov in iskanje podatkovnih blokov.
(1) Segmentacija podatkovnega bloka datoteke
(2) Izračun prstnega odtisa podatkovnega bloka
(3) Pridobivanje podatkovnega bloka
Če želite najti te priporočene modele za zagon deduplikacije omrežnih paketov:
Mylinking™ Omrežni paketni posrednik (NPB) ML-NPB-640048*10GE SFP+ plus 4*40GE/100GE QSFP28, največ 880Gbps
Mylinking™ Omrežni paketni posrednik (NPB) ML-NPB-56606*40GE/100GE QSFP28 plus 48*10GE/25GE SFP28, največ 1,8 Tbps
Mylinking™ Omrežni paketni posrednik (NPB) ML-NPB-506048*10GE SFP+ plus 2*40GE QSFP, največ 560Gbps
Mylinking™ Omrežni paketni posrednik (NPB) ML-NPB-486048*10GE SFP+, največ 480 Gbps, funkcija Plus
Mylinking™ Omrežni paketni posrednik (NPB) ML-NPB-481048*10GE SFP+, največ 480Gbps
Mylinking™ Omrežni paketni posrednik (NPB) ML-NPB-2410P24*10GE SFP+, največ 240 Gbps, funkcija DPI
Mylinking™ Omrežni paketni posrednik (NPB) ML-NPB-6400
48*10GE SFP+ plus 4*40GE/100GE QSFP28, največ 880Gbps
Čas objave: 18. oktober 2022
