De-duplikacija podataka je popularna i popularna tehnologija pohrane koja optimizira kapacitet pohrane. Eliminira suvišne podatke uklanjanjem dupliciranih podataka iz skupa podataka, ostavljajući samo jednu kopiju. Kao što je prikazano na slici ispod. Ova tehnologija može uvelike smanjiti potrebu za fizičkom pohranom prostor za zadovoljavanje rastuće potražnje za pohranom podataka. Dedupe tehnologija može donijeti mnoge praktične prednosti, uglavnom uključujući sljedeće aspekte:
(1) | Ispuniti zahtjeve ROI (povrat investicije)/TCO (ukupni trošak vlasništva); |
(2) | Brzi rast podataka može se efikasno kontrolisati; |
(3) | Povećajte efektivni prostor za skladištenje i poboljšajte efikasnost skladištenja; |
(4) | Uštedite ukupne troškove skladištenja i troškove upravljanja; |
(5) | Sačuvajte propusni opseg mreže za prijenos podataka; |
(6) | Uštedite troškove rada i održavanja kao što su prostor, napajanje i hlađenje. |
Dedupe tehnologija se široko koristi u sistemima za sigurnosnu kopiju i arhiviranje podataka, jer postoji mnogo duplikata podataka nakon višestrukih sigurnosnih kopija podataka, što je vrlo pogodno za ovu tehnologiju. Zapravo, dedupe tehnologija se može koristiti u mnogim situacijama, uključujući online podatke, podaci blizu linije i sistemi za skladištenje podataka van mreže. Može se implementirati u sisteme datoteka, upravljače volumena, NAS i sans. Dedupe se također može koristiti za oporavak podataka od katastrofe, prijenos podataka i sinhronizaciju, jer se tehnologija kompresije podataka može koristiti za pakovanje podataka. Dedupe tehnologija može pomoći mnogim aplikacijama da smanje skladištenje podataka, uštedite mrežni propusni opseg, poboljšajte efikasnost skladištenja, smanjite prozor za pravljenje rezervnih kopija i uštedite troškove.
Dedupe ima dvije glavne dimenzije: omjere deduplociranja i performanse. Performanse Dedupe zavise od specifične tehnologije implementacije, dok je stopa dedupea određena karakteristikama samih podataka i obrascima aplikacija, kao što je prikazano u tabeli ispod. Prodavci pohrane trenutno prijavljuju stope deduplikacije u rasponu od 20:1 do 500:1.
Visoka stopa deduplikacije | Niska stopa deduplikacije |
Podaci koje kreira korisnik | Podaci iz svijeta prirode |
Podaci niska stopa promjene | Podaci visoka stopa promjene |
Referentni podaci, neaktivni podaci | Aktivni podaci |
Aplikacija sa niskom brzinom promjene podataka | Aplikacija visoke brzine promjene podataka |
Potpuna sigurnosna kopija podataka | Inkrementalna sigurnosna kopija podataka |
Dugotrajno skladištenje podataka | Kratkotrajno skladištenje podataka |
Širok spektar aplikacija za podatke | Mali raspon aplikacija podataka |
Kontinuirana poslovna obrada podataka | Opća poslovna obrada podataka |
Mala segmentacija podataka | Segmentacija velikih podataka |
Produžena segmentacija podataka | Segmentacija podataka fiksne dužine |
Percipirani sadržaj podataka | Sadržaj podataka nepoznat |
Deduplikacija podataka o vremenu | Deduplikacija prostornih podataka |
Dedupe Implementation Points
Različite faktore treba uzeti u obzir prilikom razvoja ili primjene Dedupe tehnologije, jer ti faktori direktno utiču na njen učinak i djelotvornost.
(1) | sta | Koji podaci su umanjeni? |
(2) | Kada | Kada će težina biti eliminisana? |
(3) | Gdje | Gdje je eliminacija kilograma? |
(4) | Kako | Kako smanjiti težinu? |
Dedupe Key Technology
Proces deduplikacije sistema za pohranu općenito je sljedeći: prije svega datoteka podataka se dijeli na skup podataka, za svaki blok podataka za izračunavanje otiska prsta, a zatim na osnovu ključnih riječi za pretragu otiska prsta, podudaranje označava podatke za duplikat blokova podataka, pohranjuje samo indeksni broj bloka podataka, inače to znači da je blok podataka jedini dio novog, pohranjivanje bloka podataka i kreiranje relevantnih meta informacija. Dakle, fizička datoteka u sistemu za skladištenje odgovara logičkom predstavljanje skupa FP metapodataka. Prilikom čitanja datoteke prvo pročitajte logičku datoteku, zatim prema FP sekvenci izvadite odgovarajući blok podataka iz sistema za pohranu, vratite kopiju fizičke datoteke. Može se vidjeti iz gore navedeni proces da ključne tehnologije Dedupe-a uglavnom uključuju segmentaciju blokova podataka datoteke, proračun otiska prsta bloka podataka i pronalaženje bloka podataka.
(1) Segmentacija blokova podataka datoteke
(2) Proračun otiska prsta u bloku podataka
(3) Dohvaćanje bloka podataka
Da biste pronašli ove preporučene modele za pokretanje deduplikacije mrežnih paketa:
Mylinking™ broker mrežnih paketa (NPB) ML-NPB-640048*10GE SFP+ plus 4*40GE/100GE QSFP28, maks. 880Gbps
Mylinking™ broker mrežnih paketa (NPB) ML-NPB-56606*40GE/100GE QSFP28 plus 48*10GE/25GE SFP28, maks. 1,8 Tbps
Mylinking™ broker mrežnih paketa (NPB) ML-NPB-506048*10GE SFP+ plus 2*40GE QSFP, maks. 560Gbps
Mylinking™ broker mrežnih paketa (NPB) ML-NPB-486048*10GE SFP+, Max 480Gbps, Function Plus
Mylinking™ broker mrežnih paketa (NPB) ML-NPB-481048*10GE SFP+, maks. 480Gbps
Mylinking™ broker mrežnih paketa (NPB) ML-NPB-2410P24*10GE SFP+, Max 240Gbps, DPI funkcija
Mylinking™ broker mrežnih paketa (NPB) ML-NPB-6400
48*10GE SFP+ plus 4*40GE/100GE QSFP28, maks. 880Gbps
Vrijeme objave: 18.10.2022