Deduplikacija podataka je popularna i najpopularnija tehnologija pohrane koja optimizira kapacitet pohrane. Eliminira redundantne podatke uklanjanjem dupliciranih podataka iz skupa podataka, ostavljajući samo jednu kopiju. Kao što je prikazano na slici ispod. Ova tehnologija može značajno smanjiti potrebu za fizičkim prostorom za pohranu kako bi se zadovoljila rastuća potražnja za pohranom podataka. Deduplikacija podataka može donijeti mnoge praktične koristi, uglavnom uključujući sljedeće aspekte:
| (1) | Ispunite zahtjeve za povrat ulaganja (ROI)/ukupne troškove vlasništva (TCO); |
| (2) | Brzi rast podataka može se efikasno kontrolisati; |
| (3) | Povećajte efektivni prostor za skladištenje i poboljšajte efikasnost skladištenja; |
| (4) | Uštedite ukupne troškove skladištenja i troškove upravljanja; |
| (5) | Uštedite mrežni propusni opseg pri prijenosu podataka; |
| (6) | Uštedite troškove rada i održavanja, kao što su prostor, napajanje i hlađenje. |
Dedupe tehnologija se široko koristi u sistemima za sigurnosno kopiranje i arhiviranje podataka, jer nakon višestrukih sigurnosnih kopija podataka postoji mnogo dupliciranih podataka, što je vrlo pogodno za ovu tehnologiju. U stvari, dedupe tehnologija se može koristiti u mnogim situacijama, uključujući online podatke, podatke u blizini mreže i offline sisteme za pohranu podataka. Može se implementirati u datotečne sisteme, upravitelje volumena, NAS i sans. Dedupe se također može koristiti za oporavak podataka od katastrofe, prijenos i sinhronizaciju podataka, a tehnologija kompresije podataka može se koristiti za pakiranje podataka. Dedupe tehnologija može pomoći mnogim aplikacijama da smanje pohranu podataka, uštede mrežni propusni opseg, poboljšaju efikasnost pohrane, smanje prozor za sigurnosno kopiranje i uštede troškove.
Deduplikacija ima dvije glavne dimenzije: omjere deduplikacije i performanse. Performanse deduplikacije zavise od specifične tehnologije implementacije, dok je stopa deduplikacije određena karakteristikama samih podataka i obrascima aplikacije, kao što je prikazano u donjoj tabeli. Proizvođači skladišnih sistema trenutno prijavljuju stope deduplikacije u rasponu od 20:1 do 500:1.
| Visoka stopa deduplikacije | Niska stopa deduplikacije |
| Podaci koje je kreirao korisnik | Podaci iz prirodnog svijeta |
| Podaci niske stope promjene | Visoka stopa promjena podataka |
| Referentni podaci, neaktivni podaci | Aktivni podaci |
| Aplikacija za nisku stopu promjene podataka | Aplikacija za visoku stopu promjene podataka |
| Potpuna sigurnosna kopija podataka | Inkrementalna sigurnosna kopija podataka |
| Dugoročno skladištenje podataka | Kratkoročno skladištenje podataka |
| Širok raspon primjena podataka | Mali raspon aplikacija za podatke |
| Kontinuirana obrada poslovnih podataka | Opšta obrada poslovnih podataka |
| Segmentacija malih podataka | Segmentacija velikih podataka |
| Produžena segmentacija podataka | Segmentacija podataka fiksne dužine |
| Percipirani sadržaj podataka | Sadržaj podataka nepoznat |
| Deduplikacija vremenskih podataka | Deduplikacija prostornih podataka |
Tačke implementacije deduplikata
Prilikom razvoja ili primjene Dedupe tehnologije treba uzeti u obzir različite faktore, jer ti faktori direktno utiču na njene performanse i efikasnost.
| (1) | Šta | Kojim se podacima umanjuje težina? |
| (2) | Kada | Kada će težina nestati? |
| (3) | Gdje | Gdje je gubitak težine? |
| (4) | Kako | Kako smanjiti težinu? |
Tehnologija dedupiranja ključeva
Proces deduplikacije u sistemu za pohranu podataka općenito je sljedeći: prvo se datoteka s podacima dijeli na skup podataka, za svaki blok podataka izračunava se otisak prsta, a zatim se na temelju ključnih riječi za pretragu heša otiska prsta, podudarajući podatke za duplicirane blokove podataka, pohranjuje se samo indeksni broj bloka podataka, u suprotnom to znači da je blok podataka jedini dio novog, pohranjuje se blok podataka i kreira relevantne meta informacije. Dakle, fizička datoteka u sistemu za pohranu podataka odgovara logičkom prikazu skupa FP metapodataka. Prilikom čitanja datoteke, prvo se pročita logička datoteka, zatim se, prema FP sekvenci, odgovarajući blok podataka izvadi iz sistema za pohranu i vrati kopija fizičke datoteke. Iz gore navedenog procesa može se vidjeti da ključne tehnologije Deduplikacije uglavnom uključuju segmentaciju blokova podataka datoteke, izračunavanje otiska bloka podataka i pronalaženje blokova podataka.
(1) Segmentacija blokova podataka datoteke
(2) Izračunavanje otiska bloka podataka
(3) Dohvaćanje blokova podataka
Da biste pronašli ove preporučene modele za pokretanje deduplikacije mrežnih paketa:
Mylinking™ mrežni paketni broker (NPB) ML-NPB-640048*10GE SFP+ plus 4*40GE/100GE QSFP28, maks. 880Gbps
Mylinking™ mrežni paketni broker (NPB) ML-NPB-56606*40GE/100GE QSFP28 plus 48*10GE/25GE SFP28, maks. 1,8 Tbps
Mylinking™ mrežni paketni broker (NPB) ML-NPB-506048*10GE SFP+ plus 2*40GE QSFP, maks. 560Gbps
Mylinking™ mrežni paketni broker (NPB) ML-NPB-486048*10GE SFP+, maks. 480Gbps, funkcija Plus
Mylinking™ mrežni paketni broker (NPB) ML-NPB-481048*10GE SFP+, maks. 480 Gbps
Mylinking™ mrežni paketni broker (NPB) ML-NPB-2410P24*10GE SFP+, maks. 240Gbps, DPI funkcija
Mylinking™ mrežni paketni broker (NPB) ML-NPB-6400
48*10GE SFP+ plus 4*40GE/100GE QSFP28, maks. 880Gbps
Vrijeme objave: 18. oktobar 2022.
