Data-deduplikation är en populär och populär lagringsteknik som optimerar lagringskapacitet. Det eliminerar redundanta data genom att ta bort duplikatdata från datasättet, vilket bara lämnar en kopia. Som visas i figuren nedan. Denna teknik kan kraftigt minska behovet av fysiskt lagringsutrymme för att möta den växande efterfrågan på datalagring.
| (1) | Uppfylla ROI (Return on Investment)/TCO (Totala kostnader för ägande); |
| (2) | Den snabba tillväxten av data kan kontrolleras effektivt; |
| (3) | Öka effektivt lagringsutrymme och förbättra lagringseffektiviteten; |
| (4) | Spara den totala lagringskostnaden och hanteringskostnaden; |
| (5) | Spara nätverksbandbredden för dataöverföring; |
| (6) | Spara drift och underhållskostnader som utrymme, strömförsörjning och kylning. |
DEDUPE-teknik används allmänt i säkerhetskopierings- och arkiveringssystem, eftersom det finns mycket duplicerade data efter flera säkerhetskopior av data, vilket är mycket lämpligt för denna teknik. Faktum kan DEDUPE-teknik användas i många situationer, inklusive onlinedata, nästan linjedata och offline-datalagringssystem. Det kan implementeras i filsystem, volymhanterare, NAS och SANS.DEDUPE kan också användas för datakatastrofåterställning, dataöverföring och synkronisering, eftersom en datakomprimeringsteknik kan användas för datapaket.
Dedupe har två huvuddimensioner: Deduplocation -förhållanden och prestanda.
| Hög dedupliceringsgrad | Låg dedupliceringsgrad |
| Data skapade av användaren | Data från den naturliga världen |
| Data låg förändringshastighet | Data hög förändringshastighet |
| Referensdata, inaktiva data | Aktiv data |
| Låg dataändringsfrekvens | Hög dataförändringsfrekvens |
| Full säkerhetskopiering av data | Inkrementell säkerhetskopiering |
| Data långsiktig lagring | Data kortvarig lagring |
| Brett utbud av datatillämpningar | Litet utbud av datatillämpningar |
| Kontinuerlig databehandling | Allmän dataföretag |
| Liten datasegmentering | Big Data -segmentering |
| Långsträckt datasegmentering | Datasegmentering av fast längd |
| Datainnehåll uppfattas | Datainnehåll okänt |
| Tidsdata deduplicering | Deduplicering av rumslig data |
Dedupe -implementeringspunkter
Olika faktorer bör beaktas när man utvecklar eller tillämpar dedupe -teknik, eftersom dessa faktorer direkt påverkar dess prestanda och effektivitet.
| (1) | Vad | Vilka uppgifter är de vägda? |
| (2) | När | När elimineras vikten? |
| (3) | Där | Var är vikten eliminering? |
| (4) | Hur | Hur minskar man vikten? |
Dedupe nyckelteknik
Deduplication process of storage system in general is this: first of all the data file is divided into a set of data, for each block of data to calculate the fingerprint, and then based on fingerprint Hash search keywords, matching indicates the data for the duplicate data blocks, only stores data block index number, otherwise it means the data block is the only piece of a new, storage of data block and create relevant meta information.Thus, a physical file in the storage system corresponds to a Logisk representation av en uppsättning FP -metadata. När du läser filen, läs först den logiska filen, sedan enligt FP -sekvensen, ta ut motsvarande datablock från lagringssystemet, återställa kopian av den fysiska filen. Det kan ses från ovanstående process att nyckelteknologin för DEDUPE huvudsakligen inkluderar fildatablocksegmentering, datablockfingerprintberäkning och datablock.
(1) Fildatablocksegmentering
(2) Datablock fingeravtrycksberäkning
(3) Datablockhämtning
För att hitta dessa rekommenderar modeller för att starta ditt nätverkspaketdeduplicering:
MyLinking ™ Network Packet Broker (NPB) ML-NPB-640048*10GE SFP+ PLUS 4*40GE/100GE QSFP28, MAX 880GBPS
MyLinking ™ Network Packet Broker (NPB) ML-NPB-56606*40GE/100GE QSFP28 Plus 48*10GE/25GE SFP28, MAX 1,8 TBPS
MyLinking ™ Network Packet Broker (NPB) ML-NPB-506048*10GE SFP+ PLUS 2*40GE QSFP, MAX 560GBPS
MyLinking ™ Network Packet Broker (NPB) ML-NPB-486048*10GE SFP+, Max 480Gbps, Function Plus
MyLinking ™ Network Packet Broker (NPB) ML-NPB-481048*10GE SFP+, Max 480Gbps
MyLinking ™ Network Packet Broker (NPB) ML-NPB-2410P24*10GE SFP+, Max 240Gbps, DPI -funktion
MyLinking ™ Network Packet Broker (NPB) ML-NPB-6400
48*10GE SFP+ PLUS 4*40GE/100GE QSFP28, MAX 880GBPS
Posttid: oktober-18-2022
