Ang Data De-Duplication ay isang tanyag at tanyag na teknolohiya ng imbakan na nag-optimize ng kapasidad ng imbakan. Tinatanggal nito ang kalabisan ng data sa pamamagitan ng pag-alis ng dobleng data mula sa dataset, na nag-iiwan lamang ng isang kopya.as na ipinakita sa figure sa ibaba.Ang teknolohiya na ito ay maaaring mabawasan ang maraming mga praktikal na benepisyo, pangunahing kasama ang mga sumusunod na aspeto:
| (1) | Kilalanin ang ROI (pagbabalik sa pamumuhunan)/TCO (kabuuang gastos ng pagmamay -ari); |
| (2) | Ang mabilis na paglaki ng data ay maaaring epektibong makontrol; |
| (3) | Dagdagan ang epektibong espasyo sa pag -iimbak at pagbutihin ang kahusayan sa pag -iimbak; |
| (4) | I -save ang kabuuang gastos sa imbakan at gastos sa pamamahala; |
| (5) | I -save ang bandwidth ng network ng paghahatid ng data; |
| (6) | I -save ang mga gastos sa operasyon at pagpapanatili tulad ng puwang, supply ng kuryente at paglamig. |
Ang teknolohiya ng Dedupe ay malawakang ginagamit sa mga backup ng data at pag-archive ng mga sistema, dahil maraming mga dobleng data pagkatapos ng maraming mga backup ng data, na kung saan ay angkop para sa teknolohiyang ito. Sa katunayan, ang teknolohiya ng dedupe ay maaaring magamit sa maraming mga sitwasyon, kabilang ang mga online na data, malapit na linya ng data, at mga offline na sistema ng imbakan ng data. Maaari itong maipatupad sa mga file system, dami ng mga tagapamahala, NAS, at sans.dedupe ay maaari ding magamit para sa pagbawi ng kalamidad sa data, ang paghahatid ng data at pag -synchronise, dahil ang isang teknolohiya ng compression ng data ay maaaring magamit para sa data packaging.Dedupe na teknolohiya ay makakatulong sa maraming mga aplikasyon na mabawasan ang pag -iimbak ng data, i -save ang network bandwidth, mapabuti ang kahusayan sa pag -iimbak, bawasan ang window ng backup, at makatipid ng mga gastos.
Ang Dedupe ay may dalawang pangunahing sukat: ang mga ratios ng deduplocation at pagganap.Dedupe pagganap ay nakasalalay sa tiyak na teknolohiya ng pagpapatupad, habang ang rate ng dedupe ay tinutukoy ng mga katangian ng data mismo at mga pattern ng aplikasyon, tulad ng ipinapakita sa talahanayan sa ibaba.Storage vendors kasalukuyang nag -uulat ng mga rate ng deduplication na umaabot mula 20: 1 hanggang 500: 1.
| Mataas na rate ng deduplication | Mababang rate ng deduplication |
| Data na nilikha ng gumagamit | Data mula sa natural na mundo |
| Mababang rate ng pagbabago ng data | Mataas na rate ng pagbabago ng data |
| Sanggunian ng sanggunian, hindi aktibong data | Aktibong data |
| Mababang application ng rate ng pagbabago ng data | Mataas na application ng rate ng pagbabago ng data |
| Buong backup ng data | Incremental data backup |
| Data Long-Term Storage | Data Short-Term Storage |
| Malawak na hanay ng mga aplikasyon ng data | Maliit na hanay ng mga aplikasyon ng data |
| Patuloy na pagproseso ng negosyo ng data | Pangkalahatang pagproseso ng negosyo ng data |
| Maliit na segment ng data | Big data segmentation |
| Elongate data segmentation | Nakatakdang haba ng segment ng data |
| Ang nilalaman ng data ay napansin | Hindi alam ang nilalaman ng data |
| Deduplication ng data ng oras | Spatial data deduplication |
Mga Punto ng Pagpapatupad ng Dedupe
Ang iba't ibang mga kadahilanan ay dapat isaalang -alang kapag bumubuo o nag -aaplay ng teknolohiya ng dedupe, dahil ang mga salik na ito ay direktang nakakaapekto sa pagganap at pagiging epektibo nito.
| (1) | Ano | Anong data ang de-weighted? |
| (2) | Kailan | Kailan matatanggal ang bigat? |
| (3) | Saan | Nasaan ang pag -aalis ng timbang? |
| (4) | Paano | Paano mabawasan ang timbang? |
Dedupe Key Technology
Ang proseso ng pagbabawas ng sistema ng imbakan sa pangkalahatan ay ito: una sa lahat ng file ng data ay nahahati sa isang hanay ng data, para sa bawat bloke ng data upang makalkula ang fingerprint, at pagkatapos ay batay sa mga keyword na paghahanap ng fingerprint, ang pagtutugma ay nagpapahiwatig ng data para sa dobleng piraso ng mga bloke ng data, nag -iimbak lamang ng data block index number, kung hindi man nangangahulugan ito na ang data block ay ang tanging piraso ng isang bago, pag -iimbak ng data block at lumikha ng may -katuturang impormasyon ng meta.thus, isang pisikal na file sa isang pisikal na sistema ng pag -iimbak ng isang imbakan ng data sa isang pisikal na file sa isang pisikal na file sa isang pisikal na file sa isang pisikal na file sa isang pisikal na file sa isang pisikal na file sa isang pisikal na file sa isang pisikal na file, Ang lohikal na representasyon ng isang hanay ng FP metadata.Kung basahin ang file, basahin muna ang lohikal na file, pagkatapos ay ayon sa pagkakasunud -sunod ng FP, ilabas ang kaukulang data block mula sa sistema ng imbakan, ibalik ang kopya ng pisikal na file.Ito ay makikita mula sa proseso sa itaas na ang mga pangunahing teknolohiya ng dedupe higit sa lahat ay isama ang segment ng data block block, data block fingerprint na pagkalkula at data block pagkuha.
(1) Segmentasyon ng Data Block Block
(2) Pagkalkula ng Data Block Fingerprint
(3) Pagkuha ng Data Block
Upang mahanap ang mga inirerekumenda na modelo upang simulan ang iyong pag -deduplication ng packet ng network:
Mylinking ™ Network Packet Broker (NPB) ML-NPB-640048*10GE SFP+ Plus 4*40GE/100GE QSFP28, MAX 880GBPS
Mylinking ™ Network Packet Broker (NPB) ML-NPB-56606*40GE/100GE QSFP28 PLUS 48*10GE/25GE SFP28, MAX 1.8TBPS
Mylinking ™ Network Packet Broker (NPB) ML-NPB-506048*10GE SFP+ Plus 2*40GE QSFP, MAX 560GBPS
Mylinking ™ Network Packet Broker (NPB) ML-NPB-486048*10GE SFP+, MAX 480Gbps, Function Plus
Mylinking ™ Network Packet Broker (NPB) ML-NPB-481048*10GE SFP+, MAX 480GBPS
Mylinking ™ Network Packet Broker (NPB) ML-NPB-2410p24*10GE SFP+, MAX 240GBPS, DPI function
Mylinking ™ Network Packet Broker (NPB) ML-NPB-6400
48*10GE SFP+ Plus 4*40GE/100GE QSFP28, MAX 880GBPS
Oras ng Mag-post: Oktubre-18-2022
