De-duplikasi Data adalah teknologi penyimpanan populer dan populer yang mengoptimalkan kapasitas penyimpanan. Ini menghilangkan data yang berlebihan dengan menghapus data duplikat dari kumpulan data, hanya menyisakan satu salinan. Seperti yang ditunjukkan pada gambar di bawah. Teknologi ini dapat sangat mengurangi kebutuhan penyimpanan fisik ruang untuk memenuhi permintaan penyimpanan data yang terus meningkat. Teknologi Dedupe dapat membawa banyak manfaat praktis, terutama mencakup aspek-aspek berikut:
| (1) | Memenuhi persyaratan ROI (Pengembalian Investasi)/TCO (Total Biaya Kepemilikan); |
| (2) | Pesatnya pertumbuhan data dapat dikendalikan secara efektif; |
| (3) | Meningkatkan ruang penyimpanan yang efektif dan meningkatkan efisiensi penyimpanan; |
| (4) | Menghemat total biaya penyimpanan dan biaya manajemen; |
| (5) | Menghemat bandwidth jaringan transmisi data; |
| (6) | Menghemat biaya pengoperasian dan pemeliharaan seperti ruang, catu daya, dan pendinginan. |
Teknologi dedupe banyak digunakan dalam sistem backup dan pengarsipan data, karena banyak terjadi duplikasi data setelah beberapa kali backup data, sehingga sangat cocok untuk teknologi ini. Faktanya, teknologi dedupe dapat digunakan dalam banyak situasi, termasuk data online, data near-line, dan sistem penyimpanan data offline.Hal ini dapat diimplementasikan dalam sistem file, manajer volume, NAS, dan sans.Dedupe juga dapat digunakan untuk pemulihan bencana data, transmisi data dan sinkronisasi, sebagai teknologi kompresi data dapat digunakan untuk pengemasan data.Teknologi Dedupe dapat membantu banyak aplikasi mengurangi penyimpanan data, menghemat bandwidth jaringan, meningkatkan efisiensi penyimpanan, mengurangi jendela pencadangan, dan menghemat biaya.
Dedupe memiliki dua dimensi utama: rasio lokasi dedup dan kinerja. Performa dedupe bergantung pada teknologi implementasi spesifik, sedangkan laju Dedupe ditentukan oleh karakteristik data itu sendiri dan pola aplikasi, seperti yang ditunjukkan pada tabel di bawah. Vendor penyimpanan saat ini melaporkan kisaran tingkat deduplikasi dari 20:1 hingga 500:1.
| Tingkat deduplikasi yang tinggi | Tingkat deduplikasi rendah |
| Data yang dibuat oleh pengguna | Data dari alam |
| Tingkat perubahan data yang rendah | Data tingkat perubahan yang tinggi |
| Data referensi, data tidak aktif | Data aktif |
| Aplikasi tingkat perubahan data rendah | Aplikasi dengan kecepatan perubahan data yang tinggi |
| Cadangan data lengkap | Pencadangan data tambahan |
| Penyimpanan data jangka panjang | Penyimpanan data jangka pendek |
| Berbagai macam aplikasi data | Sejumlah kecil aplikasi data |
| Pemrosesan bisnis data yang berkelanjutan | Pemrosesan bisnis data umum |
| Segmentasi data kecil | Segmentasi data besar |
| Memanjang segmentasi data | Segmentasi data dengan panjang tetap |
| Konten data dirasakan | Konten data tidak diketahui |
| Deduplikasi data waktu | Deduplikasi data spasial |
Poin Implementasi Dedupe
Berbagai faktor harus dipertimbangkan ketika mengembangkan atau menerapkan teknologi Dedupe, karena faktor-faktor ini secara langsung mempengaruhi kinerja dan efektivitasnya.
| (1) | Apa | Data apa saja yang dikurangi bobotnya? |
| (2) | Kapan | Kapan beban tersebut akan dihilangkan? |
| (3) | Di mana | Di mana penghapusan berat badannya? |
| (4) | Bagaimana | Bagaimana cara mengurangi berat badan? |
Teknologi Kunci Dedupe
Proses deduplikasi sistem penyimpanan secara umum adalah sebagai berikut: pertama-tama file data dibagi menjadi satu set data, untuk setiap blok data untuk menghitung sidik jari, dan kemudian berdasarkan kata kunci pencarian Hash sidik jari, pencocokan menunjukkan data untuk duplikat blok data, hanya menyimpan nomor indeks blok data, jika tidak berarti blok data adalah satu-satunya bagian dari blok data yang baru, penyimpanan dan membuat informasi meta yang relevan. Dengan demikian, file fisik dalam sistem penyimpanan sesuai dengan representasi logis dari a kumpulan metadata FP. Saat membaca file, pertama-tama baca file logis, kemudian sesuai dengan urutan FP, keluarkan blok data yang sesuai dari sistem penyimpanan, pulihkan salinan file fisik. Hal ini dapat dilihat dari proses di atas bahwa teknologi utama Dedupe terutama mencakup segmentasi blok data file, perhitungan sidik jari blok data, dan pengambilan blok data.
(1) Segmentasi blok data file
(2) Perhitungan sidik jari blok data
(3) Pengambilan blok data
Untuk menemukan model yang direkomendasikan ini untuk memulai Deduplikasi Paket Jaringan Anda:
Pialang Paket Jaringan Mylinking™ (NPB) ML-NPB-640048*10GE SFP+ ditambah 4*40GE/100GE QSFP28, Maks 880Gbps
Broker Paket Jaringan Mylinking™ (NPB) ML-NPB-56606*40GE/100GE QSFP28 ditambah 48*10GE/25GE SFP28, Maks 1,8Tbps
Broker Paket Jaringan Mylinking™ (NPB) ML-NPB-506048*10GE SFP+ ditambah 2*40GE QSFP, Maks 560Gbps
Broker Paket Jaringan Mylinking™ (NPB) ML-NPB-486048*10GE SFP+, Maks 480Gbps, Fungsi Plus
Broker Paket Jaringan Mylinking™ (NPB) ML-NPB-481048*10GE SFP+, Maks 480Gbps
Pialang Paket Jaringan Mylinking™ (NPB) ML-NPB-2410P24*10GE SFP+, Maks 240Gbps, Fungsi DPI
Pialang Paket Jaringan Mylinking™ (NPB) ML-NPB-6400
48*10GE SFP+ ditambah 4*40GE/100GE QSFP28, Maks 880Gbps
Waktu posting: 18 Oktober 2022
