Дедупликацията на данни е популярна и популярна технология за съхранение, която оптимизира капацитета за съхранение. Тя елиминира излишните данни чрез премахване на дублирани данни от набора от данни, оставяйки само едно копие. Както е показано на фигурата по-долу. Тази технология може значително да намали нуждата от физическо съхранение пространство, за да отговори на нарастващото търсене на съхранение на данни. Технологията Dedupe може да донесе много практически ползи, включително главно следните аспекти:
| (1) | Отговаря на изискванията за ROI (възвръщаемост на инвестицията)/TCO (обща цена на притежание); |
| (2) | Бързият растеж на данните може да бъде ефективно контролиран; |
| (3) | Увеличете ефективното пространство за съхранение и подобрете ефективността на съхранението; |
| (4) | Спестете общите разходи за съхранение и разходите за управление; |
| (5) | Запазете честотната лента на мрежата за предаване на данни; |
| (6) | Спестете разходи за експлоатация и поддръжка като пространство, захранване и охлаждане. |
Технологията Dedupe се използва широко в системите за архивиране и архивиране на данни, тъй като има много дублиращи се данни след множество архиви на данни, което е много подходящо за тази технология. Всъщност технологията Dedupe може да се използва в много ситуации, включително онлайн данни, почти линейни данни и офлайн системи за съхранение на данни.Може да се внедри във файлови системи, мениджъри на обеми, NAS и sans. Dedupe може да се използва и за възстановяване на данни след бедствие, предаване и синхронизиране на данни, тъй като технологията за компресиране на данни може да се използва за опаковане на данни. Технологията Dedupe може да помогне на много приложения да намалят съхранение на данни, спестяване на честотна лента на мрежата, подобряване на ефективността на съхранението, намаляване на прозореца за архивиране и спестяване на разходи.
Dedupe има две основни измерения: коефициенти на дедупликация и производителност. Производителността на Dedupe зависи от конкретната технология за внедряване, докато скоростта на Dedupe се определя от характеристиките на самите данни и моделите на приложението, както е показано в таблицата по-долу. Доставчиците на хранилища понастоящем отчитат нива на дедупликация в диапазон от 20:1 до 500:1.
| Висок процент на дедупликация | Нисък процент на дедупликация |
| Данни, създадени от потребителя | Данни от естествения свят |
| Ниска скорост на промяна на данните | Висока скорост на промяна на данните |
| Справочни данни, неактивни данни | Активни данни |
| Приложение с ниска скорост на промяна на данните | Приложение с висока скорост на промяна на данните |
| Пълно архивиране на данните | Инкрементално архивиране на данни |
| Дългосрочно съхранение на данни | Краткосрочно съхранение на данни |
| Широка гама от приложения за данни | Малък набор от приложения за данни |
| Непрекъсната бизнес обработка на данни | Обща бизнес обработка на данни |
| Малко сегментиране на данни | Сегментиране на големи данни |
| Удължено сегментиране на данни | Сегментиране на данни с фиксирана дължина |
| Възприето съдържание на данни | Съдържанието на данните е неизвестно |
| Дедупликация на данни за времето | Дедупликация на пространствени данни |
Дедупиране на точки за внедряване
При разработването или прилагането на технологията Dedupe трябва да се вземат предвид различни фактори, тъй като тези фактори пряко влияят върху нейната производителност и ефективност.
| (1) | Какво | Кои данни са депретеглени? |
| (2) | Кога | Кога теглото ще бъде премахнато? |
| (3) | Където | Къде е елиминирането на теглото? |
| (4) | как | Как да намалим теглото? |
Ключова технология за дедупиране
Процесът на дедупликация на системата за съхранение като цяло е следният: първо файлът с данни се разделя на набор от данни, за всеки блок от данни за изчисляване на пръстовия отпечатък и след това въз основа на ключови думи за търсене на хеш на пръстови отпечатъци, съвпадението показва данните за дубликата блокове с данни, съхранява само индексния номер на блок с данни, в противен случай това означава, че блокът с данни е единствената част от нов блок за съхранение на данни и създава подходяща мета информация. По този начин физическият файл в системата за съхранение съответства на логическо представяне на набор от FP метаданни. Когато четете файла, първо прочетете логическия файл, след това според FP последователността извадете съответния блок данни от системата за съхранение, възстановете копието на физическия файл. Може да се види от горния процес че ключовите технологии на Dedupe включват главно сегментиране на файлови блокове с данни, изчисляване на пръстови отпечатъци на блокове с данни и извличане на блокове с данни.
(1) Сегментиране на блок с данни на файл
(2) Изчисляване на пръстови отпечатъци на блок данни
(3) Извличане на блок данни
За да намерите тези препоръчани модели за стартиране на вашата дедупликация на мрежови пакети:
Mylinking™ Мрежов пакетен брокер (NPB) ML-NPB-640048*10GE SFP+ плюс 4*40GE/100GE QSFP28, Макс. 880Gbps
Mylinking™ Мрежов пакетен брокер (NPB) ML-NPB-56606*40GE/100GE QSFP28 плюс 48*10GE/25GE SFP28, Макс. 1.8Tbps
Mylinking™ Мрежов пакетен брокер (NPB) ML-NPB-506048*10GE SFP+ плюс 2*40GE QSFP, Макс. 560Gbps
Mylinking™ Мрежов пакетен брокер (NPB) ML-NPB-486048*10GE SFP+, Макс. 480Gbps, Функция Плюс
Mylinking™ Мрежов пакетен брокер (NPB) ML-NPB-481048*10GE SFP+, Макс. 480Gbps
Mylinking™ Мрежов пакетен брокер (NPB) ML-NPB-2410P24*10GE SFP+, Макс. 240Gbps, DPI функция
Mylinking™ Мрежов пакетен брокер (NPB) ML-NPB-6400
48*10GE SFP+ плюс 4*40GE/100GE QSFP28, Макс. 880Gbps
Време на публикуване: 18 октомври 2022 г
