Data De-dupplication on suosittu ja suosittu tallennustekniikka, joka optimoi tallennuskapasiteettia.Se poistaa ylimääräiset tiedot poistamalla päällekkäiset tiedot tietojoukosta, jolloin jäljelle jää vain yksi kopio.Kuten alla olevasta kuvasta näkyy.Tämä tekniikka voi vähentää huomattavasti fyysisen tallennustilan tarvetta. tilaa vastaamaan kasvavaan tiedontallennustarpeeseen.Dedupe-tekniikka voi tuoda monia käytännön etuja, mukaan lukien pääasiassa seuraavat näkökohdat:
(1) | Täytä ROI (sijoitetun pääoman tuotto)/TCO (kokonaiskustannukset) vaatimukset; |
(2) | Datan nopeaa kasvua voidaan hallita tehokkaasti; |
(3) | Lisää tehokasta säilytystilaa ja paranna varastoinnin tehokkuutta; |
(4) | Tallenna kokonaisvarastointikustannukset ja hallintakustannukset; |
(5) | Tallenna tiedonsiirron verkon kaistanleveys; |
(6) | Säästä käyttö- ja ylläpitokustannuksia, kuten tilaa, virtalähdettä ja jäähdytystä. |
Dedupe-tekniikkaa käytetään laajalti tietojen varmuuskopiointi- ja arkistointijärjestelmissä, koska useiden tietojen varmuuskopioiden jälkeen on paljon päällekkäisiä tietoja, mikä sopii hyvin tälle tekniikalle. Itse asiassa dedupe-tekniikkaa voidaan käyttää monissa tilanteissa, mukaan lukien online-tiedot, lähes linjan tiedot ja offline-tietojen tallennusjärjestelmät. Se voidaan toteuttaa tiedostojärjestelmissä, volyymin hallinnassa, NAS:ssa ja sansissa. Dedupea voidaan käyttää myös tietojen katastrofipalautukseen, tiedonsiirtoon ja synkronointiin, koska tietojen pakkaustekniikkaa voidaan käyttää tietojen pakkaamiseen. Dedupe-tekniikka voi auttaa monia sovelluksia vähentämään Tietojen tallennus, säästää verkon kaistanleveyttä, parantaa tallennustehoa, vähentää varmuuskopiointiaikaa ja säästää kustannuksia.
Dedupella on kaksi pääulottuvuutta: deduplocation-suhteet ja suorituskyky.Duplikoinnin tehokkuus riippuu tietystä toteutustekniikasta, kun taas Dedupe-nopeuden määräävät itse datan ominaisuudet ja sovellusmallit, kuten alla olevassa taulukossa näkyy.Tallennustilatoimittajat raportoivat tällä hetkellä päällekkäisyyden poistamisnopeudet vaihtelevat 20:1 - 500:1.
Korkea deduplikaatioaste | Matala deduplikaatioprosentti |
Käyttäjän luomat tiedot | Dataa luonnosta |
Tietojen alhainen muutosnopeus | Tietojen suuri muutosnopeus |
Viitetiedot, ei-aktiiviset tiedot | Aktiiviset tiedot |
Matala tiedonsiirtonopeussovellus | Suuri tiedonsiirtonopeussovellus |
Täysi tietojen varmuuskopiointi | Tietojen lisävarmuuskopiointi |
Tietojen pitkäaikainen tallennus | Tietojen lyhytaikainen tallennus |
Laaja valikoima datasovelluksia | Pieni valikoima datasovelluksia |
Jatkuva tietojen käsittely | Liiketoiminnan yleinen tietojenkäsittely |
Pieni datan segmentointi | Big data segmentointi |
Pidennä tietojen segmentointia | Kiinteäpituinen datasegmentointi |
Tietosisältö havaittu | Tietojen sisältö tuntematon |
Aikatietojen duplikointi | Paikkatietojen päällekkäisyyden poistaminen |
Dedupe toteutuspisteet
Dedupe-teknologiaa kehitettäessä tai sovellettaessa tulee ottaa huomioon useita tekijöitä, koska nämä tekijät vaikuttavat suoraan sen suorituskykyyn ja tehokkuuteen.
(1) | Mitä | Mitä tietoja painotetaan? |
(2) | Kun | Milloin paino putoaa? |
(3) | Jossa | Missä on painonpudotus? |
(4) | Miten | Kuinka pudottaa painoa? |
Dedupe Key -tekniikka
Tallennusjärjestelmän deduplikaatioprosessi on yleensä tämä: ensinnäkin tiedosto jaetaan tietojoukkoon, jokaista tietolohkoa varten lasketaan sormenjälki, ja sitten sormenjälkien hajaavainsanojen perusteella vastaavuus osoittaa kaksoiskappaleen tiedot. tietolohkot, tallentaa vain tietolohkon indeksinumeron, muuten se tarkoittaa, että tietolohko on ainoa osa uutta, tallennustietolohkoa ja luo asiaankuuluvia metatietoja. Siten tallennusjärjestelmässä oleva fyysinen tiedosto vastaa loogista esitystä joukko FP-metatietoja.Kun luet tiedostoa, lue ensin looginen tiedosto, sitten FP-sekvenssin mukaisesti, ota vastaava tietolohko tallennusjärjestelmästä, palauta fyysisen tiedoston kopio.Se näkyy yllä olevasta prosessista Dedupen tärkeimmät tekniikat sisältävät pääasiassa tiedostojen datalohkojen segmentoinnin, tietolohkon sormenjälkien laskennan ja tietolohkon haun.
(1) Tiedoston tietolohkon segmentointi
(2) Tietolohkon sormenjäljen laskenta
(3) Tietolohkon haku
Löydät nämä suositellut mallit verkkopakettien duplikoinnin aloittamiseksi seuraavasti:
Mylinking™ Network Packet Broker (NPB) ML-NPB-640048*10GE SFP+ plus 4*40GE/100GE QSFP28, max 880Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-56606*40GE/100GE QSFP28 plus 48*10GE/25GE SFP28, enintään 1,8 Tbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-506048*10GE SFP+ plus 2*40GE QSFP, max 560Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-486048*10GE SFP+, Max 480Gbps, Function Plus
Mylinking™ Network Packet Broker (NPB) ML-NPB-481048*10GE SFP+, Max 480Gbps
Mylinking™ Network Packet Broker (NPB) ML-NPB-2410P24*10GE SFP+, Max 240Gbps, DPI-toiminto
Mylinking™ Network Packet Broker (NPB) ML-NPB-6400
48*10GE SFP+ plus 4*40GE/100GE QSFP28, max 880Gbps
Postitusaika: 18.10.2022