მონაცემთა შენახვის სისტემა Quantum Myriad

შესაძლებლობები

Myriad იდეალურად შეესაბამება კრიტიკული მონაცემების სწრაფ აღდგენას, მომთხოვნი ანიმაციური პროექტების განხორციელებას და UHD-ვიდეოს დამუშავებისა და სპეცეფექტების დადების რთული ამოცანების შესრულებას. სისტემა საშუალებას იძლევა შეიქმნას თანამედროვე მასშტაბირებადი გადაწყვეტილებები არასტრუქტურირებული მონაცემების უზარმაზარი მოცულობების შესანახად, რომლებიც აუცილებელია ღრმა ანალიზისთვის, სამეცნიერო კვლევებისა და ხელოვნური ინტელექტის მოდელების სწავლებისთვის.

პროტოკოლები

Myriad მხარს უჭერს მიერთებას NFS-ითა და SMB-ით, მალე დაემატება S3-ის სრული მხარდაჭერა. კლიენტები ერთ IP მისამართს უერთდება, კლასტერში კვანძების რაოდენობისა და პროტოკოლისგან დამოუკიდებლად. დატვირთვის ბალანსირება ავტომატურად ხორციელდება 100გბ პორტებს შორის ECMP პროტოკოლის გამოყენებით. ახალი კვანძების სწრაფად დასამატებლად გამოიყენება BGP პროტოკოლი

სერვისები

Myriad მხარს უჭერს მონაცემთა ონლაინ-დედუბლიკაციასა და შეკუმშვას, ასევე ფაილებისა და ობიექტების ვერსიონირების მექანიზმებს, მყისიერი ასლების (სნეპშოტების) და კლონების შექმნას. მონაცემთა ოპტიმიზაციისა და მართვის ამ ფუნქციების გამოყენება ინფორმაციის ხელმისაწვდომობის ყოველგვარი ზიანის გარეშე ხორციელდება და ბიზნეს-პროცესების უწყვეტობის შენარჩუნებით შენახვის მაღალ ეფექტიანობას უზრუნველყოფს.

ფაილური სისტემა

სისტემაში მონაცემები და მეტამონაცემები თანაბრად ნაწილდება კლასტერის ყველა კვანძს შორის, რაც ვიწრო ადგილების წარმოქმნას გამორიცხავს. ეფექტური შენახვისთვის გამოიყენება key-value ტიპის ტრანზაქციული მონაცემთა ბაზა, ხოლო კვანძებს შორის მაღალსიჩქარიანი ურთიერთქმედება RDMA პროტოკოლით ხორციელდება, რაც ინფორმაციის გადაცემისას დაყოვნებებსა და ცენტრალურ პროცესორებზე დატვირთვას მინიმუმამდე ამცირებს.

მონაცემთა შენახვის ტრანზაქციული მიდგომა

Myriad-ის არქიტექტურა მასშტაბურ ინსტალაციებშიც კი იყენებს lock-free მიდგომას, რაც კვანძების ხელმისაწვდომობის ცვლილებებზე მყისიერ რეაქციას უზრუნველყოფს. Redirect-on-Write მექანიზმი უზრუნველყოფს ყველა ახალი მონაცემის თავისუფალ ადგილზე ჩაწერას ძველის გადაწერის ნაცვლად, ინარჩუნებს ინფორმაციის მთლიანობას და სისტემის წარმადობას ოპტიმიზაციას უკეთებს. მონაცემები და მეტამონაცემები თანაბრად ნაწილდება კლასტერის ყველა კვანძს შორის, რაც ვიწრო ადგილების წარმოქმნას გამორიცხავს. ეფექტური შენახვისთვის გამოიყენება key-value ტიპის ტრანზაქციული მონაცემთა ბაზა, ხოლო კვანძებს შორის მაღალსიჩქარიანი ურთიერთქმედება RDMA პროტოკოლით ხორციელდება, რაც ინფორმაციის გადაცემისას დაყოვნებებსა და ცენტრალურ პროცესორებზე დატვირთვას მინიმუმამდე ამცირებს.

დინამიკური Erasure Coding

ხელმისაწვდომ კვანძებს შორის მონაცემთა საიმედო შენახვისთვის საჭირო ჩანკების რაოდენობას სისტემა დამოუკიდებლად ითვლის ეფექტიანობისა და დაცვის მოცემული სამიზნე მაჩვენებლების საფუძველზე. ეს ბიზნესის აქტუალური მოთხოვნების შესაბამისად საცავის სასარგებლო მოცულობასა და მის მდგრადობის დონეს შორის ოპტიმალური ბალანსის ავტომატურად შენარჩუნების საშუალებას იძლევა.

განახლებები ჩარევის გარეშე

ახალი კვანძის დამატება მაქსიმალურად გამარტივებულია: საკმარისია მისი თაროში დაყენება, კაბელების მიერთება და კვების ჩართვა. ყველა შემდგომი პროცესი ავტომატურად სრულდება — ადმინისტრატორს არ სჭირდება ინტერფეისის გახსნა ან მხარდაჭერის სამსახურში ტიკეტების შექმნა, რადგან სისტემა კვანძს კლასტერში დამოუკიდებლად აინტეგრირებს.