Yapılandırılmamış veri yönetimi firması Komprise, büyük yapılandırılmamış veri kümelerini dinamik olarak bölme yeteneğine sahip patentli bir teknoloji geliştirdi.Bu çözüm, veri aktarımı sırasında AI işleme GPU'larına çoklu hesaplama motorları arasında iş yüklerini dağıtır., genel işleme hızını önemli ölçüde hızlandırıyor.
Resmi olarak patent olarak kaydedilen US-12566637-B2, Komprise Elastic Shares (KES) teknolojisi, Komprise CTO Michael Peercy ve araştırma ekibi tarafından sunuldu.Resmi başlığı, çoklu hesaplama motorları tarafından işlemlerin yürütülmesi için bilinmeyen bir ağacın bölünmesi için sistem ve yöntemlerdir..
Peercy, "Elastic Shares, müşterilerimizin değerli bilgisayar, bellek ve ağ kaynaklarından tam olarak yararlanmasını sağlar.Şirketlerin belirgin rekabet avantajları kazanmalarına yardımcı olmak.
Analiz, LLM çıkarım veya AI ajan hesaplamaları için AI sunucularına iletilmiş petabayt ölçekli veri kümeleri için,Tek bir hesaplama motoru, dizin ağaçlarını veya nesne depolama öneklerini geçmek için saatler gerektirir.Bir hesaplama motoru, tüm senaryolarda tutarlı işletim ilkelerine sahip bağımsız bir sunucu, bireysel iplik, iplik grubu, süreç veya süreç kümesi olarak tanımlanabilir.Kullanıcılar önceden paralel hesaplama için birden fazla motor dağıtabilirler., statik tahsis genellikle verimsizliğe neden olur. Düzensiz şube boyutları, bazı hesaplama düğümlerinin atanmış görevleri tamamlamaları için daha yavaş düğümleri beklerken erken bitmesine ve boş kalmasına neden olur.
Komprise patent US-12566637-B2.
Peercy'nin ekibi gerçek zamanlı olarak düğüm durumunu izlemek için hesaplama motorlarından birine yerleştirilmiş akıllı bir iş planlayıcısı icat etti.Çalışma yükleri başlangıçta mevcut hesaplama motorları arasında tahsis edilir. Herhangi bir düğüm atanan bölümünü bitirdikten sonra, bekleyen görevleri almak için kaynak havuzuna geri döner. Bu mekanizma dinlenme süresini ortadan kaldırır,Sürekli olarak yeni iş yüklerini serbest hesaplama düğümlerine atar, ve genel işleme süresini kısaltır.
Resmi bir Komprise blog yazısına göre, KES dinamik olarak yapılandırılmamış veri iş yüklerini sunucu kümeleri arasında akış biçiminde yeniden dağıtır.Teknoloji, veri kümesi kapasitesi ile ilgili önceden edinilen bilgilere ihtiyaç duymadan büyük ölçekli veri işleme yönelik neredeyse doğrusal hızlandırmayı sağlar., iç yapısı veya işlem gecikmesi.
Basitçe söylemek gerekirse: her bilgisayar düğümü, mevcut görevleri tamamladıktan hemen sonra otomatik olarak yeni görevler alır ve tüm veri işi tamamlanana kadar tam kaynak kullanımını korur.
Michael Peercy.
Patent belgeleri, dosya sunucuları veya depolama hacimleri arasındaki büyük ölçekli veri göçü görevlerinin sıklıkla sıkı zaman kısıtlamalarıyla karşı karşıya olduğunu göstermektedir.Süreç veya bağımsız sunucu, ağır iş yüklerini hızlı bir şekilde bitirmek için yeterli verimliliğe sahip değildir, bu da çok motorlu paralel işlemeyi önemli bir çözüm haline getirir.
Belge ayrıca, dizin ağacı yapılarının yalnızca kökten yaprak düğümlerine rekursif geçiş sırasında tanımlanabileceğini açıklar.Ana dizinleri alt klasör ve dosyalardan önce önceliklendirmek gibiBu, çeşitli ve bilinmeyen veri mimarilerine adapte edilmesi gereken katı statik bölünme yerine gerçek zamanlı dinamik iş yükü segmentasyonu gerektirir.
Bu patentli teknoloji dosyalara, klasörlere, depolama nesnelerine ve nesne öneklerine uygulanır.Tüm bilgisayar motorlarıyla uyumludur., konuları, süreçleri ve arka uç hizmet kümelerini içerir.
Komprise, KES teknolojisinin getirdiği üç temel avantajı vurguluyor:
-
Dinamik görev bölümü: Yüksek değerli bilgisayar kaynakları, boşaldıktan sonra anında yeni görevlerle yeniden atanır.
-
Kör veri işleme: Sistem, veri boyutu, iç yapısı ve değişken işleme gecikmesi hakkında önceden bilgi almadan veri kümesi hesaplamasını destekler.
-
Akıllı kaynak yeniden dengelenmesi: Tahmin edilemeyen dal yoğunluklarına sahip yapılandırılmamış veri hiyerarşilerine adapte olmak için otomatik olarak tahsis stratejilerini optimize eder.
Bu yenilikçi patentli teknoloji, büyük ölçekli yapılandırılmamış veri işlemleri için pratik ve verimli bir optimizasyon sağlar.
Pekin Qianxing Jietong Technology Co., Ltd.
Sandy Yang, Küresel Strateji Direktörü
WhatsApp / WeChat: +86 13426366826
E-posta: yangyd@qianxingdata.com
Site: www.qianxingdata.com/www.storagesserver.com
İş odaklı:
İKT Ürün dağıtım/Sistem entegrasyonu ve hizmetler/altyapı çözümleri
20+ yıllık BT dağıtım deneyimiyle, güvenilir ürünler ve profesyonel hizmetler sunmak için önde gelen küresel markalarla ortaklık kuruyoruz.
Akıllı bir dünya inşa etmek için teknolojiyi kullanmak güvenilir İKT ürün hizmet sağlayıcınız!
Mesajınız 20-3.000 karakter arasında olmalıdır!
Turkish
