Google, TurboQuant adı verilen yeni bir sıkıştırma algoritmasının, büyük yapay zeka veri kümelerini sıfıra yakın indeksleme süresiyle sıkıştırıp arayabileceğini ve potansiyel olarak modern arama sistemlerindeki en büyük hız sınırlarından birini ortadan kaldırabileceğini söylüyor.
Bu ne?TurboQuant, yapay zekaya güç veren verileri küçültüp düzenlemenin ve doğruluğu kaybetmeden arama yapmanın bir yoludur. Araştırma makalesine göre, sonuçları kesin tutarken bellek kullanımını azaltıyor ve aranabilir yapay zeka dizinleri oluşturma süresini "neredeyse sıfıra" indiriyor.
Nasıl çalışıyor?Modern arama, içeriği vektörlere (anlamı temsil eden sayıların listeleri) dönüştürür. Benzer fikirler bu sayısal alanda birbirine yakın durur ve arama en yakın eşleşmeleri bulur.
Ancak bu vektörlerin saklanması ve aranması büyük ve pahalıdır. TurboQuant, neredeyse tamamen orijinali gibi davranan çok daha küçük verileri kullanarak bu sorunu çözer:
- Akıllı sıkıştırma.Dağınık öğeleri düzgün kutular halinde düzenlemek gibi, verileri temiz bir şekilde sıkıştırmak için matematiksel olarak döndürür.
- Hata düzeltme.Küçük sıkıştırma hatalarını düzeltmek ve doğruluğu korumak için 1 bitlik bir sinyal ekler.
Ne anlama geliyor?Anlamsal aramanın ve yapay zeka yanıtlarının arkasındaki sistem olan vektör arama, geniş ölçekte yavaş ve pahalıydı. TurboQuant bunu daha hızlı ve daha ucuz hale getirir. Google, bunun daha hızlı benzerlik aramasına, daha düşük bellek maliyetlerine ve büyük veri kümelerinin gerçek zamanlı işlenmesine olanak sağladığını söylüyor.
Neden önemsiyoruz?Google, yalnızca küçük bir alt kümeyi değil, sorgu başına çok daha fazla belgeyi değerlendirebilir. Google'ın Arama'da bunu benimsemesi halinde/geçtiğinde, Yapay Zeka Genel Bakışları daha geniş, daha kesin bir kaynak kümesinden yararlanarak büyük veri havuzlarından anında özetler oluşturulmasını kolaylaştırabilir.
TurboQuant hakkında daha fazla bilgi:
