KURUMSAL HİZMET
Vektör Altyapısı
Gömme üretimi, indeksleme ve arama katmanını ölçek, tazelik ve maliyet kısıtlarıyla kurma.
Problem
Pilotta bir vektör deposu ile çalışan sistem, belge sayısı arttığında yavaşladı. Belge güncellendiğinde eski parçalar dizinde kaldı, gömme modelini değiştirme ihtiyacı doğduğunda tüm dizinin yeniden üretilmesi gerektiği ortaya çıktı ve bunun kesintisiz nasıl yapılacağı planlanmamıştı.
Çözüm
Vektör katmanını işletilebilir biçimde kuruyoruz: parçalama stratejisi belge türüne göre ayrışır, her parça kaynak belgeye ve sürümüne bağlanır. Güncelleme artımlı çalışır; silinen belgenin parçaları dizinden düşer. Gömme modeli değişimi için çift dizin ve geçiş planı baştan tanımlanır. Filtreleme için üst veri alanları şemayla sabitlenir.
Kullanım alanları
- RAG ve kurumsal arama için geri getirme altyapısı
- Belge güncellemelerinin dizine artımlı yansıtılması
- Gömme modeli değişimi ve yeniden indeksleme geçişi
- Üst veri filtreleriyle çok kiracılı ve yetki duyarlı arama
- Yinelenen içerik tespiti ve tekilleştirme
- Benzer vaka ve benzer ürün eşleştirme
Referans mimari
Katmanlar sabit değildir; kurumun veri ve uyum kısıtlarına göre şekillenir.
- Parçalama: belge türüne göre sınır seçimi (başlık, paragraf, tablo, kod)
- Üst veri şeması: kaynak, sürüm, erişim etiketi, tarih, dil
- Gömme üretimi: toplu işleme, yeniden deneme ve maliyet takibi
- İndeks seçimi: yaklaşık komşuluk yöntemi, hassasiyet ve bellek dengesi
- Artımlı güncelleme: ekleme, değiştirme ve silme yolları
- Çift dizin ve geçiş: model değişiminde kesintisiz yeniden indeksleme
- Ölçüm: geri getirme isabeti, gecikme, dizin boyutu ve birim maliyet
Güvenlik ve uyum
Erişim etiketlerinin üst veride tutulması ve sorgu anında filtrelenmesi
Çok kiracılı kurulumlarda kiracı ayrımının dizin veya filtre düzeyinde garantilenmesi
Gömme vektörlerinin içerik hakkında bilgi taşıdığının kabul edilip erişim denetimine alınması
Silme talebinde parçaların ve gömmelerin birlikte silinmesi
Yaklaşımımız
- 01
Discovery
Senaryo, veri ve kısıtların çıkarılması.
- 02
Assessment
Olgunluk ve uygulanabilirlik değerlendirmesi.
- 03
Prototype
En kısa yoldan çalışan ilk sürüm.
- 04
PoC
Tanımlı başarı ölçütüyle kanıt çalışması.
- 05
Production
Güvenlik, ölçek ve operasyon devri.
- 06
Monitoring
Kalite, maliyet ve kayma izleme.
Sık sorulan sorular
Hangi vektör veritabanını seçmeliyiz?
Kararı belirleyen şey genelde ürün değil, mevcut yığın ve işletme kapasitesi. Zaten işlettiğiniz bir veritabanının vektör yeteneği yeterliyse ayrı bir sistem eklemek işletme yükü ekler. Ayrı sistem; ölçek, filtreleme karmaşıklığı veya melez arama ihtiyacı bunu gerektirdiğinde anlamlıdır.
Parçalama boyutu ne olmalı?
Sabit bir sayı yok ve sabit boyutlu parçalama çoğu kurumsal belgede kötü çalışır; tablo ortadan bölünür, başlık bağlamı kaybolur. Belge türüne göre yapısal sınırlarla parçalamak ve sonucu geri getirme isabetiyle ölçmek tek dürüst yöntemdir. Boyut kararı ölçümle verilir, kılavuzla değil.
Gömme modelini değiştirmek neden zor?
Çünkü farklı modellerin vektörleri karşılaştırılamaz; dizinin tamamı yeniden üretilmek zorundadır. Bu, büyük dizinlerde ciddi bir işlem yükü ve kesinti riski demek. Bu yüzden çift dizin yapısı ve trafiğin kademeli geçişi ilk kurulumda planlanır; sonradan eklenmesi maliyetlidir.
İLETİŞİM
Vektör Altyapısı için değerlendirme oturumu
İlk görüşmede kullanım senaryonuzu, veri durumunuzu ve kısıtlarınızı birlikte çıkarıyoruz.