Milvus

Milvus yra populiariausia pasaulyje atvirojo kodo vektorinė duomenų bazė, sukurta dirbtinio intelekto (DI) erai, skirta naujos kartos programoms, kurioms reikalinga semantinė paieška, rekomendacijų sistemos ir išplėstinė generacija su paieška (RAG). Kadangi mašininio mokymosi modeliai paverčia nestruktūrizuotus duomenis, tokius kaip tekstas, vaizdai, garsas ir vaizdo įrašai, didelės dimensijos vektoriniais įterpimais, Milvus suteikia specializuotą infrastruktūrą milijardams šių vektorių saugoti ir panašumo paieškoms atlikti dideliu mastu su submilisekundiniu vėlavimu. Sukurta „Zilliz“ ir atvirojo kodo tapusi 2019 m., „Milvus“ buvo pritaikyta tūkstančių organizacijų visame pasaulyje, nuo DI startuolių, kuriančių RAG programas, iki įmonių, diegiančių gamybos rekomendacijų sistemas, apdorojančias milijardus kasdienių užklausų.

Dažniausi naudojimo atvejai

DI kūrėjai, kuriantys išplėstinės generacijos su paieška (RAG) sistemas, naudoja „Milvus“ dokumentų įterpimams saugoti ir atitinkamam kontekstui dideliems kalbos modeliams gauti, taip įgalindami pokalbių robotus ir klausimų-atsakymų programas, kurios teikia faktiškai tikslius atsakymus, pagrįstus įmonės žinių bazėmis. Elektroninės komercijos platformos naudoja „Milvus“ vizualinei produktų paieškai ir rekomendacijų sistemoms, leidžiančioms klientams rasti panašius elementus įkeliant vaizdus arba naršant suasmenintus pasiūlymus, pagrįstus elgsenos įterpimais. Turinio platformos diegia semantinę paiešką, varomą „Milvus“, kad padėtų vartotojams atrasti atitinkamus straipsnius, vaizdo įrašus ar muziką, net jei paieškos užklausos neatitinka tikslių raktinių žodžių, suprasdamos ketinimą, o ne tik teksto atitikimą. Saugumo ir sukčiavimo aptikimo komandos naudoja „Milvus“ panašiems modeliams nustatyti operacijų įterpimuose, aptikdamos anomalijas ir galimas grėsmes, ieškodamos artimiausių kaimynų atitikmenų žinomoms įtartinoms veikloms. Vaistų atradimo tyrėjai užklausia molekulinių struktūrų įterpimus „Milvus“, kad rastų panašius junginius, pagreitindami farmacijos tyrimus, nustatydami perspektyvius kandidatus iš milijonų molekulinių atvaizdų.

Pagrindinės funkcijos

• Didelio našumo vektorinio panašumo paieška su submilisekundiniu vėlavimu
• Kelių indeksų tipų palaikymas: HNSW, IVF, FLAT, SCANN, DiskANN
• GPU spartinimas indeksavimo ir paieškos operacijoms
• Hibridinė paieška, derinanti tankius vektorius, retus vektorius ir metaduomenų filtravimą
• Horizontalus mastelio keitimas su atskirta skaičiavimo ir saugojimo architektūra
• Daugelio nuomininkų palaikymas per duomenų bazes, rinkinius ir skaidinius
• ACID operacijos duomenų nuoseklumui užtikrinti
• Dinaminė schema su lanksčiais metaduomenų laukais
• Integruotas duomenų replikavimas ir didelis prieinamumas
• RESTful ir gRPC API su klientais, skirtais Python, Java, Go, Node.js
• Laiko kelionės užklausos istorinių duomenų prieigai
• „Attu“ žiniatinklio vartotojo sąsaja vizualiam duomenų bazės valdymui ir užklausų vykdymui
• „MinIO“ konsolė objektų saugyklos valdymui
• Milijardų vektorių palaikymas su milijardais užklausų per dieną

Kodėl

Milvus diegimas Hostinger VPS serveryje

Milvus diegimas Hostinger VPS serveryje suteikia dedikuotus skaičiavimo resursus, būtinus vektoriniam indeksavimui ir didelės dimensijos panašumo skaičiavimams, užtikrinant pastovų užklausų našumą net esant didelėms dirbtinio intelekto (DI) darbo krūvio apkrovoms. Tavo vektoriniai įterpimai ir metaduomenys lieka visiškai privatūs tavo infrastruktūroje, tai itin svarbu DI programoms, apdorojančioms jautrius vartotojo duomenis, nuosavybės teise saugomus dokumentus ar konfidencialią verslo informaciją, kurios negalima siųsti trečiųjų šalių vektorinių duomenų bazių paslaugoms. VPS aplinka suteikia pakankamai atminties vektoriniams indeksams įkelti į RAM, kur Milvus pasiekia greičiausią paieškos našumą, o dedikuoti CPU ir pasirenkami GPU resursai pagreitina indeksų kūrimą ir užklausų apdorojimą. Tu įgyji visišką kontrolę Milvus konfigūracijai, įskaitant indekso parametrus, talpyklos dydį ir našumo derinimą, su galimybe didinti saugyklos mastelį, kai tavo vektorinės kolekcijos auga nuo milijonų iki milijardų įterpimų. Profesionali infrastruktūra palaiko gamybinių DI programų patikimumo reikalavimus, o tiesioginė prieiga prie serverio leidžia kurti pasirinktines diegimo architektūras, tokias kaip dedikuoti užklausų mazgai ar specializuotos indekso konfigūracijos, optimizuotos tavo specifiniams įterpimų matmenims ir paieškos šablonams.