背景與挑戰(zhàn)
隨著大模型和生成式 AI 時(shí)代的到來,非結(jié)構(gòu)化數(shù)據(jù)呈現(xiàn)爆發(fā)式增長。據(jù) IDC 預(yù)測,預(yù)計(jì)到2025年全球數(shù)據(jù)規(guī)模將達(dá)到175ZB,其中非結(jié)構(gòu)化數(shù)據(jù)將占到數(shù)據(jù)總量的80%。如何高效地管理和利用海量的非結(jié)構(gòu)化數(shù)據(jù)成為了業(yè)界重點(diǎn)關(guān)注的問題。目前,在處理非結(jié)構(gòu)化數(shù)據(jù)領(lǐng)域,最廣泛采用的方法是基于深度學(xué)習(xí)模型,將數(shù)據(jù)進(jìn)行 embedding 向量化,然后運(yùn)用數(shù)據(jù)相似度檢索和聚類分析等技術(shù)對(duì)數(shù)據(jù)進(jìn)行檢索分析,進(jìn)一步挖掘數(shù)據(jù)價(jià)值。
阿里云向量檢索服務(wù) Milvus 版
基于以上背景,阿里云推出了向量檢索服務(wù)Milvus版。Milvus是全球最受歡迎的開源向量數(shù)據(jù)庫之一,具備毫秒級(jí)檢索萬億規(guī)模向量數(shù)據(jù)、云原生高度可擴(kuò)展、快速迭代等特性,是一個(gè)天然與AI結(jié)合的向量檢索引擎。阿里云向量檢索服務(wù)Milvus版,100%兼容開源Milvus,在性能、穩(wěn)定性、可用性、管控能力等多個(gè)方向進(jìn)行大量優(yōu)化,相比開源版本,大幅進(jìn)行功能和性能優(yōu)化的同時(shí)自建成本平均降低30%。
阿里云向量檢索服務(wù)Milvus版依托全托管云服務(wù),白屏化所有運(yùn)維動(dòng)作,平滑集成阿里云AI生態(tài),解決自建用戶無法及時(shí)應(yīng)對(duì)業(yè)務(wù)波峰波谷、運(yùn)維門檻和成本高、與AI生態(tài)集成難等問題,為非結(jié)構(gòu)化數(shù)據(jù)處理提供全鏈路處理方案,支持多模態(tài)搜索、廣告推薦、自動(dòng)駕駛、RAG檢索增強(qiáng)生成等場景。致力于為用戶帶來AI時(shí)代云原生專業(yè)向量檢索引擎服務(wù),便于用戶專注業(yè)務(wù)價(jià)值,加速企業(yè)AI應(yīng)用落地。
阿里云向量檢索服務(wù)Milvus版自2023年底發(fā)布內(nèi)測,2024年4月份發(fā)布公測以來,累積開通的計(jì)算CU 總數(shù)規(guī)模達(dá)到了上萬核、集群開通數(shù)量千臺(tái)以上、參與測試的企業(yè)客戶達(dá)600多家。涵蓋的應(yīng)用場景包括電商多模態(tài)檢索、互聯(lián)網(wǎng)酒店搜索、RAG檢索增強(qiáng)生成等場景,對(duì)線上服務(wù)穩(wěn)定性進(jìn)行了完整的、充分的打磨。2024年10月28日,阿里云向量檢索服務(wù)Milvus版正式開始商業(yè)化售賣。
產(chǎn)品優(yōu)勢
●擁抱開源
阿里云Milvus100%兼容開源Milvus,支持自建集群無縫遷移上云。在AI、搜索推薦等領(lǐng)域內(nèi),堅(jiān)持與開源社區(qū)一起共建產(chǎn)品能力。向客戶提供兼容程度高,遷移成本低,靈活可控的全托管向量檢索服務(wù)。
●高易用
阿里云Milvus集成了豐富的Vector檢索庫,支持混合查詢、聚合檢索、多向量查詢等高階能力,為用戶提供高效且穩(wěn)定的向量數(shù)據(jù)檢索能力。還提供全套的監(jiān)控告警體系,為用戶免去繁瑣自運(yùn)維步驟,同時(shí)針對(duì)用戶具體使用場景,支持升降配、高彈性的能力。基于阿里云 Milvus 運(yùn)管平臺(tái)能力,提供 99.9% 的可用性保證。
●低成本
阿里云Milvus提供讀寫分離、存算分離技術(shù),實(shí)現(xiàn)精細(xì)化的存儲(chǔ)計(jì)算資源管理技術(shù),結(jié)合阿里云提供的全套運(yùn)維服務(wù),實(shí)現(xiàn)至少30%成本下降。
●AI 高度集成
阿里云Milvus無縫兼容LangChain、LlamaIndex等框架,并與阿里云人工智能平臺(tái) PAI-EAS,通義等 AI 產(chǎn)品矩陣集成,為企業(yè)的 AI 應(yīng)用場景落地,提供更快捷易用的產(chǎn)品體驗(yàn)。
應(yīng)用場景
多模態(tài)檢索
結(jié)合 AI 推理、訓(xùn)練等工程平臺(tái)和 Embedding 模型的能力,Milvus 可高效索引和檢索不同類型的數(shù)據(jù),如:圖片、視頻、聲紋、辦公文檔和一些半結(jié)構(gòu)化文檔,支持快速精準(zhǔn)地跨媒體類型進(jìn)行信息檢索,并提供強(qiáng)大的擴(kuò)展性和靈活的接口。
智能問答&大模型
結(jié)合大型語言模型實(shí)現(xiàn)智能問答系統(tǒng),通過向量化處理用戶查詢,利用其高效檢索功能快速匹配“私有知識(shí)庫”中的信息,并結(jié)合大模型,生成準(zhǔn)確回應(yīng)。此方案提供即時(shí)、精確、交互式的生成式搜索服務(wù)。
客戶案例
阿里云Milvus成功助力識(shí)貨APP搭建電商向量數(shù)據(jù)檢索平臺(tái),提供了上億級(jí)別數(shù)據(jù)準(zhǔn)實(shí)時(shí)檢索,毫秒級(jí)別查詢響應(yīng),同規(guī)格QPS對(duì)比自建提升10%;阿里云Milvus還提供了超過100項(xiàng)監(jiān)控指標(biāo),包括 CPU 和內(nèi)存使用率在內(nèi)的多項(xiàng)關(guān)鍵指標(biāo),支持自定義報(bào)警規(guī)則的設(shè)定,滿足業(yè)務(wù)多樣化需求;此外,靈活的資源調(diào)整方案,使得識(shí)貨能夠根據(jù)業(yè)務(wù)需求的變化,平滑地進(jìn)行資源的擴(kuò)容或縮容,確保服務(wù)的持續(xù)可用性;同時(shí),開箱即用的全托管服務(wù),也極大地緩解了識(shí)貨運(yùn)維負(fù)擔(dān)和人力成本,幫助識(shí)貨提升了搜索和轉(zhuǎn)化的效率。
產(chǎn)品開通
用戶只需登錄阿里云賬號(hào),進(jìn)入向量檢索服務(wù)Milvus版產(chǎn)品控制臺(tái),即可創(chuàng)建阿里云Milvus實(shí)例,開箱即用。
產(chǎn)品控制臺(tái):https://milvus.console.aliyun.com/overview
阿里云向量檢索服務(wù) Milvus 版采用混合計(jì)費(fèi)的付費(fèi)模式,費(fèi)用由CU和存儲(chǔ)兩部分組成,計(jì)算資源包年包月計(jì)費(fèi),存儲(chǔ)資源按量計(jì)費(fèi)。11月1日起,購買阿里云 Milvus 包年服務(wù)立享優(yōu)惠,1年85折,2年7折,3年5折,4年4折,5年35折!
產(chǎn)品計(jì)費(fèi):https://help.aliyun.com/zh/milvus/product-overview/billing-item
阿里云向量檢索服務(wù)Milvus版,將持續(xù)打磨產(chǎn)品,不斷優(yōu)化產(chǎn)品的功能、性能和使用體驗(yàn),為用戶提供更加專業(yè)、靈活、高效的向量搜索引擎服務(wù),助力企業(yè)輕松應(yīng)對(duì)海量非結(jié)構(gòu)化數(shù)據(jù)管理挑戰(zhàn),實(shí)現(xiàn)業(yè)務(wù)價(jià)值最大化,歡迎大家前往產(chǎn)品控制臺(tái)購買體驗(yàn)。
向量檢索 Milvus 版用戶交流釘釘群
