背景與挑戰(zhàn)
隨著大模型和生成式 AI 時代的到來,非結(jié)構(gòu)化數(shù)據(jù)呈現(xiàn)爆發(fā)式增長。據(jù) IDC 預(yù)測,預(yù)計到2025年全球數(shù)據(jù)規(guī)模將達(dá)到175ZB,其中非結(jié)構(gòu)化數(shù)據(jù)將占到數(shù)據(jù)總量的80%。如何高效地管理和利用海量的非結(jié)構(gòu)化數(shù)據(jù)成為了業(yè)界重點關(guān)注的問題。目前,在處理非結(jié)構(gòu)化數(shù)據(jù)領(lǐng)域,最廣泛采用的方法是基于深度學(xué)習(xí)模型,將數(shù)據(jù)進行 embedding 向量化,然后運用數(shù)據(jù)相似度檢索和聚類分析等技術(shù)對數(shù)據(jù)進行檢索分析,進一步挖掘數(shù)據(jù)價值。
阿里云向量檢索服務(wù) Milvus 版
基于以上背景,阿里云推出了向量檢索服務(wù)Milvus版。Milvus是全球最受歡迎的開源向量數(shù)據(jù)庫之一,具備毫秒級檢索萬億規(guī)模向量數(shù)據(jù)、云原生高度可擴展、快速迭代等特性,是一個天然與AI結(jié)合的向量檢索引擎。阿里云向量檢索服務(wù)Milvus版,100%兼容開源Milvus,在性能、穩(wěn)定性、可用性、管控能力等多個方向進行大量優(yōu)化,相比開源版本,大幅進行功能和性能優(yōu)化的同時自建成本平均降低30%。
阿里云向量檢索服務(wù)Milvus版依托全托管云服務(wù),白屏化所有運維動作,平滑集成阿里云AI生態(tài),解決自建用戶無法及時應(yīng)對業(yè)務(wù)波峰波谷、運維門檻和成本高、與AI生態(tài)集成難等問題,為非結(jié)構(gòu)化數(shù)據(jù)處理提供全鏈路處理方案,支持多模態(tài)搜索、廣告推薦、自動駕駛、RAG檢索增強生成等場景。致力于為用戶帶來AI時代云原生專業(yè)向量檢索引擎服務(wù),便于用戶專注業(yè)務(wù)價值,加速企業(yè)AI應(yīng)用落地。
阿里云向量檢索服務(wù)Milvus版自2023年底發(fā)布內(nèi)測,2024年4月份發(fā)布公測以來,累積開通的計算CU 總數(shù)規(guī)模達(dá)到了上萬核、集群開通數(shù)量千臺以上、參與測試的企業(yè)客戶達(dá)600多家。涵蓋的應(yīng)用場景包括電商多模態(tài)檢索、互聯(lián)網(wǎng)酒店搜索、RAG檢索增強生成等場景,對線上服務(wù)穩(wěn)定性進行了完整的、充分的打磨。2024年10月28日,阿里云向量檢索服務(wù)Milvus版正式開始商業(yè)化售賣。
產(chǎn)品優(yōu)勢
●擁抱開源
阿里云Milvus100%兼容開源Milvus,支持自建集群無縫遷移上云。在AI、搜索推薦等領(lǐng)域內(nèi),堅持與開源社區(qū)一起共建產(chǎn)品能力。向客戶提供兼容程度高,遷移成本低,靈活可控的全托管向量檢索服務(wù)。
●高易用
阿里云Milvus集成了豐富的Vector檢索庫,支持混合查詢、聚合檢索、多向量查詢等高階能力,為用戶提供高效且穩(wěn)定的向量數(shù)據(jù)檢索能力。還提供全套的監(jiān)控告警體系,為用戶免去繁瑣自運維步驟,同時針對用戶具體使用場景,支持升降配、高彈性的能力�；诎⒗镌� Milvus 運管平臺能力,提供 99.9% 的可用性保證。
●低成本
阿里云Milvus提供讀寫分離、存算分離技術(shù),實現(xiàn)精細(xì)化的存儲計算資源管理技術(shù),結(jié)合阿里云提供的全套運維服務(wù),實現(xiàn)至少30%成本下降。
●AI 高度集成
阿里云Milvus無縫兼容LangChain、LlamaIndex等框架,并與阿里云人工智能平臺 PAI-EAS,通義等 AI 產(chǎn)品矩陣集成,為企業(yè)的 AI 應(yīng)用場景落地,提供更快捷易用的產(chǎn)品體驗。
應(yīng)用場景
多模態(tài)檢索
結(jié)合 AI 推理、訓(xùn)練等工程平臺和 Embedding 模型的能力,Milvus 可高效索引和檢索不同類型的數(shù)據(jù),如:圖片、視頻、聲紋、辦公文檔和一些半結(jié)構(gòu)化文檔,支持快速精準(zhǔn)地跨媒體類型進行信息檢索,并提供強大的擴展性和靈活的接口。
智能問答&大模型
結(jié)合大型語言模型實現(xiàn)智能問答系統(tǒng),通過向量化處理用戶查詢,利用其高效檢索功能快速匹配“私有知識庫”中的信息,并結(jié)合大模型,生成準(zhǔn)確回應(yīng)。此方案提供即時、精確、交互式的生成式搜索服務(wù)。
客戶案例
阿里云Milvus成功助力識貨APP搭建電商向量數(shù)據(jù)檢索平臺,提供了上億級別數(shù)據(jù)準(zhǔn)實時檢索,毫秒級別查詢響應(yīng),同規(guī)格QPS對比自建提升10%;阿里云Milvus還提供了超過100項監(jiān)控指標(biāo),包括 CPU 和內(nèi)存使用率在內(nèi)的多項關(guān)鍵指標(biāo),支持自定義報警規(guī)則的設(shè)定,滿足業(yè)務(wù)多樣化需求;此外,靈活的資源調(diào)整方案,使得識貨能夠根據(jù)業(yè)務(wù)需求的變化,平滑地進行資源的擴容或縮容,確保服務(wù)的持續(xù)可用性;同時,開箱即用的全托管服務(wù),也極大地緩解了識貨運維負(fù)擔(dān)和人力成本,幫助識貨提升了搜索和轉(zhuǎn)化的效率。
產(chǎn)品開通
用戶只需登錄阿里云賬號,進入向量檢索服務(wù)Milvus版產(chǎn)品控制臺,即可創(chuàng)建阿里云Milvus實例,開箱即用。
產(chǎn)品控制臺:https://milvus.console.aliyun.com/overview
阿里云向量檢索服務(wù) Milvus 版采用混合計費的付費模式,費用由CU和存儲兩部分組成,計算資源包年包月計費,存儲資源按量計費。11月1日起,購買阿里云 Milvus 包年服務(wù)立享優(yōu)惠,1年85折,2年7折,3年5折,4年4折,5年35折!
產(chǎn)品計費:https://help.aliyun.com/zh/milvus/product-overview/billing-item
阿里云向量檢索服務(wù)Milvus版,將持續(xù)打磨產(chǎn)品,不斷優(yōu)化產(chǎn)品的功能、性能和使用體驗,為用戶提供更加專業(yè)、靈活、高效的向量搜索引擎服務(wù),助力企業(yè)輕松應(yīng)對海量非結(jié)構(gòu)化數(shù)據(jù)管理挑戰(zhàn),實現(xiàn)業(yè)務(wù)價值最大化,歡迎大家前往產(chǎn)品控制臺購買體驗。
向量檢索 Milvus 版用戶交流釘釘群
