阿里達摩院五年磨一劍，牽頭推出 AI 模型社區(qū)“魔搭”，開源 300+ 頂尖模型

CSDN

+ 關注

2022-11-03 18:04

676次閱讀

阿里達摩院五年磨一劍，牽頭推出 AI 模型社區(qū)“魔搭”，開源 300+ 頂尖模型

近十年間，開源對 AI 的發(fā)展起到極大推動作用，然而 AI 應用始終是全行業(yè)的“阿喀琉斯之踵”。對于大多數(shù)工程師而言，AI 模型存在高使用門檻、部署難度大等難題，無法釋放 AI 應用更多潛能。在不斷探索中，一種服務 AI 開發(fā)者的新模式逐漸顯露，模型即服務（Model as a Service）因大幅簡化模型應用門檻備受歡迎。

這次，中國的AI 模型社區(qū)終于來了。

11 月 3 日，2022 云棲大會杭州現(xiàn)場，阿里達摩院聯(lián)手CCF開源發(fā)展委員會共同推出AI模型社區(qū)“魔搭”ModelScope，旨在打造下一代開源的模型即服務共享平臺，致力降低 AI 應用門檻。首批合作機構還包括瀾舟科技、智譜AI、深勢科技、哈工大訊飛聯(lián)合實驗室、中國科學技術大學等。

阿里巴巴集團資深副總裁、達摩院副院長周靖人表示，AI 模型較為復雜，尤其是要應用于行業(yè)場景，往往需要重新訓練，這使得 AI 只掌握在少數(shù)算法人員手中，難以走向大眾化。而新推出的 ModelScope 魔搭社區(qū)提供眾多預訓練基礎模型，只需針對具體場景再稍作調(diào)優(yōu)，就能快速投入使用。

據(jù)介紹，社區(qū)首批上架超 300 個模型，其中中文模型超過 100 個，覆蓋了視覺、語音、自然語言處理、多模態(tài)等 AI 主要領域，覆蓋主流任務超過 60 個。上架模型均經(jīng)過專家篩選和效果驗證，包括150 多個 SOTA 模型和十多個大模型，已開全面開源并開放使用，開發(fā)者可在平臺上免費體驗與下載使用。

AI 之前的使用大多以付費 API 提供，魔搭社區(qū)不僅提供了免費的 API，而且提供的是可編程的 API 接口，輸出的不再是固定結果，而是結構化的數(shù)據(jù)，以便開發(fā)者能二次開發(fā)。同時，社區(qū)提供的模型結合領域數(shù)據(jù)集，提供了二次開發(fā)的定制化能力，為模型在不同具體使用場景上使用提供了可能。

由于魔搭社區(qū)不僅提供開源模型，更提供開源之后的模型使用服務。從這個意義上說，魔搭社區(qū)探索的是 AI 開源 2.0 新范式，在這種服務新范式下，為開發(fā)者使用 AI 模型帶來更多驚喜和便利。

打破 AI 應用瓶頸，模型社區(qū)勢在必行

AI 產(chǎn)業(yè)化應用面臨的瓶頸主要體現(xiàn)在以下兩點：一方面是現(xiàn)有 AI 技術的局限性，單一 AI 模型只能針對單一的任務場景，泛化性能較為有限，面臨新場景時需要重新訓練，二次開發(fā)難度較高；另一方面是因為模型訓練、推理、安裝部署等配置復雜，使用門檻高。這使得 AI 只掌握在少數(shù)算法人員手中，難以走向大眾化。

作為業(yè)內(nèi)頂尖研究機構，達摩院對此有切身體會。自 2017 年成立以來，達摩院在 AI 領域進行大量研究和探索，產(chǎn)出了一批重要的 AI 模型，已經(jīng)用于城市大腦、工業(yè)視覺、電商翻譯、醫(yī)療AI、智能客服等諸多場景。

預訓練模型的興起讓 AI 有了從手工作坊走向工業(yè)化大生產(chǎn)的機會。AI 模型通過上游統(tǒng)一的預訓練后，面對下游各種任務場景后，只需要一些調(diào)優(yōu)（finetune）就能有較好效果，研究者不再需要反復造輪子。不過，預訓練模型尤其是大模型的研發(fā)門檻高，算力資源消耗大，它成為了少數(shù)機構的競賽。

站在行業(yè)發(fā)展的角度看，這些模型的潛力仍然未得到充分發(fā)揮，AI 產(chǎn)業(yè)化的道路還充滿挑戰(zhàn)。達摩院意識到，只有進一步推動 AI 開放，才能實現(xiàn) AI 普惠。達摩院不僅決定集中開源開放這五年來的重要 AI 成果，更不留余力打造 AI 模型社區(qū)。

構建開放社區(qū)絕非易事。在技術層面，需要持續(xù)不斷地優(yōu)質的模型供給，包括研發(fā)投入高的大模型；同時還提供易用的平臺用戶體驗才能得到開發(fā)者的認可。在社區(qū)共建上，還要打消高校、科研機構、企業(yè)、個人等方面的疑慮，才能共同建設中文AI模型社區(qū)的新生態(tài)。

魔搭社區(qū)三大特色服務，普惠 AI 開發(fā)者

社區(qū)主要有三大優(yōu)勢：

1、提供豐富的中文模型，充分滿足本土化需求

語言是從感知智能邁向認知智能的關鍵，理解中文，才能在中文世界的任務場景中取得更佳效果。現(xiàn)實情況卻是，中文為母語的 AI 開發(fā)者人數(shù)眾多，但世界上的中文 AI 模型數(shù)量稀少。

阿里達摩院五年磨一劍，牽頭推出 AI 模型社區(qū)“魔搭”，開源 300+ 頂尖模型

魔搭社區(qū)關注本土需求，第一批提供的中文 AI模型已超過 100 個，占比超過三分之一，覆蓋了自然語言處理、語音等常用的任務，實用性較高。同時，社區(qū)還涌現(xiàn)了一批探索人工智能前沿的中文大模型，如阿里通義大模型系列、瀾舟科技的孟子系列模型、智譜 AI 的中英雙語千億大模型、中文版 GPT-3、中文版 CLIP 等。社區(qū)鼓勵中文 AI 模型的開發(fā)和使用，希望實現(xiàn)中文 AI 模型的豐富供給。

2、零代碼上手+強算力加持，帶來絕佳用戶體驗

對于模型使用者，從代碼下載到安裝部署再到效果驗證，以前往往需要數(shù)天，現(xiàn)在只要幾個小時甚至幾分鐘。通過全新開發(fā)的調(diào)用接口和統(tǒng)一的配置文件，平臺提供模型探索、環(huán)境安裝、推理驗證、訓練調(diào)優(yōu)等一站式服務，0 代碼在線體驗模型效果，1 行代碼實現(xiàn)模型推理，10行代碼實現(xiàn)模型定制；在線開發(fā)，開箱即用，無需任何安裝部署。

對于模型開發(fā)者，平臺提供模型管理、數(shù)據(jù)集管理、多人協(xié)同、創(chuàng)意工坊、社區(qū)互動等功能，讓開發(fā)者可以輕松實現(xiàn)創(chuàng)新想法，并獲得用戶反饋，持續(xù)改進模型，最終收獲影響力。

此外，魔搭社區(qū)基于云的算力支撐和技術支撐，提供了更佳的用戶體驗，讓上層的 AI 模型開發(fā)和使用更簡單。

3、開放兼容，普及 AI 模型應用

不同于一般企業(yè)舉辦的社區(qū)，魔搭社區(qū)更強調(diào)其中立性，更開放，模型更豐富，兼容 TensorFlow、PyTorch、Caffe 等多種主流深度學習框架，模型遷移便捷簡單，用戶可自主選擇訓練和部署方式，提供更多自主可控的選擇。社區(qū)旨在推動 AI 的大規(guī)模使用，不以盈利為目標，惠及所有開發(fā)者，參與者不限機構、不限類型。

據(jù)介紹，已有數(shù)千名開發(fā)者參與魔搭的前期測試，他們利用社區(qū)的 AI 能力搭建了射擊游戲神槍手、簡歷分析、一鍵動畫片制作等小應用。有參與測試的在校學生表示，魔搭最好的一點是這里只需一行代碼即可調(diào)用，且調(diào)用過程十分簡單快捷，即使是對于模型了解較少的開發(fā)人員也能快速上手。也有動畫建模師稱，魔搭中的 2D 關鍵點模型，很好地適配動捕的工作，卡通化模型可以輕松構建卡通形象，減少了工作量。

開發(fā)者體驗社區(qū)的模型，能獲得免費的 CPU算力和 GPU 算力的福利。其中CPU算力（8核32G）不限額度，GPU算力（NVIDIA-V100-16G32G）限額16個小時。開發(fā)者可以參與社區(qū)貢獻，獲得更多免費算力額度。

AI開源的未來

中國科學院院士、中國計算機學會（CCF）開源發(fā)展委員會主任王懷民期待，開源是AI發(fā)展的重要驅動力，魔搭社區(qū)作為新型的 AI 開源社區(qū)，不僅將有力推動AI邁向廣泛的落地應用，還將助力中國從開源世界的參與者逐步成長為引領者。

中國計算機學會副理事長、瀾舟科技創(chuàng)始人兼 CEO 周明博士認為，從依賴算法專家手工調(diào)參的手工作坊時代，走向大規(guī)模、可復制的大工業(yè)時代，AI 模型社區(qū)是其中的關鍵一環(huán)，堪稱 AI 時代的基礎設施，能將預訓練模型以較低門檻提供給廣大開發(fā)者，讓 AI 惠及全社會。

而達摩院希望，魔搭社區(qū) ModelScope 能成為中國 AI 開發(fā)者和使用者的公共平臺，甚至全世界的一個 AI 開放平臺，能夠滿足 AI 開發(fā)者和應用者的多層次、多樣化的需求，促進AI產(chǎn)業(yè)的共同繁榮。