“李開復(fù)認(rèn)為，中國大語言模型的演進(jìn)不會一步到位，會經(jīng)歷L1到L3三個階段。”
(資料圖片)
7月3日，創(chuàng)新工場董事長兼CEO李開復(fù)親自帶隊的大模型創(chuàng)業(yè)公司正式亮相。該大模型公司命名“零一萬物”，總部位于北京，官網(wǎng)（01.AI）同步上線 。
據(jù)官網(wǎng)介紹，零一萬物致力打造全新的 AI 2.0平臺，其深信，以大語言模型為突破的AI 2.0 正在掀起技術(shù)、平臺到應(yīng)用多個層面的革命，預(yù)測AI 2.0 時代將誕生新一批 AI-first的應(yīng)用，催生以AI為內(nèi)核的應(yīng)用生態(tài)，探索嶄新的商業(yè)模式。
對于公司定名為“零一萬物”，李開復(fù)表示，零一即01，代表的是數(shù)字世界，從零到一，乃至宇宙萬物，寓意“零一智能，萬物賦能”的雄心。
零一萬物同步啟動DeeCamp 2023前沿大模型項目，廣為邀集對大模型領(lǐng)域具有熱情和創(chuàng)意的優(yōu)秀實習(xí)生，參與六大前沿?zé)衢T的大語言模型研發(fā)課題。該項目包含自動化生成對抗性樣本提升大型語言模型的安全性、通過外部工具增強(qiáng)大語言模型、探索不同數(shù)據(jù)預(yù)處理和選擇方法對預(yù)訓(xùn)練語言學(xué)習(xí)模型的有效性、探索不同機(jī)制下人工反饋強(qiáng)化學(xué)習(xí) (RLHF）在訓(xùn)練大語言模型的影響、大語言模型生成文本的識別、大語言模型的情境適應(yīng)性相關(guān)實踐課題。
團(tuán)隊組建上，籌備3個月以來，零一萬物已吸納數(shù)十名核心成員，集中在大模型技術(shù)、人工智能算法、自然語言處理、系統(tǒng)架構(gòu)、算力架構(gòu)、數(shù)據(jù)安全、產(chǎn)品研發(fā)等領(lǐng)域。已加入的聯(lián)創(chuàng)團(tuán)隊成員包括：阿里巴巴前副總裁、百度前副總裁、滴滴/百度前首席算法負(fù)責(zé)人、谷歌前中國高管、微軟/SAP/Cisco/前副總裁，算法和產(chǎn)品團(tuán)隊背景均來自國內(nèi)外大廠。
零一萬物暫未公布核心團(tuán)隊具體的人員信息。據(jù)天眼查App顯示，公司法人代表是馬杰，持股占比為99％，創(chuàng)新工場（北京）企業(yè)管理股份有限公司持股1%。馬杰此前在百度擔(dān)任副總裁、元宇宙產(chǎn)品“希壤”負(fù)責(zé)人，月兩個月前，媒體報道馬杰從百度離職，加入創(chuàng)新工場負(fù)責(zé)AIGC業(yè)務(wù)。
李開復(fù)自年初開始，在多個公開場合多次強(qiáng)調(diào)“AI 2.0是絕對不能錯過的革命”，并于3月19日正式宣布入局大模型創(chuàng)業(yè)。他表示自己正在親自籌組Project Al 2.0，這是創(chuàng)新工場塔尖孵化的第7家公司，也是一個致力打造AI 2.0全新平臺和生產(chǎn)力應(yīng)用的全球化公司。
他認(rèn)為，中國大語言模型的演進(jìn)不會一步到位，而是會經(jīng)歷L1到L3三個階段?，F(xiàn)階段，中國大多數(shù)公司處于L1階段，下一步需要跨越“涌現(xiàn)”門檻，成為L2級主流大語言模型，最后追趕L3全球一線公司，成為強(qiáng)大的人工智能“基礎(chǔ)設(shè)施”?！按竽Ｐ偷募夹g(shù)門檻很高，非常需要整合一個兼具科研能力和開發(fā)實力的高效團(tuán)隊，制定貫徹公司的技術(shù)和產(chǎn)品戰(zhàn)略，從上到下一致執(zhí)行。”
目前，零一萬物的技術(shù)路線為自研大模型，已經(jīng)構(gòu)建了個數(shù)千卡GPU集群，進(jìn)行訓(xùn)練、調(diào)優(yōu)和推理。在數(shù)據(jù)方面，主要是提高有效參數(shù)量和使用的高質(zhì)量數(shù)據(jù)密度，以構(gòu)建連續(xù)、可控、科學(xué)化的訓(xùn)練能力。參數(shù)規(guī)模上，已實現(xiàn)了百億參數(shù)規(guī)模的模型內(nèi)測，現(xiàn)在正向300-700億參數(shù)規(guī)模擴(kuò)大。
公司目前正搭建實驗平臺，同時擁抱開源，未來計劃推出開源的模型版本，但也不能過度依賴于開源模型，只有盡快建立自己的技術(shù)優(yōu)勢，構(gòu)建起強(qiáng)大的生態(tài)護(hù)城河，才能真正抓住AI2.0的歷史機(jī)遇。
此外，零一萬物還將推出結(jié)合圖片、視頻、3D的多模態(tài)模型。與市面上目前已有的大模型產(chǎn)品一樣，零一萬物也將推出專屬的App作為應(yīng)用入口。平臺中間件和開發(fā)者工具也將逐步對外發(fā)布。
近年來創(chuàng)新工場持續(xù)孵化AI項目，代表項目創(chuàng)新奇智是港交所的“AI+制造第一股”，并在今年4月研發(fā)了AIGC引擎“奇智孔明AInnoGC”。不同于其他的通用類大模型，該產(chǎn)品面向垂直行業(yè)應(yīng)用的AIGC工程算法引擎，聚焦私有化部署。
