嶼:
「千億Token級別的現代清洗管線、人工標註人力、圖像語料來源。這三個缺口,任何一個解決不了,十五億參數的模型就隻是個空殼。」
顧嶼沒有回答。
他看著白板上樓天城畫的那個流程圖。
「不急。」
「數據的事情我已經在安排了。」 顧嶼語氣雲淡風輕。
樓天城點了點頭。
「你現在要做的事情隻有一件。」顧嶼重新看向樓天城,
「利用你手上的並行訓練框架,在最短時間內把大語言模型的底層架構搭起來。數據接口、分布式訓練管線、混合精度支持,全部打通。等語料灌進來的那一天,我不想再等哪怕一個小時。」
「明白。」樓天城應了一聲,已經在腦子裡開始拆解任務了。
「項目從今天起正式立項。既然是改變技術路線的終極兵器,總得有個響亮的代號。」
顧嶼看著麵前這三位頂尖大腦,「你們有什麼想法?」
安德烈摸了摸下巴濃密的胡茬,操著帶有口音的中文說道:
「既然是處理語言的模型,叫『巴別塔』怎麼樣?打破人類的語言壁壘。」
「寓意不好,巴別塔最後可是塌了的。」
任少卿搖搖頭,思索著開口,
「或者叫『盤古』?開天闢地,比較有咱們的特色。」
樓天城推了推眼鏡,提議道:
「要不乾脆叫『矩陣』?畢竟底層邏輯全是巨大的矩陣相乘。」
顧嶼聽著他們的討論,笑了笑。
他站起身,走到白板前,抽出一支黑色馬克筆。
「神話太縹緲,算符又太冰冷。我們要做的,是向這堆矽基晶片和海量數據裡,去尋找那一絲湧現的智慧火花。這是一場對未知極限的終極拷問。」
顧嶼拔掉筆帽,在白板右上角用力寫下兩個大字。
天問。
屈原問天,不得其解。而他們,要用算力強行要出一個答案。
「這個項目,代號天問。」顧嶼將筆隨手丟回筆槽,轉頭看向三人,
「一億五千萬參數隻是天問一號。等語料到位,我們要直接衝擊十五億,甚至未來的千億級別。」
任少卿看著那兩個遒勁的字,低聲念了一遍,布滿紅血絲的雙眼中驀地燃起了一團火光。
樓天城和安德烈也緊緊盯著白板,一時間無人說話。
顧嶼看著他們,眼神深邃。
前世類似架構的大語言模型,第一次讓全世界見識到「湧現」,是2020年的事。
一億五千萬參數對標的是OpenAI在2018年發布的GPT-1,而十五億參數對標的,是2019年讓人類首次感到不安的GPT-2。
別人花了五年摸索的黑暗森林,他要帶著這群人,用三年時間徹底鑿穿。
正想著,實驗室的恆溫門被人從外麵急匆匆地推開了。
「顧總。」
。來傳口門從音聲的軍從魏
𝑤𝑡.𝑝𝑜𝑜於源來節章本
」?事麼什「,身過轉嶼顧」。魏老「
:音聲了低壓,前近到走軍從魏
」。了去回砸被又午下,天半了撐隻後之場進億百二千一的隊家國。去出不賣都賣連,上板停跌在死封量無股個量大,竭枯全完乎幾性動流市兩。停跌股千續繼天今,後之點千四破跌五周上股A。了事出場市「
。城天樓和卿少任的邊旁眼一了看,頓了頓他
。係關沒意示,手擺了擺嶼顧
」。線平強發觸票股批一有會還能可天明,法跌個這在現照按。倉爆環連盤資配,踏踩平強盤資融。控失全完經已緒情慌恐「:說續繼軍從魏
。胸抱臂雙,邊板白在靠嶼顧
」?了樣麼怎得備準金資「
。色神的雜複種某了成變重凝從情表的軍從魏,口出一話句這
,說他」。了倉建入買散分部全點低在經已期前,金現億百兩那的籠回內國「
」。用動以可時隨,桿槓無,金現全。了來進部全經已也在現,金資億百三的境過道通IDF和IIFQ過通岸離「
。模規的億百五計合後後前前
。間時的上機手看了看他。情表的餘多有沒嶼顧
」。了場入們我該「
」們它光花「