国产91精品一区二区麻豆网站-国产91精品高跟丝袜在线-国产91精品不卡在线-国产91激情对白露脸全程-在线国产区-在线观着免费观看国产黄

首頁 > 汽車性能 > 汽車性能 > 高文院士談AI:規模即所需,三“大”缺一不可

高文院士談AI:規模即所需,三“大”缺一不可

發布時間:2024-05-26 15:40:17來源: 15210273549

規模是做好生成式人工智能的撒手锏,大數據、大模型和大算力對于生成式人工智能缺一不可。”在近日舉行的第七屆數字中國峰會之中國移動人工智能生態大會上,中國工程院院士、鵬城實驗室主任、北京大學博雅講習教授高文表示。高文院士回顧了人工智能發展的三次浪潮,并對影響當下生成式人工智能發展的關鍵因素進行了分析。

歷經三次浪潮

1956年夏天,美國達特茅斯學院舉行了一場研討會,在會上麥卡錫首提“人工智能”,標志著人工智能元年的到來。追憶歷史,高文表示,從1956年開始人工智能經歷了三次浪潮:以推理研究為主的第一次浪潮,持續20年左右時間;以專家系統為主的第二次浪潮,持續30年左右時間;以及從2006年開始的第三次浪潮。其中第三次浪潮又包括兩大技術進展:從2009年開始的判別式人工智能,從2018年開始的生成式人工智能。

2009年,華裔科學家李飛飛和李凱教授提出imageNet(圖像網絡),一石激起千層浪,業界八仙過海各顯神通,紛紛基于imageNet提出各自的判別式人工智能算法,直到2012年深度神經元網絡出現,以絕對優勢令其他算法黯然失色,將百花齊放的格局進行收斂。2015年微軟研究院何凱明、孫劍等聯合提出ResNet(殘差網絡),又將判別式人工智能帶到了新高度。此后,從深度神經網絡DNN到卷積神經網絡CNN再到循環神經網絡RNN,深度網絡快速迭代,不斷走向新的技術高度。

“判別式人工智能以模式識別見長,如圖像分類、人臉識別、智能監測等,如今廣泛應用的人臉識別正是判別式人工智能的應用。判別式人工智能與人的對象認知學習接近,可以根據學習速度、記憶規模、判別準確度判斷其結果好壞。”高文分析。

大語言模型破解長語言序列難題

不過,判別式人工智能通過在神經網絡中輸入大量數據進行快速判別,擅長圖像和矩陣識別,對于長語言序列則力不從心。在這樣的形勢下,大語言模型應運而生,致力于解決長語言序列問題,而生成式人工智能則是大語言模型的最主要突破。

高文表示,自2018年開始生成式人工智能快速迭代,從大語言模型LLM到ChatGPT再到Sora多模態,萬變不離其宗的是底層關鍵技術GPT(生成式預訓練模型)。GPT引入注意力機制,使得一個長串中無論相隔多遠的兩個相關數據都能連接在一起,并訓練出關聯度。“GPT的核心算法是用大量序列做大模型預訓練,關鍵是注意力機制。由于GPT算法對業界并無差別,因此具體應用效果取決于學習速度、記憶規模、表達準確度等。”高文認為。

雖然如今ChatGPT如火如荼,但是GPT起初并沒有激起太多漣漪。這是因為GPT使用起來問題較多:給出的答案要么過于簡單,要么過于復雜,要么不合規,存在意識形態、文化習慣、行業差別等方面的問題。

ChatGPT的出現改變了這一現象,使得業界對于人工智能的印象和投入力度大為改觀。不過從底層技術看,從GPT到ChatGPT并沒有改變,其不同在于:一是ChatGPT增加了InstructionGPT指令,通過微調、對齊和抑制,使得回答更加“人模人樣”;二是引入基于人類反饋的增強學習RLHF,解決合規問題和垂應用適配等。

大數據、大模型和大算力缺一不可

在中國移動人工智能生態大會上,中國移動發布了“萬千百”智能基座,其中,“萬”指“萬”卡互聯并行加速算力供給,中國移動年內將投產3個近兩萬卡超大規模單體智算中心和12個區域智算中心,廣泛升級1500個邊緣節點,為全社會提供澎湃算力。

中國移動在智算中心方面的規模投入并非個例,隨著生成式人工智能的發展,全國各地多個智算中心如雨后春筍不斷出現,而這背后的原因是人工智能的發展需要算力支撐。

“生成式人工智能做得好不好,規模是決性定因素。”高文一語道出其中關鍵。

高文表示,GPT和Sora等人工智能生成技術并沒有提出理論革新,與20年前的人工智能神經網絡理論本質上并無差異。生成式人工智能的突破得益于大數據、大模型和大算力,這三個“大”缺一不可。特別是算力,如今千卡是入門級規模,要想做大模型必須有萬卡級。

對于規模,OpenAI等公司也有深刻見解:如果能用規模解決問題,就無需動用新的算法。不僅如此,OpenAI還提出了“假設性三公理”,已被AI領域奉為圭臬。

第一條公理,苦澀的教訓。多年來人工智能的研究者們一直試著將人類已知的知識構建到他們的智能體中,但是屢戰屢敗。成功的極少數案例都是使用規模計算,通過搜索和機器學習完成的。大規模、大算力和大數據是通用人工智能的必要條件。

第二條公理,規模即所需。一旦選擇了良好且通用的數據標注、算法,就能夠找到一套通用的規律,數據越多,模型越大,效果就越好,而且這個規律在訓練之前就可以預知效果。大規模是通用人工智能AGI的充分條件,大就是好。

第三條公理,涌現需規模。隨著規模的擴大、數據的增加,大模型一定會涌現出前所未有的能力,這個能力可以被所有人看到。

最后,高文總結表示,判別式人工智能方興未艾,生成式人工智能如火如荼,關于下一波浪潮業界也有很多預測,如無人駕駛、具身智能、人形機器等,但總體而言仍不得而知。未來充滿想象,值得我們期待,也需要業界有所作為。高文特別提到,中國的人工智能需要自己的大模型底座,只有這樣才能實現以中文語料和中國歷史為基礎的文明傳承。

汽車性能更多>>

2024年海南省五指山市中醫醫院招聘就業見習崗位公告(3人) 2024年甘孜州招聘急需緊缺專業教師公告 2024年汨羅市紀委監委選調工作人員公告(6人) 2025年鄂爾多斯市教育體育局直屬學校校園招聘教育緊缺人才公告 上市售價22.99萬元起,極氪7X打造純電SUV新標桿! 此刻至未來,起亞始終相伴,起亞80周年感恩活動正式啟動 強“漢”再進化,2025款漢攜四大進化上市,售價16.58萬起 上市限時價19.68萬起,新豪華智享C級轎車領克Z10正式上市! 新一代梅賽德斯-奔馳V級:70年鑄就豪華典范 選擇一臺BMW,穿梭柴米油鹽中的英雄主義 首搭乾崑ADS 3.0+鴻蒙座艙,全新夢想家能“眾樂樂” 上汽俞經民:榮威新大眾,求同存異 2024年蕪湖市中西醫結合醫院(灣沚區總醫院)招聘康復治療師公告 2024年安徽糧食工程職業學院引進第二批高層次人才(博士)公告 2024年六安市葉集區機關事業單位招募就業見習人員公告 2024年安徽省體育局直屬訓練單位招聘教練員公告 2024年皖江工學院招聘簡章 2024年亳州利辛縣大學生鄉村醫生專項計劃招聘公告 2024年安徽省徽京劇院、安徽樂團招聘公告 2024年馬鞍山雨山區“鄉編村用”招聘事業編制人員公告 東風本田靈悉L,配電子后視鏡,車內五聯屏幕,9月26日上市 中大型SUV,2.0T插混/配華為乾崑智駕,方程豹豹8實拍 軸距2820mm+7座可選,搭載1.5T插混系統,凱翼昆侖iHD適合家用 6/7座可選,2.0T插混+四驅,惠后26.28萬起,紅旗HS7 PHEV適合家用 售26.88萬,座椅2+2+2布局,2.0T+8AT+四驅,第五代勝達帶勁不? 座椅2+2+2布局,配冰箱,惠后18.86萬起,這款中大型SUV適合家用 東風奕派eπ008,6座中大型SUV,提供冰箱、后排獨立屏,適合家用 座椅2+3+2布局,2.5L油電混合+四驅,家用可以看這款合資中型SUV 凱迪拉克新款XT6驚爆!10萬土豪為何紛紛叫好又吐槽? 雷鳥U9系列Mini LED顯示器發布,首發價3699元起
主站蜘蛛池模板: 亚洲图片偷拍区 | 中文字幕在线播放量 | 日本道综合一本久久久88 | 伊人网综合在线观看 | 国产成人精品曰本亚洲77美色 | 亚洲日本一区二区三区在线不卡 | 国产精品丝袜在线观看 | 2021久久精品永久免费 | 黄色网址免费 | 伊人国产在线播放 | 国产成人丝袜视频在线视频 | 在线看黄网站 | 91精品福利在线 | 天天干天天操天天做 | 欧美色综合天天综合高清网 | 国产片一级aaa毛片视频 | 亚洲欧美婷婷 | 国产成人精品亚洲 | 中文字幕日韩精品亚洲七区 | 国产成人精品一区二区视频 | 四虎影院在线免费观看 | 在线观看亚洲 | 亚洲精品中文字幕久久久久久 | 天堂资源在线中文 | 久久久午夜精品理论片 | 成人观看免费大片在线观看 | 91精品国产丝袜白色高跟鞋 | 久久久久久夜精品精品免费 | 久草视频2| 香蕉a视频 | 在线看黄网站 | 高清国产激情视频在线观看 | 亚洲精品影院久久久久久 | 亚洲人6666成人观看 | 亚洲成人精品在线 | 欧美亚洲综合一区 | 在线天堂中文在线资源网 | 国产精品美女免费视频观看 | 久久精品免费观看 | www国产精品com | 最新欧美18videosex性欧美 |