標簽:算法
清華大學(xué)唐杰:從GPT到GPT Zero會是今年重大階段性成果|甲子光年
2024年將開啟AGI元年。整理|劉楊楠 編輯|王博 “2024年,從GPT到GPT Zero會是重大的階段性成果,我們相信這一天會在不久的未來到來。” 在2月29日舉行的2024...
沒有雷軍的小米手機發(fā)布會,直接發(fā)了一臺「相機」
全新Ultra 依然王炸就在剛剛,小米再次站在聚光燈下,這次發(fā)布會的舞臺上,我們看到了熟悉的「新面孔」——盧偉冰。 雖然缺少了雷式幽默,但接棒的盧偉冰帶來了...
Karpathy離職OpenAI,首發(fā)2小時AI大課!從頭開始構(gòu)建GPT分詞器
新智元報道編輯:桃子 【新智元導(dǎo)讀】果不其然,繼放出BPE的GitHub代碼后,Karpathy終于上線了「從頭構(gòu)建GPT分詞器」的課程,引來大波網(wǎng)友關(guān)注。離職OpenAI的...
Karpathy新視頻又火了:從頭構(gòu)建GPT Tokenizer
豐色 魚羊 發(fā)自 凹非寺量子位 | 公眾號 QbitAI技術(shù)大神卡帕西離職OpenAI以后,營業(yè)可謂相當積極啊。 這不,前腳新項目剛上線,后腳全新的教學(xué)視頻又給大伙整...
GPT-4可能也在用的推測解碼是什么?一文綜述前世今生和應(yīng)用情況
機器之心報道 機器之心編輯部推測解碼(Speculative Decoding)是谷歌等機構(gòu)在 2022 年發(fā)現(xiàn)的大模型推理加速方法。它可以在不損失生成效果前提下,獲得 3 倍...
傳月之暗面融資10億美元;馬斯克稱已掌握Sora類似技術(shù);楊立昆開噴Sora丨AIGC大事日報
02/19 全球AIGC產(chǎn)業(yè)要聞 1、馬斯克:特斯拉一年前就可生成真實世界視頻 2、馬斯克連續(xù)發(fā)文施壓OpenAI 3、楊立昆開噴Sora:不理解物理世界 4、謝賽寧否認系Sor...
離開OpenAI的大神卡帕西「開課了」:新項目日增千星,還是熟悉的min代碼風
魚羊 發(fā)自 凹非寺量子位 | 公眾號 QbitAI大神Karpathy從OpenAI離職,原本揚言要大休一周。 但轉(zhuǎn)眼,新項目就已上線GitHub,日增上千星的那種。 還是熟悉的卡...
AI模擬器拿下物理仿真新SOTA!|SIGGRAPH Asia 2023最佳論文
NFM團隊 投稿量子位 | 公眾號 QbitAI機器學(xué)習(xí)讓計算機圖形學(xué)(CG)仿真更真實了! 方法名為神經(jīng)流向圖(Neural Flow Maps,NFM),四個渦旋的煙霧也能精確模...
離開OpenAI待業(yè)的Karpathy做了個大模型新項目,Star量一日破千
機器之心報道 編輯:杜偉沒工作也要「卷」。閑不下來的 Andrej Karpathy 又有了新項目! 過去幾天,OpenAI 非常熱鬧,先有 AI 大牛 Andrej Karpathy 官宣離職...
大型語言模型的模型壓縮與高效推理:綜述
來源:專知 基于Transformer的大型語言模型取得了巨大成功。然而,在推理過程中產(chǎn)生的顯著內(nèi)存和計算成本,使得在資源受限的設(shè)備上部署大型模型變得具有挑戰(zhàn)...
人類偏好優(yōu)化算法哪家強?跟著高手一文學(xué)懂DPO、IPO和KTO
選自 huggingface.co/blog 作者:Kashif Rasul 等 機器之心編譯 編輯:趙陽?盡管收集人類對模型生成內(nèi)容的相對質(zhì)量的標簽,并通過強化學(xué)習(xí)從人類反饋(RLHF)...
通用量子計算的理論框架
01摘要量子計算領(lǐng)域主要研究量子信息的性質(zhì)及其應(yīng)用。在各種量子信息技術(shù)邁向?qū)嶋H應(yīng)用的背后,這一研究領(lǐng)域的基礎(chǔ)理論尚不完善。我們近期在《理論物理通訊》...
中科院半導(dǎo)體所論文再登 TNNLS 頂刊,貢獻探索數(shù)學(xué)表達式的新視角
作者:哇塞 編輯:李寶珠,三羊 中國科學(xué)院半導(dǎo)體研究所的研究人員將表達式結(jié)構(gòu)的求解視為分類問題,并通過監(jiān)督學(xué)習(xí)進行解決,提出一種名為 DeepSymNet 的符...
大模型×文本水印:清華、港中文、港科廣、UIC、北郵聯(lián)合發(fā)布首個大模型時代下的文本水印綜述
機器之心專欄 機器之心編輯部本文介紹首個大模型時代下的文本水印綜述,由清華、港中文、港科廣、UIC、北郵聯(lián)合發(fā)布,全面闡述了大模型時代下文本水印技術(shù)的...
基于Python的強化學(xué)習(xí)庫
大數(shù)據(jù)文摘受權(quán)轉(zhuǎn)載自數(shù)據(jù)派THU 作者:陳之炎1、OpenAI Gym庫 OpenAI Gym是一個用于開發(fā)和比較強化學(xué)習(xí)算法的Python庫。它提供了一個標準化的環(huán)境,使得研究...
粵公網(wǎng)安備 44011502001135號