創作者:DAOctor
ElonMusk創立的OpenAI基金會的最新聊天機器人ChatGPT以其強大寫作、對話能力席卷了網絡世界。ChatGPT是一種由人工智能驅動的聊天機器人,它以一種令人信服的對話方式與用戶互動。ChatGPT對問題深思熟慮和全面的回答令用戶震驚,包括學術界和科技行業。
該工具迅速走紅。周一,OpenAI的聯合創始人、著名的硅谷投資者SamAltman在Twitter上表示,ChatGPT的用戶已突破100萬。?
知名的科技投資人Box首席執行官AaronLevie也表示:“當一項新技術調整了你對計算的想法時,會有一種特定的感覺。谷歌、火狐、AWS、iPhone都做到了。OpenAI正在通過ChatGPT做到這一點”。
馬斯克:推特將于下周開源算法:金色財經報道,當地時間周二,Twitter CEO埃隆·馬斯克表示,該公司將于下周對Twitter算法進行開源。有用戶說,如果Twitter能夠開源算法,他們將會“真心折服”。
?于是,馬斯克回應道:“當我們下周開源算法時,一開始請做好失望的準備,但之后將會快速改善。”馬斯克曾經自稱是“言論自由的絕對主義者”,并且曾經通過對用戶進行調查來制定Twitter的重大決策。(環球網)[2023/2/23 12:23:58]
與其他人工智能工具一樣,ChatGPT也可能擾亂創意產業、延續偏見和傳播錯誤信息。如StackOverflow暫時禁止用戶分享ChatGPT生成的回復。因為ChatGPT很容易與用戶互動,且可以快速生成大量回答,這讓網站充斥著許多第一眼看起來是正確的答案,但在仔細檢查后就能發現其中的錯誤。
消息人士:SBF可能從馬斯克的推特收購中套現1億美元:金色財經報道,一位消息人士表示,FTX首席執行官Sam Bankman-Fried擁有Twitter的5000萬至1億美元的股份。SBF曾計劃參與馬斯克對Twitter的收購,但最終沒有投資。
在周四完成收購之前,這位交易所高管擁有這家社交媒體巨頭價值約5000萬至1億美元的股票。馬斯克為將Twitter私有化支付了440億美元,這使得SBF的股份約為0.1%至0.2%。SBF可能會從Elon Musk對Twitter的收購中最多套現1億美元。目前FTX拒絕對此發表評論,Twitter沒有回應評論請求。(the block)[2022/10/31 11:58:47]
因此,本文,我們將討論最近流行的AIGC工具ChatGPT及此類工具對內容生態審核制度的挑戰。
01.什么是ChatGPT
被馬斯克解雇的Twitter高管或獲得1億美元的離職賠償金:10月29日消息,薪酬數據和分析公司Equilar估計,根據之前披露的條款,前推特CEO Parag Agrawal可能會收到5740萬美元,其中包括5640萬美元的加速歸屬股權。離任的CFO Ned Segal的離職補償總額可能為4450萬美元,包括4380萬美元的加速歸屬股權。(金十)[2022/10/29 11:55:56]
GenerativePre-trainedTransformer,是一種基于互聯網可用數據訓練的文本生成深度學習模型。它用于問答、文本摘要生成、機器翻譯、分類、代碼生成和對話AI。
2018年,NLP的預訓練模型元年,GPT-1誕生,此時的GPT-1僅是一個語言理解工具而非對話式AI。2019年GPT-2采用更多的網絡參數與更大的數據集進行訓練,此時的GPT-2展現出普世且較強的能力,并在多個特定的語言建模任務上實現了彼時的最佳性能。隨后,GPT-3出現,作為一個無監督模型,幾乎可以完成自然語言處理的絕大部分任務,例如面向問題的搜索、閱讀理解、語義推斷、機器翻譯、文章生成和自動問答等等。GPT-3的出現使人們看到了通用人工智能的希望。
福布斯發布2022全球億萬富豪榜,馬斯克登頂:4月5日消息,受去年全球股市震蕩影響,2022福布斯全球億萬富豪榜上榜人數較去年減少87位,降至2668位。盡管今年上榜者財富總額達12.7萬億美元,但同比有所下降。在上榜富豪中,美國富豪數量為736位,位居全球第一;埃隆·馬斯克以2190億美元財富位列榜首。(金十)[2022/4/5 14:05:17]
今天,ChatGPT的到來,也被視為文本生成器GPT-3的下一個迭代,為GPT-4到來拉開序幕。
ChatGPT是一種大型語言模型,通過大量在線信息進行訓練并創建其響應。注冊ChatGPT后,用戶可以要求人工智能系統回答一系列問題,這些問題包括開放性問題:例“生命的意義是什么?”加密貨幣值得投資“?”“什么是HackerMovement”等。
消息人士:美SEC將就狗狗幣相關推文對馬斯克進行調查:美國財經博客門戶網站零對沖(ZeroHedge)今日發推文稱,消息人士表示,美國證券交易委員會(SEC)將就關于狗狗幣的推文對特斯拉CEO埃隆·馬斯克進行調查。(investorplace)[2021/2/26 17:53:35]
02.ChatGPT如何工作的?
談到ChatGPT的算法模型,?其前身InstructGPT仍值得關注。
2022年初,OpenAI發布了InstructGPT。開發人員通過結合監督學習+人類反饋強化學習,提高GPT-3的輸出質量。在這種學習中,人類對模型的潛在輸出進行排序,強化學習算法則對產生類似于高級輸出材料的模型進行獎勵。
訓練數據集以創建提示開始,其中一些提示是基于GPT-3用戶的輸入,比如“解釋什么是HackerMovement”或“給一個小學生解釋Hacker”。
開發人員將提示分為三個部分,并以不同的方式為每個部分創建響應:
人類作家會對第一組提示做出響應。開發人員微調了一個經過訓練的GPT-3,將它變成InstructGPT以生成每個提示的現有響應。
下一步是訓練一個模型,使其對更好的響應做出更高的獎勵。對于第二組提示,經過優化的模型會生成多個響應。人工評分者會對每個回復進行排名。在給出一個提示和兩個響應后,一個獎勵模型學會了為評分高的響應計算更高的獎勵,為評分低的回答計算更低的獎勵。
開發人員使用第三組提示和強化學習方法近端策略優化進一步微調了語言模型。給出提示后,語言模型會生成響應,而獎勵模型會給予相應獎勵。PPO使用獎勵來更新語言模型。
ChatGPT和InstructGPT算法模型基本一樣。不同之處在于數據如何被收集和訓練。
?InstructGPT:給一個輸入就給一個輸出,再跟訓練數據對比,對了有獎勵,不對有懲罰;
?ChatGPT:?給一個輸入,模型給出多個輸出,然后人對輸出結果排序,讓模型使得這些結果從“更像人話”到“沒有邏輯”排序。
與其他AI聊天機器人不同,本著構建更加負責任的強人工智能原則,ChatGPT可以回答后續問題、承認錯誤、挑戰不正確的問題并拒絕不適當的請求。
寫在這里記起,科幻小說家艾薩克·阿西莫夫為機器人設定的行為準則—機器人三定律:
第一法則:機器人不得傷害人類,或坐視人類受到傷害;
第二法則:機器人必須服從人類命令,除非命令與第一法則發生沖突;
第三法則:在不違背第一或第二法則之下,機器人可以保護自己。
03.ChatGPT等AIGC工具對內容生態的挑戰:
不可置疑的是AIGC對很多領域產生了積極的影響。如,文本創作、音樂創作、游戲文本生成等。隨著AIGC工具的成熟,其甚至可自主編程、拼接生成新的協議。
但,此類工具向內容生態提出一個全新的問題即:如何應對AIGC的真實性。以ChatGPT為例:
a)在訓練的強化學習階段,對于問題,并沒有真相和問題標準答案的具體來源;
b)訓練模型更加謹慎,可能會拒絕回答;
c)監督訓練可能會誤導/偏向模型傾向于知道理想的答案,而不是模型生成一組隨機的響應并且只有人類評論者選擇好的/排名靠前的響應。
人工智能生成的答案有數千個,而這些答案通常需要具有專業知識的人詳細閱讀,才能確定答案實際上是錯誤的,這些錯誤信息很容易破壞以志愿者為基礎的高質量問答社區。
紙質新聞時代,每個事實都必須包含權威的一手或二手資料來源,但現在已經很少有出版物有事實核查員,這就把責任推給了記者和編輯。信息爆炸時代,以人為媒介傳播的虛假信息尚且讓審核機制“頭疼”,很難想象當人工智能開始傳播虛假信息,所帶來的挑戰。尤其是在這個輿論時常反轉的時代,只要一個消息聽起來合理,許多人就會認為這是正確的。
前兩周錄了一期播客,講了下自己的近況,這幾年的一些變化和未來幾年的一些規劃,有興趣聽的朋友可以訪問小宇宙收聽:個人黑歷史與熊市生存規劃播客里有提到,我目前也算是一個失業狀態了.
1900/1/1 0:00:00文:RussianDefi來源:0xilluminati11月27日,Blur的交易量超過了Opensea。最近創建了許多新的NFT市場,但直到現在才出現一個有占據主導地位意圖的市場.
1900/1/1 0:00:001.Web3項目如何設計成熟的商業模式和代幣經濟?最近由FTX暴雷引發的加密市場崩潰揭示了Web3項目商業模式和代幣設計的脆弱性.
1900/1/1 0:00:007:00-12:00關鍵詞:Ankr、黃立成、Tether、Discord1.Ankr遭黑客攻擊后.
1900/1/1 0:00:00近日,英偉達交出了一份并不太亮眼的2022財年第三財季報告,在連續兩個季度的下滑之后,英偉達的三季度依舊不太樂觀,單純顯卡業務的收入,同比和環比均出現兩位數下滑.
1900/1/1 0:00:00出品:DODOResearch 編輯:Daidai 作者:Yaoyao FTX爆雷,帝國坍塌,一系列頭部平臺遭受重創,做市商和借貸成為重災區:Alameda作為加密貨幣行業最大的做市商之一.
1900/1/1 0:00:00