ATG:人類精英呼吁暫停AI實驗 ChatGPT：合理但謹慎考慮_CATGE幣

3月29日，非營利組織“未來生命研究所（Future of Life Institute）”發表了一封題為“暫停巨型AI實驗”的公開信，呼吁全球的AI實驗室暫停訓練比GPT-4更強大的系統至少6個月，并在此期間開發出一份針對AI的共享安全協議，必要時需要政府介入。 

1000多名科技人士在這份公開信上簽名，包括特斯拉CEO馬斯克、Stability AI 的CEO Emad Mostaque等企業掌門人，也包括Alphabet旗下DeepMin的研究人員，還有諸如圖靈獎得主Yoshua Bengio這樣的重量級學者。當然，也有人表達了不同意見，認為這是在阻礙技術進步。

開發出GPT-4模型的OpenAI公司內還沒有人簽名，該公司目前也沒有對這封公開信予以回應。但我們向卷入紛爭中的ChatGPT要了個回應。

這個AI自然語言大模型產品倒是表現出了善解人意的一面：暫停實驗存在合理性，但需要謹慎考慮這么做帶來的技術發展滯后問題。它還給出了關于AI的六大風險和十個管理制度建議。

人類精英：暫停實驗 確立規則

截至今日，掛在“未來生命研究所（FLI）“官網上的《暫停巨型AI實驗》公開信，已經收集了1130人的簽字，名單里精英云集，不乏特斯拉、蘋果等科技公司的高管，也有政客和作家，當年，更多的是全球多所高校的教授以及人工智能領域的專家。??????

Coinbase CEO與Blake Byers合作創辦目標延長人類健康壽命的新公司NewLimit:12月12日消息，Coinbase首席執行官Brian Armstrong宣布與Blake Byers合作創辦新公司NewLimit，其使命是延長人類的健康壽命。NewLimit將從深入探究衰老的表觀遺傳驅動因素開始，并開發能夠再生組織的產品，以治療特定的患者群體。NewLimit表示，將首先使用原始人類細胞和參考物種來開發機器學習模型，研究染色單體的特征隨年齡變化，這些變化中的哪些可能是導致衰老過程的原因，最后開發可以減緩、停止或逆轉這一過程的治療方法。

NewLimit表示，最初從創始人那里籌集了1.05億美元，幫助公司起步，在合理進展的情況下，還會有額外的資金。我們預計，未來幾年資本不會是限制因素。今后，我們可能還會籌集外部資金。除了提供資金和擔任董事會成員，Blake Byers和Brian Armstrong目前正在面試和招聘創始團隊。最初的團隊將由科學、臨床和操作團隊成員組成。[2021/12/12 7:33:39]

那么精英云集簽字的這封公開信到底說了什么？以下是這封信的全文（向上滑動啟閱）

廣泛的研究表明，具有能與人類競爭的智能的AI系統會對社會和人類構成深刻的風險，頂尖的AI實驗室也承認這一點。正如廣受認可的阿西洛馬人工智能原則（Asilomar AI principles）原則所述，高級AI可能代表著地球生命歷史的深刻變化，應該以合適的態度和資源去進行規劃和管理。不幸的是，這種水平的規劃和管理并沒有發生。盡管最近幾個月AI實驗室陷入了一場失控的競賽，以開發和應用越來越強大的數字思維，然而沒有人能夠理解、預測或可靠地控制這些思維，甚至他們的創造者也不能。

中國人民大學楊東：區塊鏈技術的成熟，標志著人類社會走向數字文明:中國人民大學區塊鏈研究院執行院長、長江學者楊東表示，以區塊鏈技術為依托的“以鏈治鏈”即“法鏈”，監管者通過實時透明的共享賬簿，能夠在結果惡化之前就予以識別和回應，甚至可以將合規機制直接內嵌到區塊鏈系統之內，有助于金融領域進行全方位全過程監管。

楊東認為，區塊鏈技術不僅能夠作用于監管。科技在金融行業的滲透和應用，離不開以區塊鏈為代表的新興技術的發展，在數字經濟的穩定增長中，區塊鏈的作用日益顯著。“如果說人工智能、大數據技術是河流，區塊鏈技術就是河床，沒有河床的底層基礎，就不會有河水的流動。區塊鏈技術的成熟，使得真正的人工智能、大數據邁向一個智能化的時代，也標志著人類社會走向數字文明。”（中國經營報）[2020/12/12 15:01:06]

當代AI系統在一般任務上正在擁有與人類競爭的能力，我們必須問問自己：

我們應該讓機器在我們的信息渠道中充斥宣傳和謊言嗎？

我們是否應該自動化所有的工作，包括那些有成就感的工作？

我們是否應該培養出可能比我們數量更多、比我們更聰明、最終超越并取代我們的非人類思維？

聲音 | 中南財大教授陳彩虹：區塊鏈并不是人類技術模式的終結:11月21日，在“金貔貅?第二屆中國數字金融服務與合作發展高峰會”上，《金融理財》雜志社社長、易趣財經傳媒總裁石東表示，數字金融已成為我國經濟社會發展的關鍵動能，數字經濟是軀體，數字金融是血液。它不再是虛無縹緲東西，也不僅僅是服務與產品或者是工具，是嶄新的體系，全新價值方式，將重構金融機構的運行模式、服務模式，乃至整個金融生態圈。中南財經政法大學特聘教授、原建行董事會秘書陳彩虹表示，區塊鏈并不是人類技術模式的終結。區塊鏈是一個很先進的技術，未來發展空間巨大，而且在社會制度功能之間，要尋找平衡。（中國金融新聞網）[2019/11/22]

我們是否應該冒著失去對我們文明控制的風險？

此類決策決不應該委托給未經選舉產生的技術領導人。只有當我們確信AI的效果是積極的，風險是可控的時候，AI系統才應該被開發。這種對AI的判斷必須是合理的，并隨著系統潛在影響的變化而變化。

OpenAI最近關于人工通用智能（AGI）的聲明指出，“在開始訓練未來的系統之前，進行獨立審查可能很重要。同時對于最前沿的工作而言，人們應該在合適的時間點限制用于創建新系統的計算增長率。我們同意這一說法，并認為現在就是合適的時間點。

聲音 | 末日博士：數字資產和加密貨幣市場包含了人類歷史上最大規模的操縱:據ambcrypto報道，末日博士Nouriel Roubini最近在推特上寫道，數字資產和加密貨幣市場包含了人類歷史上最大規模的操縱。他還將這些數字資產稱為“shitcoins”，等于零。[2018/12/22]

因此，我們呼吁所有的AI實驗室立即暫停訓練比GPT-4更強大的AI系統至少6個月。這種暫停應該是公開的和可核實的，所有關鍵的參與者也能暫停相關工作。如果這種暫停不能迅速開始，政府應該介入并實施暫停。

AI實驗室和獨立專家應利用這一暫停的時段，共同開發一套AI設計和開發的共享安全協議，這些協議需要由獨立的外部專家嚴格審計和監督。這些協議應確保所有遵守它們系統的AI是安全的。這種暫停并不意味著總體上暫停AI開發，只是讓人們從具有新興功能的、不可預測的危險競賽中后退一步。

AI的研究和開發應該重新聚焦于使當今強大、最先進的系統更加準確、安全、可解釋、透明、穩健、一致、可信和可靠。

與此同時，AI開發人員必須與政策制定者合作，大幅加快強大的AI管理制度的開發。管理制度至少應包括以下內容：

聲音 | 報告：區塊鏈等技術引領人類經濟社會進入智能革命前夜:據新京報報道，《世界互聯網發展報告2018》和《中國互聯網發展報告2018》藍皮書在第五屆世界互聯網大會上正式發布。報告稱，在網絡技術方面，2018年以人工智能、區塊鏈、量子計算為代表的網絡信息技術繼續保持飛速發展，網絡信息技術與實體經濟進一步深度融合，信息化發展從數字化、網絡化向智能化方向轉變，引領人類經濟社會進入智能革命前夜。[2018/11/9]

?針對AI的新的、有能力的監管機構；

?監督和跟蹤能力強大的AI系統和計算能力池；

?幫助區分真實和合成數據的溯源、水印系統，并跟蹤模型泄露；

?提供健全的審計和認證生態系統；

?對AI造成的損害進行責任認定；

?為AI技術的安全研究提供充足的公共資金；

?資源充足的機構以應對AI將造成的巨大經濟和破壞（尤其是對民主的破壞）。

人類可以通過AI享受一個繁榮的未來。在成功創建了強大的AI系統后，我們現在可以享受一個“AI之夏”。

在這個AI的夏天，我們可以收獲回報，為所有人的利益設計這些系統，并給社會一個適應的機會。人類社會曾經暫停使用一些可能會對社會造成災難性影響的技術，我們現在也可以在AI領域這樣做。讓我們享受一個漫長的AI之夏，不要在沒有準備的情況下匆忙進入秋天。

事實上，這封公開信是近期人類精英們對人工智能風險擔憂的總爆發。自 ChatGPT 高速迭代后，擔憂從未停止，特別是當微軟、谷歌、百度、華為等科技巨頭們在自然語言模型上展開“軍備競賽”之后。

日前，“深度學習之父”杰弗里·辛頓（Geoffrey Hinton）在媒體采訪中表示，人工智能正處于“關鍵時刻”，毀滅人類“并非不可能”。AI領域內的“大牛”蓋瑞·馬庫斯（Gary Marcus）發推特支持辛頓，甚至發出靈魂一問：“用百分之一的人類毀滅風險換取和機器對話帶來的樂趣，這值得嗎？”

而馬庫斯在轉發FLI這封公開信時表示，“這封信并不完美，但精神是正確的。我們需要放慢腳步，直到我們更好地理解AI帶來后果……他們可能會造成嚴重傷害……主要參與者對他們正在做的事情越來越保密，這使得社會很難抵御可能發生的任何傷害。”

也有科技圈人士對這封信的觀點持不同意見。

Writer的創始人Waseem 以諷刺的語氣表達了他對權威們的不滿，“讓我們停止建設和發展我們的公司，因為來自硅谷的億萬富翁說我們有風險。一定要喜歡那些比我們人類更聰明的人，因為他們告訴我們如何生活。當我們有他們神圣的指引時，誰還需要進步？” 

OSS Capital的創始人Joseph Jacks 態度更是簡潔明了：強烈反對，絕對不簽這個。

 ChatGPT：暫停合理但小心阻滯技術

目前，OpenAI 還沒有就 FLI 的這封公開信做出回應。而我們把人類精英們的擔憂與建議甩給了ChatGPT，引發這場紛爭的這個對話機器人不但認可了FLI要求暫停實驗的合理性，還補充了六大AI風險。

ChatGPT的答案中也包含了暫停實驗帶來弊端：導致技術發展的滯后。這也和輿論場上很多普通大眾的想法趨同。????????????????????

那么，問題擺在眼前，如果要讓研究人員和政府制定規則，該包含哪些內容呢？ChatGPT給出了十大建議，相當于給包括自己在內AI發展畫了一個規范圈。

連ChatGPT自己都這么說了，可見，“AI失控”、”替代人類“無論是在意見領袖圈層還是輿論場上都有探討的意義。

最近，微軟的創始人比爾·蓋茨在大力肯定人工智能帶來生產力提升的同時，也強調過風險，“AI失控的可能性是存在的，一臺機器會認為人類是自己的威脅嗎？它們會得出結論認為自身利益與人類的利益不同進而不在意我們嗎？” 他預測，隨著算法、算力的提升，超級智能AI會在未來出現。

連 OpenAI 的CEO Sam Altman都表示，超級智能AI的風險可能會遠遠超出我們的預料。此前，他在技術研究員Lex Fridman的播客中表達他的擔憂，包括AI造成的虛假信息問題，帶來的經濟沖擊等等，“危害可能遠遠超過了人類能應對的程度”，他舉了個例子，“我們怎么會知道，大語言模型沒有在推特上指揮大家的思想流動呢？”

這正應了那封公開信中所說的：沒有人能夠理解、預測或可靠地控制這些數字思維，“甚至他們的創造者也不能”。

雖然通用人工智能（AGI）還遠遠沒有到來，但就像比爾·蓋茨說得那樣，在這之前，世界需要建立規則以使AI帶來的正面影響遠遠超過其負面影響。

換句話說就是，別讓人類造出的東西把人類自己滅了。畢竟，戰爭、核事故帶來的災難還歷歷在目。

蜂巢Tech

個人專欄

閱讀更多

金色財經 善歐巴

金色早8點

白話區塊鏈

歐科云鏈

Odaily星球日報

Arcane Labs

MarsBit

深潮TechFlow

BTCStudy

鏈得得

Tags：區塊鏈GPT人工智能ATG區塊鏈工程專業學什么女生比較好MGPT人工智能幣哪個好CATGE幣

萊特幣