圍繞OpenAI推出的第二代DALL-E2系統的討論一直處于兩極分化的狀態,甚至在其推出了幾個月后依舊如此。
有用戶認為這是一項可以重新定義藝術的突破性創新,而批評者則將其視為人工智能圖像生成器給創意產業帶來厄運的開始。
然而毫無疑問的是,DALL-E2為我們創造和消費藝術開辟了新的可能性和挑戰。本文詳細介紹了AI圖像生成器DALL-E2的用法和缺點。
什么是DALL-E2?
DALL-E2是一款人工智能圖像生成器,它可以根據自然語言的文本描述創建圖像和藝術形式。換句話說,它是一個根據文本生成圖像的人工智能系統。
2021年1月,OpenAI推出了DALL-E模型,DALL-E2是其升級版。“DALL-E”這個名字源于西班牙著名藝術家SalvadorDalí和廣受歡迎的皮克斯動畫機器人“Wall-E”的組合。
2022年7月,DALL-E2進入測試階段,可供白名單中的用戶使用。同年9月28日,OpenAI取消了白名單的要求,推出了任何人都可以訪問并且使用的開放測試版。
在線經紀公司Zerodha創始人:比特幣等加密貨幣可能會顛覆在線經紀業務:9月12日消息,在線經紀公司Zerodha的創始人兼首席執行官Nithin Kamath近期在推特上分享了他對未來交易業務可能中斷的觀點。Kamath表示,加密貨幣可能會對經紀和交易的金融空間造成嚴重破壞:“經常有人問我,誰能顛覆新時代的在線經紀商和交易所。我認為不會是一個新的股票交易所或另一家股票經紀公司。它很可能是一個外來者,可能是加密行業。”(News18)[2021/9/12 23:19:16]
與最初的DALL-E一樣,DALL-E2也是一種語言生成模型,它使用文本提示來創建原始圖像。
盡管和之前DALL-E具有的120億個參數的模型不同,DALL-E僅僅具有大約35億個參數,但DALL-E2生成的圖像分辨率是DALL-E的四倍,這是一次令人印象深刻的升級。同時,DALL-E2在真實感和字幕匹配方面似乎也做得更好。
如何使用DALL-E2?
聽起來,DALL-E2很有未來感,可能會讓新用戶望而生畏,但它使用起來非常簡單。我們不進行詳細介紹,僅通過迷你教程為大家提供快速概覽。
首先,登陸DALL-E2的官網并創建一個帳戶,如果您此前已經擁有OpenAI的帳戶,登陸即可。需要注意的是,系統會要求您提供電子郵件和電話號碼以進行驗證。
聲音 | 巴基斯坦總統:國家工業部門需為應對區塊鏈等顛覆性技術做好準備:據Bitcoinist消息,12月17日,巴基斯坦總統Arif Alvi在新興技術任務組會議上表示,該國的工業部門需要為應對人工智能,區塊鏈和物聯網等顛覆性技術做好準備。[2019/12/18]
一旦帳戶準備就緒,我們就可以開始生成圖像。用戶最多提供400個字符的描述性文本,AI藝術生成器將對其進行處理。根據測試,我們可以從文本提示中得到許多原創且有趣的結果。
比如,我們輸入“狼群在滿月時嚎叫”就收到了如下的結果。
輸入“一個3D渲染的羅馬士兵正在休息”則獲得了以下的圖像。
DALL-E2的工作原理是什么?
DALL-E2為AI圖像生成器的質量提供了新的基準。它與之前的同類產品相比,能夠更好地理解文本描述。
聲音 | 朱幼平:區塊鏈技術思想顛覆了傳統銀行等金融邏輯:近日在中國亞洲經濟發展協會區塊鏈產業專業委員會的線上分享活動中,朱幼平表示,區塊鏈技術思想顛覆了傳統銀行等金融邏輯,當前種種動向表明區塊鏈革命正在變為現實。(一)工業時代立下汗馬功勞的銀行,暴露出四大弊端;(二)數字時代財富新邏輯是數字科技+智能合約社區+通證,升級工業時代的物理化學能源技術+公司+存貸和證券;(三)貨幣和銀行改革升級需要區塊鏈;(四)區塊鏈革命正在進行中。[2019/10/21]
其卓越的自然語言理解能力可以更嚴格地控制圖像的風格、主題、角度、背景、位置和概念,并獲得更高質量的圖像和令人印象深刻的藝術形式。
那么讓我們來看看DALL-E2的工作原理。
要了解AI圖像生成器的工作原理,我們首先需要了解CLIP、先驗模型和解碼器擴散模型。
什么是CLIP?CLIP指的是對比語言圖像預訓練,是DALL-E2架構中最關鍵的模塊。
該訓練基于用戶可以用自然語言教計算機不同圖像之間如何相互關聯,并由文本和圖像編碼器這兩個神經網絡組成。
文本和圖像編碼器都接受了大量不同的圖像文本對集合的訓練。該模型分析這些圖像-標題對以創建稱為文本/圖像嵌入的矢量表示。換句話說,CLIP充當文本和圖像之間的橋梁。
聲音 | 區塊鏈將與更多行業結合形成顛覆性創新:滿幣網張漾斌指出,在未來的發展趨勢中,伴隨區塊鏈技術的不斷突破,區塊鏈會與更多的行業結合,從而對行業形成顛覆性的創新。由于潛力巨大,也會進一步受到資本的追逐,涌入更多的資源、人才、媒體等關注,進一步增加大眾認知,而減少市場推廣成本,為區塊鏈行業的發展插上助推器。[2018/7/2]
先驗模型采用標題/CLIP文本嵌入,并以此為基礎生成CLIP圖像嵌入。
unCLIP則是使用CLIP圖像嵌入生成圖的原始CLIP模型的逆模型。DALL-E2通過先驗模型和unCLIP模型來創建輸出。
下圖大致概述了其基本過程。
如圖所示,unCLIP模型創建了圖像的“心理”表示。基于此,創建了原始圖像。
這些“心理再現”保留了語義一致的核心特征和特點,例如“動物、物體、顏色、風格和背景等關鍵要素”。然而,因為擴散學習是變化的,每一次輸出的圖像也會有所不同。
請注意,上文只是DALL-E2工作原理的簡要表述,實現的技術細節和數學更加復雜,我們就不在這里贅述。如果您對DALL-E2的技術規格感興趣,可以參看OpenAI在今年早些時候發表的論文《HierarchicalText-ConditionalImageGenerationwithCLIPLatents》。
阿里巴巴曾鳴:目前很難準確判斷區塊鏈是否顛覆性技術:阿里巴巴集團學術委員會主席曾鳴昨天晚上在某區塊鏈群中表示,阿里巴巴從2016年已經開始試水區塊鏈項目。他也曾與馬云探討過區塊鏈,并認為區塊鏈的研究會繼續。在談到區塊鏈技術能否顛覆BAT時,曾鳴表示,目前很難準確判斷區塊鏈是不是顛覆性的技術,因此談區塊鏈顛覆BAT為時尚早。對區塊鏈早期的創業者而言,最大的考驗就是初心和愿景。[2018/3/2]
使用DALL-E2可以做什么?
只要用戶給出精確和具有描述性的文本提示,就可以通過AI藝術生成器得到多個高質量的圖像,甚至在幾秒鐘的時間里實現畫家或數字藝術家需要數小時甚至數天才能達到的質量水平。
用戶可以免費查看所有這些視覺創意,無需支付場地費,也無需向創意人員和模特支付工資。
然而這也對我們的內容創作經濟帶來了一定的影響。
DALL-E2使用自己對主題、風格、調色板和所需概念意義的“理解”,生成相應的圖像。
每個圖像最多可以產生四個變體。每一個都與原作的外觀、感覺和意義相呼應,但又具有自己獨特的風格。
您也可以在DALL-E2中編輯圖像,無需任何照片編輯經驗。與AdobePhotoshop不同,使用DALL-E進行編輯非常簡單。
例如,用戶想要在火星上行走的宇航員的肖像中添加一只狗,只需要輸入“在宇航員身后放一只狗”。同樣,用戶還可以要求程序通過放大和縮小來更改圖像的視圖框架,直到獲得所需的結果。而就DALL-E2的功能而言,這些只是冰山一角。
同時,根據設計,該系統無法生成涉及、血腥或元素的內容。也就是說,該程序有其合理的局限性和缺點。
DALL-E2的局限性
DALL-E2的輸出質量很大一部分取決于用戶提供的文本提示的質量,文本越具體,獲得所需輸出的機會就越高。然而,該系統有一些內在的局限性。
例如,當前它還不具有很精確組合性,盡管似乎會隨著時間的推移而改善。這意味著DALL-E2通常無法有意義地合并多個對象或對象屬性,例如形狀、方向和顏色。
同時在一些意料之外的情況下,有一些相對簡單的文本,程序也可能無法充分執行。
例如,我們輸入文本“一百只打扮成羅馬士兵的青蛙在沙漠中行進”。即使我們嘗試了多種提示變體,結果也不盡如人意。
另一個例子是當我們嘗試相當簡單的提示時,如“霸王龍騎著獨輪車在艾菲爾塔前”。不知道為什么,程序拒絕畫獨輪車,取而代之的是自行車。而當我們從提示中刪除“EifelTower”,產生預期圖像則沒有任何阻礙。
這些只是DALL-E2局限性的幾個例子。更令人擔憂的問題本質上很復雜,可能會對公司及其用戶造成嚴重不良影響。
OpenAI限定DALL-E2不創建公眾人物和名人的圖像。事實上,它完全拒絕生成包含真實面孔或真人的圖像,這是朝著防止濫用該程序邁出的重要一步。
隨著DALL-E2越來越受歡迎,版權侵權也可能成為一個大問題。OpenAI堅持認為,用戶“獲得了將他們使用DALL-E創建的圖像商業化的全部權利,包括轉載、銷售和商品化的權利。”
然而,人工智能藝術生成器依賴于分析、學習人類藝術家的作品來創造藝術。因此,不能排除潛在的侵犯知識產權法的可能性,無論是否有意。
總結
DALL-E2完美嗎?作為一項正在完善的項目,答案是否定的。
但是,正如機器學習的本質一樣,隨著時間的推移,該程序正變得越來越聰明,也越來越有能力。從純技術的角度來看,DALL-E2是AI技術演進的一大進步。
人們普遍認為人工智能系統在創意領域實際上無法超越人類,至少不會很快。但是DALL-E2已經使這個論點受到了沖擊。
然而盡管OpenAI已經采取了一系列措施來預測和防止DALL-E2的潛在濫用,但這并非萬無一失。在沒有任何道德界限的情況下可以使用的AI系統將在多久后出現?需要我們保持警惕。
無論如何,我們都需要密切關注這個新興行業。因為AI藝術生成器及其背后的技術只會在未來的歲月里變得更加普遍。
對話者 SujiYan??MaskNetworkFounder?tim??.bitFounderJsson?《Web3社交報告》作者 主持人 徐思彥??騰訊研究院高級研究員?本文由研討整理而成.
1900/1/1 0:00:001.十五張圖看懂2022年加密VC的投資變化2022年,加密VC向Crypto初創公司投去了總計300億美元的資金,這一數值與2021年的310億美元非常接近.
1900/1/1 0:00:00原文:《上輪牛市發動機是DeFi,下輪有可能和它相關?》 作者:五火球教主 這篇不是要講Zk-Sync,Starknet,Scroll這些Layer2的,也不是講Aleo.
1900/1/1 0:00:001月12日消息,破產的加密貨幣借貸機構BlockFi今日公布了其財務報表。該文件詳細說明了去年6月FTX的一筆貸款對BlockFi13位高管的影響,BlockFi高管持有的股權減少了8億美元,其.
1900/1/1 0:00:00,標題有改動) 在解釋本文標題之前,我們先來了解一下元宇宙和Web3.0是什么,再逐步討論加密貨幣如何與元宇宙以及Web3.0相互作用,并如此緊密地交織在一起.
1900/1/1 0:00:00當行業一頭扎進又一個加密冬天時,Polkadot社區在今年正忙于構建和啟動世界上最大、最多樣化的Layer1區塊鏈生態系統.
1900/1/1 0:00:00