ChatGPT終于有圖片功能了:會畫畫、會識圖
大半夜的, OpenAI 又整出了個勁爆消息:
DALL·E 3 來了!不僅來了,還會被整合到 ChatGPT 里。
也就是說,除了老生常談的對話、寫代碼、解數學題外,整合了最新 DALL·E 3 的 ChatGPT 這次終于有圖片功能了。
ChatGPT+DALL·E ,這波算是強強聯合,一個是語言大模型里的無冕之王,另外一個也算是文生圖模型里的佼佼者,真正的效果也必然會 1+1>2 。
這次突然官宣算是填了今年年初 GPT-4 剛出來后,被傳的紛紛揚揚的多模態 ChatGPT 的大坑。
不過,現在 OpenAI 還只是公布了這個消息,具體的上線時間是 10 月。面向 Plus 和企業版用戶,單獨的 DALL·E 3 今年秋天也會上線。
這玩意具體有多厲害,雖然現在我們還不能上手,但從 OpenAI 公開的示例來看,還是相當炸裂的。
其中,就有熱心網友直接打來了 Midjourney ,把 DALL·E 3 的示例提示詞喂給了它,好直接斗圖一比高下。
而結果只能說:Midjourney 危了。
首先是很經典的牛油果看病梗圖,提示詞:一個牛油果坐在治療師的椅子上,說著 “ 我感到內心如此空虛 ” ,牛油果中間有一個小坑大小的洞。治療師,勺子,涂鴉筆記。
雖然乍一看是各有千秋,兩種不同的風格。但若再仔細對照下提示詞,很顯然 Midjourney 忽視了治療師,勺子,涂鴉筆記這幾個元素,對話框里的文字也是亂寫一通,不按照要求來。
然后讓他們生成一張關于半透明心臟的圖片,并且要求在心臟下面刻上一行特定的名言。
提示詞:這是一幅用半透明的玻璃制成的人類心臟的插圖,它矗立在狂風暴雨的海洋中的一個基座上。陽光穿透云層照亮了心靈,揭示了內在的微小宇宙。 “ 發現你內心的宇宙 ” 這句名言被用粗體字刻在基座上。
毫無疑問,這次 DALL·E 3 再次吊打了 Midjourney , Midjourney 除了沒按照要求刻字外,像狂風暴雨的海洋、內在的微小宇宙等細節是一點也沒展現。
再來一張以荔枝為靈感的球形椅子的照片,細節上,要求有白色凹凸不平的外觀,柔軟的內飾,與背后的熱帶壁紙形成對比。
這把它們倆生成的圖片里各個元素都齊活了,但 Midjourney 似乎還是誤解了熱帶壁紙和熱帶雨林的區別。
當然,誤解提示詞、斷章取義這些都相當于是之前文生圖模型的頑疾了。
像什么寄居蟹就給生成一個螃蟹。。。
讓它生成 2D 的擬人化森林樂隊結果生成 3D 的。。。
而這些老毛病,照 OpenAI 自己的說法以及給出的示例來看,新的 DALL·E 3 基本上不存在這種情況。
除了解決掉老毛病之外, DALL·E 3 還在原來二代版本上也進行了質感上的升級。
就比如讓它們畫籃球運動員扣籃的場景,元素是星空爆炸。
本來 DALL·E 2 生成的圖已經很符合要求了,沒想到升級后的 DALL·E 3 更加逼真,肌肉線條、宇宙的色彩這些細節都一一展示出來,屬實是降維打擊。
左:DALL·E 2 ,右:DALL·E 3
總體看下來, DALL·E 3 在 ChatGPT 的加持下,語言理解能力直接拉滿,簡直是要贏麻了的節奏。
升級版的 ChatGPT 不僅不會丟失關鍵信息點,就算只是零零星星打了幾個關鍵詞,它也能幫你自動補全描述,然后再讓 DALL·E 3 生成圖片。
OpenAI 這是拿捏住了當代網友 “ 文化沙漠 ” 的本質了( 狗頭 )。
當然 DALL·E 3 和 ChatGPT 的整合,不止是更能聽懂人話那么簡單,它們還會產生一些奇妙的火花。
就比如升級版的 ChatGPT 在畫畫上也有了上下文理解能力,甚至可以直接當做生產力工具。
具體有多厲害, OpenAI 官網給出了一段演示視頻,說實話,世超在看了后,也是為插畫師的飯碗狠狠地捏了一把汗。
首先是讓 ChatGPT 生成一個超級向日葵刺猬,它會給出四張圖,從里面選一張最喜歡的之后,可以進行下一步的對話。
然后把這個刺猬命名成 Larry ,可以再讓 ChatGPT 多生成幾張它的照片。
接下來上點難度,直接搞個場景,讓它展示一下 Larry 的家。
這把可以直接看出 DALL·E 3+ChatGPT 的實力了,不僅 Larry 的樣貌還保持原樣( 這換其他 AI 可能早變樣了 ),而且門口的郵箱還寫著 “LARRY” 的名字。
此外,描述 Larry 的特點、用圖片展示它的愛心、甚至做做 Larry 的周邊,設計出幾個貼紙,對于 ChatGPT 來說都是灑灑水的事。
最后讓它整理個睡前故事,來個 ending pose , ChatGPT 也是信手拈來, u1s1 我真的有點被這絲滑的對話震撼到。。。
看到這里,世超還突然得了新的靈感,之后我們寫好的文章豈不是就可以直接丟給 ChatGPT ,讓它提取關鍵詞做封面。
有啥特殊要求也可以直接告訴 ChatGPT ,參考圖啥的也可以扔給它,摸魚技巧 +1+1 。。。
言歸正傳,上面提到的那些還只是 OpenAI 單方面展示出來的效果,實際用起來怎么樣,還是得等到 10 月份上線之后才能知道,估計到時候有會有一波隱藏技巧被網友們開發出來,坐等。
另外,談到 AI 繪畫,就還是躲不過那個老生常談的話題:版權問題。
OpenAI 這邊依舊還是之前的立場,和第二版一樣,用 DALL·E 3 生成的圖片不需要經過許可就能用,想商業化都行。
不過,有了太多的前車之鑒, OpenAI 這次耍了點小聰明,說是藝術家可以選擇拒絕自己的作品被投喂給 DALL·E ,前提是只要填一個表格就 OK 了。
雖然這多少有點 “ 不拒絕就是默許 ” 的意味,但相較于之前,起碼藝術家們不再那么被動了。。。
對于之前網絡出現的 AI 繪畫侵犯公眾人物隱私,以及一些其他偏見的問題, DALL·E 也有對策了:在實際使用的過程中, ChatGPT 會直接拒絕提示中帶有公眾人物名字的請求。
也就是,像這種樂子圖我們估計也不會在 ChatGPT 中看到了。。。
并且他們還組建了一個 “ 紅色團隊 ” ,用來評估和降低模型在各個階段可能會產生的風險。
最后, OpenAI 還在官網上表示說,它們在研究一個識別 AI 畫圖的工具,能夠判斷哪些圖片是 DALL·E 3 生成的。
( 只希望不要像之前那個識別 AI 文本的工具,因為雞肋半路夭折。。。
總的來說,有文生圖功能的 ChatGPT 就已經足夠在 AI 圈子里掀起一陣熱度,而這波又是整合的升級版 DALL·E 3 ,很難不讓人振奮,反正世超已經是等不及想上手試試了。
但有人歡喜有人憂, OpenAI 這波是再次甩了同行一大截,等到 10 月更新之后,估計又有不少 AI 初創公司被碾壓在 ChatGPT 前進的車輪下。。。
本站所有文章、數據、圖片均來自互聯網,一切版權均歸源網站或源作者所有。
如果侵犯了你的權益請來信告知我們刪除。郵箱:business@qudong.com