剛剛，OpenAI 深夜直播，GPT-4o 的原生圖像生成大升級！奧爾特曼親自上陣組隊，演示了自拍變梗圖、相對論漫畫等功能，不過相對隔壁谷歌發(fā)布的新模型，OpenAI 的這波動作著實有點不夠看。
就在谷歌剛剛扔出地表最強模型 Gemini 2.5 Pro 不久，OpenAI 也有動作了。
奧爾特曼親自帶隊，展示了 GPT-4o 圖像生成技術的各種大升級，比如制作梗圖、文本渲染、多輪交互生成和指令遵循等。
整個直播中最亮的演示，莫過于這張官方玩梗的表情包了。
目前，這項功能已經(jīng)在 ChatGPT 和 Sora 中，向所有 Plus、Pro、Team 和免費用戶推出。
當然，新版 Sora 生圖的時間，也比以往更長了。但 OpenAI 看來，生圖的質量和其具備的世界知識，讓用戶值得等待那多出的幾秒。
GPT-4o 原生圖像生成來了！
在直播中，奧爾特曼介紹道，從今天起，ChatGPT 中的原生圖像生成功能正式推出！
GPT-4o 的全模態(tài)能力，從此也融合進了 Sora 中。
OpenAI 多模態(tài)研究的負責人 Gabe 介紹說，兩年前剛開始這個項目時，他對于 GPT-4 這個強大的模型會怎樣原生支持圖像模型非常好奇。
一年后，當模型完成訓練時，他看到了令人興奮的跡象。從 GPT-2 以來，他已經(jīng)很久沒有這種感覺 —— 這是一個瘋狂時刻。
給出以下 prompt，GPT-4o 就生成了符合要求的圖像，完全還原了要求。
|
|
接下來，三個人用手機來了張自拍，GPT-4o 立刻把三人自拍轉換成了動漫風格的版本。
甚至他們開始官方玩梗，讓模型添加一段「Feel The AGI」在圖片上，一張表情包就此誕生。
這個過程，就體現(xiàn)了 4o 作為全能模型的強大能力。
因為它不僅僅是一個語言模型，還包括圖像、音頻，所有輸入和輸出的模態(tài)。它可以理解、生成這些模態(tài)，并且無縫地在它們之間工作。
用 OpenAI 的話說，「我們終于邁向了這種真正集成的多模態(tài)模型」。
接下來，他們讓模型畫出一幅描述相對論的漫畫，要求通俗易懂，還要加入一些幽默元素。
這個提示詞非常模糊，因此看看模型會生成什么樣的圖，就格外令人期待了。果然，生成效果令人驚喜。
注意，這個過程中，模型很可能利用了自己的世界知識，對提示詞進行了擴展。
然后，他們給了模型一張卡片，希望生成同樣風格的圖像，但要求主角不再是卡片中的巨貓國王，而是某位研究者的狗狗。
|
|
另外，卡片上還需要出現(xiàn)一些細節(jié)，比如模型的名字和年份，以及狗狗的體重和身高。
可以看到，生成圖像在文本渲染方面非常驚艷，所有數(shù)據(jù)都準確無誤。
最后一個演示，是基于此前幾人生成的內容，制作一個紀念幣。
而且，還要求圖使用了一個特殊的十六進制代碼，且加上生成圖像的文本和日期。
可以看到，生成結果非常驚艷！此前曾出現(xiàn)的藝術熊、收音機、愛因斯坦漫畫、研究者的狗狗以及模型名稱和日期，全部都出現(xiàn)在了紀念幣上。
模型之所以精準完成這樣復雜的要求，是因為它是用非自回歸的方式訓練的，因此它能夠理解上下文中的文本和多張圖片，以非常和諧的方式在紀念幣上呈現(xiàn)出來。
和 GPT-4o 聊天，定制各種圖像
總之，現(xiàn)在使用這個功能，我們可以創(chuàng)建各種圖像，或將其轉換為各種風格。
|
|
從此，用 GPT-4o 創(chuàng)建和定制圖像，就像聊天一樣簡單。
只需描述所需，就能得到想要的任何細節(jié)，比如縱橫比、使用十六進制代碼的精確顏色或透明背景。
|
|
我們可以讓它設計一個信息圖，解釋牛頓的棱鏡寬高比，背景為深藍色。
一張畫質高級的教學級圖片，立馬生成。
這個圖像生成功能的特點就是，能遵循非常復雜的提示，極其注重細節(jié)。
15 個非常細化的要求，它都在一張圖里完美實現(xiàn)了。
要知道，大多數(shù)生圖模型被要求渲染多個項目時，往往就會混淆顏色和形狀，但新模型卻能正確綁定 15 到 20 個對象的屬性，還能成功理解各自的復雜需求。
|
|
在你和它的聊天上下文中，GPT-4o 就能為你構建圖像和文本，還能確保一致性。
|
|
主打一個實用
從最早的洞穴壁畫到現(xiàn)代信息圖表，人類一直使用視覺圖像來交流、說服和分析。
如今的生成式 AI 模型可以創(chuàng)造出超現(xiàn)實的場景，但在處理人們用于分享和創(chuàng)建信息的實用圖像方面仍然存在困難。
GPT?4o 的圖像生成功能擅長準確渲染文本，精確遵循提示詞，并利用 GPT-4o 固有的知識庫和聊天上下文 —— 包括轉換上傳的圖像或將其用作視覺靈感。
這些能力讓用戶可以更加容易地創(chuàng)建想象中的畫面，幫助通過視覺更有效地溝通，并將圖像生成發(fā)展成為一種具有精確性和強大功能的實用工具。
畢竟，只有當圖像配上指代共享語言和經(jīng)驗的符號時，才能傳達精確的含義。
能力大幅增強
通過線上圖像和文本的聯(lián)合分布訓練，模型不僅能學會圖像如何與語言相關聯(lián)，還能知道它們之間的相互關系。
結合積極的后訓練優(yōu)化，最終的模型展現(xiàn)出驚人的視覺表現(xiàn)力，能夠生成實用、一致且具有上下文感知能力的圖像。
文本渲染
一張圖片勝過千言萬語，但有時在正確的位置添加幾個詞能夠大大提升圖像的含義。
GPT-4o 將精確的符號與圖像融合的能力使圖像生成成為視覺交流的有力工具。
多輪交互生成
由于圖像生成現(xiàn)在是 GPT?4o 的原生功能，用戶可以通過自然對話來完善圖像。
GPT?4o 能夠基于聊天上下文中的圖像和文本進行構建，確保始終保持一致性。
比如，一個正在設計中的游戲角色，它的外觀就能在多次迭代和調整中保持連貫一致。
指令遵循
GPT?4o 的圖像生成功能不僅可以遵循詳細的提示詞，而且還十分注重細節(jié)。
相比起其他只能處理 5-8 個物體的模型，GPT?4o 可以輕松搞定多達 10-20 個不同的物體。
并且，物體與其特征和關系的更緊密綁定使得控制更加精準。
上下文內學習
GPT?4o 能夠分析并學習用戶上傳的圖像，將圖像細節(jié)無縫整合到上下文中，用于輔助圖像生成。
世界知識
內置的圖像生成功能使 GPT?4o 能夠連接文本和圖像之間的知識，使模型表現(xiàn)得更智能、更高效。
真實照片風格
通過對反映多種多樣圖像風格的圖像進行訓練，模型能夠以令人信服的方式創(chuàng)建或轉換圖像。
參考資料：
https://openai.com/index/introducing-4o-image-generation/
廣告聲明：文內含有的對外跳轉鏈接（包括不限于超鏈接、二維碼、口令等形式），用于傳遞更多信息，節(jié)省甄選時間，結果僅供參考，IT之家所有文章均包含本聲明。