【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品

看過了 AI 在遊戲應用的部分,接著來看目前生成式 AI 目前在個人應用的另一項主軸:內容創作部分,NVIDIA 這次在 CES 展中推出了包括與 Getty Images 所推出的生成式AI by iStock 影像生成服務、RTX Video HDR 功能、與 Twitch/OBS 合作的 Twitch 強化實況 版本,搭配原本就對生成式 AI 支援相當充足的 Tensor RT 加速,讓 NVIDIA RTX 平台在目前內容創作領域的生成式 AI 繼續保持領先局面。

TensorRT Stable Diffusion XL(SDXL)Turbo 和 Latent consistency 模型加速支援



首先來看針對既有的生成式 AI 模型的效能提升部分,NVIDIA 這次在現場展示了最新公布的 TensorRT 加速方法,針對 Stable Diffusion 裡 Stable Diffusion XL(SDXL)Turbo 和 Latent consistency 這兩個模型,利用 TensorRT 加速可提高 60% 的執行效能。而針對一一般使用者,也推出了內含 TensorRT 擴充項目的 Stable Diffusion WebUI 的更新版本,支援包括 SDXL、SDXL Turbo、LCM - Low-Rank Adaptation(LoRA)等模型,以及可使用改進後的 LoRA 支援功能。現場也展示了在 Stable Diffusion WebUI 生成圖像的效能,在具備 RTX 顯示卡的筆記型電腦上,可以獲得在非 RTX 顯示卡筆電上高 4 倍的算圖效能。

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
現場以搭載 M3 Pro 處理器的 MacBook Pro 筆電(左)與搭載 RTX 顯示卡的筆電進行比較,在同樣的 Stable Diffusion WebUI 版本,同樣的設定下,兩者的圖片生成時間有相當大的差異,RTX 筆電需時 12 秒鐘左右,而 MacBook Pro 則是需要 1 分 14.4 秒左右。

MacBook Pro 筆電
【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
RTX 筆電
【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品


與 Getty Image 合作推出 iStock 影像生成服務

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品

若是對於 Stable Diffusion WebUI 操作苦手,以及要用在商業領域,但是又對 Stable Diffusion 訓練模型素材授權有所疑慮的使用者,NVIDIA 這次也跟 Getty Images 合作,以 NVIDIA Picasso 為基礎推出了 iStock 影像生成工具,模型訓練的素材來源來自 Getty Images 龐大的內容創意資料庫,包括數百萬張獨家照片、插圖和影片,生成的影像可提供商業授權使用,對於專業用戶來說可以減少素材授權上的風險。

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
iStock AI 圖像生成服務的網頁,採用更簡單的 UI 設計,讓使用者更容易上手。

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
當然要下咒語(Prompt)是免不了的。

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
下完咒語後所生成的畫面。

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
但是 iStock 還提供比較簡單的操作介面,讓使用者可以針對內容風格、圖片比例或是色調進行快速設定。

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
最高可以生成 4K x 4K 尺寸的圖片,對於商業應用來說比較足夠。

另外透過 iStock 還以可生成具備分割圖層的影像,讓創作者具備更彈性的應用,透過應用程式介面提供進階的修復(inpainting)與擴展(outpainting)功能。開發者可以將新的 API 與創意應用程式整合,在圖片裡加入人物和物體、替換特定元素,以及用多種長寬比來調整圖片尺寸。現場則是展示了導入到 Davinci Resolve 中進行調光或是特效處理的介面,使用者也可直接在介面中進行摳圖或是更換服裝、人物等元素。

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
可直接生成具備圖層分割的影像。

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
導入到類似 Davinci Resolve 等影像編輯軟體中進行更精細的編輯。

RTX Video HDR 影片強化功能

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品

至於在針對一開始 AI 主打的畫質強化功能,NVIDIA 這次則是宣布將在 1 月 24 日推出 RTX Video HDR 功能,可將網路瀏覽器中播放的標準動態範圍影片內容,升級成高動態範圍(HDR)影片。只要 NVIDIA RTX 或是 GeForce RTX 顯示卡的使用者,在支援 HDR 10 的顯示器或是電視上,搭配 Google Chrome 或 Microsoft Edge 這一類 Chromium 架構瀏覽器,就可以將 SDR 的串流影片以 HDR 的效果呈現,像是串流影片或是直播,都能以更好的畫面呈現。

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
發表會現場也以 Youtube 線上串流影片展示了 RTX Video HDR 開啟前後的差異,在上方雲彩部分的細節會有很大的不同:

開啟前
【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
開啟後
【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品


RTX Video HDR 將會隨著本月即將推出的驅動程式更新項目,提供給所有 NVIDIA RTX 及 GeForce RTX GPU 使用。使用者完成更新後,需至 NVIDIA 控制面板開啟 RTX Video HDR 功能即可使用。

Twitch 推出強化實況 Beta 版提升畫質並支援更多不同解析度裝置

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品

至於在遊戲直播的畫質提升部分,除了過往持續強調透過 AV1 編碼技術外,這次 NVIDIA 還跟 Twitch 平台/OSB 直播軟體合作,推出強化實況 Beta 版本,主要解決了 Twitch 平台過去在直播時畫質偏低的問題。GeForce RTX GPU 使用者在取得 Twitch 強化實況 Beta版後,將能夠以最高 1080p 的解析度同時直播多達三種解析度的影片內容。而 Twitch 未來也計畫推出支援同時直播最多五種編碼器的配置,為觀眾們帶來更順暢的觀看體驗。

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
可在一次支援不同解析的裝置同時進行串流直播。

【CES2024】NVIDIA 與 Getty image 合作在 iStock 上推出 AI 圖像生成服務 以真實素材授權打造更擬真作品
現場也直接進行 Demo 示範。
陳拔的粉絲團:https://www.facebook.com/ChenPaGadget
以前是真的假不了,假的也真不了
現在真假越來越難辨識
太強大了
很厲害的高科技 嘆為觀止
有在玩Stable Diffusion的朋友應該都深有所感

TensorRT Stable Diffusion 模型加速支援有~~ 但不方便使用!!

必須將所使用的大模型與Lora個別獨立轉換為支持TensorRT 格式才能使用加速功能

期待後續能加強不同模型間切換不必轉換的支援度
人間五十年、化天の內を比ぶれば、夢幻のごとくなり。 一度生を受け、滅せぬ物のあるべきか。
AI真的太恐怖了~
陳拔 wrote:
看過了 AI 在遊戲...(恕刪)


很期待AI在未來遊戲上的應用
陳拔 wrote:
看過了 AI 在遊戲...(恕刪)

AI繪圖功能很好
NVIDIA真的贏麻了
短時間就是一家獨大了
AI真心覺得強大
功能很讚!
關閉廣告
文章分享
評分
評分
複製連結

今日熱門文章 網友點擊推薦!