Adobe Firefly 是什麼?
Adobe Firefly 是由 Adobe 所推出的 基於生成式AI創新應用工具,展示能夠依據文字描述(Prompt)用不同形式生成創新內容的功能。
這個應用工具預告了,許多未來可能會出現的新應用,在前期會著重於影像生成修復和文字效果的AI功能,後期則會有其他類型的功能。
各功能時機成熟後會整合到自家各大產品裡面,像是Photoshop、illustrator成為新應用,Adobe Firefly 可以說是現在進行式也是未來式的產品。
Adobe Firefly 的學習來源?
Adobe 官方宣稱,Firefly 是利用自家圖庫 Adobe Stock 的開放授權內容以及版權已失效的內容來進行學習訓練的,這樣的方式也意味著使用者可以更安全地使用,雖然風格上不會有midjourney來的多元,但相對來說更不需要擔心版權上的問題。

Adobe Firefly 已開放的功能有哪些?
1. Text to image 文字轉圖片
這功能原理就跟現在各大AI軟圖軟體一樣,輸入文字提示(Prompt)來生成圖片。
進入後可以看到很多範例圖片及參考的文字提示(Prompt)。

生成圖片後,右側會有一些設定選項。像是:圖片比例、類型、風格、色調、光線、鏡頭視角。

2. Generative fill 生成式填充
這功能能夠對圖片進行 新增內容、替換及刪除部分內容。
對被塗抹的地方輸入提示詞,就會替換成與提示詞有關的內容,並且有4張圖可以參考。


3. Text effects 文字特效
這功能能夠對文字進行質感的轉換。
進入後可以看到許多範例效果的圖片及使用的文字描述(Prompt)。
下方,左側輸入文字內容,右側輸入想要的效果文字描述(Prompt)

產生的文字效果圖,下方有4個選擇,右側有一些設定選項可以調整,像是:寬度,效果擴散程度,字型,顏色及背景顏色。

4. Generative recolor 生成式重新上色
這功能會根據輸入的文字描述,將SVG圖片檔轉換成想對應調性的配色。
這邊你可以上傳你的SVG圖片,下面有一些範例圖及配色描述。

例如輸入: spring sakura
整張圖就會配成春天櫻花的暖色調性。

Adobe Firefly 預告未來的功能有哪些?
- 3D to Image
能夠用3D模型再搭配文字prompt去生成圖片
- Extend Image
能夠一鍵延伸圖片畫面內容
- Text to Vector
能夠用文字prompt去生成向量圖檔,這功能不可或缺,畢竟向量圖是Adobe的強項。
- Text to Pattern
能夠用文字prompt去生成四方連續的圖案。
- Text to Brush
能夠用文字prompt去生成圖案筆刷。
- Sketch to Image
能夠將線稿圖轉換成上色的圖片。
- Text to Template
有點類似Microsoft Designer,能夠用文字prompt去生成平面視覺設計模板。
- Combine Photos
上傳結合多張圖片生成出新內容的圖片
- Upscaling
能將解析度不夠的圖片讓AI來還原解析度
Adobe Firefly for Video
除了對於平面影像的應用之外,Adobe又進一步發表了生成式AI為影音剪輯的新概念。
像是:
透過文字prompt改變影片的色調。
透過文字prompt,來生成無版權稅的音樂和音效來與你的影片內容作搭配。
透過文字prompt 就能生成字幕 標題 LOGO,甚至還能加入動畫效果。
分析你的文字劇本內容來生成預覽的分鏡腳本。
為你的影片剪輯內容推薦適合B-Roll過場片段。