發佈日期: 作者:

ADetailer: 自動人臉檢測和高品質修復

在AI繪圖領域中，Stable Diffusion已成為一個強大的工具，但它在生成人臉和手部細節時常常會出現畸形問題。為了解決這個困擾，ADetailer這個Stable Diffusion插件應運而生，它專門針對AI圖像修復，特別是在人臉優化和手部修正方面表現出色。

ADetailer的核心功能

ADetailer是一款功能強大的AI圖像修復工具，它的主要特點包括：

  1. 自動人臉檢測：利用先進的YOLO模型，ADetailer能夠精確定位圖像中的人臉。
  2. 局部重繪：通過生成精確的遮罩，ADetailer可以只對需要修復的區域進行重繪，保留原圖其他部分的完整性。
  3. 高解析度修復：對於低解析度圖像，ADetailer能夠進行優化，提升圖像質量。
  4. 多模型支援：除了YOLO模型，ADetailer還支援MediaPipe模型，為用戶提供更多選擇。
  5. 一鍵修復：簡化了複雜的修復流程，使用者只需點擊幾下就能完成高質量的圖像修復。

使用ADetailer的優勢

相比手動修復，ADetailer在效率和效果上都有顯著優勢。它不僅能夠快速處理全身圖像生成中的細節問題，還可以輕鬆實現表情調整和年齡變化等高級效果。

ADetailer的功能

  • 使用檢測模型自動識別人臉和手部。
  • 面部和手部的識別部分使用穩定擴散進行裁剪和校正。
  • 將校正後的面部和手部圖像小心地重新置放到其原始位置。

Adetailer 不僅可以用於修復扭曲的臉部。以下是一些其他用途：

  • 改變面部表情
  • 更改一個人的年齡
  • 改變外觀以類似於不同的種族或氛圍
  • 僅將LoRA增強功能應用於面部

Stable Diffusion 專注於面部和手部的再生，從而改善了結果。在再生過程中，裁剪區域具有更高的解析度，可以詳細呈現眼睛和鼻子等各個特徵，最終產生精美的面部描繪。

ADetailer 在三個關鍵方面超越了其他技術，使其成為面部矯正的首選：

  • 便利性：啟動「啟用 ADetailer」選項可啟動自動面部矯正，確保使用者友好且無憂的體驗。
  • 記憶體消耗和生成時間優化：與涉及放大原始圖像的許多其他方法不同，這些方法會導致更大的檔大小和更長的處理時間，ADetailer 只關注面部圖像。這種方法可以在不影響圖像解析度的情況下進行有效的校正。
  • 將 LoRA 應用於面部的靈活性： ADetailer 允許在矯正過程中進行微小調整， 為使用者提供更大的靈活性和便利性

安裝 ADetailer

以下為GitHib的位置: https://github.com/Bing-su/adetailer

這邊是使用Stable Diffusion Web-ui的ADetailer安裝教學：

  • 按下Apply and restart UI按鈕

此時我們進入擴展插件>已安裝，應該要可以看到adetailer

接著確認是否在首頁有出現adetailer的設定欄位

ADetailer 的模型列表

ADetailer 提供用於檢測人臉、手和身體的模型。可根據想要生成的圖像或您想要校正的特定部分（例如，面部、手部、身體）選擇適當的模型。

ModelTarget 目標
face_yolov8n.pt臉部（插圖/真實）
face_yolov8s.pt臉部（插圖/真實）
hand_yolov8n.pt手（插圖/真實）
person_yolov8n-seg.pt人物（插圖/真實）
person_yolov8n-seg.pt全身（插圖/真實）
person_yolov8s-seg.pt全身（插圖/真實）
person_yolov8s-seg.pt全身（插圖/真實）
mediapipe_face_full人臉（真實）
mediapipe_face_short 人臉（真實）
mediapipe_face_mesh人臉（真實）

在 ADetailer 選單中輸入提示

以下為一個範例

Prompt: (8k, RAW photo, best quality, masterpiece:1.2), (realistic, photo-realistic:1.4), (extremely detailed 8k wallpaper), cheerleader outfit, 20-year-old woman, detailed face

Negative Prompt: EasyNegative, deformed face, ugly, bad face, deformed eyes

左邊的圖片沒有使用 ADetailer，右邊的圖片應用了 ADetailer。可以觀察到 ADetailer 可以糾正面部的任何扭曲。

用ADetailer改變表情

  1. 切換到「圖像信息(PNG Info)」選項
  2. 選擇要修改的圖片
  3. 輸入提示詞

若想檢查是否為五根手指，則可使用以下設定

提示的關鍵字：

  • five fingers

否定提示的關鍵詞：

  • deformed hand
  • extra_fingers
  • bad fingers
  • missing fingers
  • fewer digits, extra digit
  • liquid fingers
發佈日期: 作者:

Stable Diffusion主要功能和應用

官方網站

https://stability.ai

可看見現在這個平台所提供的相關工具包括: 圖像生成、影像生成、音樂生成、3D模型生成、文字生成

開源社群

https://civitai.com

可下載許多人自己生成的模型和相關微調模型，還有許多澀澀的(?)圖片

主要功能 – 圖像生成

根據文本生成圖像

  • 描述生成：用戶可以輸入一段文字描述，Stable Diffusion 模型會根據這段描述生成對應的圖像。例如，輸入“日落下的山脈”，模型會生成一幅描繪日落下山脈的圖像。

創意生成

  • 藝術創作：藝術家可以使用 Stable Diffusion 生成具有特定風格或主題的圖像，從而激發創意和靈感。
  • 概念設計：設計師可以快速生成概念草圖，用於產品設計或廣告創意。

圖像生成使用模型為: SD1.x, SD2.x, SDXL

SDXL 是目前 Stable Diffusion 系列中最新的模型之一。它在 SD2.x 的基礎上進一步提升了圖像的品質和細節，尤其是在處理複雜的場景和人物時表現更加出色。SDXL 還能夠生成更加多樣化的圖像風格，為用戶提供了更多的創作可能性。

更多資訊: https://chrislee0728.medium.com/stable-diffusion-xl-%E8%AA%AA%E6%98%8E%E5%8F%8A-sdxl1-0-%E5%AE%89%E8%A3%9D%E6%95%99%E5%AD%B8-b2f7648d49ff

主要功能 – 圖像修改和增強

圖像修復

  • 缺損修復：模型可以自動填補和修復圖像中缺失或損壞的部分，恢復圖像的完整性。
  • 品質增強：提高低解析度圖像的質量，使其更加清晰和細緻。

圖像編輯

  • 局部修改：用戶可以指定圖像的某個區域進行修改，例如改變圖像中的顏色、形狀或添加新的元素。
  • 風格轉換：將圖像轉換為不同的藝術風格，如將照片變為素描或油畫效果。

技術介紹

要使用Stable Diffusion來做到圖像修復或者是圖像編輯，需要安裝相關ADetailer的外掛，以下為一個範例

https://blog.csdn.net/2401_84250575/article/details/138863838

以Web ui為例，可以安裝ADetailer的擴展套件，就可以讀取相關的模型來修復圖片

主要功能 – 多模態應用

圖像-文本匹配

  • 圖像標註：根據圖像生成相應的文本描述，適用於自動標註和圖像檢索。
  • 文本生成圖像：根據文本描述生成圖像，用於多模態數據集的構建和應用。

文本-圖像交互

  • 文本驅動的圖像編輯：用戶可以通過文本指令對圖像進行特定修改，例如“將天空變成藍色”或“在圖像中添加一棵樹”。

主要功能 – 創意應用

動畫生成

遊戲開發

主要功能 – 科學研究

醫學圖像分析

  • 醫學影像生成：根據描述生成醫學影像，輔助醫學研究和診斷。
  • 圖像合成：生成合成的醫學圖像，用於訓練和測試醫學影像分析模型。

自然科學模擬

  • 氣象模擬：生成氣象圖像，用於天氣預測和氣候研究。
  • 地理模擬：根據描述生成地理景觀圖像，幫助地理研究和模擬。
發佈日期: 作者:

Kling – 文生影片大模型

Kling簡介

Kling是由快手大模型團隊自主研發的視頻生成大模型，擁有強大的視頻生成能力，能輕鬆高效地完成藝術視頻創作。

官方網站: https://klingai.com/

現在有【文生圖片】、【文生影片】兩種服務，未來還會再推出影片編輯的服務

使用範例

原圖如下

提示詞:

The character turns his face toward the viewer and stares point-blank. birds fly toward the viewer.

成果

核心特點

  • 大幅度的合理運動： 採用 3D 時空聯合注意力機制，能夠生成大幅度運動的視頻內容，同時符合運動規律。
  • 長時長高幀率視頻生成： 能夠生成長達 2 分鐘、幀率達 30fps 的高品質視頻。
  • 模擬真實物理特性： 基於自研模型架構，能夠生成符合物理規律的視頻。
  • 強大的概念組合能力： 能夠將用戶豐富的想像力轉化為具體畫面，虛構真實世界中不會出現的場景。
  • 電影級畫質： 能夠生成 1080p 分辨率的電影級視頻。
  • 支持多種寬高比： 能夠根據需求輸出多種多樣的視頻寬高比。

應用場景

可靈大模型的應用場景非常廣泛，包括但不限於：

  • 視頻內容創作： 廣告、電影、動畫、遊戲等視頻內容的生成。
  • 虛擬現實/增強現實： 虛擬世界的場景生成。
  • 教育培訓： 互動式教學內容的生成。
  • 藝術設計： 概念設計、視覺效果圖等。
發佈日期: 作者:

Animate Anyone: 圖片+骨架動畫產生動態影片

模型介紹頁面

https://humanaigc.github.io/animate-anyone

Animate Anyone 是一個工具，可以將靜態圖片和骨架動畫結合起來，生成動態影片。它使用先進的 AI 技術，保留圖片細節並保持動畫的連貫性。這個工具適合用於人類角色、動漫和時尚視頻等的動畫製作。

模型概念

  1. 使用 Pose Guider 編碼姿勢序列並融合多幀噪音。
  2. 使用 Denoising UNet 去噪並生成視頻。
  3. Denoising UNet 包含空間、交叉和時間注意力模塊。
  4. 參考圖像的詳細特徵通過 ReferenceNet 提取，語義特徵通過 CLIP 圖像編碼器提取。
  5. 最後，VAE 解碼器將結果解碼為視頻片段。

GitHub位置

https://github.com/HumanAIGC/AnimateAnyone

不過我們可以看到現在這個Github上只有介紹而已，但是他們說因為他們正在把原始碼改得更易讀，所以仍需一些時間才能夠把開源代碼上傳上來，就讓我們持續等待吧~

發佈日期: 作者:

Mixamo：你的3D角色動畫工廠

3D 角色動畫服務的線上平台

可以在此試用你的3D模型mixamo: https://www.mixamo.com/

Mixamo 是一個提供自動 3D 角色動畫服務的線上平台。它讓使用者能夠選擇並自定義 3D 角色，並應用各種預設的動畫。該平台支持從現有的 3D 模型中生成動畫，並提供動畫調整功能，以滿足不同的需求。Mixamo 對於遊戲開發者、動畫製作人和其他 3D 創作者非常實用，能夠顯著加快製作流程。

可以上傳自己的fbx模型檔案套用線上多樣的動作
也可以直接拿線上提供的腳色，套入Animation裡面的腳色動作

Mixamo 的主要功能

  • 龐大的動作資料庫： Mixamo 提供了數千種預製的動畫，涵蓋了各種角色、動作和風格。
  • 自動套用： 你只需上傳你的3D模型，選擇想要的動畫，Mixamo就會自動將動畫套用到你的模型上，並進行調整，使其符合模型的比例和骨架結構。
  • 客製化： 你可以對動畫進行調整，例如改變動畫的速度、調整角色的姿勢等，以達到你想要的效果。
  • 匯出多種格式： Mixamo 支援多種3D軟體常用的檔案格式，方便你將動畫匯出到你的專案中。
  • 社群功能： Mixamo 有一个活躍的社群，你可以分享你的作品、與其他使用者交流，並獲得啟發。

Mixamo 的優勢

  • 節省時間： 相較於傳統的動畫製作方式，Mixamo 可以大幅縮短動畫製作的時間。
  • 降低成本： 你不需要雇用專業的動畫師，就能製作出高品質的動畫。
  • 易於使用： 即使你不是動畫專業人士，也能輕鬆上手。
  • 靈活性： Mixamo 提供了高度的客製化功能，讓你能夠創造出獨特的動畫。

Mixamo 的應用場景

  • 遊戲開發： 為遊戲角色製作各種動作，如走路、跑步、跳躍、戰鬥等。
  • 虛擬實境/增強現實： 為虛擬角色製作動畫，使其更生動。
  • 動畫製作： 快速製作短片、動畫廣告等。
  • 電影特效： 為電影中的角色製作動作捕捉動畫。
發佈日期: 作者:

SF3D: Stable Fast 3D Mesh 生成工具

SF3D: https://stable-fast-3d.github.io

SF3D 是一個快速生成3D網格模型的模型，它可以在不到一秒鐘的時間內從單一圖片輸出一個帶有UV展開和材質的3D模型。這個模型基於大型重建模型（LRM），專門針對網格生成進行訓練，並且包含快速UV展開技術和去光照步驟，從而提升重建模型的視覺質量，使其在新的光照條件下也能使用。

Github網站

詳情請參閱：GitHub – Stability-AI/stable-fast-3d

Stable Fast 3D模型基於 TripoSR，但進行了改進，專注於生成無瑕疵的網格和帶有UV展開的紋理。SF3D 可以快速進行推理，並且生成的3D模型可以輕鬆整合到遊戲中。安裝環境需要 Python >= 3.8 和 CUDA，並且需要安裝 PyTorch。支持手動推理和本地 Gradio 應用的運行。

要安裝 SF3D，請按照以下步驟操作：

  1. 確保環境：
    • Python 版本 >= 3.8
    • 有 CUDA
    • 安裝 PyTorch，確保 CUDA 版本匹配 PyTorch 安裝指南
    • 更新 setuptools：pip install -U setuptools==69.5.1
  2. 安裝需求：
    • 執行：pip install -r requirements.txt
    • 若要使用 Gradio demo，則執行：pip install -r requirements-demo.txt
  3. 手動推論：
    • 執行：python run.py demo_files/examples/chair1.png --output-dir output/
  4. 本地 Gradio App：
    • 執行：python gradio_app.py

線上demo

https://huggingface.co/spaces/stabilityai/stable-fast-3d

我拿這張圖做為輸入，可以很不錯的生成3D模型

發佈日期: 作者:

AI技術於3D模型領域的應用

Meshy – 線上圖片轉3D模型fbx檔案

網站: https://www.meshy.ai/

Meshy 是您的 3D 生成式 AI 工具箱，用於輕鬆從文本或圖像創建 3D 資產，從而加速您的 3D 工作流程。使用 Meshy，您可以在幾分鐘內創建高品質的紋理和 3D 模型。

Meshy的功能

Meshy是一個創新的 3D 模型生成平台，提供以下強大的功能

文字轉紋理 (Text-to-Texture)：

  • 透過簡單的文字描述，快速生成符合要求的紋理。
  • 例如：輸入「磨損的木頭紋理」，Meshy 能夠在短時間內生成逼真的木頭紋理。

圖片轉紋理 (Image-to-Texture)：

  • 將概念圖或參考圖片轉換成可套用的 3D 模型紋理。
  • 這對於藝術家和設計師來說，能大幅提升工作效率。

文字轉 3D 模型 (Text-to-3D)：

  • 僅需一段文字描述，就能生成完整的 3D 模型。
  • 即使沒有 3D 建模經驗，也能輕鬆創造出想要的模型。

圖片轉 3D 模型 (Image-to-3D)：

  • 這對於將 2D 概念快速轉換成 3D 模型非常有用。
  • 從單張圖片中提取 3D 資訊，生成具體的 3D 模型。

探索社區資源

社區資源: https://docs.meshy.ai/web-app-interface#explore-community-resources

嘗試使用圖片產生3D模型

操作網址: https://www.meshy.ai/workspace/image-to-3d

操作非常的簡單，可直接按最右邊的下載來下載fbx檔案

發佈日期: 作者:

Stable Diffusion常用操作介面

Easy Diffusion

下載位置: https://easydiffusion.github.io/

特色：

  • 簡易操作： 介面直觀，即使是新手也能快速上手。
  • 模型豐富： 支援多種模型，可根據需求選擇。
  • 擴充性強： 可透過外掛擴展功能。

優點：

  • 學習曲線平緩，適合初學者。
  • 功能齊全，能滿足大部分的繪圖需求。

缺點：

相較於其他工具，客製化選項可能較少。

ComfyUI

下載位置: https://github.com/comfyanonymous/ComfyUI

特色：

  • 高度客製化： 提供極高的自由度，可打造專屬的工作流程。
  • 功能強大： 除了繪圖，還能進行影像處理、動畫製作等。
  • 社群活躍： 有龐大的社群提供支援和資源。

優點：

  • 適合有經驗的使用者，可實現複雜的創作。
  • 功能多樣，能滿足專業人士的需求。

缺點：

  • 配置較為複雜。
  • 學習曲線較陡峭，需要花時間熟悉。

Stable Diffusion web UI

下載位置: https://github.com/AUTOMATIC1111/stable-diffusion-webui

特色：

  • 基於瀏覽器： 不需安裝軟體，直接在瀏覽器中使用。
  • 社群豐富： 有大量的模型和腳本可供選擇。
  • 擴充性強： 可透過擴充套件增加功能。

優點：

  • 使用門檻低，適合初學者。
  • 功能豐富，能滿足多種需求。

缺點：

相較於本地端軟體，速度可能較慢。

安裝指南

最終我選擇Stable Diffusion web UI，因為教學文章最多

發佈日期: 作者:

Jōtai 介紹

什麼是 Jōtai？

Jōtai 是一個輕量級、易於使用的 JavaScript 狀態管理庫，特別設計來與 React 無縫整合。它提供了一種簡單而直觀的方式來管理應用程式中的狀態，並讓這些狀態在不同的組件之間共享。

Jōtai 的核心概念

  • Atom: Jōtai 中最基本的單位，用來儲存一個單一的狀態值。你可以將 Atom 視為一個可變的變數，但它具有反應式特性，當 Atom 的值改變時，所有訂閱它的組件都會自動更新。
  • 用於訂閱的 Hook: useAtom 是一個 React Hook，用來訂閱一個 Atom。當你使用 useAtom 時，你會得到兩個值：當前的 Atom 值和一個用於更新 Atom 值的函數。

Jōtai 的優勢

  • 狀態共享: Jōtai 可以輕鬆地將狀態共享給應用程式中的任何組件。
  • 反應式更新: 當 Atom 的值改變時，訂閱它的組件會自動更新。
  • 避免 prop drilling: 你不再需要通過層層嵌套的組件來傳遞 props。
  • 可測試性: Jōtai 的狀態是可測試的，這有助於你寫出更可靠的應用程式。

安裝Jōtai 

# npm
npm i jotai

# yarn
yarn add jotai

# pnpm
pnpm add jotai

基本用法

import { atom } from 'jotai'

const countAtom = atom(0)

const countryAtom = atom('Japan')

const citiesAtom = atom(['Tokyo', 'Kyoto', 'Osaka'])

const animeAtom = atom([
  {
    title: 'Ghost in the Shell',
    year: 1995,
    watched: true
  },
  {
    title: 'Serial Experiments Lain',
    year: 1998,
    watched: false
  }
])

從同一元件讀取和寫入

當原子在同一元件中同時讀取和寫入時，為簡單起見，請使用組合 useAtom 鉤子。

import { useAtom } from 'jotai'

const AnimeApp = () => {
  const [anime, setAnime] = useAtom(animeAtom)

  return (
    <>
      <ul>
        {anime.map((item) => (
          <li key={item.title}>{item.title}</li>
        ))}
      </ul>
      <button onClick={() => {
        setAnime((anime) => [
          ...anime,
          {
            title: 'Cowboy Bebop',
            year: 1998,
            watched: false
          }
        ])
      }}>
        Add Cowboy Bebop
      </button>
    <>
  )
}

從單獨的元件讀取和寫入

當僅讀取或寫入原子值時，可使用 useAtomValue 和 useSetAtom hooks 。

import { useAtomValue, useSetAtom } from 'jotai'

const AnimeList = () => {
  const anime = useAtomValue(animeAtom)

  return (
    <ul>
      {anime.map((item) => (
        <li key={item.title}>{item.title}</li>
      ))}
    </ul>
  )
}

const AddAnime = () => {
  const setAnime = useSetAtom(animeAtom)

  return (
    <button onClick={() => {
      setAnime((anime) => [
        ...anime,
        {
          title: 'Cowboy Bebop',
          year: 1998,
          watched: false
        }
      ])
    }}>
      Add Cowboy Bebop
    </button>
  )
}

const ProgressTracker = () => {
  const progress = useAtomValue(progressAtom)

  return (
    <div>{Math.trunc(progress * 100)}% watched</div>
  )
}

const AnimeApp = () => {
  return (
    <>
      <AnimeList />
      <AddAnime />
      <ProgressTracker />
    </>
  )
}
發佈日期: 作者:

Dify：開源大語言模型應用開發平台

在人工智能快速發展的今天，大語言模型（LLM）已成為推動創新的核心力量。然而，如何有效地將這些強大的模型轉化為實用的AI應用，仍然是許多開發者和企業面臨的挑戰。這就是Dify發揮作用的地方，它作為一個開源的LLM應用開發平台，為我們提供了一個便捷的解決方案。

Dify：打造AI應用的全能工具箱

Dify不僅僅是一個開發平台，它更像是一個為LLM應用量身打造的全能工具箱。通過Dify，開發者可以輕鬆設計對話式AI、優化提示詞工程、管理知識庫，並實現無縫的API集成。這些功能的組合使得從概念到部署的整個AI應用開發過程變得更加流暢和高效。

對話式AI設計：打造個性化交互體驗

Dify的核心優勢之一是其強大的對話式AI設計功能。通過直觀的界面，開發者可以輕鬆定制AI助手的個性、知識範圍和回應方式。這使得創建符合特定需求的AI應用變得前所未有的簡單，無論是客戶服務機器人還是專業領域的智能顧問。

提示詞工程：釋放LLM的潛力

在LLM應用開發中，提示詞工程扮演著關鍵角色。Dify提供了先進的提示詞管理和優化工具，幫助開發者精確控制AI的輸出。通過細緻調整提示詞，我們可以顯著提升AI應用的性能和準確性，確保它能夠準確理解用戶意圖並提供恰當的回應。

知識庫管理：為AI注入專業知識

Dify的知識庫管理功能允許開發者輕鬆導入和組織大量專業資料。這意味著我們可以為AI應用注入特定領域的知識，使其能夠處理更複雜、更專業的查詢。無論是法律諮詢、醫療診斷還是技術支持，Dify都能幫助我們構建具有深度專業知識的AI系統。

API集成：無縫連接各種服務

為了確保開發的AI應用能夠與現有系統和服務無縫協作，Dify提供了強大的API集成能力。這使得將AI功能嵌入到各種應用程序和平台中變得異常簡單，大大擴展了LLM應用的可能性和實用性。

Dify介面介紹

Dify 的關鍵特性

Dify 內建了建立 LLM 應用所需的關鍵技術棧，包括：

  • 支援數百個模型：提供多樣的模型選擇，滿足不同應用需求。
  • 直覺的 Prompt 編排介面：簡單易用，讓你輕鬆設計和調整提示語。
  • 高品質的 RAG 引擎：確保數據處理的準確性和效率。
  • 穩健的 Agent 框架：靈活配置和管理代理機器人。
  • 靈活的流程編排：支援複雜流程的設計和自動化。

這些特性使得開發者可以節省大量重複造輪子的時間，專注於創新和業務需求。

支持模型類型

在Dify 中，我們依照模型的使用情境將模型分為以下4 類：

  1. 系統推理模型。 在創建的應用中，用的是該類型的模型。智聊、對話名稱產生、下一步問題建議用的也是推理模型。已支援的系統推理模型供應商：OpenAI、Azure OpenAI Service、Anthropic、Hugging Face Hub、Replicate、Xinference、OpenLLM、訊飛星火、文心一言、通義千問、Minimax、ZHIPU(ChatGLM)
  2. Embedding 模型。在資料集中，將分段過的文件做Embedding 用的是該類型的模型。在使用了資料集的應用程式中，將使用者的提問做Embedding 處理也是用的該類型的模型。已支援的Embedding 模型供應商：OpenAI、ZHIPU(ChatGLM)、JinaAI
  3. Rerank 模型。 Rerank 模型用於增強檢索能力，改善LLM 的搜尋結果。已支援的Rerank 模型供應商：Cohere、JinaAI
  4. 語音轉文字模型。將對話型應用中，將語音轉文字用的是該類型的模型。已支援的語音轉文字模型供應商：OpenAI

為什麼選擇 Dify？

你可以將 Dify 與 LangChain 這類的開發庫做比較。LangChain 是一個提供鐵鎚和釘子的工具箱，而 Dify 則是一套經過精良工程設計和軟體測試的完整腳手架方案。

以下是選擇 Dify 的幾個主要理由：

  • 開源：由專業全職團隊和社群共同打造，提供靈活和安全的解決方案，同時保持對資料的完全控制。
  • 快速迭代：產品簡單、克制且迭代迅速，滿足用戶需求。
  • 生產級方案：提供接近生產需求的完整方案，節省開發時間和資源。

使用 Dify 的優勢

Dify 讓你基於任何模型自部署類似 Assistants API 和 GPTs 的能力，確保在靈活和安全的基礎上，對資料保持完全控制。這對於那些希望快速開發和部署生成式 AI 應用的團隊和個人來說，是一個理想選擇。

創業者的理想工具

Dify 可以幫助創業者快速將 AI 應用創意變成現實，無論是成功還是失敗，都需要加速推進。在真實世界中，已有數十個團隊透過 Dify 建立 MVP（最小可用產品）獲得投資，或透過 POC（概念驗證）贏得了客戶的訂單。

整合 LLM 至現有業務

Dify 使得將 LLM 增強現有應用變得簡單。透過 Dify 的 RESTful API，可以實現 Prompt 與業務程式碼的解耦。此外，Dify 的管理介面可以追蹤資料、成本和用量，持續改進應用效果，從而提升業務能力。

企業級 LLM 基礎設施

一些銀行和大型網路公司正在將 Dify 部署為企業內的 LLM 網關，加速 GenAI 技術在企業內的推廣，並實現中心化的監管。這使得 Dify 成為企業級應用的理想選擇，提供穩定、安全的 LLM 基礎設施。

探索 LLM 的能力邊界

即使你是技術愛好者，Dify 也能幫助你輕鬆實踐 Prompt 工程和 Agent 技術。在 GPTs 推出以前，已有超過 60,000 名開發者在 Dify 上創建了自己的第一個應用，展示了其在技術探索中的強大潛力。

Dify 開源許可證

Dify 專案在Apache License 2.0 授權下開源，同時包含以下附加條件：

Dify 允許被用於商業化，例如作為其他應用的「後端即服務」使用，或作為應用程式開發平台提供給企業。然而，當滿足以下條件時，必須聯繫生產者以獲得商業許可：

  • 多租戶SaaS 服務：除非獲得Dify 的明確書面授權，否則不得使用Dify.AI 的源碼來運作與Dify.AI 服務版類似的多租戶SaaS 服務。
  • LOGO 及版權資訊：在使用Dify 的過程中，不得移除或修改Dify 控制台內的LOGO 或版權資訊。

更多教學資源

官方的教學文件非常完整

https://docs.dify.ai/v/zh-hans/guides/model-configuration

對於擴充以及API支持非常的完整

https://docs.dify.ai/v/zh-hans/guides/application-publishing/developing-with-apis