Compare commits
| Author | SHA1 | Date | |
|---|---|---|---|
 ketle-manandClaude Opus 5.5
|
6016ac1fcf |
@@ -27,6 +27,11 @@
|
||||
|
||||
- 設定タブ（helpSettings26）と GenerateUI（helpGen33）にプロンプト翻訳を追加（en/ja/zh）。
|
||||
|
||||
### マニュアル v0.9.9版（ja/en）
|
||||
|
||||
- 新節 5-10「日本語のままプロンプトを書く（プロンプト翻訳）」（準備・モデルの大きさ・GPU/CPU常駐・🌐と原文・実行時の自動翻訳・Lab/Video Plan）。7-5・10-2 に PLaMo の注記、11-4 に Video Plan の🌐と v0.9.9 修正の注意、11-5 の表・12-3 のトラブル表・付録の用語集と参考リンクを追記。対象バージョンを v0.9.9 に更新し、全章MD・ZIPを `manual/rebuild_repo_edition.py` で再生成（v0.9.6版は削除）。
|
||||
- EPUB（画像付き、75枚＝新規3枚: 設定のプロンプト翻訳・生成UIで翻訳後・Labモーダル）を Google ドライブで公開。
|
||||
|
||||
## v0.9.8（2026-11-14）
|
||||
|
||||
### セキュリティ: クライアントから受け取るパスを解決前に検証
|
||||
|
||||
+4
-4
@@ -128,12 +128,12 @@ Samples for the Feeder tab: `ws_sdxl_image_feeder_i2i` / `ws_dwpose_image_feeder
|
||||
|
||||
## Manual
|
||||
|
||||
A beginner-oriented manual (covers v0.9.6, text-only edition without screenshots) is available in [`docs/manual/`](docs/manual/):
|
||||
A beginner-oriented manual (covers v0.9.9, text-only edition without screenshots) is available in [`docs/manual/`](docs/manual/):
|
||||
|
||||
- English: [`docs/manual/en/`](docs/manual/en/) — ZIP: `Workflow_Studio_Manual_v0.9.6_en.zip`
|
||||
- 日本語: [`docs/manual/`](docs/manual/) — ZIP: `Workflow_Studio_Manual_v0.9.6.zip`
|
||||
- English: [`docs/manual/en/`](docs/manual/en/) — ZIP: `Workflow_Studio_Manual_v0.9.9_en.zip`
|
||||
- 日本語: [`docs/manual/`](docs/manual/) — ZIP: `Workflow_Studio_Manual_v0.9.9.zip`
|
||||
|
||||
An EPUB edition with screenshots (Japanese and English, v0.9.6) is available on [Google Drive](https://drive.google.com/drive/folders/14mOHcnLYrFgNrOo6fy7ELyFjjWrAoU-_?usp=sharing).
|
||||
An EPUB edition with screenshots (Japanese and English, v0.9.9) is available on [Google Drive](https://drive.google.com/drive/folders/14mOHcnLYrFgNrOo6fy7ELyFjjWrAoU-_?usp=sharing).
|
||||
|
||||
---
|
||||
|
||||
|
||||
@@ -608,12 +608,12 @@ Samples for the Feeder tab: `ws_sdxl_image_feeder_i2i` / `ws_dwpose_image_feeder
|
||||
|
||||
## Manual
|
||||
|
||||
A beginner-oriented manual (covers v0.9.6, text-only edition without screenshots) is available in [`docs/manual/`](docs/manual/):
|
||||
A beginner-oriented manual (covers v0.9.9, text-only edition without screenshots) is available in [`docs/manual/`](docs/manual/):
|
||||
|
||||
- English: [`docs/manual/en/`](docs/manual/en/) — ZIP: `Workflow_Studio_Manual_v0.9.6_en.zip`
|
||||
- 日本語: [`docs/manual/`](docs/manual/) — ZIP: `Workflow_Studio_Manual_v0.9.6.zip`
|
||||
- English: [`docs/manual/en/`](docs/manual/en/) — ZIP: `Workflow_Studio_Manual_v0.9.9_en.zip`
|
||||
- 日本語: [`docs/manual/`](docs/manual/) — ZIP: `Workflow_Studio_Manual_v0.9.9.zip`
|
||||
|
||||
An EPUB edition with screenshots (Japanese and English, v0.9.6) is available on [Google Drive](https://drive.google.com/drive/folders/14mOHcnLYrFgNrOo6fy7ELyFjjWrAoU-_?usp=sharing).
|
||||
An EPUB edition with screenshots (Japanese and English, v0.9.9) is available on [Google Drive](https://drive.google.com/drive/folders/14mOHcnLYrFgNrOo6fy7ELyFjjWrAoU-_?usp=sharing).
|
||||
|
||||
---
|
||||
|
||||
|
||||
@@ -2,12 +2,12 @@
|
||||
|
||||
ノードが苦手でも大丈夫 ― 画像生成をもっと手軽に、もっと整理して
|
||||
|
||||
- 対象バージョン：Workflow Studio v0.9.6
|
||||
- 対象バージョン：Workflow Studio v0.9.9
|
||||
- 著者：ketle-man
|
||||
- © 2026 ketle-man
|
||||
|
||||
このマニュアルは、Kindle版をもとにした **画像なしのテキスト版** です。
|
||||
章ごとのファイルは `chapters/` フォルダ、全章をまとめたファイルは `Workflow_Studio_Manual_v0.9.6.md` です。
|
||||
章ごとのファイルは `chapters/` フォルダ、全章をまとめたファイルは `Workflow_Studio_Manual_v0.9.9.md` です。
|
||||
画面の例は省略しているため、実際の画面はWorkflow Studioのヘルプタブとあわせてご覧ください。
|
||||
|
||||
## 目次
|
||||
@@ -29,4 +29,4 @@
|
||||
- [13_付録](chapters/13_付録.md)
|
||||
- [14_おわりに](chapters/14_おわりに.md)
|
||||
|
||||
全章まとめ：[Workflow_Studio_Manual_v0.9.6.md](Workflow_Studio_Manual_v0.9.6.md)
|
||||
全章まとめ：[Workflow_Studio_Manual_v0.9.9.md](Workflow_Studio_Manual_v0.9.9.md)
|
||||
|
||||
Binary file not shown.
+147
-3
@@ -2,12 +2,12 @@
|
||||
|
||||
ノードが苦手でも大丈夫 ― 画像生成をもっと手軽に、もっと整理して
|
||||
|
||||
- 対象バージョン：Workflow Studio v0.9.6
|
||||
- 対象バージョン：Workflow Studio v0.9.9
|
||||
- 著者：ketle-man
|
||||
- © 2026 ketle-man
|
||||
|
||||
このマニュアルは、Kindle版をもとにした **画像なしのテキスト版** です。
|
||||
章ごとのファイルは `chapters/` フォルダ、全章をまとめたファイルは `Workflow_Studio_Manual_v0.9.6.md` です。
|
||||
章ごとのファイルは `chapters/` フォルダ、全章をまとめたファイルは `Workflow_Studio_Manual_v0.9.9.md` です。
|
||||
画面の例は省略しているため、実際の画面はWorkflow Studioのヘルプタブとあわせてご覧ください。
|
||||
|
||||
---
|
||||
@@ -143,7 +143,7 @@ ComfyUIの「自由さ」はそのままに、「分かりやすさ」と「手
|
||||
|
||||
## 本書の対象バージョンと環境
|
||||
|
||||
- **Workflow Studio**：v0.9.6
|
||||
- **Workflow Studio**：v0.9.9
|
||||
- **ComfyUI**：本書執筆時点の最新版
|
||||
- **OS**：Windows（画面の例はWindowsのものです）
|
||||
|
||||
@@ -1547,12 +1547,127 @@ v0.8.6〜は、こうしたノードを含むワークフローも生成UIで実
|
||||
> 画像のメタデータを見るMetadataタブとサイドパネルの **I** タブでも、Nano Bananaで作った画像を読めます（v0.8.5〜）。
|
||||
> プロンプトは、Positive／Negativeに分けずに全文が1件で表示されます。
|
||||
|
||||
## 5-10 日本語のままプロンプトを書く（プロンプト翻訳、v0.9.9〜）
|
||||
|
||||
多くの画像生成モデルは、英語のプロンプトで学習されています。
|
||||
**プロンプト翻訳** をオンにすると、プロンプトを日本語で書き、ボタン1つで英語に直せます。
|
||||
Stable Diffusion web UI（A1111）の翻訳拡張機能と同じように、プロンプトの中の **日本語の部分だけ** を翻訳します。
|
||||
|
||||
翻訳には、パソコンで動くAI（**Ollama**）と翻訳専用のモデル **PLaMo 3 Translate** を使います。
|
||||
インターネット上の翻訳サービスにプロンプトを送ることはありません。
|
||||
|
||||
> **事前に必要なもの**
|
||||
> **Ollama** をインストールして起動しておきます（第10章 10-1）。翻訳モデルのダウンロードは、設定画面からできます（下記）。
|
||||
|
||||
### 準備：設定でオンにする
|
||||
1. **設定** タブの **プロンプト翻訳（自国語 → 英語）** を開きます。
|
||||
2. **生成UIでプロンプト翻訳を使う** にチェックを入れます。
|
||||
3. **翻訳モデル** で、使うモデルを選びます。まだOllamaに入っていないモデルには **（未取得）** と付いています。選んで **ダウンロード** を押すと、Ollamaに取り込まれます。
|
||||
4. **テスト** を押して、見本のプロンプトが英語になれば準備完了です。
|
||||
|
||||
PLaMo 3 Translate には4つの大きさがあります。
|
||||
|
||||
| モデル | 大きさ | 特徴 |
|
||||
| --- | --- | --- |
|
||||
| 0.8B | 約0.6GB | 最速。短いタグの翻訳なら十分 |
|
||||
| 2B | 約1.8GB | おすすめ。文章の翻訳も正確 |
|
||||
| 8B | 約5.3GB | より高品質 |
|
||||
| 31B | 約19.5GB | 最高品質。メモリに余裕がある人向け |
|
||||
|
||||
> **ポイント**
|
||||
> 0.8Bは、文章の翻訳で意味がずれることがあります（例：「カメラは後ろから追いかける」が「her camera following behind」＝「彼女のカメラが後ろについてくる」になった）。
|
||||
> 動画のプロンプトのように文章で書くことが多いなら、2B以上を選びましょう。
|
||||
|
||||
設定のほかの項目は、次のとおりです。
|
||||
|
||||
| 項目 | 内容 |
|
||||
| --- | --- |
|
||||
| 入力する言語 | ふつうは **自動判定** のままでよい。日本語だけで書くなら「日本語」を選ぶと確実 |
|
||||
| Ollama URL | Ollamaのアドレス。空欄なら `http://localhost:11434` |
|
||||
| 翻訳モデルの実行場所 | **GPU** か **CPUで常駐** か（下記） |
|
||||
| 実行時に自動で翻訳する | Generateなどを押したときに自動で翻訳する（下記） |
|
||||
|
||||
PLaMo以外のOllamaのモデル（ふだんチャットに使っているモデルなど）も、**その他のOllamaモデル** から選べます。その場合は「英語に翻訳して」という指示を付けて送ります。
|
||||
|
||||
### 翻訳モデルをどこで動かすか
|
||||
| 実行場所 | 1語句あたりの時間 | 向いている人 |
|
||||
| --- | --- | --- |
|
||||
| GPU（1回の翻訳が最速・VRAMを使う） | 約0.1秒 | GPUのメモリに余裕がある |
|
||||
| CPUで常駐（VRAMを使わず、再読み込みの待ちなし） | 約0.2〜0.3秒 | 画像生成にGPUのメモリをすべて使いたい |
|
||||
|
||||
GPUのときは、**翻訳後に翻訳モデルをVRAMから解放する** をオンにしておくと、画像生成の前にGPUのメモリを空けられます（初期値はオン）。
|
||||
ただし、翻訳のたびにモデルの読み込み直しで **約4秒** 待つことになります。
|
||||
|
||||
**CPUで常駐** にすると、モデルをメインメモリに置いたままにします（2Bで約2.7GB）。
|
||||
GPUのメモリを使わず、生成UIにワークフローを読み込んだときに裏で読み込んでおくので、最初の翻訳から待たされません。
|
||||
|
||||
> **ポイント**
|
||||
> Ollamaは、ほかのモデル（AI TOOLのチャット用など）を読み込むときに、常駐させた翻訳モデルを外すことがあります。
|
||||
> その場合は、次の翻訳のときに自動で読み込み直します（その1回だけ数秒かかります）。
|
||||
|
||||
### 使い方：🌐ボタンで翻訳する
|
||||
プロンプト翻訳をオンにすると、InputタブのPositive Prompt・Negative Promptの **↺** ボタンの右に **🌐** ボタンが表示されます。
|
||||
|
||||
1. プロンプト欄に、日本語で書きます。英語のタグと混ぜてもかまいません。
|
||||
|
||||
```
|
||||
masterpiece, 夕焼けの海辺に立つ少女、(長い黒髪:1.2), <lora:test_lora:0.8>, {猫耳|狐耳}, 水彩画風
|
||||
```
|
||||
|
||||
2. **🌐** を押します。
|
||||
3. 日本語の部分だけが英語になります。
|
||||
|
||||
```
|
||||
masterpiece, A girl standing by the seaside at sunset, (long black hair:1.2), <lora:test_lora:0.8>, {cat ears|fox ears}, watercolor style
|
||||
```
|
||||
|
||||
次のようなプロンプトの書き方（記法）は、翻訳せずにそのまま残します。
|
||||
|
||||
- カンマ・改行
|
||||
- 重み付け `(語句:1.2)`、`[ ]`
|
||||
- ランダムに選ぶ `{A|B}`、ワイルドカード `__名前__`
|
||||
- LoRAの指定 `<lora:名前:0.8>`、`embedding:名前`
|
||||
- `BREAK`、`AND`
|
||||
|
||||
翻訳したあとに **原文** ボタンが表示されます。押すと、翻訳する前の文に戻ります（Ctrl＋Zでも戻せます）。
|
||||
|
||||
> **注意**
|
||||
> 翻訳されるのは、英数字以外の文字を含む部分だけです。英語だけの部分は、そのまま残ります。
|
||||
> 反対に、é などのアクセント付きの文字を含む英単語は、翻訳の対象になります。
|
||||
|
||||
### 実行時に自動で翻訳する
|
||||
設定の **実行時に自動で翻訳する** で、どの実行のときに自動で翻訳するかを、チェックボックスで選べます。
|
||||
|
||||
| チェックボックス | 動き |
|
||||
| --- | --- |
|
||||
| 生成UI － Generate | Generateを押すと、Positive／Negativeの欄の日本語を英語に置き換えてから生成する |
|
||||
| 生成UI Lab － Run | Labの実行で、送る内容だけを翻訳する。Labのプランには日本語が残る |
|
||||
| Video Plan － Run | Videoタブ Planの実行で、送るプロンプトだけを翻訳する。プランには日本語が残る |
|
||||
|
||||
LabとVideo Planでは、プランを日本語のまま残すので、あとから日本語で書き直せます。
|
||||
生成した画像や動画の情報（メタデータ）には、実際に送った英語のプロンプトが記録されます。
|
||||
|
||||
> **注意**
|
||||
> 自動翻訳がオンのときに翻訳に失敗すると（Ollamaが起動していないなど）、日本語のまま生成しないよう、生成を止めます。
|
||||
> LabとVideo Planでは、止まった理由が進行状況の欄に表示されます。
|
||||
|
||||
### Labのモーダルと、Video Planでも使える
|
||||
🌐ボタンは、次の欄にもあります。使い方は同じです。
|
||||
|
||||
- Lab（5-7）のプロンプト列のセルをダブルクリックして開く画面の、Positive・Negativeの欄
|
||||
- Videoタブ Planサブタブの、ブロックの **Prompt** の欄（第11章 11-4）
|
||||
|
||||
> **ポイント**
|
||||
> PLaMo 3 Translate は、個人の利用や趣味、研究などの非商用の利用なら無料で使えます（PLaMoコミュニティライセンス）。
|
||||
> 商用で使う場合は、ライセンスの条件を確認してください。
|
||||
|
||||
> **この章（後半）のまとめ**
|
||||
> - Batchサブタブで、モデル・プロンプト・サンプラーなどを1種類ずつ変えながらまとめて生成できる
|
||||
> - Batch Queueの列のチェックで種類を選び、Generateで開始。終わったらチェックを外す
|
||||
> - Feederは、たくさんの画像を1枚ずつワークフローに送り込む機能。専用ノードが必要
|
||||
> - Labは、複数の設定を別々のタイミングで切り替えられる上級者向けの機能
|
||||
> - パートナーAPIノード（Nano Bananaなど）は、`.env` の `COMFY_API_KEY` を設定すれば実行できる。クレジットが消費される
|
||||
> - プロンプト翻訳をオンにすると、日本語で書いたプロンプトを🌐ボタンで英語にできる。記法はそのまま残り、Generate・Lab・Video Planの実行時に自動で翻訳することもできる
|
||||
|
||||
---
|
||||
|
||||
@@ -1972,6 +2087,10 @@ Workflow Studioにはたくさんのスタイルが付属しています。
|
||||
|
||||
英語のプロンプトの意味を知りたいときは、反対に **EN→JA** で日本語に訳せます。
|
||||
|
||||
> **ポイント**
|
||||
> 生成UIのプロンプト欄で直接翻訳したいときは、第5章 5-10 の **プロンプト翻訳**（🌐ボタン）が便利です。重み付けやLoRAの指定を残したまま、日本語の部分だけを英語にできます。
|
||||
> AI Assistantの翻訳にも、翻訳専用のモデル **PLaMo 3 Translate** を選べます（v0.9.9〜。以前は指示文まで翻訳されたり、ZH→ENで日本語が出たりしていました）。
|
||||
|
||||
### AIと相談しながらプロンプトを作る
|
||||
入力欄に質問を書いて **Send**（または Enter キー）を押すと、AIとチャットできます。
|
||||
|
||||
@@ -2621,6 +2740,11 @@ Workflow Studio本体の **AI TOOL** タブを開きます。
|
||||
> 小さなモデルは、翻訳せずに元の文章をそのまま返してしまうことがあります。
|
||||
> その場合は「モデルが原文をそのまま返しました」と表示されるので、別のモデルを試してください。
|
||||
|
||||
> **ポイント**
|
||||
> 翻訳専用のモデル **PLaMo 3 Translate**（第5章 5-10）を、設定のモデルに選ぶこともできます（v0.9.9〜）。
|
||||
> 日本語・英語・中国語のほか、Free（自由入力）では French・フランス語・français のような言語名で、PLaMoが対応する言語を指定できます。PLaMoが対応していない言語（ポルトガル語など）を翻訳先にすると、エラーになります。
|
||||
> WS LibraryのAタブの翻訳も同じです。
|
||||
|
||||
### Chat
|
||||
入力欄に話しかけて、**Enter** で送信します（**Shift＋Enter** で改行）。
|
||||
会話の流れを覚えているので、「もっと明るい雰囲気にして」のような続けての依頼もできます。
|
||||
@@ -3107,6 +3231,14 @@ Image Editのいちばん便利な使い方が、**インペイント** です
|
||||
|
||||
そのほか、動画の好きな場面を静止画として保存する **Frame** や、動画をGIFアニメに変換する **GIF** の機能もあります。
|
||||
|
||||
> **ポイント**
|
||||
> Planサブタブのブロックの **Prompt** の欄にも、プロンプト翻訳の **🌐** ボタンがあります（第5章 5-10）。
|
||||
> 設定の **Video Plan － Run** をオンにすると、日本語のプロンプトのまま実行して、送る内容だけを英語にできます。
|
||||
|
||||
> **注意**
|
||||
> v0.9.8までは、新しいComfyUIで保存したワークフローを使うと、Planで入力したプロンプト・長さ（Duration）・Turboの設定が反映されず、ワークフローに保存されている値のまま生成されていました（v0.9.9で修正）。
|
||||
> 以前と同じPlanを実行しても、Planの値が反映されるようになったため、結果が変わることがあります。
|
||||
|
||||
### アセット登録と音声変換（v0.8.9〜）
|
||||
- **アセット登録** － 左側の動画ソースパネルのボタンです。パソコン内の動画を、outputフォルダ（`output/video`）へコピーして「Video Assets」グループに登録します。
|
||||
登録すると、Assetサブタブの一覧に出て、Editなどで使えるようになります。
|
||||
@@ -3157,6 +3289,7 @@ Image Editのいちばん便利な使い方が、**インペイント** です
|
||||
| CivitAI APIキー | Civitaiの情報取得用（省略可） | 第6章 |
|
||||
| Eagle 連携 (オプション) | 生成画像をEagleに自動保存 | 第8章 |
|
||||
| VRAM調整（Ollama） | 生成前にAIモデルをメモリから降ろす | 第10章 |
|
||||
| プロンプト翻訳（自国語 → 英語） | 日本語のプロンプトを🌐ボタンや実行時の自動翻訳で英語にする | 第5章 5-10 |
|
||||
| データ管理 | 設定やデータのバックアップ・復元 | 下記 |
|
||||
|
||||
### デフォルトワークフロー
|
||||
@@ -3396,6 +3529,15 @@ Batchサブタブを開き、Batch Queueの列のチェックをすべてオフ
|
||||
|
||||
いつも同じモデルを使いたい場合は、設定タブの **デフォルトCheckpoint** を使うと便利です（第11章 11-5）。
|
||||
|
||||
### プロンプト翻訳の🌐ボタンが出ない・翻訳できない
|
||||
| 症状 | 原因 | 対処 |
|
||||
| --- | --- | --- |
|
||||
| 🌐ボタンが表示されない | プロンプト翻訳がオフになっている | 設定タブの **プロンプト翻訳（自国語 → 英語）** で **生成UIでプロンプト翻訳を使う** にチェックを入れる（第5章 5-10） |
|
||||
| 「翻訳エラー」と出る | Ollamaが起動していない、または翻訳モデルがOllamaに無い | Ollamaを起動する。設定の **翻訳モデル** に **（未取得）** と出ていれば **ダウンロード** を押す |
|
||||
| 押しても何も変わらない（「翻訳する部分がありません」） | 英語（英数字）だけのプロンプトになっている | 翻訳されるのは英数字以外の文字を含む部分だけ。英語の部分はそのまま残る |
|
||||
| 自動翻訳がオンのとき、生成が始まらない | 翻訳に失敗したので、日本語のまま生成しないよう止めた | 上の「翻訳エラー」と同じ対処をする。LabとVideo Planでは、理由が進行状況の欄に出る |
|
||||
| 訳がおかしい | 小さいモデル（0.8B）は、文章で意味がずれることがある | 設定の **翻訳モデル** で2B以上を選ぶ |
|
||||
|
||||
### 同じ設定なのに、同じ画像にならない
|
||||
生成パネルのシードのモードが **Random** になっていませんか？
|
||||
同じ画像を作るには、シードを **Workflow**（ワークフローのシードをそのまま使う）か **Fixed**（Seed欄の値で固定）にする必要があります。
|
||||
@@ -3595,6 +3737,7 @@ Workflow Studioの **ヘルプ** タブにも、トラブルシューティン
|
||||
| LoRA | 絵柄やキャラクターなどを追加で覚えさせる小さなモデル | 第6章 |
|
||||
| OCR | 画像に写っている文字を読み取ること | 第10章 |
|
||||
| Ollama | ローカルAIを手軽に動かせるソフト | 第10章 |
|
||||
| PLaMo 3 Translate | Preferred Networks（PFN）の翻訳専用AIモデル。プロンプト翻訳で使う | 第5章 |
|
||||
| T2I（Text to Image） | 文章（プロンプト）から画像を作ること | 第5章 |
|
||||
| TagSpace | タグ・プロンプト・生成画像を意味の近さで3Dの空間に並べて表示するタブ | 第11章 |
|
||||
| VAE | 画像の色合いや細部を仕上げるモデル | 第6章 |
|
||||
@@ -3668,6 +3811,7 @@ Workflow Studioの **ヘルプ** タブにも、トラブルシューティン
|
||||
| --- | --- | --- |
|
||||
| Civitai（https://civitai.com/） | モデルの入手・情報取得 | 第6章 |
|
||||
| Ollama（https://ollama.com/） | ローカルAI | 第10章 |
|
||||
| PLaMo 3 Translate（https://huggingface.co/pfnet/plamo-3-translate-2b-GGUF） | プロンプト翻訳の翻訳モデル | 第5章 |
|
||||
| LM Studio（https://lmstudio.ai/） | ローカルAI | 第10章 |
|
||||
| Lemonade Server（https://lemonade-server.ai/） | ローカルAI | 第10章 |
|
||||
| Eagle（https://eagle.cool/） | 画像管理ソフト | 第8章 |
|
||||
Binary file not shown.
@@ -129,7 +129,7 @@ ComfyUIの「自由さ」はそのままに、「分かりやすさ」と「手
|
||||
|
||||
## 本書の対象バージョンと環境
|
||||
|
||||
- **Workflow Studio**：v0.9.6
|
||||
- **Workflow Studio**：v0.9.9
|
||||
- **ComfyUI**：本書執筆時点の最新版
|
||||
- **OS**：Windows（画面の例はWindowsのものです）
|
||||
|
||||
|
||||
@@ -235,9 +235,124 @@ v0.8.6〜は、こうしたノードを含むワークフローも生成UIで実
|
||||
> 画像のメタデータを見るMetadataタブとサイドパネルの **I** タブでも、Nano Bananaで作った画像を読めます（v0.8.5〜）。
|
||||
> プロンプトは、Positive／Negativeに分けずに全文が1件で表示されます。
|
||||
|
||||
## 5-10 日本語のままプロンプトを書く（プロンプト翻訳、v0.9.9〜）
|
||||
|
||||
多くの画像生成モデルは、英語のプロンプトで学習されています。
|
||||
**プロンプト翻訳** をオンにすると、プロンプトを日本語で書き、ボタン1つで英語に直せます。
|
||||
Stable Diffusion web UI（A1111）の翻訳拡張機能と同じように、プロンプトの中の **日本語の部分だけ** を翻訳します。
|
||||
|
||||
翻訳には、パソコンで動くAI（**Ollama**）と翻訳専用のモデル **PLaMo 3 Translate** を使います。
|
||||
インターネット上の翻訳サービスにプロンプトを送ることはありません。
|
||||
|
||||
> **事前に必要なもの**
|
||||
> **Ollama** をインストールして起動しておきます（第10章 10-1）。翻訳モデルのダウンロードは、設定画面からできます（下記）。
|
||||
|
||||
### 準備：設定でオンにする
|
||||
1. **設定** タブの **プロンプト翻訳（自国語 → 英語）** を開きます。
|
||||
2. **生成UIでプロンプト翻訳を使う** にチェックを入れます。
|
||||
3. **翻訳モデル** で、使うモデルを選びます。まだOllamaに入っていないモデルには **（未取得）** と付いています。選んで **ダウンロード** を押すと、Ollamaに取り込まれます。
|
||||
4. **テスト** を押して、見本のプロンプトが英語になれば準備完了です。
|
||||
|
||||
PLaMo 3 Translate には4つの大きさがあります。
|
||||
|
||||
| モデル | 大きさ | 特徴 |
|
||||
| --- | --- | --- |
|
||||
| 0.8B | 約0.6GB | 最速。短いタグの翻訳なら十分 |
|
||||
| 2B | 約1.8GB | おすすめ。文章の翻訳も正確 |
|
||||
| 8B | 約5.3GB | より高品質 |
|
||||
| 31B | 約19.5GB | 最高品質。メモリに余裕がある人向け |
|
||||
|
||||
> **ポイント**
|
||||
> 0.8Bは、文章の翻訳で意味がずれることがあります（例：「カメラは後ろから追いかける」が「her camera following behind」＝「彼女のカメラが後ろについてくる」になった）。
|
||||
> 動画のプロンプトのように文章で書くことが多いなら、2B以上を選びましょう。
|
||||
|
||||
設定のほかの項目は、次のとおりです。
|
||||
|
||||
| 項目 | 内容 |
|
||||
| --- | --- |
|
||||
| 入力する言語 | ふつうは **自動判定** のままでよい。日本語だけで書くなら「日本語」を選ぶと確実 |
|
||||
| Ollama URL | Ollamaのアドレス。空欄なら `http://localhost:11434` |
|
||||
| 翻訳モデルの実行場所 | **GPU** か **CPUで常駐** か（下記） |
|
||||
| 実行時に自動で翻訳する | Generateなどを押したときに自動で翻訳する（下記） |
|
||||
|
||||
PLaMo以外のOllamaのモデル（ふだんチャットに使っているモデルなど）も、**その他のOllamaモデル** から選べます。その場合は「英語に翻訳して」という指示を付けて送ります。
|
||||
|
||||
### 翻訳モデルをどこで動かすか
|
||||
| 実行場所 | 1語句あたりの時間 | 向いている人 |
|
||||
| --- | --- | --- |
|
||||
| GPU（1回の翻訳が最速・VRAMを使う） | 約0.1秒 | GPUのメモリに余裕がある |
|
||||
| CPUで常駐（VRAMを使わず、再読み込みの待ちなし） | 約0.2〜0.3秒 | 画像生成にGPUのメモリをすべて使いたい |
|
||||
|
||||
GPUのときは、**翻訳後に翻訳モデルをVRAMから解放する** をオンにしておくと、画像生成の前にGPUのメモリを空けられます（初期値はオン）。
|
||||
ただし、翻訳のたびにモデルの読み込み直しで **約4秒** 待つことになります。
|
||||
|
||||
**CPUで常駐** にすると、モデルをメインメモリに置いたままにします（2Bで約2.7GB）。
|
||||
GPUのメモリを使わず、生成UIにワークフローを読み込んだときに裏で読み込んでおくので、最初の翻訳から待たされません。
|
||||
|
||||
> **ポイント**
|
||||
> Ollamaは、ほかのモデル（AI TOOLのチャット用など）を読み込むときに、常駐させた翻訳モデルを外すことがあります。
|
||||
> その場合は、次の翻訳のときに自動で読み込み直します（その1回だけ数秒かかります）。
|
||||
|
||||
### 使い方：🌐ボタンで翻訳する
|
||||
プロンプト翻訳をオンにすると、InputタブのPositive Prompt・Negative Promptの **↺** ボタンの右に **🌐** ボタンが表示されます。
|
||||
|
||||
1. プロンプト欄に、日本語で書きます。英語のタグと混ぜてもかまいません。
|
||||
|
||||
```
|
||||
masterpiece, 夕焼けの海辺に立つ少女、(長い黒髪:1.2), <lora:test_lora:0.8>, {猫耳|狐耳}, 水彩画風
|
||||
```
|
||||
|
||||
2. **🌐** を押します。
|
||||
3. 日本語の部分だけが英語になります。
|
||||
|
||||
```
|
||||
masterpiece, A girl standing by the seaside at sunset, (long black hair:1.2), <lora:test_lora:0.8>, {cat ears|fox ears}, watercolor style
|
||||
```
|
||||
|
||||
次のようなプロンプトの書き方（記法）は、翻訳せずにそのまま残します。
|
||||
|
||||
- カンマ・改行
|
||||
- 重み付け `(語句:1.2)`、`[ ]`
|
||||
- ランダムに選ぶ `{A|B}`、ワイルドカード `__名前__`
|
||||
- LoRAの指定 `<lora:名前:0.8>`、`embedding:名前`
|
||||
- `BREAK`、`AND`
|
||||
|
||||
翻訳したあとに **原文** ボタンが表示されます。押すと、翻訳する前の文に戻ります（Ctrl＋Zでも戻せます）。
|
||||
|
||||
> **注意**
|
||||
> 翻訳されるのは、英数字以外の文字を含む部分だけです。英語だけの部分は、そのまま残ります。
|
||||
> 反対に、é などのアクセント付きの文字を含む英単語は、翻訳の対象になります。
|
||||
|
||||
### 実行時に自動で翻訳する
|
||||
設定の **実行時に自動で翻訳する** で、どの実行のときに自動で翻訳するかを、チェックボックスで選べます。
|
||||
|
||||
| チェックボックス | 動き |
|
||||
| --- | --- |
|
||||
| 生成UI － Generate | Generateを押すと、Positive／Negativeの欄の日本語を英語に置き換えてから生成する |
|
||||
| 生成UI Lab － Run | Labの実行で、送る内容だけを翻訳する。Labのプランには日本語が残る |
|
||||
| Video Plan － Run | Videoタブ Planの実行で、送るプロンプトだけを翻訳する。プランには日本語が残る |
|
||||
|
||||
LabとVideo Planでは、プランを日本語のまま残すので、あとから日本語で書き直せます。
|
||||
生成した画像や動画の情報（メタデータ）には、実際に送った英語のプロンプトが記録されます。
|
||||
|
||||
> **注意**
|
||||
> 自動翻訳がオンのときに翻訳に失敗すると（Ollamaが起動していないなど）、日本語のまま生成しないよう、生成を止めます。
|
||||
> LabとVideo Planでは、止まった理由が進行状況の欄に表示されます。
|
||||
|
||||
### Labのモーダルと、Video Planでも使える
|
||||
🌐ボタンは、次の欄にもあります。使い方は同じです。
|
||||
|
||||
- Lab（5-7）のプロンプト列のセルをダブルクリックして開く画面の、Positive・Negativeの欄
|
||||
- Videoタブ Planサブタブの、ブロックの **Prompt** の欄（第11章 11-4）
|
||||
|
||||
> **ポイント**
|
||||
> PLaMo 3 Translate は、個人の利用や趣味、研究などの非商用の利用なら無料で使えます（PLaMoコミュニティライセンス）。
|
||||
> 商用で使う場合は、ライセンスの条件を確認してください。
|
||||
|
||||
> **この章（後半）のまとめ**
|
||||
> - Batchサブタブで、モデル・プロンプト・サンプラーなどを1種類ずつ変えながらまとめて生成できる
|
||||
> - Batch Queueの列のチェックで種類を選び、Generateで開始。終わったらチェックを外す
|
||||
> - Feederは、たくさんの画像を1枚ずつワークフローに送り込む機能。専用ノードが必要
|
||||
> - Labは、複数の設定を別々のタイミングで切り替えられる上級者向けの機能
|
||||
> - パートナーAPIノード（Nano Bananaなど）は、`.env` の `COMFY_API_KEY` を設定すれば実行できる。クレジットが消費される
|
||||
> - プロンプト翻訳をオンにすると、日本語で書いたプロンプトを🌐ボタンで英語にできる。記法はそのまま残り、Generate・Lab・Video Planの実行時に自動で翻訳することもできる
|
||||
|
||||
@@ -227,6 +227,10 @@ Workflow Studioにはたくさんのスタイルが付属しています。
|
||||
|
||||
英語のプロンプトの意味を知りたいときは、反対に **EN→JA** で日本語に訳せます。
|
||||
|
||||
> **ポイント**
|
||||
> 生成UIのプロンプト欄で直接翻訳したいときは、第5章 5-10 の **プロンプト翻訳**（🌐ボタン）が便利です。重み付けやLoRAの指定を残したまま、日本語の部分だけを英語にできます。
|
||||
> AI Assistantの翻訳にも、翻訳専用のモデル **PLaMo 3 Translate** を選べます（v0.9.9〜。以前は指示文まで翻訳されたり、ZH→ENで日本語が出たりしていました）。
|
||||
|
||||
### AIと相談しながらプロンプトを作る
|
||||
入力欄に質問を書いて **Send**（または Enter キー）を押すと、AIとチャットできます。
|
||||
|
||||
|
||||
@@ -110,6 +110,11 @@ Workflow Studio本体の **AI TOOL** タブを開きます。
|
||||
> 小さなモデルは、翻訳せずに元の文章をそのまま返してしまうことがあります。
|
||||
> その場合は「モデルが原文をそのまま返しました」と表示されるので、別のモデルを試してください。
|
||||
|
||||
> **ポイント**
|
||||
> 翻訳専用のモデル **PLaMo 3 Translate**（第5章 5-10）を、設定のモデルに選ぶこともできます（v0.9.9〜）。
|
||||
> 日本語・英語・中国語のほか、Free（自由入力）では French・フランス語・français のような言語名で、PLaMoが対応する言語を指定できます。PLaMoが対応していない言語（ポルトガル語など）を翻訳先にすると、エラーになります。
|
||||
> WS LibraryのAタブの翻訳も同じです。
|
||||
|
||||
### Chat
|
||||
入力欄に話しかけて、**Enter** で送信します（**Shift＋Enter** で改行）。
|
||||
会話の流れを覚えているので、「もっと明るい雰囲気にして」のような続けての依頼もできます。
|
||||
|
||||
@@ -155,6 +155,14 @@ Image Editのいちばん便利な使い方が、**インペイント** です
|
||||
|
||||
そのほか、動画の好きな場面を静止画として保存する **Frame** や、動画をGIFアニメに変換する **GIF** の機能もあります。
|
||||
|
||||
> **ポイント**
|
||||
> Planサブタブのブロックの **Prompt** の欄にも、プロンプト翻訳の **🌐** ボタンがあります（第5章 5-10）。
|
||||
> 設定の **Video Plan － Run** をオンにすると、日本語のプロンプトのまま実行して、送る内容だけを英語にできます。
|
||||
|
||||
> **注意**
|
||||
> v0.9.8までは、新しいComfyUIで保存したワークフローを使うと、Planで入力したプロンプト・長さ（Duration）・Turboの設定が反映されず、ワークフローに保存されている値のまま生成されていました（v0.9.9で修正）。
|
||||
> 以前と同じPlanを実行しても、Planの値が反映されるようになったため、結果が変わることがあります。
|
||||
|
||||
### アセット登録と音声変換（v0.8.9〜）
|
||||
- **アセット登録** － 左側の動画ソースパネルのボタンです。パソコン内の動画を、outputフォルダ（`output/video`）へコピーして「Video Assets」グループに登録します。
|
||||
登録すると、Assetサブタブの一覧に出て、Editなどで使えるようになります。
|
||||
@@ -205,6 +213,7 @@ Image Editのいちばん便利な使い方が、**インペイント** です
|
||||
| CivitAI APIキー | Civitaiの情報取得用（省略可） | 第6章 |
|
||||
| Eagle 連携 (オプション) | 生成画像をEagleに自動保存 | 第8章 |
|
||||
| VRAM調整（Ollama） | 生成前にAIモデルをメモリから降ろす | 第10章 |
|
||||
| プロンプト翻訳（自国語 → 英語） | 日本語のプロンプトを🌐ボタンや実行時の自動翻訳で英語にする | 第5章 5-10 |
|
||||
| データ管理 | 設定やデータのバックアップ・復元 | 下記 |
|
||||
|
||||
### デフォルトワークフロー
|
||||
|
||||
@@ -88,6 +88,15 @@ Batchサブタブを開き、Batch Queueの列のチェックをすべてオフ
|
||||
|
||||
いつも同じモデルを使いたい場合は、設定タブの **デフォルトCheckpoint** を使うと便利です（第11章 11-5）。
|
||||
|
||||
### プロンプト翻訳の🌐ボタンが出ない・翻訳できない
|
||||
| 症状 | 原因 | 対処 |
|
||||
| --- | --- | --- |
|
||||
| 🌐ボタンが表示されない | プロンプト翻訳がオフになっている | 設定タブの **プロンプト翻訳（自国語 → 英語）** で **生成UIでプロンプト翻訳を使う** にチェックを入れる（第5章 5-10） |
|
||||
| 「翻訳エラー」と出る | Ollamaが起動していない、または翻訳モデルがOllamaに無い | Ollamaを起動する。設定の **翻訳モデル** に **（未取得）** と出ていれば **ダウンロード** を押す |
|
||||
| 押しても何も変わらない（「翻訳する部分がありません」） | 英語（英数字）だけのプロンプトになっている | 翻訳されるのは英数字以外の文字を含む部分だけ。英語の部分はそのまま残る |
|
||||
| 自動翻訳がオンのとき、生成が始まらない | 翻訳に失敗したので、日本語のまま生成しないよう止めた | 上の「翻訳エラー」と同じ対処をする。LabとVideo Planでは、理由が進行状況の欄に出る |
|
||||
| 訳がおかしい | 小さいモデル（0.8B）は、文章で意味がずれることがある | 設定の **翻訳モデル** で2B以上を選ぶ |
|
||||
|
||||
### 同じ設定なのに、同じ画像にならない
|
||||
生成パネルのシードのモードが **Random** になっていませんか？
|
||||
同じ画像を作るには、シードを **Workflow**（ワークフローのシードをそのまま使う）か **Fixed**（Seed欄の値で固定）にする必要があります。
|
||||
|
||||
@@ -54,6 +54,7 @@
|
||||
| LoRA | 絵柄やキャラクターなどを追加で覚えさせる小さなモデル | 第6章 |
|
||||
| OCR | 画像に写っている文字を読み取ること | 第10章 |
|
||||
| Ollama | ローカルAIを手軽に動かせるソフト | 第10章 |
|
||||
| PLaMo 3 Translate | Preferred Networks（PFN）の翻訳専用AIモデル。プロンプト翻訳で使う | 第5章 |
|
||||
| T2I（Text to Image） | 文章（プロンプト）から画像を作ること | 第5章 |
|
||||
| TagSpace | タグ・プロンプト・生成画像を意味の近さで3Dの空間に並べて表示するタブ | 第11章 |
|
||||
| VAE | 画像の色合いや細部を仕上げるモデル | 第6章 |
|
||||
@@ -127,6 +128,7 @@
|
||||
| --- | --- | --- |
|
||||
| Civitai（https://civitai.com/） | モデルの入手・情報取得 | 第6章 |
|
||||
| Ollama（https://ollama.com/） | ローカルAI | 第10章 |
|
||||
| PLaMo 3 Translate（https://huggingface.co/pfnet/plamo-3-translate-2b-GGUF） | プロンプト翻訳の翻訳モデル | 第5章 |
|
||||
| LM Studio（https://lmstudio.ai/） | ローカルAI | 第10章 |
|
||||
| Lemonade Server（https://lemonade-server.ai/） | ローカルAI | 第10章 |
|
||||
| Eagle（https://eagle.cool/） | 画像管理ソフト | 第8章 |
|
||||
|
||||
@@ -2,12 +2,12 @@
|
||||
|
||||
Don't Be Afraid of Nodes - Generate Images More Easily and Keep Them Organized
|
||||
|
||||
- Covers: Workflow Studio v0.9.6
|
||||
- Covers: Workflow Studio v0.9.9
|
||||
- Author: ketle-man
|
||||
- (c) 2026 ketle-man
|
||||
|
||||
This is the **text-only edition** (without screenshots) of the Kindle book.
|
||||
Chapter files are in the `chapters/` folder; the whole book in one file is `Workflow_Studio_Manual_v0.9.6_en.md`.
|
||||
Chapter files are in the `chapters/` folder; the whole book in one file is `Workflow_Studio_Manual_v0.9.9_en.md`.
|
||||
Screen examples are omitted, so please use the book together with Workflow Studio's Help tab.
|
||||
|
||||
## Contents
|
||||
@@ -29,4 +29,4 @@ Screen examples are omitted, so please use the book together with Workflow Studi
|
||||
- [13_Appendix](chapters/13_Appendix.md)
|
||||
- [14_Afterword](chapters/14_Afterword.md)
|
||||
|
||||
Whole book: [Workflow_Studio_Manual_v0.9.6_en.md](Workflow_Studio_Manual_v0.9.6_en.md)
|
||||
Whole book: [Workflow_Studio_Manual_v0.9.9_en.md](Workflow_Studio_Manual_v0.9.9_en.md)
|
||||
|
||||
Binary file not shown.
+145
-3
@@ -2,12 +2,12 @@
|
||||
|
||||
Don't Be Afraid of Nodes - Generate Images More Easily and Keep Them Organized
|
||||
|
||||
- Covers: Workflow Studio v0.9.6
|
||||
- Covers: Workflow Studio v0.9.9
|
||||
- Author: ketle-man
|
||||
- (c) 2026 ketle-man
|
||||
|
||||
This is the **text-only edition** (without screenshots) of the Kindle book.
|
||||
Chapter files are in the `chapters/` folder; the whole book in one file is `Workflow_Studio_Manual_v0.9.6_en.md`.
|
||||
Chapter files are in the `chapters/` folder; the whole book in one file is `Workflow_Studio_Manual_v0.9.9_en.md`.
|
||||
Screen examples are omitted, so please use the book together with Workflow Studio's Help tab.
|
||||
|
||||
---
|
||||
@@ -143,7 +143,7 @@ It is written so that you can follow it if you know basic computer operations (c
|
||||
|
||||
## Version and environment covered
|
||||
|
||||
- **Workflow Studio**: v0.9.6
|
||||
- **Workflow Studio**: v0.9.9
|
||||
- **ComfyUI**: the latest version at the time of writing
|
||||
- **OS**: Windows (screen examples are from Windows)
|
||||
|
||||
@@ -1542,12 +1542,125 @@ The workflows you can use in GenerateUI have increased as follows. They are used
|
||||
> The Metadata tab and the side panel's **I** tab can also read images made with Nano Banana (v0.8.5 and later).
|
||||
> The prompt appears as one whole entry, not split into Positive/Negative.
|
||||
|
||||
## 5-10 Writing prompts in your own language (Prompt Translation, v0.9.9 and later)
|
||||
|
||||
Most image generation models were trained on English prompts.
|
||||
With **Prompt Translation** turned on, you can write a prompt in your own language and turn it into English with one button.
|
||||
Like the translation extensions for Stable Diffusion web UI (A1111), it translates **only the parts written in your own language**.
|
||||
|
||||
Translation uses AI running on your PC (**Ollama**) and the translation model **PLaMo 3 Translate**, which supports 51 languages besides English (Japanese, Chinese, Korean, French, German, Spanish, Russian, Thai, Vietnamese and more).
|
||||
Your prompts are not sent to an online translation service.
|
||||
|
||||
> **What you need first**
|
||||
> Install and start **Ollama** (Chapter 10, section 10-1). The translation model can be downloaded from the Settings screen (see below).
|
||||
|
||||
### Preparation: turn it on in Settings
|
||||
1. In the **Settings** tab, open **Prompt Translation (native language -> English)**.
|
||||
2. Check **Enable prompt translation in GenerateUI**.
|
||||
3. Choose the model in **Translation model**. Models not yet in Ollama are marked **(not downloaded)**; choose one and press **Download** to pull it into Ollama.
|
||||
4. Press **Test**. When the sample prompt comes back in English, you are ready.
|
||||
|
||||
PLaMo 3 Translate comes in four sizes.
|
||||
|
||||
| Model | Size | Notes |
|
||||
| --- | --- | --- |
|
||||
| 0.8B | about 0.6 GB | Fastest. Enough for short tags |
|
||||
| 2B | about 1.8 GB | Recommended. Translates sentences accurately too |
|
||||
| 8B | about 5.3 GB | Higher quality |
|
||||
| 31B | about 19.5 GB | Highest quality, for PCs with plenty of memory |
|
||||
|
||||
> **Tip**
|
||||
> 0.8B sometimes shifts the meaning of a sentence (for example, "the camera follows from behind" in Japanese became "her camera following behind").
|
||||
> If you often write prompts as sentences, such as video prompts, choose 2B or larger.
|
||||
|
||||
The other settings are:
|
||||
|
||||
| Setting | What it does |
|
||||
| --- | --- |
|
||||
| Source language | Usually leave it at **Auto-detect**. If you always write in one language, choosing it makes detection certain |
|
||||
| Ollama URL | Ollama's address. Blank means `http://localhost:11434` |
|
||||
| Where to run the translation model | **GPU** or **CPU, kept loaded** (see below) |
|
||||
| Translate automatically when running | Translates automatically when you press Generate and so on (see below) |
|
||||
|
||||
Other Ollama models (such as the one you use for chat) can also be chosen under **Other Ollama models**. They are sent the text with a "translate into English" instruction.
|
||||
|
||||
### Where to run the translation model
|
||||
| Where | Time per phrase | Good for |
|
||||
| --- | --- | --- |
|
||||
| GPU (fastest per translation, uses VRAM) | about 0.1 s | GPUs with VRAM to spare |
|
||||
| CPU, kept loaded (no VRAM, no reload wait) | about 0.2-0.3 s | Keeping all VRAM for image generation |
|
||||
|
||||
On GPU, turning on **Unload the translation model from VRAM after translating** frees VRAM before image generation (on by default).
|
||||
However, every translation then waits **about 4 seconds** while the model loads again.
|
||||
|
||||
**CPU, kept loaded** keeps the model in system RAM (about 2.7 GB for 2B).
|
||||
It uses no VRAM and is loaded in the background when a workflow is loaded into GenerateUI, so even the first translation does not wait.
|
||||
|
||||
> **Tip**
|
||||
> When Ollama loads another model (for example the AI TOOL chat model), it may drop the resident translation model.
|
||||
> It then loads again automatically at the next translation (that one translation takes a few seconds).
|
||||
|
||||
### Using it: translate with the globe button
|
||||
With Prompt Translation on, a **globe (🌐)** button appears to the right of the **↺** button of Positive Prompt and Negative Prompt on the Input tab.
|
||||
|
||||
1. Write the prompt in your own language. Mixing in English tags is fine.
|
||||
|
||||
```
|
||||
masterpiece, 夕焼けの海辺に立つ少女、(長い黒髪:1.2), <lora:test_lora:0.8>, {猫耳|狐耳}, 水彩画風
|
||||
```
|
||||
|
||||
2. Press the globe button.
|
||||
3. Only the parts in your language become English.
|
||||
|
||||
```
|
||||
masterpiece, A girl standing by the seaside at sunset, (long black hair:1.2), <lora:test_lora:0.8>, {cat ears|fox ears}, watercolor style
|
||||
```
|
||||
|
||||
The following prompt syntax is kept as it is, without translating:
|
||||
|
||||
- Commas and line breaks
|
||||
- Weights `(word:1.2)` and `[ ]`
|
||||
- Random choice `{A|B}` and wildcards `__name__`
|
||||
- LoRA `<lora:name:0.8>` and `embedding:name`
|
||||
- `BREAK` and `AND`
|
||||
|
||||
After translating, an **Original** button appears. Press it to go back to the text before translation (Ctrl+Z also works).
|
||||
|
||||
> **Note**
|
||||
> Only parts that contain letters outside ASCII are translated; English-only parts stay as they are.
|
||||
> Conversely, an English word that contains an accented letter such as é is translated too.
|
||||
|
||||
### Translating automatically when running
|
||||
Under **Translate automatically when running** in Settings, checkboxes choose when to translate automatically.
|
||||
|
||||
- **GenerateUI - Generate**: pressing Generate replaces the text of the Positive/Negative fields with the translation, then generates
|
||||
- **GenerateUI Lab - Run**: a Lab run translates only what is sent. The Lab plan keeps your text
|
||||
- **Video Plan - Run**: a Video tab Plan run translates only the prompts that are sent. The plan keeps your text
|
||||
|
||||
Because Lab and Video Plan keep your text, you can keep editing the plan in your own language.
|
||||
The information saved with the generated images and videos (metadata) records the English prompt that was actually sent.
|
||||
|
||||
> **Note**
|
||||
> If translation fails while automatic translation is on (for example, Ollama is not running), generation stops so that untranslated text is not sent.
|
||||
> For Lab and Video Plan, the reason is shown in the progress line.
|
||||
|
||||
### Also in the Lab modal and Video Plan
|
||||
The globe button is also on these fields, and works the same way:
|
||||
|
||||
- The Positive and Negative fields of the screen that opens when you double-click a cell in Lab's prompt column (5-7)
|
||||
- The **Prompt** field of a block in the Video tab's Plan subtab (Chapter 11, section 11-4)
|
||||
|
||||
> **Tip**
|
||||
> PLaMo 3 Translate is free for personal use, hobbies, research and other non-commercial use (PLaMo Community License).
|
||||
> Check the license terms before using it commercially.
|
||||
|
||||
> **Summary of this chapter (second half)**
|
||||
> - With the Batch subtab, you can generate in bulk while changing the model, prompt, sampler and so on, one kind at a time
|
||||
> - Choose the kind with the Batch Queue column checkbox and start with Generate. Turn the check off when done
|
||||
> - Feeder is a feature that feeds many images one at a time into a workflow. A dedicated node is required
|
||||
> - Lab is an advanced feature that can switch several settings at separate timings
|
||||
> - Partner API nodes (Nano Banana and others) run once `COMFY_API_KEY` is set in `.env`. They consume credits
|
||||
> - With Prompt Translation on, the globe button turns a prompt written in your own language into English. Prompt syntax is kept, and Generate, Lab and Video Plan runs can translate automatically
|
||||
|
||||
---
|
||||
|
||||
@@ -1963,6 +2076,10 @@ With the buttons shown below the translation result, you can use the result.
|
||||
|
||||
When you want to know the meaning of an English prompt, you can conversely translate it with **EN->JA**.
|
||||
|
||||
> **Tip**
|
||||
> To translate directly in GenerateUI's prompt fields, **Prompt Translation** (the globe button) in Chapter 5, section 5-10 is handy. It turns only the parts in your language into English and keeps weights and LoRA tags.
|
||||
> The AI Assistant's translation can also use the translation model **PLaMo 3 Translate** (v0.9.9 and later; before that, the instruction text was translated too, and ZH->EN came out in Japanese).
|
||||
|
||||
### Making prompts while consulting the AI
|
||||
Write a question in the input box and press **Send** (or the Enter key) to chat with the AI.
|
||||
|
||||
@@ -2611,6 +2728,11 @@ The screen is divided into four parts, all shown at the same time.
|
||||
> Small models sometimes return the original text as it is without translating.
|
||||
> In that case a message says the model returned the original text, so try another model.
|
||||
|
||||
> **Tip**
|
||||
> You can also choose the translation model **PLaMo 3 Translate** (Chapter 5, section 5-10) as the model in Settings (v0.9.9 and later).
|
||||
> Besides Japanese, English and Chinese, **Free** accepts language names such as French, フランス語 or français for any language PLaMo supports. A target language PLaMo does not support (such as Portuguese) gives an error.
|
||||
> The same applies to the translation in WS Library's A tab.
|
||||
|
||||
### Chat
|
||||
Talk in the input box and send with **Enter** (**Shift + Enter** for a line break).
|
||||
It remembers the flow of the conversation, so follow-up requests such as "make it a brighter mood" also work.
|
||||
@@ -3096,6 +3218,14 @@ You load a matching workflow with **Load in Video** in the Workflow tab and use
|
||||
|
||||
There are also the **Frame** feature, which saves a favorite scene of a video as a still image, and **GIF**, which converts a video to an animated GIF.
|
||||
|
||||
> **Tip**
|
||||
> The **Prompt** field of a Plan block also has the Prompt Translation globe button (Chapter 5, section 5-10).
|
||||
> With **Video Plan - Run** turned on in Settings, you can run the plan with prompts in your own language and send only English.
|
||||
|
||||
> **Note**
|
||||
> Up to v0.9.8, with workflows saved by newer ComfyUI versions, the prompt, length (Duration) and Turbo settings entered in Plan were not applied, and the values saved in the workflow were used instead (fixed in v0.9.9).
|
||||
> Because Plan values are applied now, running the same plan as before may give different results.
|
||||
|
||||
### Register as Asset and audio conversion (v0.8.9 and later)
|
||||
- **Register as Asset** - a button in the Video Source panel on the left. It copies a video from your PC into the output folder (`output/video`) and registers it in the "Video Assets" group.
|
||||
Once registered, it appears in the Asset subtab list and can be used in Edit and elsewhere.
|
||||
@@ -3144,6 +3274,7 @@ Here we mainly introduce items not covered in earlier chapters.
|
||||
| CivitAI API Key | For fetching Civitai information (optional) | Chapter 6 |
|
||||
| Eagle integration (optional) | Automatically save generated images to Eagle | Chapter 8 |
|
||||
| VRAM Management (Ollama) | Unload AI models from memory before generation | Chapter 10 |
|
||||
| Prompt Translation (native language -> English) | Turn prompts in your own language into English with the globe button or automatic translation when running | Chapter 5, 5-10 |
|
||||
| Data Management | Backing up and restoring settings and data | Below |
|
||||
|
||||
### Default Workflow
|
||||
@@ -3379,6 +3510,15 @@ In the **Model** subtab of GenerateUI, choose the model you want to use again an
|
||||
|
||||
If you always want to use the same model, the **Default Checkpoint** in the Settings tab is handy (Chapter 11, section 11-5).
|
||||
|
||||
### The Prompt Translation globe button does not appear or translation fails
|
||||
| Symptom | Cause | Fix |
|
||||
| --- | --- | --- |
|
||||
| No globe button | Prompt Translation is off | In the Settings tab, open **Prompt Translation (native language -> English)** and check **Enable prompt translation in GenerateUI** (Chapter 5, section 5-10) |
|
||||
| "Translation error" appears | Ollama is not running, or the translation model is not in Ollama | Start Ollama. If **Translation model** shows **(not downloaded)**, press **Download** |
|
||||
| Nothing changes ("Nothing to translate") | The prompt is English (ASCII) only | Only parts with letters outside ASCII are translated; English parts stay as they are |
|
||||
| Generation does not start with automatic translation on | Translation failed, so generation stopped instead of sending untranslated text | Same fix as "Translation error". In Lab and Video Plan the reason is shown in the progress line |
|
||||
| The translation is off | Small models (0.8B) can shift the meaning of sentences | Choose 2B or larger in **Translation model** |
|
||||
|
||||
### It does not become the same image even with the same settings
|
||||
Is the seed mode in the generate panel set to **Random**?
|
||||
To make the same image, you need to set the seed to **Workflow** (use the workflow's seed as it is) or **Fixed** (fix it to the value in the Seed field).
|
||||
@@ -3558,6 +3698,7 @@ The main terms that appear in this book, in alphabetical order.
|
||||
| Node set | Several nodes and their connections saved together | Chapter 9 |
|
||||
| OCR | Reading the text shown in an image | Chapter 10 |
|
||||
| Ollama | Software for running local AI easily | Chapter 10 |
|
||||
| PLaMo 3 Translate | A translation AI model by Preferred Networks (PFN), used by Prompt Translation | Chapter 5 |
|
||||
| Port number | A number for distinguishing which software to communicate with inside one computer | Chapter 2 |
|
||||
| Positive prompt | A prompt where you write what you want drawn | Chapter 7 |
|
||||
| Preset | A pair of positive and negative prompts saved together | Chapter 7 |
|
||||
@@ -3646,6 +3787,7 @@ The main terms that appear in this book, in alphabetical order.
|
||||
| --- | --- | --- |
|
||||
| Civitai (https://civitai.com/) | Getting models, fetching information | Chapter 6 |
|
||||
| Ollama (https://ollama.com/) | Local AI | Chapter 10 |
|
||||
| PLaMo 3 Translate (https://huggingface.co/pfnet/plamo-3-translate-2b-GGUF) | Translation model for Prompt Translation | Chapter 5 |
|
||||
| LM Studio (https://lmstudio.ai/) | Local AI | Chapter 10 |
|
||||
| Lemonade Server (https://lemonade-server.ai/) | Local AI | Chapter 10 |
|
||||
| Eagle (https://eagle.cool/) | Image-management software | Chapter 8 |
|
||||
Binary file not shown.
@@ -129,7 +129,7 @@ It is written so that you can follow it if you know basic computer operations (c
|
||||
|
||||
## Version and environment covered
|
||||
|
||||
- **Workflow Studio**: v0.9.6
|
||||
- **Workflow Studio**: v0.9.9
|
||||
- **ComfyUI**: the latest version at the time of writing
|
||||
- **OS**: Windows (screen examples are from Windows)
|
||||
|
||||
|
||||
@@ -232,9 +232,122 @@ The workflows you can use in GenerateUI have increased as follows. They are used
|
||||
> The Metadata tab and the side panel's **I** tab can also read images made with Nano Banana (v0.8.5 and later).
|
||||
> The prompt appears as one whole entry, not split into Positive/Negative.
|
||||
|
||||
## 5-10 Writing prompts in your own language (Prompt Translation, v0.9.9 and later)
|
||||
|
||||
Most image generation models were trained on English prompts.
|
||||
With **Prompt Translation** turned on, you can write a prompt in your own language and turn it into English with one button.
|
||||
Like the translation extensions for Stable Diffusion web UI (A1111), it translates **only the parts written in your own language**.
|
||||
|
||||
Translation uses AI running on your PC (**Ollama**) and the translation model **PLaMo 3 Translate**, which supports 51 languages besides English (Japanese, Chinese, Korean, French, German, Spanish, Russian, Thai, Vietnamese and more).
|
||||
Your prompts are not sent to an online translation service.
|
||||
|
||||
> **What you need first**
|
||||
> Install and start **Ollama** (Chapter 10, section 10-1). The translation model can be downloaded from the Settings screen (see below).
|
||||
|
||||
### Preparation: turn it on in Settings
|
||||
1. In the **Settings** tab, open **Prompt Translation (native language -> English)**.
|
||||
2. Check **Enable prompt translation in GenerateUI**.
|
||||
3. Choose the model in **Translation model**. Models not yet in Ollama are marked **(not downloaded)**; choose one and press **Download** to pull it into Ollama.
|
||||
4. Press **Test**. When the sample prompt comes back in English, you are ready.
|
||||
|
||||
PLaMo 3 Translate comes in four sizes.
|
||||
|
||||
| Model | Size | Notes |
|
||||
| --- | --- | --- |
|
||||
| 0.8B | about 0.6 GB | Fastest. Enough for short tags |
|
||||
| 2B | about 1.8 GB | Recommended. Translates sentences accurately too |
|
||||
| 8B | about 5.3 GB | Higher quality |
|
||||
| 31B | about 19.5 GB | Highest quality, for PCs with plenty of memory |
|
||||
|
||||
> **Tip**
|
||||
> 0.8B sometimes shifts the meaning of a sentence (for example, "the camera follows from behind" in Japanese became "her camera following behind").
|
||||
> If you often write prompts as sentences, such as video prompts, choose 2B or larger.
|
||||
|
||||
The other settings are:
|
||||
|
||||
| Setting | What it does |
|
||||
| --- | --- |
|
||||
| Source language | Usually leave it at **Auto-detect**. If you always write in one language, choosing it makes detection certain |
|
||||
| Ollama URL | Ollama's address. Blank means `http://localhost:11434` |
|
||||
| Where to run the translation model | **GPU** or **CPU, kept loaded** (see below) |
|
||||
| Translate automatically when running | Translates automatically when you press Generate and so on (see below) |
|
||||
|
||||
Other Ollama models (such as the one you use for chat) can also be chosen under **Other Ollama models**. They are sent the text with a "translate into English" instruction.
|
||||
|
||||
### Where to run the translation model
|
||||
| Where | Time per phrase | Good for |
|
||||
| --- | --- | --- |
|
||||
| GPU (fastest per translation, uses VRAM) | about 0.1 s | GPUs with VRAM to spare |
|
||||
| CPU, kept loaded (no VRAM, no reload wait) | about 0.2-0.3 s | Keeping all VRAM for image generation |
|
||||
|
||||
On GPU, turning on **Unload the translation model from VRAM after translating** frees VRAM before image generation (on by default).
|
||||
However, every translation then waits **about 4 seconds** while the model loads again.
|
||||
|
||||
**CPU, kept loaded** keeps the model in system RAM (about 2.7 GB for 2B).
|
||||
It uses no VRAM and is loaded in the background when a workflow is loaded into GenerateUI, so even the first translation does not wait.
|
||||
|
||||
> **Tip**
|
||||
> When Ollama loads another model (for example the AI TOOL chat model), it may drop the resident translation model.
|
||||
> It then loads again automatically at the next translation (that one translation takes a few seconds).
|
||||
|
||||
### Using it: translate with the globe button
|
||||
With Prompt Translation on, a **globe (🌐)** button appears to the right of the **↺** button of Positive Prompt and Negative Prompt on the Input tab.
|
||||
|
||||
1. Write the prompt in your own language. Mixing in English tags is fine.
|
||||
|
||||
```
|
||||
masterpiece, 夕焼けの海辺に立つ少女、(長い黒髪:1.2), <lora:test_lora:0.8>, {猫耳|狐耳}, 水彩画風
|
||||
```
|
||||
|
||||
2. Press the globe button.
|
||||
3. Only the parts in your language become English.
|
||||
|
||||
```
|
||||
masterpiece, A girl standing by the seaside at sunset, (long black hair:1.2), <lora:test_lora:0.8>, {cat ears|fox ears}, watercolor style
|
||||
```
|
||||
|
||||
The following prompt syntax is kept as it is, without translating:
|
||||
|
||||
- Commas and line breaks
|
||||
- Weights `(word:1.2)` and `[ ]`
|
||||
- Random choice `{A|B}` and wildcards `__name__`
|
||||
- LoRA `<lora:name:0.8>` and `embedding:name`
|
||||
- `BREAK` and `AND`
|
||||
|
||||
After translating, an **Original** button appears. Press it to go back to the text before translation (Ctrl+Z also works).
|
||||
|
||||
> **Note**
|
||||
> Only parts that contain letters outside ASCII are translated; English-only parts stay as they are.
|
||||
> Conversely, an English word that contains an accented letter such as é is translated too.
|
||||
|
||||
### Translating automatically when running
|
||||
Under **Translate automatically when running** in Settings, checkboxes choose when to translate automatically.
|
||||
|
||||
- **GenerateUI - Generate**: pressing Generate replaces the text of the Positive/Negative fields with the translation, then generates
|
||||
- **GenerateUI Lab - Run**: a Lab run translates only what is sent. The Lab plan keeps your text
|
||||
- **Video Plan - Run**: a Video tab Plan run translates only the prompts that are sent. The plan keeps your text
|
||||
|
||||
Because Lab and Video Plan keep your text, you can keep editing the plan in your own language.
|
||||
The information saved with the generated images and videos (metadata) records the English prompt that was actually sent.
|
||||
|
||||
> **Note**
|
||||
> If translation fails while automatic translation is on (for example, Ollama is not running), generation stops so that untranslated text is not sent.
|
||||
> For Lab and Video Plan, the reason is shown in the progress line.
|
||||
|
||||
### Also in the Lab modal and Video Plan
|
||||
The globe button is also on these fields, and works the same way:
|
||||
|
||||
- The Positive and Negative fields of the screen that opens when you double-click a cell in Lab's prompt column (5-7)
|
||||
- The **Prompt** field of a block in the Video tab's Plan subtab (Chapter 11, section 11-4)
|
||||
|
||||
> **Tip**
|
||||
> PLaMo 3 Translate is free for personal use, hobbies, research and other non-commercial use (PLaMo Community License).
|
||||
> Check the license terms before using it commercially.
|
||||
|
||||
> **Summary of this chapter (second half)**
|
||||
> - With the Batch subtab, you can generate in bulk while changing the model, prompt, sampler and so on, one kind at a time
|
||||
> - Choose the kind with the Batch Queue column checkbox and start with Generate. Turn the check off when done
|
||||
> - Feeder is a feature that feeds many images one at a time into a workflow. A dedicated node is required
|
||||
> - Lab is an advanced feature that can switch several settings at separate timings
|
||||
> - Partner API nodes (Nano Banana and others) run once `COMFY_API_KEY` is set in `.env`. They consume credits
|
||||
> - With Prompt Translation on, the globe button turns a prompt written in your own language into English. Prompt syntax is kept, and Generate, Lab and Video Plan runs can translate automatically
|
||||
|
||||
@@ -223,6 +223,10 @@ With the buttons shown below the translation result, you can use the result.
|
||||
|
||||
When you want to know the meaning of an English prompt, you can conversely translate it with **EN->JA**.
|
||||
|
||||
> **Tip**
|
||||
> To translate directly in GenerateUI's prompt fields, **Prompt Translation** (the globe button) in Chapter 5, section 5-10 is handy. It turns only the parts in your language into English and keeps weights and LoRA tags.
|
||||
> The AI Assistant's translation can also use the translation model **PLaMo 3 Translate** (v0.9.9 and later; before that, the instruction text was translated too, and ZH->EN came out in Japanese).
|
||||
|
||||
### Making prompts while consulting the AI
|
||||
Write a question in the input box and press **Send** (or the Enter key) to chat with the AI.
|
||||
|
||||
|
||||
@@ -110,6 +110,11 @@ The screen is divided into four parts, all shown at the same time.
|
||||
> Small models sometimes return the original text as it is without translating.
|
||||
> In that case a message says the model returned the original text, so try another model.
|
||||
|
||||
> **Tip**
|
||||
> You can also choose the translation model **PLaMo 3 Translate** (Chapter 5, section 5-10) as the model in Settings (v0.9.9 and later).
|
||||
> Besides Japanese, English and Chinese, **Free** accepts language names such as French, フランス語 or français for any language PLaMo supports. A target language PLaMo does not support (such as Portuguese) gives an error.
|
||||
> The same applies to the translation in WS Library's A tab.
|
||||
|
||||
### Chat
|
||||
Talk in the input box and send with **Enter** (**Shift + Enter** for a line break).
|
||||
It remembers the flow of the conversation, so follow-up requests such as "make it a brighter mood" also work.
|
||||
|
||||
@@ -155,6 +155,14 @@ You load a matching workflow with **Load in Video** in the Workflow tab and use
|
||||
|
||||
There are also the **Frame** feature, which saves a favorite scene of a video as a still image, and **GIF**, which converts a video to an animated GIF.
|
||||
|
||||
> **Tip**
|
||||
> The **Prompt** field of a Plan block also has the Prompt Translation globe button (Chapter 5, section 5-10).
|
||||
> With **Video Plan - Run** turned on in Settings, you can run the plan with prompts in your own language and send only English.
|
||||
|
||||
> **Note**
|
||||
> Up to v0.9.8, with workflows saved by newer ComfyUI versions, the prompt, length (Duration) and Turbo settings entered in Plan were not applied, and the values saved in the workflow were used instead (fixed in v0.9.9).
|
||||
> Because Plan values are applied now, running the same plan as before may give different results.
|
||||
|
||||
### Register as Asset and audio conversion (v0.8.9 and later)
|
||||
- **Register as Asset** - a button in the Video Source panel on the left. It copies a video from your PC into the output folder (`output/video`) and registers it in the "Video Assets" group.
|
||||
Once registered, it appears in the Asset subtab list and can be used in Edit and elsewhere.
|
||||
@@ -203,6 +211,7 @@ Here we mainly introduce items not covered in earlier chapters.
|
||||
| CivitAI API Key | For fetching Civitai information (optional) | Chapter 6 |
|
||||
| Eagle integration (optional) | Automatically save generated images to Eagle | Chapter 8 |
|
||||
| VRAM Management (Ollama) | Unload AI models from memory before generation | Chapter 10 |
|
||||
| Prompt Translation (native language -> English) | Turn prompts in your own language into English with the globe button or automatic translation when running | Chapter 5, 5-10 |
|
||||
| Data Management | Backing up and restoring settings and data | Below |
|
||||
|
||||
### Default Workflow
|
||||
|
||||
@@ -88,6 +88,15 @@ In the **Model** subtab of GenerateUI, choose the model you want to use again an
|
||||
|
||||
If you always want to use the same model, the **Default Checkpoint** in the Settings tab is handy (Chapter 11, section 11-5).
|
||||
|
||||
### The Prompt Translation globe button does not appear or translation fails
|
||||
| Symptom | Cause | Fix |
|
||||
| --- | --- | --- |
|
||||
| No globe button | Prompt Translation is off | In the Settings tab, open **Prompt Translation (native language -> English)** and check **Enable prompt translation in GenerateUI** (Chapter 5, section 5-10) |
|
||||
| "Translation error" appears | Ollama is not running, or the translation model is not in Ollama | Start Ollama. If **Translation model** shows **(not downloaded)**, press **Download** |
|
||||
| Nothing changes ("Nothing to translate") | The prompt is English (ASCII) only | Only parts with letters outside ASCII are translated; English parts stay as they are |
|
||||
| Generation does not start with automatic translation on | Translation failed, so generation stopped instead of sending untranslated text | Same fix as "Translation error". In Lab and Video Plan the reason is shown in the progress line |
|
||||
| The translation is off | Small models (0.8B) can shift the meaning of sentences | Choose 2B or larger in **Translation model** |
|
||||
|
||||
### It does not become the same image even with the same settings
|
||||
Is the seed mode in the generate panel set to **Random**?
|
||||
To make the same image, you need to set the seed to **Workflow** (use the workflow's seed as it is) or **Fixed** (fix it to the value in the Seed field).
|
||||
|
||||
@@ -34,6 +34,7 @@ The main terms that appear in this book, in alphabetical order.
|
||||
| Node set | Several nodes and their connections saved together | Chapter 9 |
|
||||
| OCR | Reading the text shown in an image | Chapter 10 |
|
||||
| Ollama | Software for running local AI easily | Chapter 10 |
|
||||
| PLaMo 3 Translate | A translation AI model by Preferred Networks (PFN), used by Prompt Translation | Chapter 5 |
|
||||
| Port number | A number for distinguishing which software to communicate with inside one computer | Chapter 2 |
|
||||
| Positive prompt | A prompt where you write what you want drawn | Chapter 7 |
|
||||
| Preset | A pair of positive and negative prompts saved together | Chapter 7 |
|
||||
@@ -122,6 +123,7 @@ The main terms that appear in this book, in alphabetical order.
|
||||
| --- | --- | --- |
|
||||
| Civitai (https://civitai.com/) | Getting models, fetching information | Chapter 6 |
|
||||
| Ollama (https://ollama.com/) | Local AI | Chapter 10 |
|
||||
| PLaMo 3 Translate (https://huggingface.co/pfnet/plamo-3-translate-2b-GGUF) | Translation model for Prompt Translation | Chapter 5 |
|
||||
| LM Studio (https://lmstudio.ai/) | Local AI | Chapter 10 |
|
||||
| Lemonade Server (https://lemonade-server.ai/) | Local AI | Chapter 10 |
|
||||
| Eagle (https://eagle.cool/) | Image-management software | Chapter 8 |
|
||||
|
||||
Reference in New Issue
Block a user