Skip navigation
できた、仕組み作るのに6時間くらいかかった...
0:00 / 0:39

できた、仕組み作るのに6時間くらいかかった...

KatoLundAyumu/加藤歩

@K_L_AinEU1.2K followers

Visit on X
203 likesDownloadOriginal post

32,981 views

できた、仕組み作るのに6時間くらいかかった... Codex→自作MCP→Premiereの自作プラグイン「KLA UXP Window」につないで、編集を自動化してみた。「いつものお願い」で全部一気に動く↓ ① 無音などの不要部分を自動カット ② 文字起こし+発話タイミングの補正 ③ 自然な日本語の区切りで1行テロップを作成 ④ 通常・強調・感情ごとにテロップをトラック分け ⑤ チャプター分け+サイドテロップを配置 ⑥ 解説テロップ+ザブトンを配置 ⑦ 話の内容に合ったインサート画像をAI生成 ⑧ メイン映像をワイプ化+枠を追加 ⑨ インサート画像にズームを追加 ⑩ チャプター間にアイキャッチを挿入 ⑪ 見どころをつないでアバンを作成 ⑫ 分類に合わせてテキストスタイルを適用 ⑬ テキスト用エフェクトを適用 ⑭ BGMを配置+音量・ループ・フェードを調整 ⑮ 感情に合ったSEを配置+音量を調整 ⑯ 気に入った編集ルールを次回用に保存 勝手にインサート画像とかワイプも作ってくれるのアツいね。もっとバリエーション作れそう。

22 Comments

Comments from the original post on X (Twitter)

  • 伊藤信博|AIエージェントを現場の力にする顧問's profile picture

    @nito

    「いつものお願い」の一言で15工程が一気に動くの、すごいですね!6時間でここまで仕組みにされたのも素晴らしいです~

    1 like

  • KatoLundAyumu/加藤歩's profile picture

    @K_L_AinEU

    ありがとうございます!まだまだ目標の半分くらいなので、もっと突き詰めます!

    1 like

  • 業績野比のび太's profile picture

    @maxim_president

    6時間かけてここまで自動化するのは凄いですね!「いつものお願い」で動くの、編集者には夢すぎます🔥

    1 like

  • ゴリラ@AI社員64人で回す1人会社's profile picture

    @33339999g

    ⑯の保存が地味に一番効いてきそうです。回すたびに自分好みに寄っていくやつですよね。6時間ならすぐ元取れそう

    1 like

  • みみみ's profile picture

    @mmm_tech

    ⑯で編集ルールを次回用に保存できるの、地味に羨ましいです。6時間のうち、MCPとUXP側どっちに時間食われました?

    1 like

  • KatoLundAyumu/加藤歩's profile picture

    @K_L_AinEU

    UXP本体は何か月か前からじっくり煮込んできたので開発期間は長めです! MCP接続のために既存のUXPプラグインのどの機能は使えてどの機能は使えないのか、みたいなのを選定したりするのに時間をかけました。なのでUXP側ともいえるし、MCP側ともいえる、というのが正確かもしれないです👀 また最近Pr26.0.2から26.5にアプデしたのですが、26.2からAPIが新しいの出てたのは知ってて、頭の中でこのAPIとこのAPIつなげればこれ出来るな、みたいなのはあらかじめアタリをつけていたので迷いはほぼなく仕組みを作れました、もしcodeXと壁打ちの段階から始める人がいたらUXP側の開発の方が時間がかかると思います!

  • みみみ's profile picture

    @mmm_tech

    ありがとうございます。自分はプラグイン側の資産がゼロで、AIにつなぐ手前で毎回止まる口なので、UXPを何か月も煮込んでいた分が6時間に効いてる、という順番のほうがしっくりきました

    1 like

  • センジュ丸's profile picture

    @senju_maru_dev

    テロップを感情ごとにトラック分けまでやるの、編集する人の発想ですね うちは動画を丸ごとコードで組んでて、編集ソフトまではつないでないです インサート画像、話に合わないのが来たときはどう直してます?

    1 like

  • KatoLundAyumu/加藤歩's profile picture

    @K_L_AinEU

    本来であればクリップのラベルカラーの方が好きなんですが、プラグイン側では個別のラベルカラー変更が難しくトラックを変えるに至りました!私はシーケンスの上下スクロール嫌いなので、できればトラック少なくしたいんですが... 以前まで私もコードをPrの外部で組んでて、とあるフォルダに動画きたらpython回して出力データをPrに持ち込む、みたいな形式をとっていました。ただ私はもはやPr使ってない時間の方が短いので、そういう場合はわざわざデスクトップに戻るくらいならPrで動くシステム作ったほうが早いかも?と思い今の形に至ってます インサート画像に関しては本腰をいれていないです、というのも ①AI生成画像がまだあまり好きではない ②動画生成モデルの急激な発展に伴って、安価で出力速いモデルが来た時におそらく画像より動画にシフトする可能性が高い ③まだ生成AIが日本語に弱い(と思ってる)ので、たぶん質を突き詰めるコストは私には見合ってない ※そして私も日本語が弱いのでプロンプトきれいに書けない なと考えているからです!現状は「生成したものを」「決められたトラックに」「決められた尺入れる」を基盤技術として作って、今後に生かす方向でいます!

    1 like

  • センジュ丸's profile picture

    @senju_maru_dev

    入れ物のほうを先に固めておく作戦なんですね 中身が画像から動画に替わっても、トラックと尺の決まりはそのまま使えますもんね

    1 like

  • chance's profile picture

    @chance1012835

    Codex → MCP → Premiere in one usual request is the receipt. Saving the rules for next time is the product, not the first cut.

  • Studio GB(テック系メディア)'s profile picture

    @ddd888_fortnite

    Astra使いますか? 具体的に10分の動画編集でどれくらいのコストかかりますか?

  • KatoLundAyumu/加藤歩's profile picture

    @K_L_AinEU

    Astra使わなくてもいけるやろと思って、sol中で回したら時間かかりすぎました…コスト面とおそらく速度面でもAstra低がいいかもしれないです! 開発にはPlusプランの週リミット分くらいでできました。 動画を作るコストは素材尺10分→完成尺8分で仮定した場合、インサートに使う生成画像にもよりますがProプランなら10本以上作れると思います、まだ検証が完璧ではありませんが…

    1 like

  • mickey|AIに仕事を丸ごと任せたらどうなるか実験室's profile picture

    @ai_kaitai

    6時間で組んだ仕組みが「いつものお願い」で全部動くの、いいですね。自分は健康ログの取込を自動化していて、先日棚卸ししたら9日分が止まったまま気づいていませんでした。248行あると欠けが見えない。作った後に「止まったら分かる」側は、どう置いてますか。

  • KatoLundAyumu/加藤歩's profile picture

    @K_L_AinEU

    素晴らしいですね! 私は趣味の範囲ですので扱っているものも規模も小さめなので参考になるか分かりませんが、監視・異常検知という話ですよね。 スケジュールで自動実行しているものについては、今のところ専用の監視を置くというより、毎朝必ず自分で動作状況をチェックするようにしています。そのため、少なくとも24時間以上気づかなかったケースは今のところありません。もちろん、規模が大きくなるとこのやり方では厳しくなると思うので、そのあたりは今後の課題ですね...

  • Jack's profile picture

    @salesoptecs

    Six hours to wire it and then one command runs the whole thing is the right trade. The part I would test is a bad cut, since the undo path is usually the afterthought.

  • Premiere効率化ラボ|AI動画編集's profile picture

    @premiere_flow

    これめちゃくちゃ興味あります。 自分もClaude CodeからPremiereを触る検証を続けてるんですが、 結局「動く」より「実案件でどこまで安全に任せられるか」が一番難しいと感じています。 6時間でここまで組めたのすごいです。

  • KatoLundAyumu/加藤歩's profile picture

    @K_L_AinEU

    そうですね、動画を要素別に捉えてさらに適切な日本語に置き換えることができないとマニュアル書くの難しいので、生成物にムラが出ないようにうまいこと制御したいなぁと思ってます! 安全という言葉をもう少し拡大解釈すると 「そもそもCodexやClaudeが触っていい素材なのか」みたいなとこにも行き着くと思ってて、今後はローカルLLMで外部に一切出さない仕組みも考えたいなと思ってます!

  • Premiere効率化ラボ|AI動画編集's profile picture

    @premiere_flow

    ローカルLLMまで考えてるの面白いですね。 自分も「安全=壊れない」だけじゃなく、 素材や案件情報をどこまで外部AIに渡していいかは 実案件だと避けて通れないと思っています。 PremiereをAIで触るところから、 だんだん「どこまでAIに渡すか」の設計になっていく感じがありますね。

    1 like

  • I. Jovan's profile picture

    @jovan_bored

    6時間でここまで繋ぐのはすごいです。実運用では①〜⑯を1 runとして、リトライ3回超で遅延とAPIコストが膨らまないか見たいです。