よくできた文書AIが2年で止まった——だからDEEP Opsをリリースしました

法令や書式が変わると、文書AIは止まります。韓国ディープラーニングが、MLOpsの次の段階であるVLM Opsと、文書AI運用プラットフォームDEEP Opsをリリースしました。自然言語での基準変更、バージョン比較、無介入率の測定までを実際の画面でご確認ください。
한국딥러닝's avatar
Oct 08, 2026
よくできた文書AIが2年で止まった——だからDEEP Opsをリリースしました

ひと目で把握

「それ、一昨年に自動化したのではなかったですか?」文書AIを導入した担当者なら、一度は耳にしたことのある言葉でしょう。うまく回っていたシステムが、ある日たった一つの項目の前で止まり、見積書がまた届き、会議でこの質問が飛び出します。

KDLは、去る9月2日にDEEP Opsをリリースしました。

💡

DEEP Opsを一言で言えば、文書AIを導入した後に、業務が変わるたびに再開発なしで、担当者が自ら修正し検証する文書AIの運用プラットフォームです。

文書AIには、なぜ別途の運用プラットフォームが必要なのでしょうか。この記事では、うまく回っていた文書AIが、時間とともになぜ止まるのか、運用の過程で実際に何を管理すべきか、そしてDEEP Opsがこの問題をどう解決するのかを、順を追って説明していきます。

問題は精度ではなく、変更でした


私たちが実際によく受けるお問い合わせの一つが、こうしたケースです。他社の文書AIを構築して2年近くうまく使ってきたのに、ある日、業務基準が変わったことで問題が生じます。

「告示が改正されて、支援対象の基準日という項目が追加されたのに、既存のシステムではこの項目が読めないのです。」

最初に構築したときは、問題ありませんでした。当時決められた文書と項目は、きちんと処理できていたからです。しかし新しい項目が追加されると、既存のシステムだけでは対応が難しくなります。システムが止まる理由は、精度ではありません。その項目を読むように学んだことがない、ということなのです。こうしたことは、思いのほか頻繁に起こります。

  • 法令や告示が改正されるとき

  • 商品や審査基準が変わるとき

  • 取引先が新しい書式で書類を送ってくるとき

  • 抽出結果の変更根拠と適用時点を記録に残さなければならないとき

結局、文書AIを長く運用するほど重要になるのは、最初に構築したときの精度だけではありません。業務が変わったとき、どれだけ速く基準を修正し、検証し、再び運用に反映できるかが、あわせて重要になってきます。

項目一つに、なぜ数週間もかかるのでしょうか


従来のOCR方式で抽出項目を一つ追加すると、次のような手順を踏みます。

ステップ

行うこと

誰が

1

変わった書式の実文書の収集、正解ラベリング

顧客

2

開発会社への依頼、見積もり、社内稟議

顧客

3

モデルの修正と検証

開発会社

4

運用環境への再デプロイ

開発会社

5

その間、当該項目は手作業で処理

現場担当

短くて数週間、長ければ2か月かかります。

このとき、KDLが着目したのは期間ではなく、構造でした。導入の成果は一度出れば終わりなのに、変更のコストは業務が変わるたびに繰り返し発生します。時間が経つほど、文書AIは成果の項目ではなく、コストの項目として見え始めます。

これは、担当者がベンダーを選び間違えた結果ではありません。その時点のOCRが、変更というものを前提とせずに設計されていたからです。導入の段階で何を見るべきかは、OCR APIをつなげば自動化になるのか?『AI社員』を作る5つの導入基準に整理してありますが、この記事はその次の段階の話です。

最初はKDLも、再学習で解決していました


正直に言うと、KDLも当初は同じやり方でした。変更の依頼が来ると、データを受け取って再び学習させ、また再デプロイしていました。

ところが、顧客企業のプロジェクトで適用範囲が広がると、問題の性質が変わってきました。部署ごとに必要な抽出項目が違い、品質基準が違い、使うプロンプトも違いました。一つを変えると、他のところにどんな影響が及ぶのかを、ずっと見続けなければなりませんでした。

そのとき、気づいたことがあります。私たちが管理すべきなのは、モデルではありませんでした。

MLOpsが管理するのはモデル、文書AIで変わるのは業務基準


ソフトウェア業界はこの種の問題を何度も経験し、そのたびに運用体系を一つずつ作ってきました。

体系

管理対象

変更の主体

DevOps

コード

開発者

MLOps

モデルと学習データ

機械学習エンジニア

LLMOps

プロンプトとコンテキスト

AIエンジニア

VLM Ops

抽出スキーマと業務基準

現場担当者

上から下へ読むと、管理対象が移っていくのが見えます。コードからモデルへ、モデルからプロンプトへ、と。

文書AIで実際に変わるのは、モデルではありません。法令が変わり、審査基準が変わり、抽出すべき項目が変わります。変わるのは、業務基準なのです。

だからMLOpsだけでは解決しません。MLOpsは優れた体系ですが、管理対象はモデルのパラメータです。業務基準が変わったときにMLOpsが出す答えは、結局のところ再学習です。ところが現場が求めているのは、「この項目もあわせて抽出してください」という一文なのです。

VLM Ops、文書AIのための運用体系


この空白を埋めるためにKDLが定義したのが、VLM Opsです。視覚言語モデルを実際の企業業務にデプロイし、調整し、品質を管理する運用体系です。VLMそのものについては、以下で扱いました。

VLM Opsが資産として管理するのは4つで、それぞれにバージョンが付きます。

  • モデル——どのVLMを使うか

  • プロンプト——何をどう読むよう指示したか

  • 抽出スキーマ——どの項目をどの形式で抽出するか

  • 品質基準——どこまでを合格とみなすか

核心は、再利用です。

ある業務で検証を終えた組み合わせを保存しておき、別の部署、別の業務に持っていって使います。現場から出てきた評価結果や検収のフィードバックは、再び品質改善に反映されます。

全社的なAIプラットフォームの観点で見ると、これがなぜ必要なのかがはっきりします。企業がAIプラットフォームを作るとき、モデルのサービングやデータパイプラインまでは設計するのに、文書の層は空いている場合が多いのです。文書は部署ごとに書式が異なり、規定に応じて随時変わるため、中央で一度作れば終わり、という資産ではないからです。

この流れは、私たちだけが見ているわけではありません。

  • 世界の知能型文書処理(IDP)市場:今年39億ドル → 2033年には297億ドルと予測

  • 韓国の公共文書、hwpからhwpxという開放型フォーマットへの移行政策が始動

  • 韓国・科学技術情報通信部のAI特化行政サービス事業が今年着手

文書を、AIが使える形として継続的に管理しなければならない時代が来たのです。とはいえ、体系さえあれば担当者が使えるでしょうか。いいえ。だからこそ、製品にしました。

DEEP Ops、その体系を製品に


従来のOCRとDEEP Opsを5項目で比較した表。自然言語による変更、現場担当者による管理、バージョン比較などの違いを示す。
変更方法から検証、運用への反映まで、従来のOCRとDEEP Opsを比較。

DEEP Opsは、VLM Opsを実際に使えるようにした文書AIの運用プラットフォームです。文書AIを導入した後に変わる業務基準に合わせて、顧客が自らシステムを修正し、性能まで検証できるプラットフォームです。行うことは3つです。

行うこと

どのように

たとえば

変える

抽出項目と条件を自然言語で修正

「申請書から基準日もあわせて抽出してください」

比較する

変更前のバージョンと変更後のバージョンを同じ文書にかけて、結果を並べて確認

新しい項目はきちんと出るか、既存の項目は崩れていないか

残す

すべての変更をバージョンとして保存し、問題が起きれば以前のバージョンへ復旧

いつ、誰が、何を、なぜ変えたのか

すでにKDLの製品をお使いの方は、DEEP Agentと何が違うのか気になるかと思います。

DEEP Agent

DEEP Ops

役割

文書を読んで業務を処理

その文書AIの働き方を変え、検証し、管理

使う人

業務担当者

運用担当者

一言で

仕事をする

働き方を変える

DEEP Agent:文書を読んで業務を処理するAI社員DEEP Ops:そのAI社員の働き方、検証、管理

動作はシンプルです。担当者が自然言語で抽出基準を変えると新しいバージョンとして保存され、既存のバージョンと同じ文書で結果を比較したうえで、承認を経てデプロイされます。ステップごとの画面の流れはリリース案内の記事に整理してあるので、ここではその背後にある原則をお話しします。

自然言語で変えても、承認なしには反映されません


自然言語で変えられるからといって、誰もが運用中のシステムを好き勝手に変えられるようにすること、それがこの製品の目的ではありません。役割が分かれています。

区間

誰が

法令や書式が変わったことに気づく

顧客組織

自然言語で基準を決める → バージョンを残す → 性能を比較 → 承認プロセス

DEEP Ops

最終的なデプロイ時点の決定

顧客組織

この構造で最も大きく変わるのは、変更の主体です。ベンダーやAI開発者が行っていたことを、顧客の現場担当者が自ら行います。必要なものも、新規の学習データではなく、実際の文書と抽出基準があれば十分で、データが外に出ることもありません。

だからこそ、こう言えるようになりました。変更の回数に、もはやコストが付かなくなります。

  • 事前に登録した書式でなくても読み取ります

  • 抽出基準は、必要なだけ再定義します

  • 業務フローは、必要なだけ構成します

私たちは、この方式が従来の新規構築の方式に比べて、少なくとも50パーセント以上コストを削減できると見込んでいます。

運用性能は、無介入率で測ります


ここが最も実務的な部分です。構築時の精度は契約書に書かれます。ところが、運用中の性能はたいていの組織が測っていません。何を測るべきか、決めたことがないからです。

指標

定義

答える問い

全体精度

すべてのフィールドが正解と一致した文書の割合

手を触れずに済む文書が何件か

フィールド精度

正解と一致したフィールドの割合

いわゆる認識率

平均レイテンシ

文書1件の処理にかかる平均時間

業務時間内に終わるか

無介入率

人の確認なしに完了した処理件数の割合

実際に人手がどれだけ減ったか

4つのうち、導入効果を最も正直に示してくれるのが、無介入率です。

なぜでしょうか。フィールド精度95パーセントのシステムがあるとします。文書1件にフィールドが20個あれば、1件あたり平均1個が間違います。すると担当者は結局、すべての文書を開いて見なければなりません。精度は95パーセントなのに、無介入率はほぼ0という状況が、実際に起こります。

すでに文書AIをお使いなら、最初の問いはこれです。私たちは無介入率を測っているだろうか。

今お使いの文書AI、無介入率が何パーセントかご存じですか? 実際の文書サンプルをもとに、現在の無介入率を測定します。

DEEP Opsが必要な理由


数字だけでは、DEEP Opsがどこで必要なのか、なかなか実感しにくいかもしれません。ここからは、製造品質の業務を例に、順を追ってお見せします。

製造現場でよく扱う文書の一つが、素材の入荷時にあわせて届く試験成績書(CoA)と検査証明書です。協力会社ごとに書式が異なり、引張強度・降伏強度・伸び率・硬度といった実測値に、印鑑、手書きメモ、QRなどがあわせて入ります。

「現在」「文書AI導入」「DEEP Ops運用」の3列で、試験成績書の確認、自動判定、基準変更とバージョン管理の流れを比較。
試験成績書(CoA)の確認業務を、手作業から文書AIとDEEP Opsによる運用へ。

今はこうです

確認者が行うこと

やり方

規格の最小値と実測値の照合

成績書ごとに目視で

単位・有効桁の調整

再計算

ロット番号、署名の確認

全項目を全数確認

判定結果をQMSに入力

確認が終わってから可能

確認が滞ると、入荷が滞ります。しかもこの時間の大部分は、判断ではなく、読んで照らし合わせる時間なのです。

文書AIを導入すると、こうなります

成績書をアップロードすると、必要な項目を文書AIが抽出します。

鋼管の検査証明書1枚をもとにテストしたときは、証明書番号、発行日、規格、寸法、等級、熱処理、引張強度、降伏強度、伸び率、硬度など、29個のフィールドが自動で捉えられました。

担当者は、必要なフィールドと抽出基準を決めればよいだけです。

項目

導入後

ロット、強度、伸び率、硬度などの抽出

自動

規格最小値と実測値の照合

自動

単位の正規化・計算

自動

ロット・ヒート番号の欠落確認

自動

確認者が確認するもの

例外項目のみ

QA確認をなくすことが目的ではありません。すべての成績書を人が最初から最後まで見る代わりに、基準値に近い、単位が異なる、値が欠落している、といった文書だけを確認する構造へと変えることが核心です。

DEEP Opsで運用すると、ここからさらにもう一段変わります

規格が改正され、新しい協力会社が別の書式の成績書を送ってきて、顧客の要望に応じて確認すべき項目も追加されます。従来の方式では、こうした変化が生じるたびに、開発と検証が再び必要でした。

DEEP Opsでは、業務基準そのものを、運用しながら変えます。

  1. 左側にナビゲーションと文書一覧、中央に検査証明書、右側に引張強度や硬度などの抽出項目と判定基準を表示。
    実際の文書を確認しながら、抽出項目や判定基準を編集するテンプレート管理画面。

    自然言語で基準を変えます。「引張強度の実測値が規格最小値415MPa以上なら合格、未満なら不合格と表記」のように、新しい判定基準を追加します。

  2. 変更内容をバージョンとして残します。規格改正の反映といったメモとともに新しいバージョンが作られ、以前のバージョンもそのまま保管されます。

  3. 同じ文書で、変更の前後を比較します。既存のバージョンと新しいバージョンを同じ成績書に適用し、新しい項目がきちんと抽出されるか、既存の項目に影響がないかを確認します。

  4. 承認したバージョンだけを運用に反映します。検証を終えたバージョンだけがデプロイされ、いつ、誰が、何を変えたかも記録として残ります。

検索欄と絞り込み条件の下に、評価実行、テスト文書登録、バージョン保存、テンプレート作成の履歴を一覧表示した画面。
テンプレートの変更や評価、テストの履歴を時系列で確認できる監査ログ。

たとえば新しいバージョンでは、引張強度の実測値471MPaが基準の415MPaと比較され、「合格」と判定されるかどうかを、すぐに確認できます。核心は、新しい機能を一つ追加することにあるのではありません。

規格や書式が変わるたびに開発し直す代わりに、担当者が基準を修正し、検証して、運用を続けていけるということです。製造記録書(BPR)、検査成績書、設備点検表のように、基準値と実測値を比較する文書であれば、同じ方式で適用できます。

金融の審査基準が変わったり、公共の行政基準が変わったりするときも、構造は同じです。

判定基準を必要なだけ変え、比較し、検証すること。それが、DEEP Opsの仕事です。

ほかの事例もあります

組織

業務

導入前

導入後

無介入率

大手生命保険会社

退職年金の支給審査(月15,000件、法定期限は退職日+4日)

1件あたり12分以上、全数検算

例外の8%のみ確認、検算を92%削減、リードタイムを66%短縮

92%

金融グループの海外法人

与信書類の審査(現地語、月18,000件)

1件あたり21分以上

例外の11%のみ確認

89%

広域自治体

行政文書の構造化(生成AIプラットフォーム)

文書内の構造要素を個別に確認・構造化

構造要素を302/302検出、テキスト類似度98.8%

94%

行政機関

更正請求書の文書理解の検証

文書ごとの設問を直接確認・抽出

33種類の文書、361設問の抽出精度95%以上

90%

公共投資機関

投資先企業の事後管理DBの構築

登記簿謄本を1件ずつ確認し、必要情報を構造化

法人登記簿謄本9,410件を構造化

88%

顧客企業のセキュリティ方針に従い、社名は伏せ、測定条件とあわせて整理しました。広域自治体の事例は、人の確認を減らす業務とは、少し性格が異なります。行政文書を、生成AIが活用できる構造データへと変換した事例で、構造要素302個をすべて検出し、テキスト類似度は98.8%、表の構造類似度は79.18%でした。

文書ごとに目標とする指標は異なりますが、共通点は一つです。文書を一度うまく読んで終わりではなく、実際の業務に合わせて継続的に運用できなければならない、ということ。

ベンチマークで確認されたこと


運用体系を語る前に、その上で動くモデルがどこまで検証されているのかも、押さえておきます。

時点

ベンチマーク

結果

2026年3月

OCRBench v2 英語部門

1位、68.1点。2位のGemini 3 Proと4.7点差。アジア企業として初

2026年3月

LlamaIndex ParseBench

1位、76.4点。2位のGemini 3 Flashは75.0

2024年

Edison Awards エンジニアリングツール部門

Gold Prize。アジア初

OCRBench v2は、文書の認識と抽出だけでなく、構造パーシング、計算、理解、推論まで、7つの項目をあわせて見るベンチマークです。私たちのモデルは、特にパーシングと計算と理解の項目で差を広げました。文字を読む能力よりも、文書構造を理解し判断する能力で先んじた結果です。

ParseBenchで最も大きく先んじた項目は、視覚的な位置の根拠です。抽出した値が原文のどこにあるのかを、どれだけ正確に指し示せるかを見る項目で、金融や公共でAIの結果を受け入れるとき、真っ先に確認するのがまさにこれです。結果だけを渡すのではなく、根拠もあわせて示せるか、ということです。

自分の組織はどうか、8つの問いで確かめてみてください


すでに文書AIを運用しているなら、答えてみてください。

  1. 抽出項目を一つ追加するのに、何日かかりますか

  2. その変更を実行するのは、現場ですか、開発会社ですか

  3. 変更前後の性能を、同じ文書で比較したことはありますか

  4. 過去1年間で抽出基準を何回変え、それぞれいくらかかりましたか

  5. 無介入率を測っていますか

  6. 変更履歴は、社内監査の要求に耐えられますか

  7. 問題が起きたとき、以前のバージョンに戻せますか

  8. ほかの部署が同じ文書AIを使うには、一から構築し直しますか

答えにくいものが3つ以上あるなら、いま必要なのは、より正確なモデルではなく、運用体系です。

3つ以上あてはまったなら この8つの項目をそのままお持ちいただき、御社の基準に沿って一緒に点検します。

韓国ディープラーニングのAI専門家に直接相談できる案内バナー。文字認識、画像解析、動画理解、前処理などのAI技術に関する相談に対応します。
韓国ディープラーニングのAI専門家に相談

よくある質問


すでにMLOpsを運用していますが、別途必要ですか? 管理対象が異なります。MLOpsはモデルと学習データを、文書AIの運用は抽出スキーマと業務基準を管理します。法令や書式が変わったとき、MLOpsの答えは再学習ですが、現場で必要なのは抽出基準の一行の変更である場合がほとんどです。置き換えの関係ではなく、層が異なる関係です。

既存のMLOpsパイプラインと併用できますか? はい。DEEP Opsが管理するのはスキーマとプロンプトと品質基準で、モデルの学習とサービングは既存のパイプラインが担います。扱う資産が重ならないため、併用は自然です。

無介入率はどのように算定しますか? 全体の処理件数を分母に、人の確認なしに完了した件数を分子に置きます。重要なのは、何を「確認」とみなすかを先に決めることです。信頼度が低く自動で例外に分類された件、文書間の照合で不一致が出た件、担当者がただ開いてみた件を、それぞれどう数えるか。基準なしに出した無介入率は、比較になりません。

ほかの部署へ拡張するとき、一からやり直す必要がありますか? ある業務で検証を終えたモデル、プロンプト、抽出スキーマ、品質基準を資産として保存しておき、ほかの部署で再利用するのが、VLM Opsの目的です。文書の種類がまったく異なる場合は新しいスキーマの定義が必要ですが、最初に構築するときよりは少なくて済みます。

変更履歴は、社内監査の基準を満たしますか? スキーマの内容が実際に変わったときだけ新しいバージョンが作られ、以前のバージョンは上書きされずに残ります。何を、いつ、なぜ変えたかがバージョンごとに残ります。組織によって監査項目は異なるため、必要なログ項目と保存期間は、構築時にあわせて確認するのがよいでしょう。

公共機関のhwp文書にも対応できますか?はい。hwpとhwpxの行政文書の構造化は、京畿道庁や広域自治体の生成AIプラットフォーム構築で検証しました。法令や告示の改正に合わせて抽出基準を変える運用方式は、公共で特によく必要とされる機能です。

読むAIから働くAIへ、そして働き続けるAIへ


文書AIは、文字を読む段階を過ぎて、業務を行う段階へと来ました。分類し、抽出し、照合し、システムへ引き渡す仕事を、AI社員が行います。

ところが、社員は採用して終わりではありません。規定が変われば知らせる必要があり、業務が増えれば説明する必要があります。AI社員も同じです。仕事を始めさせるのが導入で、基準が変わった後も正しく働き続けさせるのが、運用です。

自社の文書AI、まずは無介入率から確認してみてください実際の文書サンプルで現在の無介入率を測定し、変更への対応範囲を表に整理してお渡しします。

参考資料


Share article