商用AI 4モデルのすべてを、3つの指標で上回りました
手書きで記入された帳票130枚・7,660項目を、「1文字でも違えば不正解」という基準で採点した結果です。
GenOCR オンプレミス版
ジンベイ
総合スコア（F1）
75.55
- 読み取れた割合
- 77.2%
- 読み取った内容が正しかった割合
- 74.0%
Claude Opus 5
Anthropic
総合スコア（F1）
70.50
- 読み取れた割合
- 74.8%
- 読み取った内容が正しかった割合
- 66.7%
Claude Fable 5.1
Anthropic
総合スコア（F1）
68.18
- 読み取れた割合
- 73.7%
- 読み取った内容が正しかった割合
- 63.4%
GPT6（Astra）
OpenAI
総合スコア（F1）
67.63
- 読み取れた割合
- 75.1%
- 読み取った内容が正しかった割合
- 61.5%
Gemini 3.8 Flash
総合スコア（F1）
65.93
- 読み取れた割合
- 64.2%
- 読み取った内容が正しかった割合
- 67.7%
- 何を読ませたか
- 手書きで記入された帳票130枚、項目にして7,660か所です。請求書・見積書・申請書などを偏りなく含み、AIの学習に使っていない書式から選びました。
- どう採点したか
- 項目ごとの完全一致です。全角と半角、空白の違いをそろえたうえで、1文字でも違っていれば不正解としました。金額の桁のずれ1つ、担当者名の誤字1つも不正解です。
- 読み取れた割合とは
- 7,660項目のうち、正解と完全に一致した項目の割合です。読み落としの少なさを表します。
- 読み取った内容が正しかった割合とは
- AIが出力した項目のうち、正解と完全に一致していた割合です。読み間違いや、勝手に推測で埋めることの少なさを表します。
検証の詳しい内容はお知らせ記事をご覧ください。
差がついたのは「手書き」でした
印刷された文字であれば、どのAIもほとんど正しく読めます。差がついたのは手書き、それも急いで書かれた崩し字でした。
金額の例では、4モデルのすべてが、読みにくい数字を「読みやすい」数字に直してしまいました。会社名の例では、見慣れない漢字を別の言葉として扱ったり、実在しない社名に置き換えたりしています。
どちらも、AIが気を利かせてしまった結果の誤りです。文章を要約する用途であれば長所になる働きですが、帳票をデータにする場面では誤りになります。GenOCRは書かれたとおりに読むことを目的に学習させているため、こうした誤りが起きにくくなっています。
「読み取った内容が正しかった割合」で2位に6ポイント以上の差がついたのは、この設計の違いによるものです。
3つの導入のしかた
お客様の環境の制約に合わせてお選びいただけます。
オンプレミス版
提供中お客様の社内サーバーに設置し、閉じたネットワークの中だけで動きます。画像や文書を外部に送ることは一切ありません。
軽量版
開発中メモリ16GBのWindowsパソコンに入れるだけで動きます。GPUを積んだ機材も、インターネットへの接続も必要ありません。準備ができ次第、公開します。
クラウド版
提供中サーバーをご用意いただく必要がなく、最短で即日から使い始められます。2週間の無料トライアルは、こちらが対象です。
調達や社内審査で問われる項目
データを外部に出さない
クラウドに接続せず、閉じたネットワークの中だけで処理が完結します。
ISO/IEC 27001（ISMS）
情報セキュリティの国際規格の認証を取得しています。
プライバシーマーク
個人情報の取り扱いについて、第三者機関の認証を取得しています。
既存のシステムとつなげる
RPAや基幹システムとの連携を、APIで実現できます。
セキュリティチェックシートへのご回答など、導入審査にも対応しています。
閉じたネットワークでの活用例
金融機関
申込書・融資関連書類の処理
個人情報を含む口座開設の申込書や融資関連の書類を、閉じたネットワークの中で処理します。人手で数日かかっていた業務を数時間に短縮した例があります。
自治体
行政文書のデジタル化
住民票の写しや税に関する申請書類を庁内のネットワークで処理し、データを外に出さずに効率化します。内部監査にも適合しやすい構成です。
製造業
規格書・検査票の管理
工場内の規格書や検査票をオンプレミス環境に取り込み、RPAと連携してデータベースにします。品質管理が人に依存してしまうことを防ぎます。
広島県府中市との行政DX実証の成果はこちらをご覧ください。
オンプレミス版について、よくあるご質問
本当に、データは一切外部に出ませんか？
出ません。オンプレミス版は画像や文書を外部に送らず、お客様の社内サーバーだけで処理が完結します。クラウドへの接続がない、閉じたネットワークの中でもお使いいただけます。
クラウド版と比べて、精度は落ちますか？
落ちません。手書き帳票130枚・7,660項目を完全一致で採点した検証では、オンプレミス版がClaude Opus 5・Claude Fable 5.1・GPT6（Astra）・Gemini 3.8 Flashの4モデルすべてを上回りました。
GPUを積んだサーバーが必要ですか？
現在のオンプレミス版は、GPUを搭載した機材での動作を前提としています。GPUのない環境に向けて、メモリ16GBのWindowsパソコンに入れるだけで動く軽量版を開発中です。
LGWANのような閉域網でも使えますか？
外部への接続を必要としない構成のため、閉じたネットワークの中での運用が可能です。ネットワークの要件は環境によって異なりますので、個別にご相談ください。
オンプレミス版に無料トライアルはありますか？
無料トライアルはクラウド版が対象です。オンプレミス版をお試しになりたい場合は、お問い合わせいただければ個別にご相談いたします。
クラウド版から移行できますか？
移行できます。読み取りの仕組みは共通です。専任のチームが移行の設計から運用の定着までを担当する、乗り換えサポートプランもご用意しています。
導入の費用はどのくらいかかりますか？
オンプレミス版はサーバーの構成や読み取る量によって変わるため、個別のお見積りとなります。お問い合わせください。