---
title: 20250419気ままに勉強会LT
tags: 
author: [dai365](https://www.docswell.com/user/dai_keiba_73)
site: [Docswell](https://www.docswell.com/)
thumbnail: https://bcdn.docswell.com/page/Y76QZ88M7V.jpg?width=480
description: 生成AIによる文字読み取りをやってみた内容です
published: April 19, 25
canonical: https://www.docswell.com/s/dai_keiba_73/ZL12JL-2025-04-19-205104
---
# Page. 1

![Page Image](https://bcdn.docswell.com/page/Y76QZ88M7V.jpg)

帳票読み取り色々やってみたお話
最強の生成AI文字読み取りはどれだ？


# Page. 2

![Page Image](https://bcdn.docswell.com/page/G75RW99QE4.jpg)

自己紹介
dai 365
平成７年就職
以降、非ＩＴ業務に長年従事
現在は、とある団体でデジタル推進に従事
X：@dai_keiba_73
https://biribiri.connpass.com/
趣味：登山、競馬、お酒、プロレス、パソコン（ネット）
性格：手書きや手入力が極端に嫌い⇒昭和の業務は大嫌い！！
2024年11月 Microsoft MVPに
長らく無資格でしたが、生成AIパスポートを取得


# Page. 3

![Page Image](https://bcdn.docswell.com/page/9J2DQ22WJR.jpg)

はじめに
本日お話しする内容は、あくまで私が実際にやってみて
「こう思った」という個人の見解に基づいています。
特定のサービスや技術を評価するものではなく、私の体験談としてお聞きください。
内容に間違いなどありましたら、ぜひご指摘いただけると嬉しいです。


# Page. 4

![Page Image](https://bcdn.docswell.com/page/DEY2WYY9EM.jpg)

私の職場は ～ DXは進むものの、現実は…
組織を挙げてＤＸに取り組んでいますが
やはり部署や仕事によってはまだまだ紙やＦＡＸがたくさんあります
いったい日本のどの業界のデジタル化が進んでいるのか私にはわかりませんが
少なくとも私が経験してきた仕事は
伝票やＦＡＸ、それを元にシステムに入力、そんな仕事がたくさんあります


# Page. 5

![Page Image](https://bcdn.docswell.com/page/VJN89PPD78.jpg)

今回のシナリオ ～ 紙からデータへ！ AIで夢を叶える
取引先から届いた紙データをデータベース化する
•Before 取引先から紙の帳票が届く。その内容を手入力でExcelや他のシステムに転記・登録。
•After
とにかく生成AIを使って自動的に読み取りたい！！抽出したデータをデータベース化したい。


# Page. 6

![Page Image](https://bcdn.docswell.com/page/YE9K2338E3.jpg)

まず、AI BUILDERでもこのくらいは出来る ～ 手軽さと破壊力
AI Builderとは: MicrosoftのPower AppsやPower AutomateにAI機能を非常
にお手軽に組み込めるサービス。
メリット:
• 専門知識がなくてもAIが使える。
• 破壊力は絶大！（業務効率化へのインパクト）
• 何より構築スピードがヤバい！
利用: ライセンスとクレジット（費用）は必要。
可能なこと:
• ビジネスカード、請求書、領収書などの定型帳票の読み取り
• テキスト認識、言語分析、画像分析など、様々なタスク
• カスタムプロンプトで独自の抽出も可能
https://learn.microsoft.com/ja-jp/ai-builder/overview


# Page. 7

![Page Image](https://bcdn.docswell.com/page/GE8R5MMZJD.jpg)

まずはファイルを追加します ～ AI BUILDER カスタムプロンプトで抽出
手順（カスタムプロンプトの場合）:
プロンプト記述:
帳票から抽出したい要素をAIに伝える。
（例：「このファイルから〇〇を抽出してくださ
い」のようにシンプルでOK）
サンプルデータ追加: 読み取りたいサンプル帳票
（PDFなど）をアップロード。
プロンプトのテスト: 実行してAIの読み取り結果を
確認。結果はJSON形式で出力される。
結果:
ここでJSON構造が意図通りか確認。
問題なければカスタムプロンプトを保存！
スピード:
この一連のテストが超速でできます。


# Page. 8

![Page Image](https://bcdn.docswell.com/page/LELKY331JR.jpg)

次にフロー作成です
まずは基本形を作り、値が取得出来るかを試す
私の場合は最初は手動トリガーでお試し
必要に応じてJSON解析を入れて
データソースに追加


# Page. 9

![Page Image](https://bcdn.docswell.com/page/4JM2NDD5JW.jpg)

先日サクっとこんなの作りました(所要時間1時間) ～ 身近な課題をAIで即解決！
最近、緑内障と診断されまして・・・
緑内障って飲んじゃいけない薬あるみたいですね・・・
今までお薬手帳なんか持ったことないし・・・
ってことで(笑)、これが3月16日のお話


# Page. 10

![Page Image](https://bcdn.docswell.com/page/PJRMD44ZE9.jpg)

様々な帳票を試しているうちに・・・
どうもGPT-4oの弱点が見えてきた・・・
やや複雑な構造のテーブルや手書きはなかなか読み取れない


# Page. 11

![Page Image](https://bcdn.docswell.com/page/PEXV12217X.jpg)

ということでまずはMISTRAL
Mistralの特徴
高精度な認識能力
テキストだけでなく、表や数式、グラフなどの複雑なレイアウトも正確に解析可能。
94.89%の認識精度を誇り、GoogleやMicrosoftのOCR技術を上回る性能を発揮。
多言語対応
日本語、英語、中国語など主要言語に加え、ヒンディー語やアラビア語など数千もの言語に対応。
高速処理
単一ノードで1分間に最大2000ページの処理が可能。大量文書の効率的な処理が可能。
マルチモーダル対応
ドキュメント内のテキスト、画像、表、数式などを統合的に抽出し、Markdown形式やJSON形式で出力可能。
柔軟な利用方法
URL指定によるPDF処理やローカルファイルのアップロードが可能。
画像ファイル（JPEG、PNGなど）のOCR処理にも対応し、Base64エンコード形式で画像データを直接渡すことも可能.


# Page. 12

![Page Image](https://bcdn.docswell.com/page/3EKQ2MMMED.jpg)

面白いのはURL指定によるPDF処理
作況
マークダウンで出力される


# Page. 13

![Page Image](https://bcdn.docswell.com/page/L73P4YY2E5.jpg)

もちろんファイルからも読取出来る
PDFファイルをアップ
マークダウンで出力される


# Page. 14

![Page Image](https://bcdn.docswell.com/page/87DLQ556EG.jpg)

出力されたマークダウンをJSON化
で、ですね
これ作るのに
ここでAI-Builderのカスタムプロンプトを使用


# Page. 15

![Page Image](https://bcdn.docswell.com/page/VJP2LGDZJ8.jpg)

GOOGLE AI STUDIO使ってました
項目数がやたらと多かったので手では作りたくなかった・・・
最適な構造化がどんなものかもGeminiに考えさせた
めちゃめちゃ作業効率が良かった
使ったモデルは最新のGemini2.5Pro


# Page. 16

![Page Image](https://bcdn.docswell.com/page/2EVDQ61MEQ.jpg)

ここで思いつく、ひょっとして・・・
うわー、全部読み取れてる！！
印字データならほぼ完璧です


# Page. 17

![Page Image](https://bcdn.docswell.com/page/57GYWN2X7L.jpg)

まさかとは思うが、手書きもか？ ～ GEMINIの衝撃的な精度
キター！！！！
驚異の読取精度です
ちなみにGemini2.0flashでも全然実用に耐えるレベルです
テーブルもバッチリ！


# Page. 18

![Page Image](https://bcdn.docswell.com/page/4EQM3QP5JP.jpg)

じゃあ、API使いますか
まあ、こんな感じでAPI叩いてみます
本文もGemini2.5に作ってもらいました(笑)


# Page. 19

![Page Image](https://bcdn.docswell.com/page/KJ4V1NYVE1.jpg)

お薬手帳アプリも改良！！
印字データなのでそもそも精度は高いが、さらに精度高く！


# Page. 20

![Page Image](https://bcdn.docswell.com/page/LE13G564JG.jpg)

GOOGLE AI STUDIO利用上の留意点
Google AI Studio利用上の注意点
課金ＡＰＩにしないと入力内容が学習に利用されてしまいます。


# Page. 21

![Page Image](https://bcdn.docswell.com/page/GEWPK5WZJ2.jpg)

と思いきや
4月１２日、AI-Builder GPT-4oでも出来るように！！！
４月１５日、GPT-4.1降臨！！がしかし


# Page. 22

![Page Image](https://bcdn.docswell.com/page/47ZKZN5L73.jpg)

4月17日、さらに新モデル！！
我慢できずに課金(笑)
o3だとめちゃめちゃ推論しちゃうのでo4-miniで十分！！結果もバッチリ


# Page. 23

![Page Image](https://bcdn.docswell.com/page/YJ6QZ89MJV.jpg)

おわりに ～ 終わらない進化を楽しむに
3月だけでも生成AIの進化はすごかった
Gemini2.0flash(image generation)で画像の加工ができるようになり
Gemini2.5が発表され
GPT-4oの画像からの日本語読取がめちゃめちゃ向上し、マンガみたいなのが作成できるように
M365CopilotへのResearcherやAnalystの搭載が発表されたり
それ以外もたくさんありましたが
たまたま今はGemini2.5がすごかったのかな・・と
とか言いながら、今週4.1，o4-mini,o3と３つも新モデルが出ましたね
これからも進化が楽しみで仕方ないですね、最後に一言、o3やべえ・・・マジやべえ


