令和３年度戦略的基盤技術高度化支援事業（ＡＩを活用した採択審査に関する調査）報告書

Thu, 20 Apr 2023 00:00:00 +0000

この報告は、戦略的基盤技術高度化支援事業の採択審査にAI技術を活用した効率化・高度化に関する実証調査について書かれた報告書である。本調査は、毎年数百件の申請から百件前後を採択するサポイン事業の審査にかかるコストを削減するため、AI（自然言語処理技術）を活用した審査システムの実証を行った。従来の審査では1件につき複数の有識者や職員が関与するため、審査コストが無視できない状況となっていた。基本的にはAIのみでの審査は困難であることから、審査員を補助する仕組みとして最適な方法を検討し、他の委託事業や補助事業にも横展開できる仕組みの構築を目指した。実証では、過去4年分のサポイン事業データ1007件を対象とし、申請書PDFデータの機械判読可能な電子データ化とAIを活用した審査の実証を実施した。教師データとして審査済み申請書データと審査結果を用い、自然言語処理により点数の差分を生み出した要因を学習させ、各申請書の評価軸に対してAIが点数付けを行った。また独自のCI技術を活用して教師データの質の向上を図った。実証結果では、審査AIの性能が人間の審査員の正解率及び相関係数にほぼ匹敵する精度を確認した。教師データ数を増減させた検証では、データ数が増加すると審査精度も向上する傾向が見られ、さらなる精度向上の余地があることが判明した。評価貢献度の高い審査員の審査結果を抽出した教師データでは、現時点のデータ量では性能向上の確認に至らなかったが、データを増やすことで性能向上が見込まれることが示唆された。

令和元年度我が国におけるデータ駆動型社会に係る基盤整備（デジタルガバナンスに係る定量的評価方法に関する調査研究）報告書

Thu, 25 Jun 2020 00:00:00 +0000

この報告は、企業のデジタルガバナンスを先端デジタル技術により定量的に評価する手法の開発について書かれた報告書である。

経済産業省が推進するDX推進指標やデジタルガバナンス・コードを基盤として、従来のアンケート形式による主観的評価に代わり、客観性の高い実質的な評価方法の構築を目指している。この取り組みは、企業が経営においてデータやデジタル技術の活用を適切に位置付けるデジタルガバナンスの向上を支援し、Society5.0社会の実現に寄与することを目的としている。

評価手法として「Disrupt」と「visiongram」という2つの手法を設計し、実際に4社の協力を得て検証を実施した。Disruptでは、企業が注視するリスクシナリオをスコア化し、業界レポートとの比較により抜け漏れを確認できることが判明した。Visiogramでは、DXビジョンの浸透度を定量的に測定し、企業間比較を可能にするとともに、経済産業省の成熟度レベルとの対応関係を確認できた。

検証結果から、影響を与える技術ごとにスコアの高低が確認でき、対象企業がどの技術によるリスクシナリオを重視しているかを把握可能であることが分かった。また、集合知技術を活用したスコアリングにより、高評価ばかりを付ける参加者に対しては自動的に浸透度が低くなる設計となっており、虚偽の評価を防止する仕組みが組み込まれている。

今後の展望として、業界の主要企業が参画して業界レファレンスデータベースを構築することで、各社のリスクシナリオカバー状況をより詳細に把握できるようになると想定されている。さらに、参加者の属性を拡大し継続的な測定を実施することで、企業の実態により迫ることが可能になると考えられている。

VISITS Technologies on Government Report Hub

令和３年度戦略的基盤技術高度化支援事業（ＡＩを活用した採択審査に関する調査）報告書

令和元年度我が国におけるデータ駆動型社会に係る基盤整備（デジタルガバナンスに係る定量的評価方法に関する調査研究）報告書