様々な疾患を対象とした将来的なリスクを予測する、生体サンプルによるスクリーニング検査サービスで利用されているAIの性能評価を実施しました。あわせて、クライアント様が所有されるデータからAIモデルを当社側で作成し、さまざまな評価手法と基準を組み合わせた包括的評価を行うなど、客観的な評価プロセスの整備を通じ、次フェーズのモデル改善に向けた技術的基盤を構築しました。
課題と対応
課題
- 自社で現在利用しているAIモデルの精度について、専門家の立場からの客観的な評価がほしい
- 評価手法・基準を定め、モデルの改善余地を定量的に把握したい
対応
- 単に同じデータでモデルを再構築するだけでなく、知見を踏まえ適切な評価手法を選択し、プロセスの透明性を確保した評価を実施
- 感度・特異度を中心とした評価指標を設定し、閾値変更が性能に与える影響を定量的に分析
プロジェクト情報
| 関係機関 / お取引先名 | ヘルステックベンチャー様 |
|---|---|
| カテゴリ | |
| キーワード |
AI・データ・サービスへの
ご相談はいつでも承ります
ご相談はいつでも承ります