AI音声・表情解析による社員面談・スキルスコアリング&フィードバック自動化 生成AI・AIX / HRTech

AI音声・表情解析による社員面談・スキルスコアリング&フィードバック自動化

GPT-4o Whisper API Python / FastAPI Vue.js AWS S3 / Lambda
クライアント業種 人材育成・HR / 大手コールセンター・接客業
開発期間 約3ヶ月
提供スコープ 動画音声処理パイプライン構築、AIプロンプト設計、スコアリングアルゴリズム開発、Webダッシュボード

1. 課題と導入前のボトルネック

全社的な1on1面談や採用面接の品質が面談官のスキルに依存し、面談後の議事録作成や評価シート記入に多大な時間がかかっていました。
  • 面談記録の作成負担と形骸化: 1回30分の面談につき議事録作成に20分以上要し、多忙なマネージャー層の業務を圧迫。
  • 評価基準のばらつきと主観性: 面談官によって評価コメントの粒度が異なり、従業員の育成課題を組織として客観的にトラッキングできない。
  • 動画データの保管と機密性: 録画データが大容量かつ個人情報を含むため、セキュアな保管とアクセス制御が必須。

2. Ill(イル)株式会社による設計・開発アプローチ

Ill(イル)株式会社 では、クラウドサーバーレス構成で動画からインサイトを瞬時に抽出するAI解析パイプラインを開発しました。
  • 高精度Whisper文字起こし & 話者分離(Speaker Diarization): 面談官と対象者の音声を自動分離し、タイムスタンプ付きの発言テキストを自動生成。
  • 構造化プロンプトによるスキルスコアリング & 強み・課題抽出: 自社の評価基準(コミュニケーション力、論理的思考、エンゲージメント等)に基づき、5段階評価と具体的フィードバック案を自動出力。
  • NGワード検知 & ハラスメント抑止機能: 不適切な発言やコンプライアンス違反リスクのあるフレーズを自動ハイライトし、管理者にアラート通知。
  • AWS暗号化ストレージ & 自動削除ポリシー: 面談動画を自動暗号化保管し、保存期間経過後の自動マスキング・削除機能を完備。

3. 導入効果とビジネスインパクト(ROI実績)

面談後の記録作成・評価入力にかかる時間が1回20分から3分へ85%短縮(全社で月間約600時間の削減)。
客観的なデータに基づくフィードバックにより従業員満足度(eNPS)が18ポイント改善し、面談の定着率が大幅に向上しました。

よくある質問(FAQ)

Q. ZoomやTeams、Google Meetの録画データと自動連携できますか?

A. はい。Webフックやクラウドストレージ連携により、オンライン面談終了後に自動で動画を取り込み、解析結果をSlackやメールへ通知できます。

Q. 自社独自の評価項目やコンピテンシーに合わせたカスタマイズは可能ですか?

A. はい。貴社独自の人事評価シートや評価基準に合わせてプロンプトやスコアリングモデルを完全にオーダーメイド設計いたします。

RELATED COLUMN

本事例に関連するシステム開発ノウハウや費用相場を詳しく解説しています。

👉 自社システムに生成AIをAPI連携し定型業務を自動化する開発手法 →

新規プロジェクトのご相談・プロトタイプ作成

マッチングサービス、業務DX、求人サイト、AI活用やクラウド移行など、貴社の課題を最短スピードでカタチにします。
現在、期間限定で無料プロトタイプ作成および技術選定・概算費用のご相談を承っております。