AI搭載製品
急速に広がるAI技術。
バルテスではAI搭載製品のテストにも携わっています。
現在、AIを搭載したスマートスピーカーを利用したりAI botを利用したカスタマーサービスの省力化を図ることも珍しくなくなってきました。
他にも、AI技術を取り入れた画像認証による高精度な病理検査など私たちの周りは今やAIが使用されている製品で溢れており、AIを対象としたテストの重要性が高まっています。
バルテスではAIを搭載した製品・サービスへのテストを実施しています。
AI開発・テストにおける課題
-
- ・インプットとアウトプットが膨大となりテスト工数が大きい
- ・明確な期待値を設定しにくい
- ・複雑な構造からカバレッジを上げにくい
膨大なパターンから適切なテストケースを設計しなくてはならない
何が期待結果で、何を不具合とするのかを判断しながら検証する必要があり設計者においては製品の深い理解や要求にしかるべきを検討しなくてはなりません。
ユーザーによるインプットの揺らぎへの対応
ユーザーからインプットされるデータが様々なバリアントを持つため表現の揺らぎを考慮したテストが必要となります。その上ですべての経路をカバーしては莫大なコストになってしまうため、より効率的なテスト実施が必要となります。
バルテスのテスト・検証はここが違う
-
バルテスでは様々なブラックボックステスト技法を駆使し 抜け漏れを防ぎ、効率的なテストを実現します。
網羅性を保ちつつテストケースを 圧縮し、工数を大幅に削減することも可能としています。 -
テスト・検証に関する「人員リソースの変動」をすべておまかせ頂くことで、リソース、コストの削減を図ります。
バルテスでは、プロジェクト単位での対応ではなく、サービス毎にナレッジを作成するため、外部リソースで問題となるナレッジ分散の心配もありません。
全体のリソース削減から、開発に関するトータルのコスト削減にまでつながります。 -
テスト自動化の専任チームが、再利用性の高いキーワード駆動型・データ駆動型の自動化をご提供します。
自動テストの課題である運用面でのサポートまで充実のサービスをご提案します。
AI搭載機器のテスト・検証実績
主なテスト内容
- 機能テスト
- テスト自動化
- ストレステスト
- 複数端末テスト
主な品質管理・向上支援内容
- テスト自動化の構築
- テストデータの作成（文章組み換え・言い換えなど）
- シナリオテストケースの実施
- テスト計画
- テスト設計
- サマリレポートの作成
- テスト結果の報告
実績
- チャットボットシステム
- スマートスピーカー
事例 1
- テスト対象
- チャットボット
- 企業・業種
- 金融・保険業
-
保険関連のWEBサイトで訪問者のUX向上のためチャットボット導入にあたり、想定される回答の組み合わせが膨大となりテストの効率化が必要であった。 -
品質を担保しつつ工数を圧縮するテストシナリオの最適化を行い、第三者視点でテストデータを作成。データ駆動型の自動テストを行った。
事例 2
- テスト対象
- スマートスピーカー
- 企業・業種
- インターネット関連事業
-
AIスピーカーの機能を呼び出し際にフレーズに発語揺れ(部分一致や命令文省略など)があり、意図した機能を起動できないケースが多発していた。
-
- ・ユーザーの発話フレーズの網羅テストをAllpair法を用いて効率化して実施。
- ・機能の重複などの不具合の起きやすいシナリオテストケースの実施。
音楽、天気予報、スケジューラなど機能が重複した場合のケースを想定しテストを行った。
バルテスグループのサービス提供マップ
