Machine Learning Operations (MLOps) with Vertex AI: Model Evaluation - 日本語版

Overview

このコースでは、ML の実務担当者に、生成 AI モデルと予測 AI モデルの両方を評価するための重要なツール、手法、ベストプラクティスを身につけていただきます。モデル評価は、ML システムが本番環境で信頼性が高く、正確で、高性能な結果を確実に提供するための重要な分野です。参加者は、さまざまな評価指標、方法論のほか、さまざまなモデルタイプやタスクにおけるそれらの適切な適用について理解を深めます。このコースでは、生成 AI モデルによってもたらされる固有の課題に重点を置き、それらの課題に効果的に取り組むための戦略を提供します。参加者は、Google Cloud の Vertex AI プラットフォームを活用して、モデルの選択、最適化、継続的なモニタリングのための堅牢な評価プロセスを実装する方法を学びます。

Syllabus

Vertex AI を使用した ML オペレーション（MLOps）へようこそ: モデルの評価

このモジュールでは、コースの目的を説明し、コース構造の概要を示します。

モデル評価の概要

このモジュールでは、モデル評価における課題と Vertex AI によるソリューションの提供について説明します。

生成 AI のモデル評価

このモジュールでは、生成 AI タスクを評価する際の課題と、これらの課題を克服するためのベストプラクティスについて説明します。また、Vertex AI で利用できるさまざまな種類のモデル評価サービスについても説明し、Vertex AI の Automatic Metrics、Automatic side-by-side、Safety Bias 評価サービスを紹介します。