OCI生成AIのCohereとMetaで利用可能なモデルには、以下が含まれます。
専用AIクラスタにより、プライベートな専用GPU上で基本モデルをホストすることが可能となります。これらのクラスタは、本番ユースケースに必要な高スループット・パフォーマンスを提供し、ワークロードのホスティングと微調整をサポートします。OCI生成AIは、ダウンタイムなしでクラスタをスケールアウトし、ボリュームの変化に対応することができます。
チャット・エクスペリエンスは、CohereおよびMetaモデルによりすぐに利用できるインタフェースを提供し、ユーザーはOCIコンソールまたはAPIを介して質問したり、会話型レスポンスを取得したりできます。
OCI Generative AIは、言語モデルに基づく生成AIアプリケーションの新しいインターフェース開発に使用できるオープン・ソース・フレームワークであるLangChainと統合されています。LangChainにより、言語モデルとの連携に必要な抽象化やコンポーネントの入れ替えが容易になります。
コンテキスト拡張アプリケーションを構築するためのオープン・ソース・フレームワークであるLlamaIndexをOCI生成AIとともに使用して、RAGソリューションまたはエージェントを簡単に構築できます。カスタム・データ・ソースと柔軟なツールにより、ソリューションをプロトタイプから本番へと移行できます。
OCI生成AIは、コンテンツ・モデレーション制御を提供しており、ダウタイムなしでのエンドポイント・モデルの交換、エンドポイントの無効化および有効化機能を間もなく提供する予定です。それぞれのモデルのエンドポイントについて、OCI生成AIは、コール統計、トークン処理、エラー・カウントなど、一連の分析を取得します。
OCI Generative AIで作成した機能をOracle Cloudアプリケーションに直接埋め込むことで、Oracleはお客様が複雑な統合なしにAIによる機能にすぐにアクセスできるようにしています。