合成データとは？| Ibm

合成データとは？| IBM 合成データとは？ 著者 Rina Diane Caballar Staff Writer IBM Think 合成データとは何か 合成データとは、実世界のデータを模倣するように設計された人工的なデータです。これは、統計的手法や、 ディープラーニング や 生成AI といった 人工知能（AI） 技術を用いて生成されます。 合成データ は人工的に生成されたものであるにもかかわらず、元となる実データの統計的な特性を保持しています。そのため、合成データセットは実データセットを補完したり、場合によっては置き換えたりすることも可能です。 合成データはテスト・データの代替として機能し、主に 機械学習 モデルのトレーニングに使用されます。これは、 AIモデル に必要とされる高品質な実世界のトレーニング・データが不足しているという課題に対する、潜在的な解決策となります。さらに、合成データは、データが限られていたり、取得に時間がかかったり、 データ・プライバシー やセキュリティ要件のためにアクセスが困難であったりする金融や医療などの分野でも注目を集めています。実際、調査会社ガートナー社は、2026年までに企業の75％が合成顧客データの生成に生成AIを活用するようになると予測しています。 1 IBMニュースレター The DX Leaders AI活用のグローバル・トレンドや日本の市場動向を踏まえたDX、生成AIの最新情報を毎月お届けします。登録の際は IBMプライバシー・ステートメント をご覧ください。 ご登録いただきありがとうございます。 ニュースレターは日本語で配信されます。すべてのニュースレターに登録解除リンクがあります。サブスクリプションの管理や解除は こちら から。詳しくは IBMプライバシー・ステートメント をご覧ください。 合成データの種類 合成データには、マルチメディア形式、表形式、テキスト形式などがあります。合成テキスト・データは 自然言語処理（NLP） に活用でき、合成表形式データは リレーショナル・データベース のテーブル作成に利用できます。また、動画や画像、その他の非構造化データといった合成マルチメディアは、 コンピューター・ビジョン のタスク、たとえば画像分類、 画像認識 、 物体検知 などに応用できます。 合成データは、その生成の程度に応じて分類することもできます。 完全合成 部分合成 ハイブリッド 完全合成 完全合成データとは、実世界の情報を一切含まない、完全に新たに生成されたデータのことを指します。実データに内在する属性、パターン、関係性を推定し、それをできる限り忠実に再現する形で生成されます。 たとえば金融組織では、不正アクセス検知のためのAIモデルを効果的にトレーニングさせるために、疑わしい取引のサンプルが不足している場合があります。そのような場合には、不正取引を表現する完全合成データを生成し、モデルのトレーニングを強化することが可能です。 部分合成 部分合成データは、実世界の情報に基づいて作成されますが、元の データセット の一部（通常は機微な情報を含む部分）を人工的な値に置き換えています。このプライバシーを保護する手法により、個人データを守りつつ、実データの特性を維持することが可能になります。 部分合成データは、たとえば臨床研究のように、実データが成果にとって重要である一方で、患者の 個人情報（PII） や医療記録の保護も同様に重要であるような場面で、特に有用です。 ハイブリッド ハイブリッド合成データは、実データセットと完全合成データを組み合わせたものです。元のデータセットのレコードと、対応する合成データのレコードをランダムに組み合わせて作成されます。たとえば、顧客データの分析や洞察の抽出に活用でき、特定の顧客に機微なデータが遡られることを防ぐことができます。 IBMお客様事例 お客様のビジネス課題（顧客満足度の向上、営業力強化、コスト削減、業務改善、セキュリティー強化、システム運用管理の改善、グローバル展開、社会貢献など）を解決した多岐にわたる事例のご紹介です。 事例を見る 合成データはどのように生成されるのか 組織は、独自に合成データを生成することもできます。また、 Synthetic Data Vault のようなPythonライブラリを使って合成データを作成したり、他の オープンソース のアルゴリズム、フレームワーク、パッケージ、 ツール を利用することも可能です。あらかじめ構築された IBM® Synthetic Data Sets のようなデータセットを使用するという選択肢もあります。 合成データを生成する一般的な手法には、次のようなものがあります。 統計的手法 敵対的生成ネットワーク（GAN） Transformerモデル 変分オートエンコーダー（VAE） エージェントベースのモデリング 統計的手法 これらの手法は、分布や相関関係、特性が十分に把握されており、数学的モデルによってシミュレーション可能なデータに適しています。 分布ベースのアプローチでは、統計関数を用いてデータの分布を定義し、その分布からランダムにサンプリングすることで新たなデータポイントを生成することができます。 相関に基づくストラテジーでは、補間や外挿を用いることができます。たとえば時系列データにおいては、線形補間によって隣接するデータポイントの間に新たなデータを生成したり、線形外挿によって既存のデータを超えるポイントを生成したりすることが可能です。 敵対的生成ネットワーク（GAN） 敵対的生成ネットワーク（GAN）では、2つの ニューラル・ネットワーク が関与します。1つは合成データを生成するジェネレーター、もう1つは本物と人工のデータを識別するディスクリミネーター（識別器）です。この2つのネットワークは反復的にトレーニングされ、識別器のフィードバックによってジェネレーターの出力が向上していき、最終的には識別器が人工データと実データの区別がつかなくなるまで精度が高められます。GANは、画像生成によく使用されます。 トランスフォーマーモデル Transformerモデル は、OpenAIの 生成事前学習トランスフォーマー（GPT） のように、 小規模言語モデル（SLM） および 大規模言語モデル（LLM） の両方の基盤となる技術です。Transformerは、エンコーダーとデコーダーを用いてデータを処理します。 エンコーダーは、インプットシーケンスを、そのシーケンス内のトークンの意味と位置を取得する「埋め込み」と呼ばれる数値表現に変換します。Transformerは自己注意メカニズムにより、トークンの位置とは無関係に、インプットシーケンス内の最も重要なトークンに「注意を集中させる」ことができます。デコーダーは、その後、この自己注意メカニズムとエンコーダーによる埋め込みを使用して、統計的に最も確率の高いアウトプット・シーケンスを生成します。 Transformerモデルは、言語の構造やパターンの理解に優れています。そのため、人工的なテキスト・データの生成や、合成表形式データの作成に利用することができます。 変分オートエンコーダー（VAE） 変分オートエンコーダー（VAE） は、学習したデータのバリエーションを生成する 生成モデル です。エンコーダーは入力データを低次元空間に圧縮し、入力に含まれる意味のある情報を取得します。次に、デコーダーがこの圧縮表現から新しいデータを再構築します。GANと同様に、VAEも合成画像の生成に利用できます。 エージェントベースのモデリング このシミュレーション・ストラテジーでは、複雑なシステムをエージェントと呼ばれる個々の実体を含む仮想環境としてモデル化します。エージェントは、あらかじめ定義されたルールに基づいて動作し、環境や他のエージェントと相互作用します。エージェントベース・モデリングは、こうした相互作用やエージェントの挙動をシミュレーションすることで、合成データを生成します。 たとえば、疫学におけるエージェントベース・モデルでは、集団内の個人をエージェントとして表現します。エージェント同士の相互作用をモデル化することで、接触率や感染確率といった合成データを生成することができます。こうしたデータは、感染症の拡大を予測したり、介入策の効果を検証したりするのに役立ちます。 合成データのメリット 合成データは進化を続けるテクノロジー であり、企業にとって以下のような利点があります。 カスタマイズ 効率 データ・プライバシーの向上 より豊富なデータ カスタマイズ データサイエンス のチームは、合成データをビジネスの正確な要件や仕様に合わせてカスタマイズすることができます。また、データサイエンティストが合成データセットをより細かく制御できるため、管理や分析が容易になります。 効率性 合成データを生成することで、実データの収集にかかる手間や時間を省くことができ、データの作成が迅速になり、ワークフローの加速にもつながります。さらに、合成データにはあらかじめラベルが付けられているため、大量のデータに対して手作業で ラベリング やアノテーションを行うという煩雑な作業を省くことができます。 データ・プライバシーの向上 合成データは実世界のデータに似ていますが、個人データが特定の個人に紐づかないように生成することが可能です。これはデータの匿名化の一種として機能し、機微な情報の保護に役立ちます。また、合成データを活用することで、企業は知的財産権や著作権の問題を回避でき、ユーザーの許可や認識なしにWebサイトから情報を収集するWebクローラーの使用を不要にすることができます。 より豊富なデータ 人工的に作成されたデータセットは、AIの学習において過小評価されがちなグループのデータを生成・補完することで、データ・ダイバーシティーを高めるのに役立ちます。また、元のデータが乏しい場合や実データが存在しない場合にも、合成データによってそのギャップを埋めることができます。さらに、エッジケースや外れ値をデータポイントとして含めることで、合成データセットの幅が広がり、実世界の多様性や予測不可能性をより正確に反映させることができます。 合成データの課題 合成データには多くのメリットがありますが、一方でいくつかの課題も伴います。 合成データ生成のベスト・プラクティス に従うことで、こうした課題に対処し、人工データの価値を最大限に引き出すことが可能になります。 合成データに関連する主な課題には、次のようなものがあります。 バイアス モデルの崩壊 精度とプライバシーのトレードオフ 検証 バイアス 合成データは、もとになっている実世界のデータに含まれている可能性のあるバイアスを依然として引き継ぐことがあります。 バイアス を軽減するためには、多様なデータソースを使用し、地域や人口統計的な属性の異なる複数のデータを取り入れることが有効です。 モデル崩壊 モデルの崩壊 とは、AIモデルがAIによって生成されたデータのみで繰り返し学習されることで、性能が低下してしまう現象です。この問題を防ぐには、実データと人工データをバランスよく組み合わせたトレーニング・データセットを使用することが有効です。 精度とプライバシーのトレードオフ 合成データの生成プロセスでは、精度とプライバシーのバランスを取ることが常に課題となります。精度を優先すれば、より多くの個人データを保持することにつながる可能性があり、一方でプライバシーを重視すれば、精度が低下するおそれがあります。企業のユースケースに応じて、適切なバランスを見つけることが非常に重要です。 検証 合成データが生成された後 には、その品質を検証するための追加のチェックやテストを実施する必要があります。これはワークフローにひと手間加わることになりますが、人工データセットにエラー、不整合、または不正確さが含まれていないことを確認するために不可欠なステップです。 合成データのユースケース 合成データは汎用性が高く、さまざまな用途に向けて生成することができます。以下は、合成データが大きな利点となり得る主な業種・業務の例です。 自動車 財務 医療 製造業 自動車 エージェントベース・モデリングは、交通の流れに関する人工データの生成に利用でき、道路や交通システムの改善に貢献します。また、合成データを活用することで、自動車メーカーは車両の安全性試験に必要な実際の衝突データを取得するという、高コストかつ時間のかかるプロセスを回避することができます。自動運転車の開発企業は、さまざまなシナリオで自動運転車をトレーニングするために、合成データを使用することが可能です。 財務 合成の金融データは、リスクの評価と管理、予測モデリングや将来予測、取引アルゴリズムのテストなど、さまざまな用途に活用できます。たとえば、 IBM Synthetic Data Sets には、クレジットカードや住宅保険請求における不正アクセス検知を支援するシミュレーション・データや、マネー・ロンダリング対策ソリューション向けの銀行取引のシミュレーション・データが含まれています。 医療 合成データセットは、製薬会社が医薬品の開発を加速させるのに役立ちます。一方で、医療研究者は、臨床試験に部分合成データを使用したり、革新的な治療法や予防的治療法を検討するために、完全合成データを用いて人工的な患者記録や医用画像を作成したりすることができます。また、エージェントベース・モデリングは、疫学分野における疾病の伝播や介入策の研究にも応用可能です。 製造業 製造業の企業は、製品の欠陥や基準からの逸脱をリアルタイムで検査するコンピューター・ビジョンモデルの目視検査能力を向上させるために、合成データを活用することができます。また、人工データセットは 予知保全 の精度向上にも貢献し、合成センサーデータを用いることで、機械学習モデルが設備の故障をより正確に予測し、適切かつタイムリーな対応を推奨できるようになります。 コピーされたリンク 電子書籍 データ・リーダーのためのデータサイエンスとMLOps 他のリーダーと協力して、MLOpsと信頼できるAIの3つの重要な柱、すなわちデータへの信頼、モデルへの信頼、プロセスへの信頼を推進しましょう。 電子書籍を読む 参考情報 トレーニング AIの専門知識のレベルアップを図る ハンズオン・ラボ、コース、指導付きプロジェクト、トライアルなどで、基本的な概念を学び、スキルを身につけていただけます。 MLコースはこちら 電子書籍 生成AI + MLの力を解き放つ 生成AIと機械学習をビジネスに活用する確実な方法を学びましょう。 電子書籍を読む Techsplainersポッドキャスト 機械学習の説明 IBMのTechsplainersは、主要な概念から実際のユースケースまで、機械学習の要点を詳しく説明します。明快で短いエピソードで、基礎をすばやく学ぶことができます。 今すぐ視聴する ガイド AIの活用を本格化：生成AIでROI向上 AIの投資対効果を高めるために、主要な分野で生成AIの活用を拡大することで、どのように革新的な新規ソリューションの構築、提供を支援し、変化をもたらすかを紹介します。 ガイドを読む 電子書籍 適切な基盤モデルを選ぶ方法 ユースケースに最適なAI基盤モデルを選択する方法について説明します。 電子書籍を読む AIモデル IBM Graniteはこちら IBM Graniteは、ビジネス向けにカスタマイズされ、AIアプリケーションの拡張に合わせて最適化された、オープンで高性能、かつ信頼性の高いAIモデル・ファミリーです。言語、コード、時系列、ガードレールのオプションをご覧ください。 Graniteの紹介 ガイド AIの新時代に信頼と自信を持って成功する方法 強力なAIストラテジーの3つの重要な要素である、競争優位性の創出、ビジネス全体へのAIの拡張、信頼できるAIの推進について詳しく説明します。 ガイドを読む 関連ソリューション IBM watsonx.ai AI開発者向けの次世代エンタープライズ・スタジオであるIBM watsonx.aiを使用して、生成AI、基盤モデル、機械学習機能をトレーニング、検証、チューニング、導入しましょう。わずかなデータとわずかな時間でAIアプリケーションを構築できます。 watsonx.aiをご覧ください。 人工知能ソリューション 業界をリードするIBMのAI専門知識とソリューション製品群を使用すれば、ビジネスにAIを活用できます。 AIソリューションはこちら AIコンサルティングとサービス AIの導入で重要なワークフローと業務を再構築し、エクスペリエンス、リアルタイムの意思決定とビジネス価値を最大化します。 AIサービスはこちら 次のステップ AI開発ライフサイクル全体にわたる機能にワンストップでアクセスできます。使いやすいインターフェース、ワークフロー、業界標準のAPIやSDKを利用して、強力なAIソリューションを構築できます。 watsonx.aiの詳細はこちら デモを予約 脚注 1 3 Bold and Actionable Predictions for the Future of GenAI , Gartner, 12 April 2024