PysparkはAWSクリーンルームで入手可能に

本記事は、2025 年 3 月 18 日にAWS公式サイトの What’s New with AWS? に掲載された英語記事を自動翻訳したものです。

ニュース内容

本日、AWSはAWSクリーンルームでPysparkの一般的な可用性を発表し、Apache SparkのPython APIであるPysparkを使用して、企業とそのパートナーが大規模なデータセットで洗練された分析を実行できるようにします。この発売により、あなたとあなたのパートナーは、PysparkコードとライブラリをAWSクリーンルームのコラボレーションに持ち込み、基礎となるデータや独自の分析方法を共有せずに高度な分析を実行できます。たとえば、広告測定プロバイダーは、AWSクリーンルームのPysparkを使用して、複数のパブリッシャーデータセットで同時にカスタムアルゴリズムを実行して、広告の有効性を測定できます。同様に、製薬会社は、独自のデータを共有せずに、臨床試験全体で薬物の遵守を評価するための適切な患者の同意を得て、複数の医療提供者データセットで独自のアルゴリズムとライブラリを実行できます。

AWSクリーンルームは、企業とそのパートナーが、互いの基礎となるデータを公開またはコピーすることなく、集合データセットで簡単に分析およびコラボレーションするのに役立ちます。企業は、独自のソリューションを構築、管理、または維持することなく、AWS環境の外にデータを移動することなく、独自のクリーンルームを展開できます。 AWSクリーンルームのPysparkは、これらのAWS地域で一般的に利用できます。詳細については、AWSクリーンルームをご覧ください。

原文

Today, AWS announces the general availability of PySpark in AWS Clean Rooms, enabling companies and their partners to run sophisticated analytics across large datasets using PySpark, the Python API for Apache Spark. With this launch, you and your partners can bring PySpark code and libraries to an AWS Clean Rooms collaboration and run advanced analyses without having to share underlying data or proprietary analysis methods. For example, an advertising measurement provider can use PySpark in AWS Clean Rooms to run their custom algorithms across multiple publisher datasets simultaneously to measure ad effectiveness. Similarly, a pharmaceutical company can run their proprietary algorithms and libraries across multiple healthcare provider datasets with appropriate patient consent to evaluate drug adherence across clinical trials, without sharing their proprietary data.

AWS Clean Rooms helps companies and their partners to easily analyze and collaborate on their collective datasets without revealing or copying one another’s underlying data. Companies can deploy their own clean rooms without having to build, manage, or maintain their own solutions or move data outside of their AWS environment. PySpark in AWS Clean Rooms is generally available in these AWS Regions. To learn more, visit AWS Clean Rooms.

引用元：PySpark available in AWS Clean Rooms