# Apache Spark の記事一覧
![Amazon Athena for Apache Sparkをコンソールから使ってみよう!](https://devio2023-media.developers.io/wp-content/uploads/2022/08/amazon-athena.png)
Amazon Athena for Apache Sparkをコンソールから使ってみよう!
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fnayu_t_s.png&w=256&q=75)
![Amazon Athena for Apache SparkでS3バケット上のデータを可視化してみた](https://devio2023-media.developers.io/wp-content/uploads/2022/08/amazon-athena.png)
Amazon Athena for Apache SparkでS3バケット上のデータを可視化してみた
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fnayu_t_s.png&w=256&q=75)
![[アップデート] Amazon Athena for Apache Spark が発表されました #reInvent](https://devio2023-media.developers.io/wp-content/uploads/2022/11/eyecatch_reinvent2022_new-service.png)
[アップデート] Amazon Athena for Apache Spark が発表されました #reInvent
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fkasahara-hiroshi.jpeg&w=256&q=75)
![AWS re:Invent 2022 CEOキーノートで発表された新サービス・アップデートまとめ](https://devio2023-media.developers.io/wp-content/uploads/2022/11/eyecatch-aws-ceo-keynotes.jpg)
AWS re:Invent 2022 CEOキーノートで発表された新サービス・アップデートまとめ
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Ftoyosaki-takashi.png&w=256&q=75)
![BigQueryのSparkストアドプロシージャでGCSのファイルを操作する(プレビュー)](https://devio2023-media.developers.io/wp-content/uploads/2020/09/gcp-eyecatch-bigquery_1200x630.png)
BigQueryのSparkストアドプロシージャでGCSのファイルを操作する(プレビュー)
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fikeda.png&w=256&q=75)
![Deequでデータ品質をテストする](https://devio2023-media.developers.io/wp-content/uploads/2019/08/spark-logo-1200x630.png)
Deequでデータ品質をテストする
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fsyuta.png&w=256&q=75)
![DatabricksでCustemer Managed VPCにClusterをプロビジョニングする](https://devio2023-media.developers.io/wp-content/uploads/2020/02/databricks-logo_1200x630.png)
DatabricksでCustemer Managed VPCにClusterをプロビジョニングする
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fnakayama-nobuhiro.jpeg&w=256&q=75)
![[新機能]AWS Glue Studio Spark SQLクエリを使用した変換が可能になりました](https://devio2023-media.developers.io/wp-content/uploads/2019/04/aws-glue.png)
[新機能]AWS Glue Studio Spark SQLクエリを使用した変換が可能になりました
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fishikawa-satoru.jpeg&w=256&q=75)
![[AWS Glue]DynamoDBに登録した祝日テーブルでデータの祝日判定をするジョブを作ってみた](https://devio2023-media.developers.io/wp-content/uploads/2019/04/aws-glue.png)
[AWS Glue]DynamoDBに登録した祝日テーブルでデータの祝日判定をするジョブを作ってみた
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fwakatsuki-ryuta.jpeg&w=256&q=75)
![【Mac】PySparkでデフォルトのPythonバージョンを3系にする](https://devio2023-media.developers.io/wp-content/uploads/2019/08/spark-logo-1200x630.png)
【Mac】PySparkでデフォルトのPythonバージョンを3系にする
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fwakatsuki-ryuta.jpeg&w=256&q=75)
![Spark DataFrameで日付列の値をもとに曜日列を追加する](https://devio2023-media.developers.io/wp-content/uploads/2019/08/spark-logo-1200x630.png)
Spark DataFrameで日付列の値をもとに曜日列を追加する
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fwakatsuki-ryuta.jpeg&w=256&q=75)
![[AWS Glue]SparkとPython Shellのジョブを組み合わせたETLフローを作ってみた](https://devio2023-media.developers.io/wp-content/uploads/2019/04/aws-glue.png)
[AWS Glue]SparkとPython Shellのジョブを組み合わせたETLフローを作ってみた
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fwakatsuki-ryuta.jpeg&w=256&q=75)
![Spark DataFrameのshow()メソッドで長い値が省略されないようにする](https://devio2023-media.developers.io/wp-content/uploads/2019/08/spark-logo-1200x630.png)
Spark DataFrameのshow()メソッドで長い値が省略されないようにする
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fwakatsuki-ryuta.jpeg&w=256&q=75)
![AWS Glue ETLライブラリを使ってローカルでSparkを動かす](https://devio2023-media.developers.io/wp-content/uploads/2019/08/spark-logo-1200x630.png)
AWS Glue ETLライブラリを使ってローカルでSparkを動かす
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fyamashita-katsumi.png&w=256&q=75)
![はじめてのSpark SQL!Amazon EMRを使って10分で試してみる](https://devio2023-media.developers.io/wp-content/uploads/2014/05/Amazon_EMR.png)
はじめてのSpark SQL!Amazon EMRを使って10分で試してみる
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fhakamata.jpeg&w=256&q=75)
![『詳解 Apache Spark』出版記念イベント #shokaispark 参加レポート](https://devio2023-media.developers.io/wp-content/uploads/2015/07/Spark-Eye-Catch.jpg)
『詳解 Apache Spark』出版記念イベント #shokaispark 参加レポート
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fkawasaki-teruo.jpeg&w=256&q=75)
![EMR上でZeppelinとSparkを使ってレコメンデーション](https://devio2023-media.developers.io/wp-content/uploads/2014/05/Amazon_EMR.png)
EMR上でZeppelinとSparkを使ってレコメンデーション
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fnoto-satoshi.jpeg&w=256&q=75)
![Amazon EMR 4.0.0で始める Apache Spark 1.4.1](https://devio2023-media.developers.io/wp-content/uploads/2015/06/spark.png)
Amazon EMR 4.0.0で始める Apache Spark 1.4.1
![User avatar](/_next/image/?url=https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2Fdevio_thumbnail%2F2024-06%2Fakari7.jpeg&w=256&q=75)