# AWS KMSとAthena CTASを併用した暗号化集計の実践例

## 目次
1. イントロダクション
   1.1 AWS KMSとは
   1.2 Athenaとは
   1.3 CTAS操作の概要
2. AWS KMSの設定
   2.1 キーの作成
   2.2 権限の設定
3. Amazon Athenaの設定
   3.1 Athenaへのアクセスと準備
   3.2 元データの準備
4. CTASによる暗号化集計
   4.1 CTASクエリの作成
   4.2 クエリ結果の保存と暗号化
5. 暗号化集計結果の検証
   5.1 データの検査
   5.2 暗号化状態の確認
6. 最適化とパフォーマンス
   6.1 コスト削減のテクニック
   6.2 クエリパフォーマンスの向上
7. まとめ

## 1. イントロダクション

AWS KMS（Key Management Service）は、AWS内でデータ暗号化を実施するための安全な方法を提供します。一方、Amazon AthenaはS3に保存されているデータに対して直接SQLクエリを実行できるサービスで、特に構造化された大規模データの解析に優れています。CTAS（Create Table As Select）は、Athenaの機能の一つで、既存のデータセットをもとに新しいテーブルを作成する際に使用され、データの選択と変換を効率的に行えます。

### 1.1 AWS KMSとは

AWS KMSは暗号化キーの作成、管理、施行を行うサービスです。これを利用することで、データの安全性を高めることができます。

### 1.2 Athenaとは

AthenaはSQLクエリを使用してAmazon S3のデータを簡単に分析できるサーバーレスサービスです。大規模なデータ処理が可能で、データウエアハウジングの実行にも適しています。

### 1.3 CTAS操作の概要

CTASはAthenaの利便性を高める操作法の一つで、新しいテーブルを既存のクエリの結果に基づいて作成し、その際にデータを変換したり、フィルタリングしたり、暗号化したりできます。

## 2. AWS KMSの設定

### 2.1 キーの作成

AWSコンソールを開き、KMSで新しい暗号化キーを作成します。このキーはAthenaを用いてデータを暗号化する際に使用されます。

- マネジメントコンソールで**KMS**を選択。
- [Create key] を選択し、キーの種類や用途、アクセス権限を設定。
- 作成されたキーのKey IDをメモしておきます。

### 2.2 権限の設定

AWS IAMでAthenaおよび関係するS3バケットに対して適切な権限を設定します。このとき、KMSキーを使用するための権限も含めます。

![img](/mosaic-code.jpg)

## 3. Amazon Athenaの設定

### 3.1 Athenaへのアクセスと準備

Athenaコンソールに移動し、S3内に保存されたデータにアクセスする準備をします。

1. AWSコンソールでAthenaを選択。
2. 必要に応じてデータベースを選択または新規作成。

### 3.2 元データの準備

S3に集計対象のデータを準備します。ここでは例としてCSVデータを用意します。

## 4. CTASによる暗号化集計

### 4.1 CTASクエリの作成

以下の例は、CTASを使用してS3のデータを変換、暗号化する方法を示します。

![img](/mosaic-code.jpg)

### 4.2 クエリ結果の保存と暗号化

このクエリは結果を指定したS3バケットへ送信し、KMSキーを使用して暗号化します。

## 5. 暗号化集計結果の検証

### 5.1 データの検査

Athenaで生成されたテーブルをクエリし、データの整合性と正確性を確認します。

### 5.2 暗号化状態の確認

AWS KMSおよびS3コンソールから暗号化の状態を確認します。正しく暗号化されていることを確認します。

## 6. 最適化とパフォーマンス

### 6.1 コスト削減のテクニック

- データを圧縮してストレージコストを削減します。
- クエリの最適化を行うことで、処理時間を短縮します。

### 6.2 クエリパフォーマンスの向上

- パーティショニングを利用することで、スキャンするデータ量を減少させます。
- インデックスや適切なカラムナフォーマット（例: PARQUET）を使用します。

## 7. まとめ

AWS KMSとAthena CTASを組み合わせることで、安全にデータを処理し、S3に保存されたデータの暗号化を簡単に行えました。この組み合わせは、データセキュリティを確保しつつ、データ分析の効率性を高める強力な手段となります。これにより、企業のデータ管理戦略の一環として安全性と利便性を両立することが可能です。 [cv:issue_marketplace_engineer]

# AWS KMSとAthena CTASを併用した暗号化集計の実践例

## 目次
1. イントロダクション
   1.1 AWS KMSとは
   1.2 Athenaとは
   1.3 CTAS操作の概要
2. AWS KMSの設定
   2.1 キーの作成
   2.2 権限の設定
3. Amazon Athenaの設定
   3.1 Athenaへのアクセスと準備
   3.2 元データの準備
4. CTASによる暗号化集計
   4.1 CTASクエリの作成
   4.2 クエリ結果の保存と暗号化
5. 暗号化集計結果の検証
   5.1 データの検査
   5.2 暗号化状態の確認
6. 最適化とパフォーマンス
   6.1 コスト削減のテクニック
   6.2 クエリパフォーマンスの向上
7. まとめ

## 1. イントロダクション

AWS KMS（Key Management Service）は、AWS内でデータ暗号化を実施するための安全な方法を提供します。一方、Amazon AthenaはS3に保存されているデータに対して直接SQLクエリを実行できるサービスで、特に構造化された大規模データの解析に優れています。CTAS（Create Table As Select）は、Athenaの機能の一つで、既存のデータセットをもとに新しいテーブルを作成する際に使用され、データの選択と変換を効率的に行えます。

### 1.1 AWS KMSとは

AWS KMSは暗号化キーの作成、管理、施行を行うサービスです。これを利用することで、データの安全性を高めることができます。

### 1.2 Athenaとは

AthenaはSQLクエリを使用してAmazon S3のデータを簡単に分析できるサーバーレスサービスです。大規模なデータ処理が可能で、データウエアハウジングの実行にも適しています。

### 1.3 CTAS操作の概要

CTASはAthenaの利便性を高める操作法の一つで、新しいテーブルを既存のクエリの結果に基づいて作成し、その際にデータを変換したり、フィルタリングしたり、暗号化したりできます。

## 2. AWS KMSの設定

### 2.1 キーの作成

AWSコンソールを開き、KMSで新しい暗号化キーを作成します。このキーはAthenaを用いてデータを暗号化する際に使用されます。

- マネジメントコンソールで**KMS**を選択。
- [Create key] を選択し、キーの種類や用途、アクセス権限を設定。
- 作成されたキーのKey IDをメモしておきます。

### 2.2 権限の設定

AWS IAMでAthenaおよび関係するS3バケットに対して適切な権限を設定します。このとき、KMSキーを使用するための権限も含めます。

```json
{
  "Version": "2012-10-17",
  "Statement": [
    {
      "Effect": "Allow",
      "Action": [
        "kms:Encrypt",
        "kms:Decrypt",
        "kms:GenerateDataKey"
      ],
      "Resource": "arn:aws:kms:us-east-1:123456789012:key/key-id"
    },
    {
      "Effect": "Allow",
      "Action": "s3:*",
      "Resource": "arn:aws:s3:::your-bucket-name/*"
    }
  ]
}
```

## 3. Amazon Athenaの設定

### 3.1 Athenaへのアクセスと準備

Athenaコンソールに移動し、S3内に保存されたデータにアクセスする準備をします。

1. AWSコンソールでAthenaを選択。
2. 必要に応じてデータベースを選択または新規作成。

### 3.2 元データの準備

S3に集計対象のデータを準備します。ここでは例としてCSVデータを用意します。

## 4. CTASによる暗号化集計

### 4.1 CTASクエリの作成

以下の例は、CTASを使用してS3のデータを変換、暗号化する方法を示します。

```sql
CREATE TABLE encrypted_result
WITH (
    format = 'PARQUET',
    external_location = 's3://your-output-bucket/output-path/',
    encryption = 'SSE_KMS',
    kms_key = 'arn:aws:kms:us-east-1:123456789012:key/key-id'
) AS
SELECT
    column1,
    SUM(column2) AS total
FROM
    your_input_table
GROUP BY
    column1;
```

### 4.2 クエリ結果の保存と暗号化

このクエリは結果を指定したS3バケットへ送信し、KMSキーを使用して暗号化します。

## 5. 暗号化集計結果の検証

### 5.1 データの検査

Athenaで生成されたテーブルをクエリし、データの整合性と正確性を確認します。

### 5.2 暗号化状態の確認

AWS KMSおよびS3コンソールから暗号化の状態を確認します。正しく暗号化されていることを確認します。

## 6. 最適化とパフォーマンス

### 6.1 コスト削減のテクニック

- データを圧縮してストレージコストを削減します。
- クエリの最適化を行うことで、処理時間を短縮します。

### 6.2 クエリパフォーマンスの向上

- パーティショニングを利用することで、スキャンするデータ量を減少させます。
- インデックスや適切なカラムナフォーマット（例: PARQUET）を使用します。

## 7. まとめ

AWS KMSとAthena CTASを組み合わせることで、安全にデータを処理し、S3に保存されたデータの暗号化を簡単に行えました。この組み合わせは、データセキュリティを確保しつつ、データ分析の効率性を高める強力な手段となります。これにより、企業のデータ管理戦略の一環として安全性と利便性を両立することが可能です。 

AWS KMSとAthena CTASを併用した暗号化集計の実践例

目次

続きを読むには単価診断を受けてください（30秒）