AWS - hide's memo

下図のように Linuxサーバ上に MinIOを使用してS3 互換Bucketを作成し、同じサーバ内から AWS CLIを使用してアクセスする。

Community EditonはWEBコンソールからユーザの追加や権限設定ができないので、MinIOクライアント(mcコマンド)を使用して設定する。
作業は全て、作業を実施するユーザアカウントで行う。

■1.MinIOのインストール

mkdir ~/minio
cd ~/minio
wget https://dl.min.io/server/minio/release/linux-amd64/minio
wget https://dl.min.io/client/mc/release/linux-amd64/mc
chmod u+x mc
chmod u+x minio
echo "export PATH=\$PATH:~/minio" >> ~/.bashrc
echo "export MINIO_ROOT_USER=minioadmin" >> ~/.bashrc
echo "export MINIO_ROOT_PASSWORD=minioadmin123" >> ~/.bashrc
source ~/.bashrc
mkdir ~/minio/minio_data

■2.MinIOの起動

MinIOをバックグラウンドで起動し、エイリアス、ユーザの設定を行う。

minio server ~/minio/minio_data &
mc alias set myminio http://localhost:9000 minioadmin minioadmin123
mc admin user add myminio s3user s3password
mc admin policy attach myminio readwrite --user=s3user

■3. S3 Bucketの作成

mc mb myminio/my-bucket

■4. AWS CLIのインストール

cd
curl "https://awscli.amazonaws.com/awscli-exe-linux-x86_64.zip" -o "awscliv2.zip"
unzip awscliv2.zip
echo "export PATH=\$PATH:~/aws/dist" >> ~/.bashrc
source ~/.bashrc

aws configure
aws_access_key_id = s3user
aws_secret_key_id = s3password

■5. AWS CLIでS3 Bucketにアクセス

(1)ファイルをS3にアップロード

echo "test" > minio-bucket-test.txt
aws s3 cp minio-bucket-test.txt s3://my-bucket --endpoint-url http://localhost:9000

(2)アップロードされたか確認する。ファイルが見えればOK。

aws s3 ls --recursive s3://my-bucket --endpoint-url http://localhost:9000

#!/bin/bash S3KEY="Your Acess Key" S3SECRET="Your Access Secret" S3BUCKET="Your Bucket Name" S3STORAGETYPE="STANDARD" AWSREGION="Your S3 Region" # Macを使用している場合、以下の行を有効にする #OS="mac" function putS3 { file_path=$1 aws_path=$2 bucket="${S3BUCKET}" date=$(date -R -u) acl="x-amz-acl:private" content_type="text/plain" storage_type="x-amz-storage-class:${S3STORAGETYPE}" string="PUT\n\n$content_type\n$date\n$acl\n$storage_type\n/$bucket$aws_path${file_path##/*/}" if [ $OS = "mac" ]; then signature=$(printf "${string}" | openssl sha1 -hmac "${S3SECRET}" -binary | base64) else signature=$(echo -en "${string}" | openssl sha1 -hmac "${S3SECRET}" -binary | base64) fi curl -s --retry 3 --retry-delay 10 -X PUT -T "$file_path" \ -H "Host: $bucket.${AWSREGION}.amazonaws.com" \ -H "Date: $date" \ -H "Content-Type: $content_type" \ -H "$storage_type" \ -H "$acl" \ -H "Authorization: AWS ${S3KEY}:$signature" \ "https://$bucket.${AWSREGION}.amazonaws.com$aws_path${file_path##/*/}" } # カレントディレクトリの test.txt ファイルを、/test/ にアップロード. putS3 test.txt /test/

hide's memo