特定のS3のバケットにアクセスするIAM Roleの作成

特定のS3バケット(ここではhogeバケット)にアクセスする権限を持つIAM Roleを作成します。 以下のようなpolicyで設定します。 { “Version”: “2012-10-17”, “Statement”:…

Read more

aws s3 バックアップ

aws s3 コマンドでバックアップを取る際には世代別バックアップを考えますが、データが増えた際にデータの削除が必要になります。 aws s3 rm s3://example/ –exclude data1/* –e…

Read more

S3のパーミッションの設定を一括変更する

S3に配置したファイル全部を公開 aws s3 –profile {profile} ls –recursive s3://{bucket}/ \ | awk ‘{print $4}’ \ | xargs -I{} …

Read more

SES+S3+Lambdaを使ってサーバーレスでメールを転送する

Lambdaを使ってSESのメールを転送するプログラム https://github.com/arithmetric/aws-lambda-ses-forwarder を使うと簡単にできます。(Node.jsで動きます。…

Read more

レンタルサーバーからAWSへの移行の話(Webサーバー編)

Webサービスの開発に永く携わっていると、転送するだけのドメイン持つケース、よくありますよね。 転送するだけにもかかわらず、レンタルサーバーを借りるのももったいないので、AWSに移行してみましょう。 Webサーバーだけの…

Read more

違うアカウント間でLambdaを使ってS3のデータのやり取りをする

アカウントAからアカウントBのS3にアクセスする方法 client = boto3.client(‘s3′, aws_access_key_id='<Bのアクセスキー>’, aws_secret_access…

Read more

サーバからコマンドでS3にファイルをアップロード

s3cmdをインストールすることで出来るようになる。 yum -y –enablerepo epel install s3cmd にてs3cmdをインストール s3cmd –configure でアクセスキーとシーク…

Read more

lambdaでS3上にあるELBのログを読み取る方法

解析など細かなことを行いたい場合にはこういったライブラリなどもあるようです https://www.npmjs.com/package/elb-log-analyzer https://www.npmjs.com/pac

Read more

S3の特定バケットだけフルアクセスできるようにするポリシー

Listだけは直下でできるようにしています。 { “Version”: “2012-10-17”, “Statement”: [ { “Effect”: “Allow”, “Action”: “s3:*”, “Resou…

Read more

AWSでのSSL証明書発行メールをSESとS3で受け取る

Amazon S3での静的ウェブサイトをホスティングする手順の中で、SSL証明書を独自ドメインのもので使用することになりました。 そのためにAWS Certificate Managerへドメインを送ってSSL証明書を発…

Read more

AWS S3まわりのコマンド

AWS S3のストレージにディレクトリを送る、もしくはその逆などのコマンドのまとめです //ローカルからS3にファイルを送る # aws s3 cp [ローカルパス] [S3内のパス] //ローカルからS3にディレクトリ…

Read more

s3からファイルを落とすメモ

awscliはワイルドカードでファイル指定できないようなので、lsってから1個ずつ落とす必要があるようです。 バケット内のtar.gzを落とします。 #!/bin/sh DATE_STRING=`date “+%Y%m%…

Read more

S3 の静的ウェブサイトホスティングでアップロード後即公開する設定

S3 の静的ウェブサイトホスティングでウェブサイトをホスティングしている際に、ファイルアップロード時にパーミッションの書き換えを忘れてアクセスできなくなることがあります。 以下のバケットポリシーを予め登録しておくことによ…

Read more

S3からコンテンツを取得する際に上限を設定する

Amazon S3のlistObjectsは、通常1000件を上限としてオブジェクトを取得しますが、ListObjectsRequestを以下のように利用することで、この上限を減らすこともできます。 ObjectList…

Read more

Route53を使ってスムーズなメンテナンスを実現する

時折やってくるAWSからのサーバーリブートスケジュールのお知らせ。 この通知が来た際にはインスタンスの停止・起動が不可避ですが、夜間にAWSのタイミングで実施されると復旧後の確認などがハンドリングしづらくなるため、自分た…

Read more