投稿者:

AWS, AWSCLI, コマンド

1.概要

AWS版画像サーバの画像データの移行で、他のサーバでawsコマンドを利用するために、環境変数でアクセスキーとシークレットキーを設定しました。
一時的に必要な設定なので、不要になったら削除するため、環境変数を削除するコマンドを調べたので、共有します。

2.利用コマンド

 unsetコマンド

3.使用例# export AWS_DEFAULT_REGION=ap-northeast-1# export AWS_ACCESS_KEY_ID='X ...

投稿者:

AWS, AWSCLI

最近 Run Command を利用してAWSのCLIのバージョンを上げる作業をしました。
そのときにCLIの出力が思った通りに動作しなかった為、書きたいと思います.

Run Command の実行

Run Commandではじめに実行したスクリプト以下の内容です。

aws --versionpip install -U awscliaws --version

実行結果

Collecting awscli  Down ...

投稿者:

AWS, IAM, Squid

はじめに

前回の記事でご紹介した内容ですが、運用して判明した事があります。
具体的にはkinesisにログ転送をする処理を追加したときに起こった事象です。
同様の構成にした場合には注意が必要ですのでご参考までに。

起こった事象

2パターンありました。

Unable to load AWS credentials from any provider in the chainUser: arn:aws:sts::xxxxxxxxxxxx:ass ...

投稿者:

AWS, IAM, SSL

1.前提条件

 ・aws-cli がインストール済み。
 ・Administrators権限のアクセスキーおよびシークレットキー
 

2.SSL証明書の削除

 1.以下のコマンドを実行して、AWSの認証情報を登録する。
  
  aws configure
  
 2.削除する証明書を確認する。
  
  aws iam list-server-certificates

–実 ...

投稿者:

AWS

はじめに

 
岡崎です。
今回は、改めてAWSの基礎知識について復習・まとめを行おうと思い、書いています。
(EC2でサーバを立てる等の以前の前提のお話です。)
ちょくちょくインフラの知識についても触れていきます。

AWSで用いられる用語リージョン(Region)
アベイラビリティゾーン(Availability Zone)
VPC
サブネット
プライベートIPアドレス
パブリックIPアドレス
イン ...

投稿者:

AWS, Python

あるシステムでアクセスログの保存先にElasticsearchを使用しているということで、
何かに活用できないかデータを少し見せてもらいました。

AWSの機能でElasticsearch + Kibanaを立ち上げてFluentdでサーバからログを転送しているそうです。

ApacheのアクセスログをKibanaから確認します。
CSSやAjaxっぽいログも混じるので使えそうなデータのみに絞ります。

ログはJSON形式で ...

投稿者:

AWS

Zero-Downtime Patching の機能が使えるようになりました

No maintenance No Life なRDSに、遂にAuroraバージョン1.10からですがダウンタイムゼロでメンテナンスが実施できるようになりました。
https://aws.amazon.com/jp/blogs/aws/amazon-aurora-update-spatial-indexing-and-zero-downtime-patching/
Postgre ...

投稿者:

AWS

VPCが一部IPv6に対応し始めてましたので、ちょっといじってみました。
合わせてEGWなるものが出来ました。

既存のInternetGWはIPv4で、IPv6通信時はEGWで…という経路の使い分けができそうです。
あと、IPv6アドレスを記載する際、Source/DestinationのIPアドレスですが、CIDR記述が必須になってました。

IPv4でいうAnyは [0.0.0.0/0] で、IPv6は、相当するものが 0:0: ...

投稿者:

AWS, CloudFormation

CloudFormationを使った環境構築、デプロイを行っているのだが、
テンプレートの中で、UserDataを使って、S3からコードを取得したり、環境にあわせて、設定ファイルを書き換えたりという処理を行っている。

このUserDataの中で、例えばS3からのデータの取得に失敗した場合どうなるの??
取得コマンドだけ書いているだけだと、そのまま処理は走り、Stackのステータスが「CREATE_COMPLETE」になってしまう。
つ ...

投稿者:

AWS, re:Invent, S3, データレイク

AWS re:Invent 2016に参加して思ったことです。

データ分析基盤の最近のトレンドとしては、リアルタイム処理、サーバレス、DataLake(データレイク)、となっているようです。

コンポーネント

コンポーネントとしては、S3、Kinesis、Lambda、DynamoDB、Elasticsearchがメインに利用されていて、特にKinesisでリアルタイム処理を行っている事例が多かったです。
KinesisはFirehoseもS ...