CloudFormationでキーペアを作成することができますが、それはどこから確認できるのか？という件。 以下の記事がわかりやすかったです。 qiita.com 「Systems Managerのパラメータストア」から参照できる。

掲題の通り、AWS認定 Data Engineer - Associate(DEA-01)を取得しました。これでまた全冠です。（AWS Summitに間に合っていれば、記念品がもらえたらしい、残念...） スコア 対策期間・時間 対策に使った本など 1.Cloud License 2.Kindleの問題集 3.AWS関連…

この度、APN Blogでも発表されましたが、「2024 Japan AWS All Certifications Engineers」に選出されました。 12冠時の記事 AWS Summitで記念品を受け取りました AWS Summitにて記念品を配布するということで、AWS Summitへ行ってきました(初) 6/20午後に行…

掲題の通り、AWS認定資格12冠しました。 12冠しようと思ったきっかけ 受験履歴、スコア、受験推奨順序、難易度 対策に使ったもの 1.CloudLicense 2.Udemy 3.Kindle 4.AWS関連のWebサイト、Bing Chat 感想など 3年経つと忘れている 今回は試験センターを利用 …

IAMユーザ名を変更する方法。 前提 変更方法 参考URL 前提 AWSCLIから実行する 実行者が「iam:UpdateUser」権限を持っていること 変更方法 aws iam update-user --user-name <変更前ユーザ名> --new-user-name <変更後ユーザ名> 参考URL

円安が進む昨今、AWSの請求額のドル円レートはどんな感じで推移しているのか、自身の請求額を基にグラフ化してみました。 紫色の線：AWS請求書記載の請求額(米ドル)と、実際に引き落とされた請求額(日本円)から算出したドル円レート オレンジ色の線：AWS請求…

VPSとして、Amazon Lightsailを使っています。 www.k-hitorigoto.onlineデフォルトでタイムゾーンがUTCなので、JSTに変更しました。 確認環境 作業手順

Cloudwatchのメトリクス一覧をCLIで取得しました。 検証環境(Cloudshell） Cloudwatchのメトリクス一覧をCLIで取得 コマンド 実行例

EMRクラスタにNameタグをつけたところ、クラスタを構成するEC2のNameタグにも同じ値が設定されました。 Amazon EMR クラスターにタグを追加すると、タグはクラスターに関連付けられているアクティブな Amazon EC2 インスタンスそれぞれに伝達されます。 docs…

CloudShell便利ですね。 aws.amazon.comCloudShellにはawscli、jqが入っているので、EC2やRedshiftの情報を一覧表示させてみました。 確認環境 一覧表示コマンド EC2 Redshift

VPSとして、Amazon Lightsailを使ってみています。 aws.amazon.comLightsail上でdockerを稼働させて、各コンテナのログをCloudwatch Logsへ飛ばそうとしましたが、うまくいかなかったのでうまくいった方法を残します。 確認環境 logging設定だけではダメでし…

Python標準モジュールのurllibを使う練習で、EC2のインスタンスメタデータにアクセスしてみました。 検証環境 ソース 文字列で返ってくるケース JSONで返ってくるケース 実行結果 文字列で返ってくるケース JSONで返ってくるケース 参考にしました

http://checkip.amazonaws.com へアクセスするとグローバルIPアドレスを知ることができます。 Webブラウザから Curlから Invoke-WebRequestから

特に何も設定せずにEMRのSparkを使うと、ログレベルがINFOなので、とにかくいっぱいログが出ます。 そのため、ログレベルを変更しようと思ったわけですが、クラスタ作成時に設定しておきたいなと思ったのでやってみたメモです。 検証環境 案1 ブートストラッ…

RDSは停止保持は最大７日までです。それ以上経過すると起動します。 マネコンを見ずとも、指定したRDSインスタンスが停止してからどれくらい経ったかを知りたかったので、Powershellスクリプトを書いてみました。 対象となるRDSの状態を、CloudTrailの結果か…

boto2とboto3でバケット名に「.」(ピリオド)が含まれる場合の挙動が違ったので記録しておきます。 確認環境 やりたかったこと boto2,boto3と、バケット名に"."(ピリオド)がある、なしでの成否 boto2のソースとエラーメッセージ （ちなみに）boto3のソース こ…

特定のEC2だけを起動、停止可能なIAMポリシーです。 ポリシーのJSON 実行結果

SecurityGroupをCLIで設定します。 確認環境 コマンド 参考にしました

SecurityGroupの内向きのルールをさっと確認したかったので、AWS CLIだけを極力利用してやってみた。 queryオプションをすらすら書ける自信がないので、備忘として書いときます。 確認環境 コマンド 実行例 参考にしました

CloudWatchに蓄積されたメトリクスをテキスト形式で取得する。 今回の対象サービスはRedshift、取得メトリクスはCPU使用率、期間は5分、統計は「最大」で。 コマンド 取得結果例 参考にしました

S3はKVS形式であって、本当は「フォルダ」ではないのですが、「hogebucket/path1/path2/file1.txt」の「path1/path2」は今回は便宜上「フォルダ」ということでひとつ。 すでに存在するフォルダ名を指定してフォルダを作成するとどうなるかが気になったので試…

RedshiftでCopyコマンドを使ってS3から取り込む際に気を付けること S3を参照できるようにするための設定 フォルダ、ファイルあり/なしによる取り込み可否

掲題の通り、AWS 認定ソリューションアーキテクト – アソシエイト(SAP-C01)を9/26に受験し、合格しました。 SAAよりも圧倒的に難しかったです。正直ダメかなーと思っていたので、合格の文字を見たときびっくりしました。 スコア 対策期間・時間 対策に使った…

EMRのSparkやHiveでサブクエリが使えるか試してみたメモ。その2。前回、Hiveでは一部のサブクエリが実行できなかった。今回は、Existを利用したサブクエリが使えるかを確かめたメモ。 メタデータカタログはGlueデータカタログを使用。 確認環境 元ネタ 実行…

EMRのSparkやHiveでサブクエリが使えるか試してみたメモ。 メタデータカタログはGlueデータカタログを使用。GlueのVPCエンドポイントを使ったところ、インターネットに出ずにデータカタログが参照できたのが意外だった。そちらの話はまた別途メモ予定。 確認…

AWSの簡易見積りツール(SMC)↓ AWS費用の見積りでよく使っているのですが、2020/6/30でサービス終了がアナウンスされていました。 その代わりとして「AWS料金見積りツール」が用意されてはいるんですが、対応サービスに差があったり、CSVダウンロードが無かっ…

遅ればせながら、CloudFormation始めました。手始めに、既存VPC・サブネット内にEC2を立てる、というのをやってみました。 CloudFormationのテンプレートです 参考にしました

AthenaでString→Timestampや、String→Decimalなどの変換を行いたく試行錯誤したのでメモ 検証環境 やりたいこと 実行SQLと実行結果 参考にしました

EBSのスナップショットは圧縮されるとのことだけど、実際どれくらい圧縮されるのかは公開されていないようなので、実際にスナップショットをとって圧縮度合いを確認してみた。 検証環境 検証方法 EC2のインストール直後 EC2直後のEBSスナップショットの利用…

LamdaのLayerはモジュールを共有できて便利ですよね。 そんなLayerに自作のPythonモジュールを登録して使いたかったのでメモ。 確認環境 自作モジュールをLayerに登録するために必要なこと 参考URL