管理人Kのひとりごと

デジモノレビューやプログラミングや写真など

2019-07-01から1ヶ月間の記事一覧

pysparkでリテラル列を追加(pyspark)

pysparkでリテラル列を追加したかったのでメモ。 確認環境 コード 実行結果 参考にしました

ファイルの内容を基にリストを作成する(python)

ファイルの内容(要素 × 個数)を基にリストを作りたかったのでpythonを使って書いたメモ。 確認環境 入力ファイルの内容 コード 実行例 参考にしました

KEN_ALL.CSVを都道府県毎に分解したCSVを作成する(sed等)

KEN_ALL.CSV(郵便番号データ)をsed等を使って、都道府県毎に分解したCSVファイルを作成してみました。 確認環境 KEN_ALL.CSVファイルの内容(一部抜粋) コード 実行結果と結果の確認 参考にしました

CLIからAthena を使ってCTASでのParquet形式への変換を行う(AWS,Athena)

AthenaでCSVファイルのParque形式への変換ができるのですが、GUIからだけでなく、CUIからやったらできるかな、と試したらできたのでメモ。 実行したコマンド 補足 参考にしました

AWSのサポート費用を計算する(python)

AWSのサポートプランの一部(ビジネス、エンタープライズ)では、月の利用料金に応じて段階的にサポート費用が変動します。利用料金に応じたサポート費用を試算するため、pythonでスクリプトを書いてみました。 サポート費用の求め方(ビジネス) pythonでの計算…

JScriptでIEのProxyURLの設定を自動化する

IEをProxy環境で使うことって結構ありますよね。Windows標準機能でIEのProxyURL設定を自動化してみました。 JScriptのコード 参考にしました

相関サブクエリで直近3日間の通信量を求める(sql)

日ごとの通信量が記録されたテーブルを使って、直近3日間(当日より前の3日間)の通信量の合計を求めたかったのでメモ。 やりたいこと 確認環境 作成したSQL 参考にしました

ブランチをマージする(git)

Git

たまーにgitを使うと、ブランチのマージの仕方を忘れてしまうのでメモ。 実行方法 実行例 (補足)不要になったブランチを削除する

jsonを整形して表示したい(python)

jsonを手軽に整形表示したかったのでメモ。 pythonのjson.toolモジュールを使えば、jsonを整形して表示可能。 (json.toolはpython2.6以降標準モジュールだそうです) 確認環境 どうすればよいのか json.toolが入っていることを確認するには 参考にしました

sedでのファイル操作あれこれ

最近sedをよく使っています。既存のファイルに定型的な処理を施す場合に便利ですね。 最近よく使う用法をメモ。 確認環境 最近よく使うファイル操作 テスト用のファイルを作成(1行目:1~5行目:5の5行のファイル) 1行目に「0」を挿入 2行目に「1.5」を挿入 3…

AWS 認定ソリューションアーキテクト – アソシエイト(SAA-C01)に合格しました

掲題の通り、AWS 認定ソリューションアーキテクト – アソシエイト(SAA-C01)を昨日受験し、合格しました。(1発合格) 春先からAWSに触れることが増え、力試しにちょうどいいなということでチャレンジしました。 スコア 対策に使った本など 1.徹底攻略 AWS認定 …