AWS GlueでPySparkを使ってデータを加工する方法【RDS・Redshift対応】

はじめに AWS Glueは、サーバーレスでスケーラブルなデータ統合サービスであり、ETL（Extract, Transform, Load）ジョブの実行に最適です。GlueはApache Sparkをバックエンドに持っ […]

postgres チューニングメモ

ハードウェアの性能 PostgreSQLの設定 PostgreSQLのバージョン データベース設計 データの特性 その他の要因 結論 PostgreSQLの性能は多くの要因に依存します。適切なハードウェアの選択、最適なP […]

java mockを使用してstaticクラスのモック化する方法

java junitにてstaticメソッドを持つクラスをmockを使用する方法を示します。この例では、Mockitoを使用しています。 実装例 補足 この例では、MockedStatic<StaticClass& […]

AWS Java V2 ECSから指定したクラスタの起動中のTaskARNの取得方法

AWS SDK for Java V2を使用して、Amazon ECS（Elastic Container Service）クラスタ内で実行中のタスクを監視し、特定のステータスがRUNNINGになったTaskArnを取得 […]

Fargateタスクの情報を取得するAWS Java v2の実装例

AWS Fargateを使用して実行されているタスクの詳細情報を取得するためのAWS Lambda関数を作成します。このLambda関数は、指定されたクラスターとタスクのARNを使用して、Fargateタスクの現在の状態 […]

java(spring boot)で非同期処理をAsyncを使い実装する方法

java(spring boot)で非同期処理を行う。asyncを使用して容易に実装を行う。 Service クラスの実装 ここでは非同期の具体的な処理を記載する。今回はSleepをかけ、その間でprintlnをすること […]

JavaでAWS fargateを呼び出す方法：AWS SDK for Java v2

JavaでAWS fargateを呼び出す方法。AWS SDK for Java v2を使用してfaregateを呼び出し、fargateの状態を監視し、処理結果を分岐する実装内容。 1. AWS SDK for Jav […]

JavaでAWS Lambdaを呼び出す方法：AWS SDK for Java v2

JavaでAWS Lambdaを呼び出す方法。AWS SDK for Java v2を使用してLambda関数を同期的に呼び出す手順を解説します。 1. AWS SDK for Java v2のセットアップ 最初に、AW […]

pythonでwebスクレイピングを行う【実装付き】

環境（動けば環境は何でもよいかなと）： jupyter-lab前提としてpythonはインストール済みであることとする。 実装： 感想： 正直簡単だと思った。適当にコピペするだけである程度のものはできる。さらに条件を絞る […]

現役エンジニアがおすすめする1万円以下で買えるPCモニター

現役エンジニアがおすすめするPCモニターを紹介します。今回おすすめするものはPCモニターが1万円以下を対象とします。モニターに対する補足を書きますが、説明がないものは書けませんので、記載レベルは異なります。 21.5イン […]