Python 3.12で増えた並列処理と、これまでの並列処理の挙動を比べてみる - Qiita

2024/04/30 173 users 総当たり Qiita Python 挙動 並列実行

この記事ですることを3行で Pythonの標準ライブラリでできる並列実行を、あらためて総当たりで速度比較しよう ウォーターフォールチャートで、それぞれの並列処理の処理時間の特徴を可視化しよう boto3の実行をモデルケースにして、どの並列処理が一番早いのかを調べよう この記事の結論を先に Python 3.12から本格的に... 続きを読む

Pythonパッケージの依存関係とライセンスを確認する | Developers.IO

2020/08/03 11 users Developers.IO Pythonパッケージ AWS

はじめに データアナリティクス事業本部のkobayashiです。 Pythonを使って開発を行っていると、AWSのリソースを扱う際にはboto3でしたりデータ解析を行う場合はPnadas,Scipyなど様々なパッケージを使っているかと思います。 今回、その利用しているパッケージの依存関係やパッケージを調べる機会があったのでその方法を... 続きを読む

AWS SDK for Python (Boto3) の “Client API” と “Resource API” の違いについて調べてみた ｜ Developers.IO

2020/03/17 5 users Developers.IO 青柳 AWS リソース API

みなさん、こんにちは！ AWS事業本部の青柳＠福岡オフィスです。 AWS SDK for Python (Boto3) の特徴の一つとして挙げられることに、AWSのリソースを操作するAPIとして "Client API" […] 続きを読む

コードでAWSをさわってみよう！プログラミング初心者向けAWS SDK（Boto3）の使い方 ｜ DevelopersIO

2019/09/19 47 users DevelopersIO installation AWS

Pythonのインストール 環境構築ガイドを参考にインストールしてください。 Boto3のインストール Boto3はAWS SDK for Pythonの別称であり、Pythonを介してAWSを操作するためのライブラリです。 公式ドキュメント記載のとおり、下記コマンドを実行しBoto3をインストールします。 Boto 3 Docs / Installation $ pip install... 続きを読む

[CDK]EC2リストを取得して全台にCloudWatchアラームを設定する ｜ DevelopersIO

2019/08/13 26 users CDK DevelopersIO コンニチハ アラーム ＥＣ

コンニチハ、千葉です。 CDK便利ですね。今回はEC2の一覧を取得し、一括でCloudWatchアラームを仕掛けてみたいと思います。具体的には、boto3でEC2の一覧を取得し、対象のEC2に共通のアラームをばんばか設定してみたいと思います。共通の設定する場合に、対象リストを取得して、それを元に設定ができると楽そうですね。 ... 続きを読む

AWS SDK for Python (Boto3)の エラーの再試行について ｜ DevelopersIO

2018/10/14 30 users DevelopersIO API エラー 再試行 要因

API 呼び出しは様々な要因で一時的に失敗することがありますが、AWS SDKは自動再試行ロジックを実装しています。今回は、AWS SDK for Python (Boto3)でのリトライ回数の変更方法をご紹介します。 リトライ処理やエクスポネンシャルバックオフについてはAWSドキュメント AWS でのエラーの再試行とエクスポネンシャルバッ... 続きを読む

boto3からDynamoDBへのアクセスをmotoでモックしてみる ｜ Developers.IO

2018/05/21 10 users DynamoDB localstack Lambda 岩田

サーバーレス開発部＠大阪の岩田です。 現在開発しているLambdaで単体テストを作成する際に、DynamoDBへのアクセスをモックしたい箇所が出てきました。 その際にテスト手法について色々と調査したことをまとめます。 背景 LambdaからDynamoDBにアクセスする処理のテストコードを書く場合、DynamoDBのエンドポイントとしてDynamoDB LocalもしくはLocalStackを使用... 続きを読む

Pythonでboto3を使って全リージョンで処理を回すコード書いてみた ｜ Developers.IO

2018/04/29 20 users Python Developers.IO 全リージョン 臼田

こんにちは、臼田です。 皆さん、Pythonしてますか？ 今回は全リージョンに対して処理を回す機会があったので、作成したPythonのコードを共有します。 コード コードは下記のとおりです。2.7.10と3.6.1で動くことは確認しています。 import boto3 ec2 = boto3.client('ec2') regions = map(lambda x: x['RegionName']... 続きを読む

Amazon Web Services ブログ: 今すぐ使えます - AWS SDK For Python (Boto3)

2015/06/26 24 users AWS SDK For Python ブログ

私の同僚 Peter Moon が boto として知られている AWS SDK for Python の最新バージョンを紹介するゲスト投稿を送ってくれました。 - Jeff Boto は元々 2006年に Mitch Garnaat が作成した Amazon S3 のための Python クライアントとして始まりました。Boto は AWS を使う世界中の多くの Python 開発者やシステム管... 続きを読む