aws | たーちゃんの「ゼロよりはいくらかましな」

【AWS】【EMR】分散処理させたコアのEC2が出力したログを検索する

2021/6/18 aws, emr, IT

AWSの分散処理基盤サービスであるEMRを利用していて、 sparkで実装し、EC2を数台、時には数十台起動させて分散処理する...

2021/6/7 aws, IT

awsにて複数の開発環境を各環境用ロールを用意しそれを切り替えることで実現しているときに、 credential profil...

DynamoDBにバイナリデータが格納できるのは知ってたのですが、それをどう取得するのかなー？ということで調べてみたら、意外...

boto3のDynamoDBはbatch_get_itemは1回で取得できるデータに制限があります。(データが16MB or 項目が...

以前、別のプロジェクトでscalaの方のsparkで EMRを利用した分散処理基盤の実装というのは行っていました。 ...

2020/6/8 aws, IT, python

先日こちらでもお話した通り、今回はzapaでHello Worldをしてみたいと思います。 Hello Worldに向けて、 ...

2020/6/4 aws, IT

環境が変わるといつも「あれ？AWS CLIってどう設定するんだったっけ？」となるので、コマンドが叩けるようになるまでの操作について、...

2019/10/12 aws, IT

AWSでCodeCommitでgit cloneする場合に、 CodeCommitプロトコルが使えるとなにかと便利なので備忘録。 ...