
【EMR】【pyspark】postgresqlのデータをDataframeに読み込む
以前、別のプロジェクトでscalaの方のsparkで EMRを利用した分散処理基盤の実装というのは行っていました。 ...
事を起こすとき起こる恐れをゼロよりはまし!と言い聞かせてみるみたいなもの
以前、別のプロジェクトでscalaの方のsparkで EMRを利用した分散処理基盤の実装というのは行っていました。 ...
sparkでjdbc経由でデータベースの内容を 読み込んでDataFrameとして扱うことは少なくないと思います。 しか...
一意のIDを付与するためにUUIDを使用することはよくあると思います。 ところが、このUUID、 sparkでDataF...
AWS EMRを使用することになり、 アプリとしてsparkを使用することになりました。 scalaはplay fram...