カテゴリー別アーカイブ: その他

HadoopからSparkへの移行

こんにちは。配信/インフラチームの佐々木です。 今回は、adstirの集計システムをHadoopからSparkに移行したお話をしたいと思います。 以前の構成 adstirでは以前はAWS上のEMRでHadoopを使って集計していました。一つの集計のフローとしては以下のようになりま…
続きを読む

乱数の生成について

こんにちは。データ解析部の西岡(敏)と申します。 広告配信の効果分析とアルゴリズム実装を担当しております。 今回は、システムで利用する乱数の生成について書きたいと思います。 乱数について 過去、コンピュータの無い時代には、サイコロを振ってその数字を記録したり、コインを投げてその裏…
続きを読む