Hadoop チューニング
GMOアドマーケティングのT.Cです。 入社してから今までPHP, Ruby On Rails, Java, Spark, JavaScriptなどの様々な言語を使った開発に関わることでどんどん開発の幅が広くなりましたが...
SparkのWebUIでモニタリング
皆さん こんにちは、GMOアドマーケティングのS.Rです。 SparkのProgramを開発する上で、Performanceの改良やInstanceの設定のTuningはかなり重要です。 これらのチューニングはSpark...
Apache Storm を使ってストリーム処理を書いてみよう
こんにちは。 Hadoop 周辺をよく触っている T.O. です。 Hadoop 周辺をよく触っているので、最近 Hadoop 周辺を触ってきて得た話などを書いていきます。 ということで今回は、数あるストリーム処理エンジ...
HBase shellでも日本語を表示したい！
最近はレコメンドウィジェットTAXELの開発をやっているCTO室のHadoopエンジニアのJ.Nです。 HBaseで日本語を取り扱う時、日本語データはバイト列で格納されるためHBase Shellでデータを確認したい時は...
Impala で unix_timestamp(now()) を実行しても現在時刻が返ってこない件について
（画像は Impala の Web サイト より転載） GMOインターネット 次世代システム研究室 兼 GMOアドパートナーズ グループCTO室のM. Y.（自称DevOps担当）です。今回は、普段の業務で気付いた Im...