Hadoop」カテゴリーアーカイブ

Hadoop チューニング

投稿者: | 2018年10月1日

GMOアドマーケティングのT.Cです。入社してから今までPHP, Ruby On Rails, Java, Spark, JavaScriptなどの様々な言語を使った開発に関わることでどんどん開発の幅が広くなりましたが、… 続きを読む »

SparkのWebUIでモニタリング

投稿者: | 2017年12月7日

皆さんこんにちは、GMOアドマーケティングのS.Rです。SparkのProgramを開発する上で、Performanceの改良やInstanceの設定のTuningはかなり重要です。これらのチューニングはSparkのWe… 続きを読む »

Apache Storm を使ってストリーム処理を書いてみよう

投稿者: | 2017年8月30日

こんにちは。 Hadoop 周辺をよく触っている T.O. です。 Hadoop 周辺をよく触っているので、最近 Hadoop 周辺を触ってきて得た話などを書いていきます。ということで今回は、数あるストリーム処理エンジン… 続きを読む »

HBase shellでも日本語を表示したい!

投稿者: | 2016年2月8日

最近はレコメンドウィジェットTAXELの開発をやっているCTO室のHadoopエンジニアのJ.Nです。HBaseで日本語を取り扱う時、日本語データはバイト列で格納されるためHBase Shellでデータを確認したい時はバ… 続きを読む »

Impala で unix_timestamp(now()) を実行しても現在時刻が返ってこない件について

投稿者: | 2015年11月26日

(画像は Impala の Web サイト より転載)GMOインターネット 次世代システム研究室 兼 GMOアドパートナーズ グループCTO室のM. Y.(自称DevOps担当)です。今回は、普段の業務で気付いた Imp… 続きを読む »