Spark

Creators MeetUp #37で発表してきた

2月20日に行われた Creators MeetUp #37 で「センサーデータをSparkで機械学習してストリーミング処理してみた」というタイトルで発表してきました。 当日のまとめページは http://lab.designsatellites.jp/?p=2359 にて公開されているようです。 発表内容 …

「Apache Spark入門」「DevOpsを支える HashiCorpツール大全」読んだ

Apache Spark入門 動かして学ぶ最新並列分散処理フレームワーク (NEXT ONE)作者: 株式会社NTTデータ,猿田浩輔,土橋昌,吉田耕陽,佐々木徹,都築正宜,下垣徹出版社/メーカー: 翔泳社発売日: 2015/10/29メディア: 大型本この商品を含むブログを見る ApacheSpark…

Intel Edison + Eagletを使った工作4部作をQiitaに書いた

Edisonのセットアップから、Kinesisへデータを送るコード、さらにそのKinesisから送られてきたデータを機械学習するところまで、一通りやった工作記事をQiitaに書きました。 最終形はこんな感じになりました。 全部でだいたい丸々3日間かかっています。 興味…

JAWS-UG Meguro #2 に行ってきた

だいぶ前になってしまいましたが、9/25に行われたJAWS-UG Meguro #2に行ってきました。その時のメモです。 jawsug-meguro.connpass.com Stream処理(SparkStreaming + Kafka)とOffline処理(Hive)の統合 資料: http://www.slideshare.net/smartnews/stremspark…

「初めてのSpark」刊行記念 Spark Meetup 2015に行ってきた

だいぶ前になりますが、9/9に行われたSpark Meetup 2015に行ってきました。その時のメモです。 cloudera.connpass.com 「初めてのSpark」刊行のご挨拶 Advanced Analytics with Sparkを今年中には訳し終えたい。 「初めてのSpark」でカバーできていない範囲 …