機能改善 イベント編集時の「重複参加の許可」をデフォルトで「許可しない」から「許可する」に変更しました。詳しくは こちら をご確認ください

お知らせ connpassアカウントのパスワードを設定することで、ソーシャル認証に依存しないログインも可能となります。詳しくは以下のヘルプをご確認ください。
- パスワードの設定
- ソーシャル認証ログインが出来なくなった場合の操作
イベント管理者様・グループ管理者様も上記ヘルプを 一括メッセージ機能 にて参加者・グループメンバーへ案内して、連絡がつかなくならないようご注意ください。

このエントリーをはてなブックマークに追加

Aug

4

ストリームデータ処理技術勉強会

Kafka、NiFiなどについての動向、利用にあたっての勘所などを共有します

Hashtag :#streamdatajp
Registration info

参加枠

Free

FCFS
185/240

Description

はじめに

コネクティッドカーに代表されるようにIoTデバイスから大量のデータを取得し、リアルタイムにデータを分析しビジネスに活かすといった要望が増えてきました。そこで今回は、ストリームデータを処理するテクノロジーについて学んでいきたいと思います。

日時

2017/8/4(金)19:00 - 21:30
受付: 18:30

場所

レバレジーズ株式会社 東京都渋谷区渋谷2-21-1 渋谷ヒカリエ 17階
東急田園都市線・東急東横線・東京メトロ副都心線「渋谷駅」15番出口と直結
JR・東京メトロ銀座線・京王井の頭線「渋谷駅」と2F連絡通路で直結
11階スカイロビーにてオフィス用エレベーターに乗り換え

注意

  • 前日・当日のキャンセルはご遠慮下さい。キャンセルされる場合は、2日前までに当サイトからキャンセルをお願いします。
  • プログラム内容は予告なく変更する可能性があります。
  • 必ず受付票と名刺2枚をお持ち下さい。1枚は名札としてケースに入れてご利用ください。

参加費

勉強会: 無料
懇親会: 1000円(領収書は発行しません)

発表者募集

募集は終了しました。 スピーカーを募集しています。時間は、10分 - 20分程度になるかと思います。ストリームデータ処理に関連するネタであれば何でもOKです。受付後、実行委員で審査後、連絡いたします。皆様からの登録お待ちしております。
ストリームデータ処理勉強会発表者募集

アジェンダ

時間 タイトル
19:00 - 19:05 諸説明
19:05 - 19:15 ストリームデータ処理の動向
6月に米サンノゼで開催された「DataWorks Summit 2017」で取材した内容を中心に、データストリーミングの最新トレンドについて紹介します。
五味明子, フリーランスライター
19:15 - 19:30 Modern stream processing by Spark Structured Streaming
昨今、ストリーム処理は以前言われてきたバッチ処理と対比される状況を越え、統合データ処理として語られるようになってきています。OSSによるストリーム処理の流れを振り返り、最近の1つの具体例として統合されたデータ処理を簡易に実現可能なSpark Structured Streamingについて紹介します。
木村宗太郎, ドワンゴ
19:30 - 19:45 Kafka Summit NYCに見るストリーミングデータETLの話(仮)
5月に米ニューヨークで開催された「Kafka Summit NYC」をベースに、KafkaをコアにしたストリーミングデータのETLの動向などについて話します。
森谷大輔, ヤフー株式会社
19:45 - 20:05 大規模MQTTメッセージを支える技術
物流系のIoTなシステムを設計/構築する中で、特にMQTTブローカーについて、考慮しなくちゃいけなかったことやハマったポイント、プロダクト/サービスの選定経緯についてお話します。
須田桂伍, Future Architect
20:05 - 20:10 休憩
20:10 - 20:20 Apache NiFi, 流れるデータにもスキーマを
処理性能にも大きく貢献する、Apache NiFi 1.2.0から追加された、スキーマやRecord Reader/Writerといった機能について掘り下げて紹介します。
河村康爾, Hortonworks
20:20 - 20:40 NiFi素人が苦労した物語
Webサービスが連携していく中で、独自インターフェースとのやり取りや、しがらみを吸収するのに採用した内容について事例紹介させていただきます。
一ノ瀨 淳, 田草川 梢, SoftBank
20:40 - 21:00 ビッグデータエンジニア向けのIoT入門 〜デバイス、無線からクラウドまで〜
IoTならではのアプリケーションデザインのお話をします。例えば、セルラー通信でのデータ収集はネットワークの不安定性を考慮に入れて設計する必要がありますが、デバイス側のバッファが小さく、再送処理もままならないようなケースも多数あります。こういった「あるある」なユースケースに沿ったアプリケーションデザインを紹介していきます。
今井雄太, SORACOM

資料

勉強会終了後、下記で公開予定
https://connpass.com/event/60300/presentation/

その他

  • 開催中の事故・天災・その他の事象によってもたらされたすべての不利益に関して、当勉強会、および会場提供者はその責任を負いかねます。
  • 当日の様子のお写真をウェブサイトやSNSで公開する可能性があります。予めご了承ください。
  • 当イベントでは全ての参加者がこのイベントを楽しめるよう、有志による運営のもと開催しています。そのため、以下のような行動を取られた方は、退室いただく場合があります。また次回以降の参加をお断りしますのでご了承下さい。
    • 講師および参加者に対して、勉強会の妨害と見られる言動や行動
    • 人材紹介、転職、マルチ商法、宗教など、本勉強会とは関係のない勧誘

Feed

imai_factory

imai_factoryさんが資料をアップしました。

08/10/2017 16:08

kkitase

kkitaseさんが資料をアップしました。

08/07/2017 13:24

Koji Kawamura

Koji Kawamuraさんが資料をアップしました。

08/07/2017 09:55

kkitase

kkitaseさんが資料をアップしました。

08/05/2017 21:36

kkitase

kkitaseさんが資料をアップしました。

08/05/2017 20:59

GOMI Akiko

GOMI Akikoさんが資料をアップしました。

08/05/2017 18:31

kkitase

kkitaseさんが資料をアップしました。

08/05/2017 11:42

kkitase

kkitaseさんが資料をアップしました。

08/05/2017 11:41

kkitase

kkitaseさんが資料をアップしました。

08/05/2017 11:41

kkitase

kkitaseさんが資料をアップしました。

08/05/2017 11:36

kkitase

kkitaseさんが資料をアップしました。

08/05/2017 11:35

s_mryk

s_mryk wrote a comment.

2017/08/04 20:49

とりあえず #streamdatajp がハッシュタグかしら

kkitase

kkitase published ストリームデータ処理技術勉強会.

07/13/2017 16:28

「ストリーミングデータ処理技術勉強会」を公開しました!#ApacheKafka #ApacheNiFi

Group

Future of Data データ活用について考えよう

データエンジニアリング、データサイエンス等に関連する勉強会を定期的に開催します

Number of events 39

Members 1589

Ended

2017/08/04(Fri)

19:00
21:00

You cannot RSVP if you are already participating in another event at the same date.

Registration Period
2017/07/13(Thu) 16:28 〜
2017/08/04(Fri) 21:00

Location

レバレジーズ株式会社

東京都渋谷区渋谷2-21-1 渋谷ヒカリエ17F

Attendees(185)

hiroaki717

hiroaki717

ストリーミングデータ処理技術勉強会に参加を申し込みました!

tomohiko_isobe

tomohiko_isobe

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

newbie

newbie

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

hiroaki_ono

hiroaki_ono

I joined ストリーミングデータ処理技術勉強会!

ymari

ymari

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

tranqy

tranqy

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

wadldoo

wadldoo

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

Tadashi Nakamura

Tadashi Nakamura

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

ENOMOTOQ

ENOMOTOQ

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

(退会ユーザー)

(退会ユーザー)

I joined ストリーミングデータ処理技術勉強会!

Attendees (185)

Canceled (78)