这项技术实操与测试,我们是认真的

2018 年 9 月 2 日 InfoQ

9 月 8 日,一批技术大牛和专家将在北京发起一场「实时大数据」现场挑战 Workshop!

只要你对 Spark/Flink/CarbonData 开发感兴趣,或想在指定时间内测验并展现自己在实时流大数据技术维度的水平,那就不要错过这场想想都无比刺(kai)激(xin)的比拼。

现场还有数位国内顶尖级技术专家亲临现场答疑、指导!不说十年难遇,至少莫失良机。(点击阅读原文即可免费报名)

时间:9 月 8 日 13:00-18:00

地点:北京·车库咖啡(北京市海淀区西大街 48 号三层)

费用:全!程!免!费!



1为什么要发起这场 Workshop
最近两年,实时大数据快速发展,流式 SQL、在线机器学习、流式大数据查询、SQL 复杂时间处理(CEP SQL)、实时时空数据分析(Time GeoSpatial)等高大上特性迅速成长起来。随着数据越实时价值越大,毫秒~ 秒级的实时流式大数据计算场景层出不穷,Spark 和 Flink 开始在各大互联网业务中得以广泛应用。同时,以一种新的融合数据存储方案出现的 CarbonData 已在 20+ 企业生产环境上部署应用。

随着数据越实时价值越大,毫秒~ 秒级的实时流式大数据计算场景层出不穷,Spark 和 Flink 开始在各大互联网业务中得以广泛应用。同时,以一种新的融合数据存储方案出现的 CarbonData 已在 20+ 企业生产环境上部署应用。

Tips1:参会者可独立(或组队)完成实时大数据分析典型场景实践,通过动手体验及问题交流,全面了解在实时大数据分析及处理场景中所必备的进阶技能。

Tips2: 如果你想说,自己并没有深入了解过 Spark、Flink、CarbonData 这类开源框架,且基础不够好,但就是有兴趣参加,该怎么办?没关系!我们也送上免费锦囊——40 分钟 Demo 课程。

• Demo1:针对不断增长的大数据场景,演示如何用 CarbonData 作为统一数  据存储来做各种业务的数据分析 (明细数据查询、多维过滤,聚合统计分析等),同时会演示各种数据管理操作(数据更新、删除等)。

• Demo2:针对分钟级准实时场景,使用 Spark structured streaming+Carbon       Data 与 Kafka 对接,进行准实时流式数据查询和分析。

2Workshop 日程(9 月 8 日下午)

具体流程及详细说明手册请点击「阅读原文」查看。


3Workshop 实践命题提前知

动手实操环节将设以下三项实践命题,参会者可自由选择其中一至多个命题,三项命题对应分值分别为 4 分、3 分、3 分。完成命题后即由技术专家团现场给出最终评分。

实践 1. 异常驾驶行为实时分析(4 分)

实现如下需求:在机动车行进过程中,车载设备实时采集地理位置,数据格式为三元组(经度, 纬度, 时间),如 (34.58662,105.73763,91.23, 20171202081203)。根据三元组数据,实时对司机驾驶行为分析,一旦发现异常行为,即时发送 SMN 告警。异常驾驶行为包括但不限于:频繁急加速、频繁急刹车、超速驾驶、疲劳驾驶、偏理既定路径规划等。注:急加速一级标准:急速度数值>=2.78, 持续时间>=2 秒, 此时速度差为 8KM/H。

实践 2. 实时风控(3 分)

实现如下需求:

  1. 账号风控:实时分析检测异常账号,可使用风控规则,如账号 1 分钟内登陆次数超过 15 次,僵尸账号(上次登录时间超过 1 年),设备 ID 在黑名单中等。

  2. 实时反欺诈检测:在实际交易过程中,实时分析检测欺诈行为,如诈骗团伙成员,频繁入账或电话呼出,多头借贷等。欺诈行为是综合分析过程。上述两个场景,二选一即可。

实践 3. 自由场景(3 分)

实现如下需求:在实时流计算服务 (CS) 中,用 Flink 或 Spark 完成自己的实时业务场景。

如何打分:从有用、独到、易用、性价比高等方面,有专家团体共同打分

4专家团队集体上阵指导

我们将为现场参与者将提供免费的网络环境和华为云赞助的实时流计算服务资源,参与者只需提前注册华为云账号即可。

此外,参与现场指导的 6-7 位左右国内顶尖级技术大牛将组成专家团,实时解答各位在实操过程中遇到的疑难问题,并加入到会后与大家进行的两小时的深度交流中。

5 我想参加,如何报名?  

本次 Workshop 采取限额审核制:在阅读原文参与免费报名后,如通过相应审核,InfoQ 工作人员将于赛前进行一对一通知。现场限额 80 人,名额先报先得哟~

今日荐文

点击下方图片即可阅读

你真了解实时大数据?高手们如何玩转开源流计算?


如果您对 9 月 8 日上午场 Meetup 讲解 Spark、Flink、CarbonData 技术实践的内容感兴趣,并想通过上午讲解 + 下午实操双重加深对相应技术的理解,也欢迎进入下方 阅读原文👇免费报名。

登录查看更多
1

相关内容

【2020新书】实战R语言4,323页pdf
专知会员服务
98+阅读 · 2020年7月1日
【实用书】学习用Python编写代码进行数据分析,103页pdf
专知会员服务
190+阅读 · 2020年6月29日
【硬核书】不完全信息决策理论,467页pdf
专知会员服务
336+阅读 · 2020年6月24日
【干货书】现代数据平台架构,636页pdf
专知会员服务
250+阅读 · 2020年6月15日
Python分布式计算,171页pdf,Distributed Computing with Python
专知会员服务
105+阅读 · 2020年5月3日
【2020新书】如何认真写好的代码和软件,318页pdf
专知会员服务
63+阅读 · 2020年3月26日
【经典书】Python数据数据分析第二版,541页pdf
专知会员服务
189+阅读 · 2020年3月12日
【干货】大数据入门指南:Hadoop、Hive、Spark、 Storm等
专知会员服务
94+阅读 · 2019年12月4日
携程用ClickHouse轻松玩转每天十亿级数据更新
DBAplus社群
11+阅读 · 2019年8月6日
对不起,我们公司不招过了25岁还不懂数据分析的人
AI过气了?那是因为你还没看过这些实践
【免费直播课程】用户画像建模实践,只等你来!
R语言中文社区
5+阅读 · 2018年8月3日
直播 | Python+AI:Python 学习者的人工智能入门课
AI研习社
3+阅读 · 2018年5月13日
直播 | Python+AI:Python学习者的人工智能入门课
AI科技评论
4+阅读 · 2018年5月11日
Python & 机器学习之项目实践 | 赠书
人工智能头条
12+阅读 · 2017年12月26日
你需要学好知识图谱——用 AI 技术连接世界
Python开发者
5+阅读 · 2017年10月11日
报名 | 知识图谱技术和在司法领域的应用
THU数据派
24+阅读 · 2017年9月11日
Meta-Learning with Implicit Gradients
Arxiv
13+阅读 · 2019年9月10日
Transfer Adaptation Learning: A Decade Survey
Arxiv
37+阅读 · 2019年3月12日
Arxiv
22+阅读 · 2018年8月3日
Learning Blind Video Temporal Consistency
Arxiv
3+阅读 · 2018年8月1日
Arxiv
5+阅读 · 2018年6月5日
VIP会员
相关VIP内容
【2020新书】实战R语言4,323页pdf
专知会员服务
98+阅读 · 2020年7月1日
【实用书】学习用Python编写代码进行数据分析,103页pdf
专知会员服务
190+阅读 · 2020年6月29日
【硬核书】不完全信息决策理论,467页pdf
专知会员服务
336+阅读 · 2020年6月24日
【干货书】现代数据平台架构,636页pdf
专知会员服务
250+阅读 · 2020年6月15日
Python分布式计算,171页pdf,Distributed Computing with Python
专知会员服务
105+阅读 · 2020年5月3日
【2020新书】如何认真写好的代码和软件,318页pdf
专知会员服务
63+阅读 · 2020年3月26日
【经典书】Python数据数据分析第二版,541页pdf
专知会员服务
189+阅读 · 2020年3月12日
【干货】大数据入门指南:Hadoop、Hive、Spark、 Storm等
专知会员服务
94+阅读 · 2019年12月4日
相关资讯
携程用ClickHouse轻松玩转每天十亿级数据更新
DBAplus社群
11+阅读 · 2019年8月6日
对不起,我们公司不招过了25岁还不懂数据分析的人
AI过气了?那是因为你还没看过这些实践
【免费直播课程】用户画像建模实践,只等你来!
R语言中文社区
5+阅读 · 2018年8月3日
直播 | Python+AI:Python 学习者的人工智能入门课
AI研习社
3+阅读 · 2018年5月13日
直播 | Python+AI:Python学习者的人工智能入门课
AI科技评论
4+阅读 · 2018年5月11日
Python & 机器学习之项目实践 | 赠书
人工智能头条
12+阅读 · 2017年12月26日
你需要学好知识图谱——用 AI 技术连接世界
Python开发者
5+阅读 · 2017年10月11日
报名 | 知识图谱技术和在司法领域的应用
THU数据派
24+阅读 · 2017年9月11日
相关论文
Meta-Learning with Implicit Gradients
Arxiv
13+阅读 · 2019年9月10日
Transfer Adaptation Learning: A Decade Survey
Arxiv
37+阅读 · 2019年3月12日
Arxiv
22+阅读 · 2018年8月3日
Learning Blind Video Temporal Consistency
Arxiv
3+阅读 · 2018年8月1日
Arxiv
5+阅读 · 2018年6月5日
Top
微信扫码咨询专知VIP会员