新闻中心 深化HBase、Spark、Alluxio、Greenplum、StreamSQL等大数据技能及其架构规划 来源:亚博手机 作者:亚博充值送 发表时间: 2024-03-29 06:32:48

  将在深圳举办,峰会秉承干货实料的内容准则,约请业界顶尖的架构师、大数据总监和PMC共话弹性核算、大数据渠道构建、优化进步大数据渠道的各项功能、Spark布置实践、企业流渠道实践,以及完结运用大数据支撑事务立异开展等中心论题,旨在经过来自国内一线互联网公司的实践事例,为开发者供给一个最有价值的高效技能交流渠道。

  陈敏敏,苏宁云商大数据中心总监,首要担任智能引荐、数据仓库和数据运用等部分的研制团队,并担任建造支撑供应链、物流、财政、运营等的一致数据渠道。成电本科,上交硕士,《Storm 技能内情与大数据实践》一书作者(人民邮电出版社、出口台湾),中关村大数据工业联盟专委会委员,2012年牵头建立三星电子研讨院上海分部技能委员会(把关 Code Review 和技能架构),后在1号店别离任资深开发司理、精准化部分总架构师,现在首要重视引荐体系、运用架构、数据渠道、OLAP等相关技能。

  个人简介:曾在eBay,PPTV任职DBA。2012年参加唯品会,顺次阅历从0到1参加数据库根底建造、大数据根底渠道和实时核算渠道的作业;2016年参加饿了么担任大数据根底架构,首要担任数据渠道东西链及数据仓库。

  讲演简介:跟着接入需求方越来越多样化,对大数据的数据运用、数据存储与核算的需求也越来越多样化,事务的飞速开展及集群的规划急速扩展。怎么在这样的场景下经过有限的资源来构建大数据渠道、安稳支撑住事务的开展是一个不小的应战。本次共享首要谈一谈从数据渠道东西链、技能选型及架构规划动身的一些个人经历。

  个人简介:百度外卖资深研制工程师,担任百度外卖的大数据渠道,致力于大数据引擎的研讨和大数据渠道架构的规划和研制。

  讲演主题:《Greenplum在百度外卖大数据架构的运用实践及功能优化实践》

  个人简介:2015年参加腾讯,供职于TEG数据渠道部,首要担任StreamingSQL及实时核算渠道的相关作业。在参加腾讯前曾供职于京东商城、聚美优品,有多年的大数据相关作业经历,特别拿手分布式存储、HBase、实时数据收集等范畴。

  讲演简介:StreamSQL是一个经过SQL描绘实时核算事务需求并将其转换成实时核算使命的开发渠道。相关于传统实时核算渠道Storm,StreamSQL内建丰厚的字符串处理、时刻、核算、杂乱数据成果处理等各类核算函数,除了支撑规范SQL之外还依据流式数据特色新增窗口核算特性,具有强壮的核算核算才能。StreamSQL处理了传统Storm原生API运用杂乱、上手难度高的问题,削减了用户对杂乱实时核算结构和编程言语的学习本钱,让用户具有愈加杰出的流式开发体会。

  了解StreamSQL的规划方针并从中取得启示:让用户经过通用的SQL查询言语完结实时核算需求,削减用户对杂乱实时核算结构及编程言语的学习本钱,进步实时核算使命的开发功率。

  个人简介:Intel亚太研制中心Spark团队研制司理,Apache Spark活泼开发者,致力于Apache Spark结构在Intel渠道架构上的功能剖析与优化。

  讲演简介:功能调优在Spark大数据运用中一直是我们遍及关怀的论题。本次共享将首要讨论以下内容:

  新硬件收购时,怎样的硬件装备对Spark运用可以有最佳的效能或许最好的性价比?

  经过展现不同特性的典型Spark运用的功能剖析和调优手法,提醒怎么开释硬件功能,监控硬件功能发挥,并在此根底上,测验不同硬件装备比如内存、网络、磁盘、CPU选型,关于Spark大数据运用程序功能的影响,辅导运维人员决议计划购买或许晋级新的硬件零部件。

  听众获益:针对硬件功能监控来调优Spark运用程序功能,并提醒Spark运用的最高性价比环境布置最佳实践。

  个人简介:上任于滴滴出行根底渠道部,担任HBase、Spark相关开发。

  讲演简介:面临企业的快速开展,每天几百亿事务拜访、数据的张狂添加和多租户场景下,究竟企业该怎么面临HBase集群规划不断扩展、集群办理、资源阻隔、危险办理、服务保证、本钱账单、事务监控及集群运维所带来的问题。

  个人简介:2016年参加魅族,首要担任数据运用渠道的规划、架构规划和落地完结。

  讲演简介:魅族DMP(用户洞悉渠道),经过对三方受众数据的会聚、清洗、智能运算,构建了巨大的精准人群数据中心,供给丰厚的用户画像数据以及实时的场景识别力。

  对内:无缝对接各类事务渠道的数据运用,如广告渠道、PUSH推送、个性化引荐之间建立了数据通道,支撑公司级的精准营销,音讯及时送达服务等场景。

  对外:完善对数据的办理及输出流程,以敞开接口方式为全职业从业者供给规范的精准人群标签,协助优化投进并进步营销作用。到达对受众的精准投进,开释数据真实价值。

  本次共享将介绍用户洞悉渠道所选用的架构,讨论其间遇到的技能难点和处理进程,回忆现在架构的不足之处以及将来改善的方向。

  个人简介:博士结业于南京大学核算机系,Alluxio PMC成员。参加完结了Alluxio社区许多作业,包含功能测验结构Alluxio-Perf、Alluxio缓存战略优化、Alluxio与Hadoop生态体系多个组件的整合等。现已以一作身份在分布式并行核算范畴一流期刊/会议上宣布论文10篇等,而且参加编写书本《深化了解大数据》。一起是南京大数据技能Meetup安排人,屡次在国内外闻名技能大会上讲演。曾在Microsoft Research、Intel、Baidu、星环科技从事大数据体系实习作业。

  讲演简介:Alluxio是一个开源内存级分布式大数据虚拟存储体系。在三年多的时刻里,Alluxio开源社区已有来自全世界近500名的贡献者,成为大数据范畴内历史上生长最快的项目之一。Alluxio体系现已布置在包含百度,巴克莱银行,华泰证券,英特尔,华为和去哪儿网等许多公司傍边。在其中一些出产环境中,Alluxio现已行了一年多,办理数据PB等级的数据。Alluxio项目最新几个版别极大进步了体系功能,Scalability和用户体会,并添加了一系列新功能,包含一致命名空间、REST API等愈加便利用户运用Alluxio。Alluxio未来将让更多用户人群可以运用Alluxio,侧重进步安全性支撑,支撑新言语binding,以及进一步添加安稳性和对资源有用运用。此外,还会探究新的API,让运用程序可以更有用地拜访数据。

  将于2017年6月10-11日于深圳南山区滨大酒店举办,集阿里、腾讯、百度、滴滴出行、Intel、微博、唯品会的资深架构师和一线实践者,纳闻名研制事例,遇见苏宁云商大数据中心总监陈敏敏、Apache RocketMQ联合创始人冯嘉、饿了么大数据渠道部总监毕洪宇等大牛。

  现在八折优惠售票中,五人团购立减1000元,更多嘉宾和具体议题重视和票务点击。

  将于2017年6月10-11日于深圳南山区滨大酒店举办,集阿里、腾讯、百度、滴滴出行、Intel、微博、唯品会的资深架构师和一线实践者,纳闻名研制事例,遇见苏宁云商大数据中心总监陈敏敏、Apache RocketMQ联合创始人冯嘉、饿了么大数据渠道部总监毕洪宇等大牛。

  现在八折优惠售票中,五人团购立减1000元,更多嘉宾和具体议题重视和票务点击。回来搜狐,检查更多

上一篇:网络安全规范实践攻略—数据分类分级指引 下一篇:大数据bi东西有哪些
关注我们
©2018 亚博网地址-手机充值送 京公网安备11010802020125 隐私政策|法律声明