【上海】Elastic Meetup 上海线下活动

状态: 活动已结束
时间: 2018-07-21 13:30 - 18:00
地点: 上海浦东新区张江高科技园区科苑路88号德国中心2号楼 eBay CDC 查看地图
费用: 免费

主题介绍

Elastic Meetup 由 Elastic 中文社区(https://elasticsearch.cn/) 每年定期举办的线下交流活动,主要围绕 Elastic 的开源产品(Elasticsearch、Logstash、Kibana 和 Beats)及周边技术,探讨在搜索、数据实时分析、日志分析、安全等领域的实践与应用。

参会报名
手机扫码报名
IT大咖说直播平台
手机扫码观看
阿里云直播平台
手机扫码观看

嘉宾介绍

吴斌 Elastic架构师、Monash大学计算机硕士

十年IT行业经验,经历了软件工程师到架构师的全方位磨练。专注于海量数据处理、挖掘、分析和企业级搜索等领域。 十分熟悉分布式应用,高可用架构和自动化技术。对AI在商业产品和公司业务中的应用也积累了一定的经验。并且有海外世界百强大学六年的教学经验。曾为世界顶级金融机构开发、运维团队进行过云计算技术培训。 现任Elastic架构师,负责公司亚太地区事务。致力于应用Elastic的先进技术产品解决企业数据应用问题。

丁旻奕 eBay 软件工程师

在eBay Pronto从事ES软件即服务云的开发工作。

王佩 eBay 软件工程师

9年文档存储、索引、搜索领域软件行业从业经验,使用ElasticSearch约3年。 现在eBay 的ElasticSearch管理平台Pronto项目组工作,主要方向是ElasticSearch集群的部署和性能调优。

王翔宇 Bilibili 资深运维研发工程师

曾就职于百度、饿了么,2017年加入B站,负责B站日志平台的设计和开发工作。

张家杰(梵寞) 阿里 Elasticsearch团队工程师

2014年加入58,先后在同城和到家负责后端平台相关工作。 15年开始负责公司搜索,日志收集等通用平台的建设。 17年加入阿里巴巴,现在阿里云Elasticsearch团队,负责相关工作。

刘佳 携程旅行网 技术保障部系统研发专家

全栈工程师,开源工具hangout作者: ( http://www.github.com/childe/ )

曹林华 沪江 技术中心资深架构师

主要负责中间件产品设计与架构,承担了搜索平台、日志平台、分布式跟踪平台、实验平台等架构设计。 曾经在百度任职高级工程师,主要负责大规模、高并发的消息推送技术研发工作。 目前致力于解决分布式,高并发,大数据量等各种技术难题与挑战,持续优化公司基础架构产品,保证系统高可靠、高性能、高可扩展性。

宓文捷 Teambition 高级后端工程师

来自于Teambition,高级后端工程师,负责搜索基础平台和日志查询系统。

活动安排

13:00-13:30
开始签到
13:30-14:00
分享主题:利用Elastic Stack快速搭建SIEM系统
分享嘉宾:吴斌Elastic架构师、Monash大学计算机硕士
主题摘要:随着现代企业信息化的发展和数据量爆炸的时代,在面对企业底层技术设施的复杂行和多样性以及变化的业务同时,集中管理基础设施、应用的信息变得越来越迫切。 企业对安全、合规的需求也变得不可或缺。Elastic,作为ELKB的开发者,为大家提供了很多开箱即用的工具。把这些工具根据企业需求合理的组合、串连起来,就可以快速搭建一个入门级SIEM系统。 今天我们就把这些信息并结合一个简单的演示共享给大家。
14:00-15:00
分享主题:Elasticsearch diagnose and index lifecycle management services
分享嘉宾:丁旻奕 eBay 软件工程师
分享嘉宾:王佩 eBay 软件工程师
主题摘要:为了管理eBay全球生产环境中的100多个集群,eBay Pronto team开发了一系列的工具去实现集群的自动化高效管理, 本次将介绍其中的两个: 集群诊断系统和索引生命周期管理系统。
15:00-15:30
分享主题:EYou—阿里云Elasticsearch智能优化运维工具分享
分享嘉宾:张家杰(梵寞) 阿里工程师
主题摘要:本次向大家介绍阿里云Elasticsearch的智能优化诊断系统,将会对传统的红黄绿3色重新定义,对集群给出一个更完整的健康度定义。它可以像医生一样诊断集群,提前发现潜在问题,拒绝未来风险。
15:30-16:00
分享主题:ES Cross Cluster Search生产实践
分享嘉宾:刘佳 携程旅行网 技术保障部系统研发专家
主题摘要:
1. 日志集群规模
230台物理机, 440数据节点. 超过4万shards.
2. 痛点
meta信息太多, 全量更新压力大, 经常超时
单节点过载, 影响整个集群的状态更新
3. 分集群
利弊
利: 解决上述痛点
弊: 更复杂的架构,带来更多可能的隐患, 额外的开发和运维成本
架构
暂略
4. 一些注意点
ignore_unavailable 参数
一个集群挂掉, cross cluster就不能工作
16:00-17:00
分享主题:基于 Elasticsearch 电商搜索
分享嘉宾:曹林华 沪江 资深架构师
主题摘要:随着沪江业务的高速发展以及数据爆炸式的增长,当前公司各产线都有各式各样的搜索问题,例如:搜索文章效果不行,搜索排序策略不够精准,如何在分库分表的情况下进行搜索。 基于现状,我们采用ElasticSearch为底层引擎,重新设计搜索平台,并根据业务需求进行定制化的优化。
主要内容
1. 搜索平台的产品介绍
2. 搜索平台的最佳实践
3. 搜索平台稳定保障体系
听众收益
1. 了解搜索平台系统的整体设计
2. 平台遇到的通用问题与解决方案
3. 了解ElasticSearch性能优化策略
17:00-17:30
分享主题:B站日志系统的演进之路
分享嘉宾:王翔宇Bilibili 资深运维研发工程师
主题摘要:介绍B站日志系统建设的点点滴滴。
1. 基于elastic stack,结合B站内部基础设施,组建日志系统
2. 日志系统的精细化运维
3. 日志监控功能的实现
4. 日志系统的多级群建设
5. 后续发展方向
17:30-18:00
分享主题:Elasticsearch 在企业协作服务中的应用实践
分享嘉宾:宓文捷Teambition 高级后端工程师
主题摘要:开发人员接触ES的DSL的过程一般是:惊喜,不熟,紧张,恐惧。 能否有办法将DSL简化成类似于SQL语句的方法,还能添加逻辑内容?Teambition Query Language能够简化业务查询,甚至将查询直接交给前端;自建的语法树结构还可以高度定制化,可以添加权限控制和自定逻辑。
18:00-18:30
讨论环节,合影留念,结束

合作伙伴

地点路线

上海浦东新区张江高科技园区科苑路88号 德国中心2号楼 eBay CDC

分享,交流,成长!

知识越与人共享,它的价值越增加。

活动组织者

Medcl

微信:medcl123
邮箱:medcl@elastic.co

简介:Medcl,Elastic 公司中国区技术布道师,在分布式搜索、高性能、高可用架构、自动化运维等方面具备多年的经验积累。现为 Elastic 中国开源社区负责人。阿里云 MVP,开源软件爱好者。

推荐活动 更多

【上海】2018 Elastic & 东方航空大数据技术沙龙

时间: 2018-12-08
地点:上海市闵行区虹翔三路东航城