Elastic Meetup 上海线下活动 2018-07-21

活动介绍

Elastic Meetup 由 Elastic 中文社区(https://elasticsearch.cn/) 每年定期举办的线下交流活动，主要围绕 Elastic 的开源产品（Elasticsearch、Logstash、Kibana 和 Beats）及周边技术，探讨在搜索、数据实时分析、日志分析、安全等领域的实践与应用。

参会报名

手机扫码报名

IT大咖说直播平台

手机扫码观看

阿里云直播平台

手机扫码观看

活动日程(以活动现场为准)

时间	演讲嘉宾	主题
13:30	吴斌	利用Elastic Stack快速搭建SIEM系统
14:10	丁旻奕、王佩	Elasticsearch diagnose and index lifecycle management services
14:50	张家杰	EYou—阿里云Elasticsearch智能优化运维工具分享
15:30	刘佳	ES Cross Cluster Search生产实践
16:10	王翔宇	B站日志系统的演进之路
16:50	曹林华	基于 Elasticsearch 电商搜索
17:30	宓文捷	Elasticsearch 在企业协作服务中的应用实践

嘉宾介绍(排名不分先后)

吴斌

吴斌 Elastic架构师，Monash大学计算机硕士。

十年IT行业经验，经历了软件工程师到架构师的全方位磨练。专注于海量数据处理、挖掘、分析和企业级搜索等领域。

十分熟悉分布式应用，高可用架构和自动化技术。对AI在商业产品和公司业务中的应用也......查看全部积累了一定的经验。并且有海外世界百强大学六年的教学经验。曾为世界顶级金融机构开发、运维团队进行过云计算技术培训。

现任Elastic架构师，负责公司亚太地区事务。致力于应用Elastic的先进技术产品解决企业数据应用问题。

丁旻奕

eBay 软件工程师。

在eBay Pronto从事ES软件即服务云的开发工作。

王佩

9年文档存储、索引、搜索领域软件行业从业经验，使用ElasticSearch约3年。

现在eBay 的ElasticSearch管理平台Pronto项目组工作，主要方向是ElasticSearch集群的部署和性能调优。

王翔宇

Bilibili 资深运维研发工程师。

曾就职于百度、饿了么，2017年加入B站，负责B站日志平台的设计和开发工作。

张家杰（梵寞）

2014年加入58，先后在同城和到家负责后端平台相关工作。

15年开始负责公司搜索，日志收集等通用平台的建设。

17年加入阿里巴巴，现在阿里云Elasticsearch团队，负责相关工作。

刘佳

携程旅行网技术保障部系统研发专家。

全栈工程师，开源工具hangout作者: ( http://www.github.com/childe/ )

曹林华

沪江技术中心资深架构师。

主要负责中间件产品设计与架构，承担了搜索平台、日志平台、分布式跟踪平台、实验平台等架构设计。

曾经在百度任职高级工程师，主要负责大规模、高并发的消息推送技术研发工作。......查看全部

目前致力于解决分布式，高并发，大数据量等各种技术难题与挑战，持续优化公司基础架构产品，保证系统高可靠、高性能、高可扩展性。

宓文捷

来自于Teambition，高级后端工程师，负责搜索基础平台和日志查询系统。

演讲主题介绍

吴斌

Elastic架构师，Monash大学计算机硕士

利用Elastic Stack快速搭建SIEM系统

随着现代企业信息化的发展和数据量爆炸的时代，在面对企业底层技术设施的复杂行和多样性以及变化的业务同时，集中管理基础设施、应用的信息变得越来越迫切。

企业对安全、合规的需求也变得不可或缺。Elastic，作为ELKB的开发者，为大家提供了很多开箱即用的工具。把这些工具根据企业需求合理的组合、串连起来，就可以快速搭建一个入门级SIEM系统。

今天我们就把这些信息并结合一个简单的演示共享给大家。

丁旻奕

eBay 软件工程师

王佩

eBay 软件工程师

Elasticsearch diagnose and index lifecycle management services

为了管理eBay全球生产环境中的100多个集群，eBay Pronto team开发了一系列的工具去实现集群的自动化高效管理，本次将介绍其中的两个：集群诊断系统和索引生命周期管理系统。

张家杰（梵寞）

阿里

EYou—阿里云Elasticsearch智能优化运维工具分享

本次向大家介绍阿里云Elasticsearch的智能优化诊断系统，将会对传统的红黄绿3色重新定义，对集群给出一个更完整的健康度定义。它可以像医生一样诊断集群，提前发现潜在问题，拒绝未来风险。

刘佳

携程旅行网技术保障部系统研发专家

ES Cross Cluster Search生产实践

1. 日志集群规模

230台物理机, 440数据节点. 超过4万shards.

2. 痛点

2.1 meta信息太多, 全量更新压力大, 经常超时

2.2 单节点过载, 影响整个集群的状态更新

3. 分集群

3.1 利弊

3.1.1 利: 解决上述痛点

3.1.2 弊: 更复杂的架构,带来更多可能的隐患, 额外的开发和运维成本

3.2 架构

3.2.1 暂略

4. 一些注意点

4.1 ignore_unavailable 参数

4.2 一个集群挂掉, cross cluster就不能工作

曹林华

沪江教育科技有限公司,资深架构师

基于 Elasticsearch 电商搜索

随着沪江业务的高速发展以及数据爆炸式的增长，当前公司各产线都有各式各样的搜索问题，例如：搜索文章效果不行，搜索排序策略不够精准，如何在分库分表的情况下进行搜索。

基于现状，我们采用ElasticSearch为底层引擎，重新设计搜索平台，并根据业务需求进行定制化的优化。

主要内容

1. 搜索平台的产品介绍

2. 搜索平台的最佳实践

3. 搜索平台稳定保障体系

听众收益

1. 了解搜索平台系统的整体设计

2. 平台遇到的通用问题与解决方案

3. 了解ElasticSearch性能优化策略

王翔宇

Bilibili 资深运维研发工程师

B站日志系统的演进之路

介绍B站日志系统建设的点点滴滴。

1. 基于elastic stack，结合B站内部基础设施，组建日志系统

2. 日志系统的精细化运维

3. 日志监控功能的实现

4. 日志系统的多级群建设

5. 后续发展方向

宓文捷

Teambition,高级后端工程师

Elasticsearch 在企业协作服务中的应用实践

开发人员接触ES的DSL的过程一般是：惊喜，不熟，紧张，恐惧。

能否有办法将DSL简化成类似于SQL语句的方法，还能添加逻辑内容？Teambition Query Language能够简化业务查询，甚至将查询直接交给前端；自建的语法树结构还可以高度定制化，可以添加权限控制和自定逻辑。

主办方

协办方

活动地址

上海浦东新区张江高科技园区科苑路88号德国中心2号楼 eBay CDC

联系我们

赞助与合作，请加微信： medcl123