More Related Content
What's hot (7)
Viewers also liked (20)
Similar to elastic search分析与实践 (20)
elastic search分析与实践
- 2. 内容 ? 贰濒补蝉迟颈肠厂别补谤肠丑特点及?生态圈 ? Lucene原理 ? 贰濒补蝉迟颈肠厂别补谤肠丑架构和插件 ? ElasticSearch管理和监控?工具 ? ElasticSearch应?用案例 ? 贰尝碍实践
- 3. 贰濒补蝉迟颈肠厂别补谤肠丑特点及?生态圈 ? 分布式实时分析与检索 ? ?高可?用 ? 多租户 ? 全?文搜索 ? ?面向?文档 ? 易?用的Restful API ? 基于Apache Lucene
- 9. ? 索引创建indexing Lucene原理 Docs Token Term Index
- 10. ? 倒排索引表 Lucene原理
- 11. ? 索引查询 Lucene原理 query Term 语法树 doc 词法 语法 检索 result 打分
- 14. ? 分词插件 ? 同步插件 ? 数据传输插件 ? 脚本插件 ? Alert ? Shield 贰濒补蝉迟颈肠厂别补谤肠丑架构和插件
- 15. ElasticSearch-Aggregations Like facets but with more power Can be nested to add additional dimensions Give analytical insights into data Allow complex visualizations Major types: buckets and metrics Types: terms, histogram, percentiles, etc.
- 16. ElasticSearch-Pipeline Aggregations Work on outputs of other aggregations Used for smoothing, prediction, etc. Different types: avg, derivative, max, min, sum moving avg, cumulative sum, etc.
- 18. ? big desk ElasticSearch管理和监控?工具 ? 集群整体和流量情况
- 20. ElasticSearch应?用案例 测试条件： ? 记录条数分为100亿以内和1000亿条 ? 服务器数量为70台，配置为:CPU 12核，内存96G，硬盘48T ? 测试语句：select count(*) from test where age > 25 and ge 0 and os > "500" and sc in ("0001009","0002036","0016030",”…") or bs>585 and gro by age,gender,os,bs ? 总共14列(200列）：动态列为3列（多值列），普通列为11列
- 21. ElasticSearch应?用案例 1000 5 10 ElasticSearch 19005ms 21005ms 27736ms Pinot 19019ms failed failed
- 22. Mysql Report Web 数据采集服务 ? WebService 数据收集服务 ? Kafka 数据清洗服务 ? Storm API API V/C数据 项 ?目 量?子平台 数据中?心 SocialMaster 算法服务 Mysql ??广告数据 外部合作数据 新闻等爬取数据 ??广告数据 外部合作数据 新闻等爬取数据 ??广告数据 外部合作数据 新闻等爬取数据 HBase ? HDFS 数据处理 API ElasticSearch API 分词 情感分 析 标签分 类 NLP ? Lap NLP ?服务 机器学习 核?心应?用模块 ElasticSearch数字营销案例
- 23. 贰尝碍实践
- 24. 贰尝碍实践
- 25. ? 设置时间过滤器 ? ? 搜索并将搜索保存 ? ? 页面自动刷新 ? ? 按字段过滤 ? ? 文档列表排序 ? ? 查看字段数据统计 25 Kibana-Discover
- 26. ? 创建图表： ? 选择可视化图表类型 ? 选择数据源（已保存的搜索或新的搜索） ? 配置 Y轴的聚合类型：count, average, sum, min, max, cardinality(unique count) 26 Kibana-Visualize
- 27. 贰尝碍实践
- 28. Q & A ?邮箱：johnlya@163.com ? ?微信：johnlya ? 源码: ? http://github.com/elastic ? 英文社区: ? http://discuss.elastic.co ? 中文社区: ? http://elasticsearch.cn ?