铭毅天下（公众号同名）

和腾讯的老师聊天，期间提到了写博客、公众号发文，老师的一句话“不过得有持续的内容才行”，振聋发聩！让我思考良久......因为有太多的博主写着写着就各种原因断更了，“可持续”的确是写作者的...

最近被咨询到“ETC 卡口数据的存储以及车流量分析、车路线分析业务场景是否适合 Elasticsearch 去做”的问题。这个问题涉及 Elasticsearch 架构选型的问题，而追根究...

大数据近几年有了突飞猛进的发展，有数据的地方都离不开数据预处理、分析、检索、聚合、可视化分析等应用场景。以 Elasticsearch、Logstash、Kibana、Beats 等组成的...

1、什么是索引生命周期？关于人生，有人这么说：“人，生来一个人，死去一个人，所以，人生就是一个人生老病死的简称。”在基于日志、指标、实时时间序列的大型系统中，集群的索引也具备类似上图中相通...

1、两个同步实战问题问题1：我想从目前的阿里云上6.7版本的es商业版，迁移到自己的7.10的自建环境，证书不一样，无法远程 无法ccr，有没有实时同步的工具呀？还是只能用logstash...

1、关于 Elasticsearch 分页查询，这几个问题经常被问到问题1：想请问下，一次性获取索引上的某个字段的所有值（100 万左右），除了把 max_result_window 调大...

1、实战遇到的问题问题描述：如何在一个四个节点的集群中，将主节点中的数据分散到其他节点中去，最后主节点没有数据？问题细节：线上环境有4个节点，单节点为48核的物理机，252G的内存。数据每...

1、由两个线上问题说开去问题1：用 Elasticsearch 做宽表的报表查询，我们打算用 jdbc 的方式访问，方便开发（使用sql），这种方式还是用JAVA封装的方法好。有没有坑？问...

1、官方说明变更以官方文档为准：https://www.elastic.co/cn/training/certification/faq2、版本变更Elastic Certified En...

1、线上实战问题问题 1：想要请问一下，我这边需求是每分钟利用 sparksteaming 插入按天的索引150万条数据。一般情况下还好，索引7个分片，1副本，但是偶尔会出现延迟很高的情况...

1、Elastic 官方已经取消了认证考试报名优惠活动 2018 年、2019 年搞过的 75 折、半价活动以后都不会有了。Elastic 官方邮件回复如下：上面的回复可以翻译为：可预见的...

1、wildcard 检索定义wildcard 检索可以定义为：支持通配符的模糊检索。类似 Mysql 中的 like 模糊匹配，如下所示：Elasticsearch 中的 wildcar...

1、问题引出球友认证考试前一天晚上提问：扩展背景描述：这是 Elasticsearch 自定义分词 Text analysis 章节 Token filter reference 小节的 ...

这是上一次技术直播里六个子主题中的最后一个主题的扩展版本。近期又有读者问到类似问题，我认为非常有必要花长时间梳理后跟大家分享一下。1、基础篇：零基础如何学 Elasticsearch ?常...

在生产环境搭建或维护 Elasticsearch 集群和个人搭建集群的小打小闹有非常大的不同。本文的最佳实践基于每天增量数亿+ 的线上环境。少啰嗦，上干货。1、内存Elasticsearc...

1、事出有因实战问题：有数百万数据需要导入 Elasticsearch 做性能对比测试，但当前数据存储在 Mysql 中，且核心字段以 Json 字符串形式存储。Mysql 存储如下所示：...

1、线程池相关线上实战问题问题1：从Kafka消费数据导入 elasticsearch 时，批量 bulk 写入抛异常被拒绝。ES 集群四个节点，其中：两个节点node1和node4 th...

1、需求 wx私信问题：Elasticsearch 如何实现类似百度广告置顶显示给定商品数据的效果？置顶显示某特定数据就是：搜索某关键词，出现关联广告置顶显示的效果。举例：百度搜索“电动汽...

假期难得有了闲暇时间，把前几年双十一囤的书挑选看完了四本。首先选择看的是计算机科学家吴军老师的书《智能时代》（豆瓣评分 8.4分，豆瓣热门互联网图书 TOP 10），这是 2016 年谷...

1、需求有一批特定用途（文末揭晓）的 IP 地址。想通过地图形式可视化展示 IP 地址对应的经纬度坐标的分布。2、方案探讨基础方案如下：第一步：IP 地址转经纬度坐标。实现借助第三方工具：...

1、引言2021年 Elasticsearch 生态和技术峰会已完美闭幕，本次峰会可谓大咖云集，精彩纷呈。本文仅就下午场技术部分做一下梳理、提炼、总结，希望对没有来得及参加线上技术峰会的...

1、问题引出默认情况下，Elasticsearch 已针对大多数用例进行了优化，确保在写入性能和查询性能之间取得平衡。我们将介绍一些聚合性能优化的可配置参数，其中部分改进是以牺牲写入性能...

1、从两个实战问题开始.... 问题1：elasticsearch-head 插件索引文档数显示结果不一致？一个：3429 ，一个：5291，什么意思？问题2：批量写入 ES 数据，大量...

故事得从这一筐积木说起......周末带孩子正准备玩积木的时候，手机响了，死磕 Elasticsearch 技术群里在探讨 Elastic 认证中聚合考点，我想起关于 Elasticse...

Elastic 社区的一大事件，必须以官方文档公布为准：https://www.elastic.co/cn/blog/licensing-change核心点翻译梳理如下：1、作者是：...

对于金融行业来说，2020年是撕裂的一年，巴菲特面对熔断如是说：我活了89岁了，只见过四次熔断，第一次是1997年，其他几次都在2020年…对于体育行业来说，2020年是悲恸的一年，C罗发文悼念马拉多纳如是说：“向永恒天才告别，你走得太早”。2020年上半年带走了“凌晨四点信仰”的科比，下半年又带走了球王马拉多纳。带走的不止是两位巨星，更是 60 亿球迷的青春与回忆…对于科技行业来说，2020年是巨变的一年，任正非针对美帝制裁如是说：“本来华为公司没有这么大的增长决心和计划，反而是美国制裁，逼我们要争口

1、Elasticsearch 缓存引出 Elasticsearch 查询的响应需要占用 CPU、内存资源，在复杂业务场景，会出现慢查询，需要花费大量的时间。如何破局呢？增加集群硬件配置...

1、上问题这是来自球友实战问题。大致需求介绍如下：约 3600 万的数据，其中关键字段如下所示：_idcreatordoc_1[张三，李四，王五，赵六]doc_2[陈胜，吴广，张三]用 ...

一个好习惯——每年至少更新一次自己的简历，而不是等到找工作才写简历。1、简历是随时间、产品开发或项目经历积累出来的，不是现写的 项目结束或者产品发布后的当天晚上是最佳时机！！越往后，记忆...

题记 Multi-match query 的目的多字段匹配，但 Multi-match query 中的 best_fields, most_fields, cross_fields 分...

题记这是一位腾讯大佬 2020年4月份在死磕 Elasticsearch技术交流微信群里发起讨论的问题，之前初步讨论了答案，但是不够细或者说讲解不透，所以一直没有成文。这一次，加上了实践...

Elastic 官方已经取消了认证考试报名优惠活动。也就是说：2018 年、2019 年搞过的 75折、半价活动以后都不会有了。Elastic 官方邮件回复如下：上面的回复可以翻译为：可...

2011年前后，和几个同学一起去游泳馆游泳，在去的路上，我问同学A：“你会游泳吗？”，同学A滑稽的回了一句：“我的理论知识还是很扎实的”，这不经意的一句话，引起我们几个同学的哄堂大笑。当...

1、实战问题 最近社区里有多个关于区分大小写的问题：问题1：ES查询和聚合怎么设置不区分大小写呢？问题2：ES7.6 如何实现模糊查询不区分大小写？主要是如何进行分词和mapping的...

1、上问题 请问在一张订单表里，用户购买的产品是一条数据，我现在想查既购买了 A 又买了 B 的用户，这种需求能做吗？在表里存在一个用户购买了多种产品和一个产品被多个人购买的情况，每个用...

题记 问题列表和答案来自国外博客（原文答案不准确，有错误），为避免误导，我对每个问题做了属于自己的理解和解答。问题都非常基础，文章有点长，但请你耐心把它看完，期望对你的 Elastic ...

1、引言 实战业务场景中，经常会遇到定义空值、检索指定空值数据的情况。这时候，当我们翻看官方文档 null_value 部分，会看到如下的描述：Accepts a string valu...

Elasticsearch 集群在运行的过程中，由于各种原因，经常会出现健康问题。比较直观的是：kibana监控、head插件监控显示集群非绿色（红色或者黄色）。遇到这种情况不要慌，本文...

1、实战问题来源问题1：大佬们 GET /_nodes/hot_threads 查看热线程的这个API有没有讲解请求结果的文章呢？返回一堆堆栈看不懂......问题2：ES集群就一台机器...

1、线上实战提问Elasticsearch做模版查询的时候，在使用 terms 进行批量查询的时候放入数组在模版中进行查询失败，类似于模版传入数组该如何实现？问题来源：死磕Elastic...

线上实战问题 11、知识点 脚本的使用2、问题描述： 你好，我想问一下，在 ES 里我想把两个字段的值是一样的查出来。但是其中一个字段是在一个字典里的，我该怎么写啊？{"q...

2020 年 10 月 31 日我进行了全网直播首秀。直播题目：能拿驾照就能通过 Elastic认证考试！72 页PPT准备了一周多，好几个夜晚都是准备到凌晨。主要对 Elastic 认...

拆解一下，坚持一件事有多难？！我的一段经历我毕业后第二年要和英籍印度人沟通需求，当时暗下决心，每天晚上回家要学半个小时英语。并自制了一张表记录下：是否学习？学了什么？但，事后复盘，这件事...

0、题记在写繁重的业务场景下，你是否遇到过 Elasticsearch 集群的性能问题？你是否遇到过 Elasticsearch 数据索引化速度限制问题？你是否遇到过搜索花费时间太长而无...

0、事出有因 您好，目前我需要将只读索引segment合并，有几个问题想要求教1、 segment是不是合并到一个最好，及max_num_segments=12、合并的时候，通过POST...

1、事出有因一个问题引发的 国内外最牛逼的elasticsearch 天团博客集合。兄弟们 有玩过这个API的吗 ？这个suggest是干嘛作用的。死磕Elasticsearch 知...

题记最近知识星球里几个问题都问到了 doc values、store field、fielddata 等的概念。问题1：”群主有介绍 doc value, field data, sto...

每个人都会犯错，别再让相同的错误一再发生，别再让我们为那些错误付出沉痛的代价。清单不是写在纸上的，而是印在心上的。我们别无选择，清单，正在一步步变革我们的生活，变革这个复杂的世界.......

1、实战问题 球友提问：怎么搜索才能使得结果是最好的呢？我这边一个搜索功能，实现做法就是将用ik分词器配合multi查询实现的。中途也追加了客户所在领域相关词汇字典。但是客户一直反馈搜索...

1、为什么要参加云栖大会？今年是线上的方式，参加大会实际就是看直播或者回放视频。我在多种场合提及我的偶像是俞敏洪，多年前他在高校的演讲有这么一段：“我和马云的聊天，你们想不想听？当然想听...

0、背景 Elasticsearch 具有一组丰富的易于理解的 REST API，这些 API 均可如下几种方式通过 HTTP 调用进行访问。CurlPostmanhead 插件cer...

当今之计，靠谱的公司很多，但适合自己且靠谱的公司不一定多。从找对象的角度换个思路看找工作。一、动机要淳朴 找对象我们首先动机要淳朴，“不以结婚为目的的谈恋爱就是耍流氓”说的也大致是这个意...

作者彪悍一只猫是范登读书首席社群顾问，一天的咨询费20万元。书非常薄，一共170+篇文章，每篇都很短，我花了2个多小时就读完了。以下的作者观点，非常有共鸣。摘抄下来，和大家共勉，一起精进...

1、实战项目将唐诗三百首写入Elasticsearch会发生什么？2、项目说明此项目是根据实战项目浓缩的一个小项目，几乎涵盖之前讲解的所有知识点。通过这个项目的实战，能让你串联起之前的知...

1、开发不能联网怎么访问Elasticsearch文档？这是最近被频繁问到的问题。直接上个图：不能让 Elasticsearch 文档限制了你我的学习热情！2、直接开干步骤1：访问：ht...

大家都知道，阮一鸣老师是极客时间 Elasticsearch 课程（2W + 小伙伴订阅）的主讲人，Ebay 搜索专家， 20 年+工作经验，创业经验丰富（手机游戏，手机游戏模拟器Web...

背景球友反馈的实战问题：关于es的运维相关的， 遇到一些问题！第一个问题：是关于集群迁移的，目前需要 针对20亿的数据做迁移，如果文件迁移，需要停机时间太久，除了重新灌入，不知 道有没有...

题记 Elasticsearch 社区有大量关于 Elasticsearch 错误和异常的问题。深挖这些错误背后的原因，把常见的错误积累为自己的实战经验甚至是工具，不仅可以节省我们的开发...

1、今年xing 式不好，不要裸辞！！ 要做好万全准备再提离职，拿到 offer 再离职也无可厚非！！已经有很多球友后悔上半年裸辞了。裸辞一时爽，事后悔断肠。2、可以适度包装一下简历，但...