es搜索准实时的理解

关于搜索的准实时性

1.个人理解的实时性有两点：
a. 写入es的文档何时从事务日志写到磁盘上面的lucene段磁盘文件中(可以通过参数配置)
b.es查询搜索器的打开频率(比如默认1s)
所以正常情况下，从索引文档到搜索可见其实由两部分时间组成 = a所需的时间+b最大的间隔

更正： es的准实时性取决于配置的refresh_interval的值和indexBuffer的大小，当indexBuffer满了或者refresh_interval的时间到了，es都会把当前index_buffer中的数据组成一个segment结构写到操作系统的文件系统缓存中，写入的文件系统缓存的同时也会打开这个文件，使得这个文件可以被搜索，至于何时文件系统缓存中的数据被fsync到磁盘中已经无关紧要了。这只是为了持久化已经和搜索的实时性没有关系了

es搜索准实时的理解相关推荐

Sphinx+Scws 搭建千万级准实时搜索应用场景详解
为什么80%的码农都做不了架构师?>>> 目标: 一.搭建准确的千万级数据库的准实时搜索(见详情) 二.实现词语高亮(客户端JS渲染,服务器端渲染,详见7.3) 三.实现搜索联 ...
php sphinx应用场景,Sphinx+Scws 搭建千万级准实时搜索应用场景详解
目标: 一.搭建准确的千万级数据库的准实时搜索(见详情) 二.实现词语高亮(客户端JS渲染,服务器端渲染,详见7.3) 三.实现搜索联想(输入框onchange,ajax请求搜索,取10条在层上展示方 ...
搜索中的 Query 理解及应用
文章作者:Joelchen 腾讯研究员编辑整理:Hoh 内容来源:腾讯技术工程出品平台:DataFunTalk 注:转载请联系原作者. 导读:Query 理解 ( QU,Query Unders ...
Canal+Kafka实现mysql与redis数据准实时同步
思维导图文章已收录Github精选,欢迎Star:https://github.com/yehongzhi/learningSummary 前言在很多业务情况下,我们都会在系统中加入redis缓存 ...
Elasticsearch（三）——Es搜索（简单使用、全文查询、复合查询）、地理位置查询、特殊查询、聚合操作、桶聚合、管道聚合
Elasticsearch(三)--Es搜索(简单使用.全文查询.复合查询).地理位置查询.特殊查询.聚合操作.桶聚合.管道聚合一.Es搜索这里的 Es 数据博主自己上网找的,为了练习 Es 搜索 ...
ES搜索（ElasticSearch）入门理论篇
ElasticSearch理论篇 SQL查询方式 ES相关知识聊聊Doug Cutting 什么是Lucene 什么是Nutch 演变 Lucene和ES搜索的关系 ES概述使用者对比 ES搜索 ...
基于Sphinx构建准实时更新的分布式通用搜索引擎平台
亿级数据的高并发通用搜索引擎架构设计[原创] 大 | 中 | 小 [ 2008-12-9 08:47 | by 张宴 ] [文章作者:张宴本文版本:v1.0 最后修改:2008.12 ...
大数据准实时流式系统设计（一）——基于大数据框架设计
前段时间负责了公司一个新的项目,项目不属于直接面向用户的线上实时响应系统,要求做到尽快毫秒级或者秒级响应的准实时系统.结合以前学习的一些大数据理论方面和参与的准实时系统方面的经验,对准实时系统架构设计 ...
基于TensorRT的BERT实时自然语言理解（下）
基于TensorRT的BERT实时自然语言理解(下) BERT Inference with TensorRT 请参阅Python脚本bert_inference.py还有详细的Jupyter not ...

es搜索准实时的理解

关于搜索的准实时性

es搜索准实时的理解相关推荐

最新文章

热门文章