国产 无码 综合区,色欲AV无码国产永久播放,无码天堂亚洲国产AV,国产日韩欧美女同一区二区

elasticsearch相同查詢條件每次返回結(jié)果不一樣

這篇具有很好參考價值的文章主要介紹了elasticsearch相同查詢條件每次返回結(jié)果不一樣。希望對大家有所幫助。如果存在錯誤或未考慮完全的地方,請大家不吝賜教,您也可以點擊"舉報違法"按鈕提交疑問。

現(xiàn)象:

今天web開發(fā)人員反饋,在騰訊云對某一個客戶的某表數(shù)據(jù)執(zhí)行相同的查詢結(jié)果,有時候不返回數(shù)據(jù);

我們是按周區(qū)分索引的,數(shù)據(jù)量不大,去掉時間條件執(zhí)行查詢發(fā)現(xiàn)會交替出現(xiàn)? 命中21980和命中的8999結(jié)果;

解決:

1.首先簡單查詢其他的表或者其他的集群有沒有類似的問題,排除大環(huán)境問題;

2.查看今天的日志并沒有發(fā)現(xiàn)報錯;不過發(fā)現(xiàn)了一些WARN 日志,大概的意思主副本數(shù)據(jù)同步告警,如下:

[2023-05-04T07:17:16,497][WARN ][o.e.i.f.SyncedFlushService] [chates02] [indexName_2023-05-01][4] can't to issue sync id [dGHQ0df6Tw6cLThlfwRFMg] for out of sync replica [[indexName_2023-05-01][4], node[qg1VO946RB2JJZZneBn8ZA], [R], s[STARTED], a[id=ePOFKvq8S7K83nWlAQRG4Q]] with num docs [8077]; num docs on primary [19131]

3.執(zhí)行命令查詢主副本主片和副本的doc數(shù)發(fā)現(xiàn)個別主片和副本的doc數(shù)不一致,命令如下

http://esIp:9200/_cat/shards/indexName_2023-05-01

因為es查詢每次是隨機選擇主片和副本的數(shù)據(jù)返回,所以會出現(xiàn)每次查詢結(jié)果不一樣的問題;

當查詢到這里其實已經(jīng)可以通過重建副本解決當前問題現(xiàn)象。

4. 為什么會出現(xiàn)這個問題?為什么只有本周的索引有問題,以前的索引驗證了沒有此問題?以后萬一在重要的es集群再出現(xiàn)類似的問題,損失就太大了。

es寫數(shù)據(jù)的流程是先寫主片然后主片同步給副本,主片和副本是分布在不同的節(jié)點;隱隱約約猜測主副數(shù)據(jù)不一致 可能是腦裂或者節(jié)點間的通訊有異常。

5.繼續(xù)排查前幾天的日志,發(fā)現(xiàn)有一個WARN 日志,節(jié)點之間的通信超過30s,

對應(yīng)的 配置為discovery.zen.ping_timeout: 30s,這個配置已經(jīng)給的很長了,沒必要再設(shè)置;

[2023-05-02T14:29:53,355][WARN ][o.e.d.z.UnicastZenPing ? ] [chates02] failed to send ping to [{chates01}{qg1VO946RB2JJZZneBn8ZA}{XBBKiDAMS_2vj-c57D0HzQ}{esIp}{esIp:9300}{ml.machine_memory=33566519296, ml.max_open_jobs=20, xpack.installed=true, ml.enabled=true}]
org.elasticsearch.transport.ReceiveTimeoutTransportException: [chates01][esIp:9300][internal:discovery/zen/unicast]
?

6. 繼續(xù)查看配置?discovery.zen.minimum_master_nodes:1?

這是master選舉的規(guī)則,我們這個集群是局部業(yè)務(wù)的小集群,數(shù)據(jù)量很少,只有兩個節(jié)點;由此可以推斷是 節(jié)點間通信斷開,而又符合 master選舉機制>=1,導(dǎo)致集群腦裂;

7. 優(yōu)化:通知運維增加到奇數(shù)個節(jié)點數(shù),master 選舉規(guī)則設(shè)置為 (節(jié)點數(shù)/2)+1 ,由此該問題現(xiàn)象解決。

8.導(dǎo)致節(jié)點通信斷開的原因是什么?這個集群的數(shù)據(jù)量非常小,負載很低;猜測 有可能是當時內(nèi)存占滿了影響通信或者是云廠商的網(wǎng)絡(luò)有問題

查看當時的內(nèi)存占用,并沒有占滿,這個以后再說吧

es兩次查詢結(jié)果不一致,elasticSearch,elasticsearch,大數(shù)據(jù),搜索引擎文章來源地址http://www.zghlxwxcb.cn/news/detail-818870.html

到了這里,關(guān)于elasticsearch相同查詢條件每次返回結(jié)果不一樣的文章就介紹完了。如果您還想了解更多內(nèi)容,請在右上角搜索TOY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!

本文來自互聯(lián)網(wǎng)用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務(wù),不擁有所有權(quán),不承擔相關(guān)法律責任。如若轉(zhuǎn)載,請注明出處: 如若內(nèi)容造成侵權(quán)/違法違規(guī)/事實不符,請點擊違法舉報進行投訴反饋,一經(jīng)查實,立即刪除!

領(lǐng)支付寶紅包贊助服務(wù)器費用

相關(guān)文章

  • GaussDB(DWS)條件表達式函數(shù)返回錯誤結(jié)果集排查

    摘要: 條件表達式函數(shù)中出現(xiàn)結(jié)果集不一致問題,我們首先要考慮是否入?yún)?shù)據(jù)類型不一致導(dǎo)致出參不一致。 本文分享自華為云社區(qū)《GaussDB(DWS)條件表達式函數(shù)返回錯誤結(jié)果集排查》,作者:yd_211369925 。 客戶使用greatest獲取并返回參數(shù)列表中值最大的表達式的值,子查詢中

    2024年02月06日
    瀏覽(14)
  • mysql查詢結(jié)果返回e9

    在使用 MySQL 數(shù)據(jù)庫時,我們經(jīng)常會進行查詢操作。然而,有時候我們會發(fā)現(xiàn),查詢結(jié)果返回的數(shù)值中會有一個奇怪的字符“e9”,這個字符代表的是科學(xué)計數(shù)法中的10的9次方,也就是十億。那么,為什么會出現(xiàn)這個字符,該如何解決呢?下面我們一起來探討。 解決方法有兩種

    2024年02月15日
    瀏覽(54)
  • ES常見問題(1)-解決ElasticSearch每次只能返回10條數(shù)據(jù)

    ES常見問題(1)-解決ElasticSearch每次只能返回10條數(shù)據(jù)

    使用ElasticSearch查詢分頁數(shù)據(jù) 有時候,我們需要使用ElasticSearch來分詞查詢,并分頁返回指定的數(shù)據(jù)條數(shù),但是當我們每次想得到分頁數(shù)據(jù)條數(shù)超過十條的時候,ElasticSearch總是只能返回十條 因為ElasticSearch為了查詢的速度,在默認的情況下已經(jīng)設(shè)置了分頁數(shù)據(jù)只能返回10條,所

    2024年02月11日
    瀏覽(25)
  • mybatis查詢多個結(jié)果返回map--@MapKey使用方法

    mybatis查詢多個結(jié)果返回map--@MapKey使用方法

    目錄 ? ? ? ? 介紹 ?源碼分析: 在使用mybatis的時候遇到一種情況,查詢結(jié)果集返回多個,想用map接收,以前是用List對象接收,然后java代碼中轉(zhuǎn)換成map。其實mybatis是支持返回map的。下面就介紹使用方法。 測試代碼: 下面@MapKey中的id是BusinessPricePO中的一個屬性id,否則會報錯

    2024年02月12日
    瀏覽(23)
  • elasticsearch使用template搜索多個索引并且高亮返回結(jié)果

    由于搜索多個索引沒辦法以定義好的Entity來接收quey的結(jié)果,所以keyword搜索時不能按照以前的方式來直接分頁搜索 所以這里選擇重寫搜索方法來自定義map返回結(jié)果,實現(xiàn)手動分頁和替換高亮搜索的結(jié)果

    2024年02月11日
    瀏覽(22)
  • es elasticsearch 十四 各種機制 評分機制 正序索引 解決跳躍結(jié)果問題 解決耗時過長問題 解決相同屬性值都到一個地方

    es elasticsearch 十四 各種機制 評分機制 正序索引 解決跳躍結(jié)果問題 解決耗時過長問題 解決相同屬性值都到一個地方

    目錄 評分機制 機制 查看評分實現(xiàn)如何算出來的explain=true 分析能否被搜索到 Doc value 正排序索引 Query phase Fetch phase Preference 問題 解決跳躍結(jié)果問題 Timeout 到達時間直接返回,解決耗時過長問題 Routing 數(shù)據(jù)準確分配到某地,解決相同屬性值都到一個地方 評分機制 機制 TF分詞頻

    2024年02月08日
    瀏覽(32)
  • 關(guān)于Elasticsearch(es)中使用sql返回結(jié)果只有1000條

    es中返回的結(jié)果只有1000條,這是默認的,想要返回更多的結(jié)果,需要做兩步: 1、設(shè)置max_result_window的大小 PUT indexName/_settings { “max_result_window”:20000 } max_result_window表示結(jié)果的最大數(shù)量 但是你這樣設(shè)置完了之后,查詢依舊還是1000條 2、查詢的時候加上fetch_size 這表示頁面上顯

    2024年02月14日
    瀏覽(16)
  • Elasticsearch查詢結(jié)果高亮操作實戰(zhàn)

    Elasticsearch查詢結(jié)果高亮操作實戰(zhàn)

    在進行搜索時,搜索出的內(nèi)容中的會顯示不同的顏色,稱之為高亮 百度搜索\\\"狂飆\\\",如下所示: 或者在淘寶搜索“手機”,如下所示: 我們可以發(fā)現(xiàn)搜索的在搜索到的信息上都變成了紅色高亮 通過開發(fā)者工具查看高亮數(shù)據(jù)的html代碼實現(xiàn): Elastic

    2024年02月12日
    瀏覽(23)
  • Elasticsearch(八)搜索---搜索輔助功能(上)--指定搜索返回字段,結(jié)果計數(shù)和分頁

    Elasticsearch(八)搜索---搜索輔助功能(上)--指定搜索返回字段,結(jié)果計數(shù)和分頁

    前面我們已經(jīng)將ES的基礎(chǔ)操作(索引,映射,文檔)學(xué)習過了,從這一章開始,我們便開始學(xué)習ES的最大的功能—搜索 ES為用戶提供了豐富的搜索功能:既有基本的搜索功能,又有搜索建議功能;既有常用的普通類型的匹配功能,又有基于地理位置的搜索功能;既提供了分頁搜

    2024年02月05日
    瀏覽(20)
  • Elasticsearch 核心技術(shù)(九):搜索結(jié)果處理(分頁、排序、指定返回字段、去重、高亮顯示)

    Elasticsearch 核心技術(shù)(九):搜索結(jié)果處理(分頁、排序、指定返回字段、去重、高亮顯示)

    ?? 博客主頁:水滴技術(shù) ?? 支持水滴: 點贊 ?? + 收藏 ? + 留言 ?? ?? 訂閱專欄:大數(shù)據(jù)核心技術(shù)從入門到精通

    2023年04月13日
    瀏覽(23)

覺得文章有用就打賞一下文章作者

支付寶掃一掃打賞

博客贊助

微信掃一掃打賞

請作者喝杯咖啡吧~博客贊助

支付寶掃一掃領(lǐng)取紅包,優(yōu)惠每天領(lǐng)

二維碼1

領(lǐng)取紅包

二維碼2

領(lǐng)紅包