正文

數(shù)據(jù)快照（mongodb實數(shù)據(jù)快照）

發(fā)布時間：2023-04-13 20:58:56 稿源：創(chuàng)意嶺閱讀： 97

大家好！今天讓創(chuàng)意嶺的小編來大家介紹下關(guān)于數(shù)據(jù)快照的問題，以下是小編對此問題的歸納整理，讓我們一起來看看吧。

開始之前先推薦一個非常厲害的Ai人工智能工具，一鍵生成原創(chuàng)文章、方案、文案、工作計劃、工作報告、論文、代碼、作文、做題和對話答疑等等

只需要輸入關(guān)鍵詞，就能返回你想要的內(nèi)容，越精準(zhǔn)，寫出的就越詳細，有微信小程序端、在線網(wǎng)頁版、PC客戶端

官網(wǎng)：https://ai.de1919.com。

創(chuàng)意嶺作為行業(yè)內(nèi)優(yōu)秀的企業(yè)，服務(wù)客戶遍布全球各地，如需了解SEO相關(guān)業(yè)務(wù)請撥打電話175-8598-2043，或添加微信：1454722008

本文目錄:

1、官方文檔-快照和恢復(fù)
2、s7-1500如何監(jiān)控數(shù)據(jù)塊
3、再用網(wǎng)盤你就out了！購入西數(shù)紅盤+威聯(lián)通NAS，打造家庭數(shù)據(jù)中心
4、Elasticsearch（四）：Search運行機制

數(shù)據(jù)快照（mongodb實數(shù)據(jù)快照）

一、官方文檔-快照和恢復(fù)

對應(yīng)7.17官方文檔路徑： Snapshot and restore

官方地址如下：

https://www.elastic.co/guide/en/elasticsearch/reference/7.17/snapshot-restore.html

快照是正在運行的 ES 集群的備份，你可以使用快照做以下事情：

ES 將快照存儲在集群存儲外的存儲空間內(nèi)，稱為快照倉庫(snapshot repository)。在你制作或者恢復(fù)快照之前，你必須在集群上注冊一個快照倉庫，ES 支持多種具備云存儲屬性的存儲庫，包括：

在注冊快照倉庫后，你可以使用快照生命周期管理(SLM)自動創(chuàng)建并管理快照，你可以通過恢復(fù)快照(restore)恢復(fù)或者傳輸數(shù)據(jù)。

默認集群快照包含集群狀態(tài)，全部 data streams，全部 open 狀態(tài)的索引，包括系統(tǒng)索引。集群狀態(tài)包含如下內(nèi)容：

你還可以僅對集群中的特定數(shù)據(jù)流或索引進行快照。包含數(shù)據(jù)流或索引的快照會自動包含其別名。還原快照時，你可以選擇是否還原這些別名。

快照不包含以下內(nèi)容：

功能狀態(tài)包含用來存儲配置、歷史記錄和 ES 的其他功能的索引和數(shù)據(jù)流，例如 security 和 kibana 相關(guān)索引。

功能狀態(tài)通常包含一個或者多個系統(tǒng)索引或者數(shù)據(jù)流，還可能包含該功能使用的常規(guī)索引和數(shù)據(jù)流。例如，功能狀態(tài)可能包含該功能執(zhí)行歷史的常規(guī)索引，將此歷史記錄存儲在常規(guī)索引中可以讓您更輕松地搜索它。

快照會自動刪除重復(fù)數(shù)據(jù)來節(jié)約存儲空間并減少網(wǎng)絡(luò)傳輸開銷。備份索引時，快照會復(fù)制一個索引 segments 的副本并將它們存儲在快照倉庫。由于段是不可變的，快照只需要復(fù)制自存儲庫的最后一個快照以來新創(chuàng)建的全部段。

每個快照在邏輯上也是獨立的。當(dāng)你刪除快照時，ES 只會刪除該快照專門使用的段，不會刪除倉庫中其他快照使用的段。

快照從索引的主分片復(fù)制段。當(dāng)你開始制作一個快照，ES 立刻開始復(fù)制任何可用的主分片的段。如果一個分片正在啟動或者在重新定位中，ES 將等待這些過程完成后再進行復(fù)制。如果一個或多個主分片不可用，快照制作將失敗。

一旦快照開始復(fù)制分片的段，ES 將不會依據(jù)重新平衡和分片分配設(shè)置規(guī)則移動分片到其他節(jié)點，在快照完成復(fù)制數(shù)據(jù)后才會進行分片移動。

快照不代表某一個精確時間點集群的數(shù)據(jù)狀態(tài)。每個快照都包含起止時間，快照代表起止時間范圍內(nèi)的某一個時間點每個分片的數(shù)據(jù)視圖。

要將快照恢復(fù)到其他集群集群，快照、集群和任何恢復(fù)的索引的版本必須兼容。

你無法將快照還原到早期版本的 ES。例如你無法將在 7.6.0 中拍攝的快照恢復(fù)到 7.5.0 版本集群。

你從快照恢復(fù)的任何索引也必須與當(dāng)前集群的版本兼容。如果你嘗試恢復(fù)在不兼容版本集群中創(chuàng)建的索引，則恢復(fù)將失敗。

制作快照是備份集群唯一可靠且受支持的方式。 你不能通過復(fù)制節(jié)點的數(shù)據(jù)目錄來備份 ES 集群，官方?jīng)]有方式支持從文件系統(tǒng)級別的備份恢復(fù)數(shù)。如果你嘗試從此類備份中恢復(fù)集群，它可能會因損壞或丟失文件或其他數(shù)據(jù)不一致而報告失敗，或者它可能已經(jīng)成功地默默地丟失了一些數(shù)據(jù)。

集群節(jié)點的數(shù)據(jù)目錄副本不能用作備份，因為它不是其內(nèi)容在單個時間點的一致表示。您無法通過在制作副本時關(guān)閉節(jié)點來解決此問題，也無法通過獲取原子文件系統(tǒng)級快照來解決此問題，因為 ES 具有跨越整個集群的一致性要求，您必須使用內(nèi)置快照功能進行集群備份。

不要修改備份倉庫中的任何內(nèi)容或運行可能會干擾其內(nèi)容的進程。 如果 ES 以外的東西修改了倉庫內(nèi)容，那么未來制作快照或者恢復(fù)操作可能會失敗，報告損壞或者其他數(shù)據(jù)不一致問題，或者默默地丟失了一些數(shù)據(jù)并報告成功。

但是，你可以安全的從快照倉庫的備份中恢復(fù)其內(nèi)容，只要：

二、s7-1500如何監(jiān)控數(shù)據(jù)塊

S7-1500數(shù)據(jù)塊的快照功能可以將數(shù)據(jù)塊某一時刻的過程值上傳到離線的數(shù)據(jù)塊中，缺省情況下，數(shù)據(jù)塊的快照列被隱藏，需要在數(shù)據(jù)塊的列中使能顯示“快照”首先點擊監(jiān)控按鈕，使數(shù)據(jù)塊DB保持在線，

再次點擊快照欄中的“實際值的快照”按鈕，數(shù)據(jù)塊中變量在這一時刻的實際值（菜單顯示為監(jiān)視值）被抓拍并上傳至快照欄中

三、再用網(wǎng)盤你就out了！購入西數(shù)紅盤+威聯(lián)通NAS，打造家庭數(shù)據(jù)中心

我們所處的這個時代，是真正的互聯(lián)網(wǎng)時代，人們的日常生活，都離不開互聯(lián)網(wǎng)。而組成互聯(lián)網(wǎng)的重要元素，就是數(shù)據(jù)。這個數(shù)據(jù)，包含了音頻數(shù)據(jù)、視頻數(shù)據(jù)、文檔、信息等多方面，融入到我們的日常生活，就是照片、視頻、電影、音樂等等。受限于網(wǎng)盤的局限性和不穩(wěn)定性，越來越多的人，選購NAS（數(shù)據(jù)存儲器）作為家用的數(shù)據(jù)存儲中心。NAS即可連接網(wǎng)絡(luò)隨時訪問，同時也可以作為本地存儲快速讀取，可以說是當(dāng)前最易用、成本也最低的家用存儲中心。

我剛剛?cè)胧至艘唤MNAS，西數(shù)紅盤+威聯(lián)通NAS存儲器。作為西數(shù)的忠粉，我對自己組合的這款NAS存儲器期望很大。下面，分享一下我的使用感受。

外觀篇 | 經(jīng)典紅盤加持，組成強悍數(shù)據(jù)中心

熟悉NAS的人都知道，西數(shù)的紅盤，專為NAS存儲打造，所以在選擇上面不必費心，根據(jù)自己的需求選擇容量即可。而威聯(lián)通NAS存儲器為4盤位，我選擇的是4個8TB的西數(shù)紅盤。下面，先來看看這個組合的外觀設(shè)計。

四盤位的威聯(lián)通NAS存儲器TS-428（以下簡稱威聯(lián)通NAS存儲器），體積不大，整體白色的外觀設(shè)計，比較精致。

威聯(lián)通NAS存儲器的做工很精致，正面可以看到右側(cè)為盤位，而左側(cè)指示燈和按鍵，并且用了金色進行區(qū)分。

左側(cè)除了上部的指示燈之外，設(shè)計了開關(guān)機按鍵、一鍵備份按鍵和USB 3.0接口，工作狀態(tài)一目了然。

客觀來說，四盤位我認為家用是非常合適的，無論是從硬件花費還是從實用性角度來說都很合適。

盤位默認支持的是3.5英寸的硬盤，放置非常便捷，上手完全無難度。

內(nèi)部，可以看到威聯(lián)通NAS存儲器配置的靜音風(fēng)扇位于存儲器的后部。作為日常24小時連續(xù)工作的產(chǎn)品，強力而且能夠保持靜音的風(fēng)扇，必不可少。

威聯(lián)通NAS存儲器的接口，大部分設(shè)計在了背面。接口非常豐富，而且包括雙千兆網(wǎng)口的配置，都是比較厚道的。

為了便于穩(wěn)妥的放置在桌面上，威聯(lián)通NAS存儲器在底部設(shè)計了4個硅膠墊。

看完了威聯(lián)通NAS存儲器的基本外觀設(shè)計，我們來看看，最經(jīng)典的WD Red 硬盤（以下簡稱西數(shù)紅盤）。上文也說到，其實西數(shù)的硬盤分為很多種類，雖然同為存儲媒介，但是側(cè)重點不同。而西數(shù)紅盤，是一款注重NAS兼容的硬盤，采用NASware3.0的高級技術(shù)，專為最佳 NAS兼容性而打造。

西數(shù)紅盤的外觀非常精致，作為最知名的硬盤品牌之一，西數(shù)紅盤給人一種非常成熟的感覺。

西數(shù)紅盤擁有3.5英寸和2.5英寸可供選擇，容量更是分為了1-10T可選，可以根據(jù)自己的需要選擇；本次我購買的是8T容量的硬盤。

值得一提的是，作為西數(shù)專為NAS打造的硬盤，西數(shù)紅盤的接口為SATA 6 Gb/S，為高速傳輸提供了硬件保障。

同時，這款西數(shù)紅盤也提供了256M的緩存；作為一款專為NAS打造的硬盤，可以提供7*24小時不間斷的使用。

西數(shù)紅盤和威聯(lián)通NAS存儲器的裝配沒有任何難度，直接放入盤位即可開啟工作。即便是新手，也沒有什么上手的難度。

裝配完成，威聯(lián)通NAS存儲器就可以正式開啟工作了。

實際上，除了本身威聯(lián)通NAS存儲器在外觀上設(shè)計的比較漂亮之外，我認為西數(shù)紅盤，是最大的亮點。作為NAS，西數(shù)紅盤是專門打造的，提高了兼容性、集成度、可升級能力和可靠性的硬盤，再合適不過了。

設(shè)置 | 官網(wǎng)說明細致，小白也能快速上手

因為我也是第一次接觸威聯(lián)通的NAS，所以上手之前，我是計劃詳細的研究下軟件的應(yīng)用和設(shè)置。但是實際使用的時候，卻發(fā)現(xiàn)完全沒有必要去做過多的準(zhǔn)備工作，因為，威聯(lián)通NAS的適配軟件非常強大，而設(shè)置指引更是一步步的非常細致。

下載官方軟件Qfinder Pro，就會出現(xiàn)設(shè)置指引界面，非常的快捷?？偨Y(jié)來說，基本分為以下幾個步驟：

Qfinder Pro掃描發(fā)現(xiàn)NAS => 首次安裝跳轉(zhuǎn)瀏覽器進行初始化設(shè)置 => 設(shè)置管理員密碼/時間/網(wǎng)絡(luò)配置 => 下載安裝新固件。

所有的設(shè)置都會有對應(yīng)的詳細說明，幾乎就是一個自動化的配置過程，完全沒有上手難度。

然后，按照向?qū)崾具M行配置，選擇所有4個機械硬盤，組建RAID1磁盤陣列。

RAID1磁盤陣列組建完成，還需要繼續(xù)進行分區(qū)設(shè)置；選擇厚卷類型，可以看到存儲池已經(jīng)設(shè)置完畢，非常快捷。

而在存儲/快照的管理界面，還可以看到容量、使用率等更多的數(shù)據(jù)。

設(shè)置好了之后，再回過頭，看一下網(wǎng)頁的設(shè)置中心。

大模塊化的功能表設(shè)計，分類比較明確，可以快速的開啟自己所需要的功能。

日常使用的，基本就是兩個最重要的功能：一個是文件管理功能，可以快速的根據(jù)文件夾，來訪問NAS數(shù)據(jù)中心，并對存儲的文件進行快速的管理。

另外一個，就是比較豐富的APP中心。

實際上，雖然我將威聯(lián)通NAS存儲器作為家中的多媒體存儲中西，但是威聯(lián)通NAS存儲器的功能，卻不是僅僅局限于存儲和快速訪問，而是可以通過APP進行更多的功能擴充。

使用 | 快捷備份，快速訪問，安全的家庭數(shù)據(jù)中心

實際上，我對太深入的功能，也沒有深入研究。我日常使用最多的，還是存儲、備份、遠程訪問。

為什么這么說呢？因為我經(jīng)常出差，就會遇到很多問題，比如需要自己電腦里面的一些資料，但是沒有攜帶自己的電腦，就會非常麻煩，幾乎沒辦法解決。

不過，有了威聯(lián)通NAS存儲器，這樣的問題就一起不復(fù)返了！

1）數(shù)據(jù)隨時上傳

在Qfinder Pro的首頁，就是影音上傳的工具，直接可以在首頁上面選擇文件上傳。

非常快捷，自己的文件，可以快速的上傳，以便隨時訪問，同時也可以避免不小心錯刪；而西數(shù)紅盤+威聯(lián)通NAS存儲器的存儲空間，完全不必擔(dān)心任何存儲空間不足的問題。

如果嫌麻煩，還可以直接映射一個硬盤，這樣可以直接復(fù)制文件到硬盤里面，很像是給自己的PC加了一個本地硬盤一樣，復(fù)制黏貼更簡單。

2）數(shù)據(jù)自動同步

使用Qsync軟件，就可以實現(xiàn)自動備份的功能啦！

這其中，可以看到設(shè)備管理的界面，所有已經(jīng)連接威聯(lián)通NAS存儲器的設(shè)備，都可以進行查看和管理，并可以直接取消連接，避免設(shè)備遺失的時候會導(dǎo)致威聯(lián)通NAS存儲器的數(shù)據(jù)不安全。

可以自由的選擇自動備份的文件夾，這樣一來，文件夾中的文件，就可以自動的被分到NAS里面。

可以隨時的看到已經(jīng)使用的空間大小，以及剩余的空間。實際上，有這樣大的硬盤存儲空間，完全可以忽略空間不足的問題。

3）遠程訪問

這個是最重要的功能之一。

下載CloudLink云連通軟件，就可以實現(xiàn)遠程訪問了。

登陸之后，可以看到所有的威聯(lián)通NAS存儲器的文件夾，可以進行多項操作。

下載速度就不再測試了，因為，這個主要受限于你所處的環(huán)境帶寬是多少。

4）數(shù)據(jù)快照備份，再也不用擔(dān)心丟失

除了上述的功能，威聯(lián)通NAS存儲器擁有強大的快照功能，可以將創(chuàng)建數(shù)據(jù)快照，理論上面來說，數(shù)據(jù)會保證永遠不會消失。

其實，上文也說到，威聯(lián)通NAS存儲器的功能，遠不止這些。不過，對于我而言，數(shù)據(jù)的自動備份、隨時訪問，是最重要的功能，也是使用頻率最高的功能。

總結(jié) | 高顏值，易使用的家庭數(shù)據(jù)中心

總結(jié)來說，我認為西數(shù)紅盤+威聯(lián)通NAS存儲器，是一組簡潔易用的組合。

西數(shù)紅盤作為專業(yè)的NAS用盤，整體來說就是很專業(yè)，可以保證7*24小時的不間斷使用。而威聯(lián)通NAS存儲器，則是提供了數(shù)據(jù)備份和傳輸?shù)妮d體，可謂強強聯(lián)合。浩瀚的存儲空間，真正是一勞永逸的家庭數(shù)據(jù)中心，值得擁有！

四、Elasticsearch（四）：Search運行機制

Search 執(zhí)行時分為 Query 和 Fetch 兩個階段。

es 的每個 shard 對應(yīng)一個 lucene index ，即一個獨立的算分單位。當(dāng)設(shè)置多個分片時，查詢的文檔在不同分片上會分別計算相關(guān)性得分，可能會導(dǎo)致最終的得分是不準(zhǔn)的。 es 提供參數(shù) search_type=dfs_query_then_fetch 使得 es 能夠在獲得所有文檔后重新計算相關(guān)性得分，此種方式會消耗較多 cpu 和內(nèi)存。

sort 參數(shù)用于指定排序的字段和方式。 _doc 排序使用文檔內(nèi)部 id ，即使用索引順序作為排序規(guī)則。

es 不允許直接對 text 類型字段進行排序。由于排序是使用的是文檔內(nèi)容，無法用到倒排索引，而是需要通過文檔 id 獲取文檔字段的原始內(nèi)容。 es 對此提供兩種實現(xiàn)方式

es 中除了 text 字段（不支持）都默認開啟了 doc values ，其在寫入文檔時與倒排索引一起生成并寫入磁盤，其結(jié)構(gòu)為文檔 id 到文檔指定字段的 value 。這樣在聚合分析時就不會占用內(nèi)存，但是索引時會減慢索引的速度，占用額外的磁盤資源。如果一個字段明確不會被聚合分析，可以在 mapping 中通過 doc_values 參數(shù)關(guān)閉：

doc values 是不支持對 text 類型使用的，如果需要對能夠分詞的 text 類型進行排序，就需要使用 fielddata 。 fielddata 在搜索時于內(nèi)存中創(chuàng)建，其不會額外占用磁盤資源，但是當(dāng)文檔較多時即時創(chuàng)建會花費過多時間、占用較多內(nèi)存。 fielddata 默認時關(guān)閉的，可以通過修改 mapping 的 fielddata 參數(shù)使得字段的 fielddata 特性立即可用：

使用 fielddata 不代表能夠真正對 text 類型的值進行排序，其結(jié)果為文檔 id 到每個分詞，即僅支持對分詞結(jié)果的一部分進行排序。

fielddata 會首先對分詞結(jié)果進行排序，來選擇用作文檔排序的詞，召回結(jié)果中會通過 sort 字段說明用作排序的詞。

使用 docvalue_fields 參數(shù)可以指定召回 fielddata 或 doc values 存儲的值：

es 提供 from 、 size 來指定分頁，但是每次執(zhí)行分頁并非直接獲取 size 個數(shù)據(jù)，而是從每個分片獲取 from+size 個數(shù)據(jù)后再排序選取。頁數(shù)越深，占用的內(nèi)存越多，耗時越長。 es 通過 index.max_result_window 限定最多取 10000 數(shù)據(jù)。

es 提供 scroll 用來生成數(shù)據(jù)快照。當(dāng)使用 scroll 請求返回單頁結(jié)果時，可以檢索出大量結(jié)果（甚至全部）生成快照。請求結(jié)果返回 _scroll_id 是進行下一頁查詢的參數(shù)，通過 scroll 可以完成對快照的遍歷。

指定使用 scroll 即其保留的時間，如 1m 代表快照保留一分鐘。

使用返回的 _scroll_id 作為參數(shù)進行下一次迭代，直到返回的結(jié)果為空：

scroll 生成的是一份數(shù)據(jù)快照，因此不能用作實時搜索，盡量只使用 _doc 排序的方式。 scroll 會占用內(nèi)存，可以選擇刪除 scroll ：

search after 是通過前次查詢指定的排序值對當(dāng)前查詢進行定位，使得各分片返回的文檔數(shù)控制在 size 個內(nèi)。 search after 是實時的，使用的排序值必須能夠唯一排序定位，不支持通過 from 參數(shù)指定查詢頁數(shù)，并且只能往后翻頁。

使用上次返回結(jié)果的排序定位值指定 search_after 參數(shù)：

以上就是關(guān)于數(shù)據(jù)快照相關(guān)問題的回答。希望能幫到你，如有更多相關(guān)問題，您也可以聯(lián)系我們的客服進行咨詢，客服也會為您講解更多精彩的知識和內(nèi)容。