解決常見的Windows Server重複數據刪除問題

2021-01-08 暢享網

如果應用的重複數據刪除出現問題會導致什麼後果?我可以關閉Windows Server重複數據刪除技術麼?

隨著新的應用以及數據密集型文件類型，包括客戶資料庫、電子郵件檔案、PDF文檔以及圖像庫和流媒體文件，存儲需求也大幅增加。數據重複數據刪除技術已成為一項減輕企業存儲要求的強大技術。數據重複數據刪除技術可在不改變或破壞數據的情況下識別和消除冗餘數據元素或塊。Windows Server 2012 R2提供擴展的重複數據刪除功能，但IT專業人員必須合理使用該技術，從而確保應用和系統達到預期性能表現。

一旦在Windows Server 2012 R2平臺上啟用和配置後，數據重複數據刪除技術通常是一項由伺服器定期發起的後臺作業，這與本地存儲子系統的內聯重複數據刪除功能略有不同。因此，當Windows伺服器重複數據刪除技術開始應用後，一些應用程式或文件類型，如需要連續訪問的文件和經常改變或需求活躍的I/O模式，表現可能不是很好。例如Hyper-V主機系統、SQL資料庫文件、Exchange伺服器、Windows伺服器更新服務(WSUS)和超過1TB的大文件。

這裡的根本問題在於，經常發生變化的文件不能有效地執行重複數據刪除。伺服器必須提供重要的計算資源來處理重複數據刪除工作--即時更改的應用程式文件只有撤銷重複數據刪除。這不是有關像EMC專用存儲子系統提供不間斷重複數據刪除技術的問題，而是會對傳統伺服器帶來計算負擔的問題。在實踐中，重複數據刪除技術最佳適用於有一定日期沒有發生過變化的文件。如果你必須選擇一個比較短的重複數據刪除技術周期，一定要在重複數據刪除之前和之後對應用程式進行基準測試，這樣便於對於前後性能變化，並確保應用程式的性能沒有產生消極影響。

當應用程式或文件訪問受到Windows Server重複數據刪除的不利影響時，你可以這樣做：首先，IT管理員可以通過改變計劃來改變重複數據刪除頻率，或選擇手動刪除重複數據。此外，如果伺服器的工作負載受到幹擾，工作選項如StopWhenSystemBusy將停止重複數據刪除，而優先選項可以用來優化重複數據刪除工作。Expand-DedupFile cmdlet可以擴大特定的文件按需保證兼容性和性能。

在大多數情況下，調度和其他選項可以提高性能，而不需禁用重複數據刪除。但有時重複數據刪除確實需要被禁用。重複數據刪除通過卷進行刪除，在「Unoptimization」工作類型下運行Start-DedupJob cmdlet.

責編：王雅京

微信掃一掃實時了解行業動態
微信掃一掃分享本文給好友

相關焦點

  • 【乾貨】Linux運維常見問題及解決的32個錦囊妙計
    解決：1）直接手動刪除：ls|xargsrm-f；2）徹底解決：在cron的自動執行語句後加上>/dev/2>&13.telnet很慢/ssh很慢問題：某天研發某同事說10.50訪問10.52memcached服務異常，讓我們檢查下看網絡/服務/系統是否有異常。
  • Windows server 2008 R2中文企業版促銷
    Microsoft windows 2008 server中文企業版25用戶 HP OEM>     Microsoft windows 2008 server中文企業版25用戶 HP OEM可以幫助信息技術(IT)專業人員最大限度地控制其基礎結構,同時提供空前的可用性和管理功能,建立比以往更加安全、可靠和穩定的伺服器環境。
  • Microsoft windows 2008 server中文版
    （中關村在線深圳3月23日行情資訊）Windows Server 2008中文標準版是微軟伺服器作業系統的名稱，它繼承windows server 2003。從工作組到數據中心，Windows Server2008都提供了令人興奮且很有價值的新功能，對基本作業系統做出了重大改進。感興趣的朋友不妨多關注下。
  • Opendedup 3.0.1 發布,重複數據刪除解決方案
    Opendedup，一個新的開源重複數據刪除解決方案。作為針對Linux的重複數據刪除文件系統（也成 為SDFS），Opendedup從設計上來說針對的是那些擁有虛擬環境並尋求高性能、可擴展和低成本重複數據刪除解決方案的企業。
  • Windows下Laravel 7.0連接sql server - php中文網
    個人的 PHP 原生代碼解決方案：1. 配置 php.ini 文件 加入 PHP 版本對應的動態庫，去官方下載。安裝驅動 因為我用的是 windows server2016, 所以驅動一定要看到是否支持.[這個是下載地址](https://docs.microsoft.com/zh-cn/sql/connect/odbc/download-odbc-driver-for-sql-server?
  • 重複數據刪除如何對主存儲進行優化
    主要文件系統存儲優化(也就是在同樣的空間塞進更多的數據)繼續在日益普及。這裡的挑戰是主存儲的重複數據刪除[注]並不是沒有規則的。你不能刪除這個重複的數據，也不能刪除那個重複的數據，你必須要認識到刪除重複數據之後對設備性能的影響。EMC已經宣布了在自己的Celerra平臺上刪除重複數據的功能。
  • MySQL如何刪除重複數據
    MySQL中經常會遇到重複的數據，那麼當我們遇到重複的時候的時候，如果定位哪些數據是有重複的記錄？如何刪除重複的數據？我們該怎麼做呢？接下來我們一步步來分析一下遇到這樣的情況後，該如何處理。也就是我們的上面的這個表中每一組重複數據中id最小的一行數據需要保留，其他比較大的id的重複的數據行需要被刪除。當然如果是要保留id行最大的一行數據最為最後的數據行也是可以了，只要在查詢的時候，稍微修改一下SQL語句的min(id)或max(id)函數即可。
  • Opendedup 2.0.11 發布,重複數據刪除解決方案
    功能增強* 添加 org.opendedup.collections.ProgessiveFileBasedCSMap，作為默認唯一的塊哈希表Opendedup，一個新的開源重複數據刪除解決方案。作為針對Linux的重複數據刪除文件系統（也成 為SDFS），Opendedup從設計上來說針對的是那些擁有虛擬環境並尋求高性能、可擴展和低成本重複數據刪除解決方案的企業。
  • 如何快速刪除表中的重複項?
    日常使用Excel時，可能會遇到刪除重複數據的情況，比如收集到重新提交的數據。今天就來分享下5種解決方法。1、「刪除重複項」按鈕這個也是最常見的，打開Excel，選中表格中的某一單元格，接著選擇菜單欄-數據，進入數據頁面，然後點擊「刪除重複項」，就可以了。
  • 完美組合:NetApp重複數據刪除和VMware
    VMware 已成為我們見過的用於 NetApp 重複數據刪除的最受歡迎的使用案例。與 Data ONTAP®7.2.2 一起發布重複數據刪除之後不久，客戶就開始報告在傳統的 VI3 環境和新興的 VDI 環境中對 VMware 虛擬機 (VM) 進行重複數據刪除都獲得了極大成功。自然地，我們想要詳細地了解並研究他們為何如此興奮。
  • 運維常見的22個故障排查和10個問題解決技巧大匯總!
    解決：    1）直接手動刪除：ls|xargsrm-f；    2）徹底解決：在cron的自動執行語句後加上>/dev/null2>&13.telnet很慢/ssh很慢問題：某天研發某同事說10.50
  • 我們是如何刪除 PB 級重複數據的?
    對這類重複事件的數據的分析也非常容易產生問題，因為它對所發生的事給出了一個不準確的描述，這也會導致 Mixpanel 偏離其它正在同步的客戶端數據系統，如數據倉庫。這也是為什麼我們非常關心數據完整性的原因。今天，我們很高興在這裡分享我們的 PB 級規模的事件數據去重解決方案。
  • 利用VBA代碼刪除空白行,如何刪除重複數據
    大家好，今日內容仍是和大家分享VBA編程中常用的簡單「積木」過程代碼，NO.136-NO.138，內容是：插入多行表格的方法、如何刪除工作表中的空白行、刪除重複數據行等內容。VBA過程代碼138：EXCEL中，如何刪除重複數據行Sub mynz()Dim R As IntegerDim i As IntegerWith Sheets("24")
  • excel刪除重複數據保留一條
    EXCEL中刪除重複內容只保留一個，可使用數據工具中的「刪除重複項」實現。第一種方法步驟如下：1、打開需要操作的EXCEL表格，選中需要刪除重複內容的數據列，點擊工具欄的「數據」項。2、找到數據工具，點擊「刪除重複項」。3、選擇「全選」，然後點擊下面的確定按鈕即可。4、返回EXCEL表格，可發現已成功刪除重複內容只保留一個。
  • Oracle資料庫刪除重複數據的情況!
    【IT168 論壇採風】在對資料庫進行操作過程中我們可能會遇到這種情況，表中的數據可能重複出現，使我們對資料庫的操作過程中帶來很多的不便，那麼怎麼刪除這些重複沒有用的數據呢?
  • 32 個運維常見故障處理技巧,統統幫你解決掉!
    解決：1)修改/etc/hosts使hostname和ip對應；2）在/etc/resolv.conf注釋掉nameserver或者找一個「活的」nameserver。原因：可能某人直接用rm刪除某個正在寫的文件，導致文件刪了但磁碟空間沒釋放的問題解決：1）最簡單重啟系統或者重啟相關服務。
  • server sql 作業 使用專題及常見問題 - CSDN
    在本文中，我們研究如何為使用此解決方案監視的所有SQL Server實例收集上次運行信息。 這是表的結構，因此您可以了解將存儲哪些數據。 serverId -serverid 綁定到清單。data_collection_timestamp-上次收集數據的時間。
  • 深入了解Windows Server 2012四大版本
    3Windows Server 2012十大特徵     6、重複數據刪除　　多年來，存儲的需求一直在增長，速度快過了硬碟驅動器的密度。滿足我們貪婪的數據存儲胃口，意味著越來越多的Spindle，和更多的控制器，機箱，電源，電力，以及保持這些Spindle運轉的冷卻。　　這些年來，重複數據刪除已經從高端的需求變成絕對必要的選項，微軟深知這一點。Server 2012支持NTFS卷上的重複數據刪除 - 雖然可悲的是它不支持CSV - 並且與BranchCache深度整合，以節省廣域網帶寬。
  • SQL中如何刪除重複數據,只保留其中一行
    ，刪除保留其中一條（是否重複判斷基準為多個欄位）解決方案碰到這樣的問題我們先分解步驟來看創建測試數據找到重複的數據刪除重複的數據並且保留一行創建測試數據我們創建一個人員信息表並在裡面插入一些重複的數據。
  • 重複數據太多怎麼辦？excel下教你如何刪除重複數據
    我們在使用excel表格時經常會從很多表格匯總數據，因此可能就會產生很多數據重複，如果數據少的話，可以通過直接查看來過濾刪除重複數據，但是如果數據多了再通過人工的方式就很不現實了，也非常容易誤刪，那麼有什麼辦法可以自動按規則刪除重複的數據呢？下面就來介紹一下。這使用的是excel2016版本，其它版本也類似。