中文字幕在线观看,亚洲а∨天堂久久精品9966,亚洲成a人片在线观看你懂的,亚洲av成人片无码网站,亚洲国产精品无码久久久五月天

戴爾易安信PowerVault ME4 系列測評

2020-12-04    來源:

容器云強(qiáng)勢上線!快速搭建集群,上萬Linux鏡像隨意使用

作者:StorageReview Enterprise Lab

 
戴爾易安信PowerVault ME4系列是一系列的存儲陣列,旨在滿足入門級存儲市場的需求。一般來說,入門級存儲產(chǎn)品在市場上的價(jià)格普遍低于2.5萬美元。值得一提的是,PowerVault ME4系列的靈活度非常高,該系統(tǒng)既能夠以HDD配置進(jìn)行部署,以低于1萬美元的入門價(jià)格滿足入門級市場或邊緣市場的需求,也可以將其配置為混合或全閃存,以滿足不斷增長的業(yè)務(wù)的更高要求。無論如何部署,PowerVault ME4均可為組織提供易于部署和管理的存儲解決方案,該解決方案提供了企業(yè)存儲產(chǎn)品中常見的深度功能。

PowerVault ME4提供了幾種不同的配置,但它們的設(shè)計(jì)都能夠從小規(guī)模配置開始,可通過添加驅(qū)動(dòng)器進(jìn)行擴(kuò)展,來滿足隨著時(shí)間的推移而增長的業(yè)務(wù)需求。ME4還提供了一個(gè)全方位的許可證計(jì)劃,使小企業(yè)更容易理解所有權(quán),并靈活制定預(yù)算。在部署方面,ME4可以在DAS和SAN中配置,以滿足各種不同的用例。通過HTML5 Web界面進(jìn)行管理,使管理和初始部署更加直觀;戴爾易安信預(yù)計(jì)新系統(tǒng)可在15分鐘內(nèi)運(yùn)行。
 
雖然許多人會在HDD配置中啟動(dòng)他們的PowerVault ME4,但通過添加一點(diǎn)閃存,該系統(tǒng)以后可以變成一個(gè)混合系統(tǒng)。搭配SSD,ME4可以提供相當(dāng)高的性能;事實(shí)上,戴爾易安信稱性能高達(dá)32萬IOPS。ME4的可靠性也非常高,可用性達(dá)到5個(gè)9標(biāo)準(zhǔn)(99.999%)。如果需要擴(kuò)展,ME4在這一方面也做得很好,通過12G SAS后端將原始容量擴(kuò)展到4PB。所有系統(tǒng)都有一套深入的功能,包括緩存/分層、異步復(fù)制、快照、對SED驅(qū)動(dòng)器的支持、與VMware vCenter和SRM的集成、分布式RAID、精簡資源調(diào)配等。 


 
根據(jù)業(yè)務(wù)需要,ME4有三種機(jī)箱可供選擇:ME4012、ME4024和ME4048。ME4012和ME4024都是2U機(jī)箱,可配備單控制器或雙控制器,可擴(kuò)展到大約3PB。兩者的核心區(qū)別在于ME4012支持12個(gè)3.5″驅(qū)動(dòng)器,而ME4024支持24個(gè)2.5”驅(qū)動(dòng)器。作為PowerVault ME4系列的一部分,戴爾易安信還提供了一個(gè)更大的機(jī)箱;ME4048是一個(gè)5U機(jī)箱,只有雙控制器配置,它支持84個(gè)3.5“驅(qū)動(dòng)器。所有系統(tǒng)都可以擴(kuò)展為ME412(2U,12個(gè)3.5英寸驅(qū)動(dòng)器)、ME424(2U,24個(gè)2.5英寸驅(qū)動(dòng)器)或ME484(5U,84個(gè)3.5英寸驅(qū)動(dòng)器),以JBOD形式提供。 
 
值得注意的是,戴爾易安信正在使用他們自己的基于PowerEdge設(shè)計(jì)的機(jī)箱以及Seagate(Dot Hill)控制器。盡管可以從其他供應(yīng)商處獲得這些控制器,但戴爾易安信認(rèn)為,在VMware,Microsoft甚至HPC環(huán)境以及其他環(huán)境中的集成和可伸縮性方面,他們自己的產(chǎn)品更具優(yōu)勢。他們還在“未來無憂保障計(jì)劃”中提供ME4,該計(jì)劃涵蓋了一整套服務(wù)和保證。戴爾易安信通過與12Gb SAS后端連接的整體最大4PB擴(kuò)展,進(jìn)一步使其產(chǎn)品與眾不同。此外,戴爾易安信還提供了一整套JBOD選項(xiàng)。  
 
在本次評測中,我們在具有十二個(gè)1.8TB 10K HDD和十二個(gè)960GB讀取密集型SSD的完全填充的混合配置中測試了PowerVault ME4024。我們的陣列還配備了八個(gè)16Gb FC。完整的規(guī)格和功能可在此處查看。 
 

戴爾易安信PowerVault ME4024設(shè)計(jì)和構(gòu)建

 
戴爾易安信PowerVault ME4是一個(gè)2U存儲陣列,其設(shè)計(jì)與當(dāng)前一代戴爾易安信數(shù)據(jù)中心產(chǎn)品的其余部分保持一致。這臺設(shè)備有一個(gè)時(shí)尚的擋板,正面有戴爾易安信和PowerVault品牌。卸下ME4024上的擋板,即可看到24個(gè)2.5”驅(qū)動(dòng)器托架,可以安裝HDD或SDD。


翻轉(zhuǎn)到設(shè)備的后部,我們可以看到平臺的連接性。每個(gè)控制器提供一個(gè)鏡像連接組合。在頂部控制器上,藍(lán)色端口用于JBOD擴(kuò)展,黑色端口用于管理(LAN、USB和串行),而紫色端口是SFP+連接,可用于10G網(wǎng)絡(luò)或8/16Gb FC。在我們的設(shè)置中,我們安裝了16Gb的光纖,所有端口都分配給了FC。該陣列支持FC的所有端口,以太網(wǎng)的所有端口,或混合配置中的每個(gè)端口的一半。盡管該系統(tǒng)確實(shí)提供了某些PowerEdge設(shè)計(jì)元素,但它不包括iDRAC管理,你可能會在基于PowerEdge硬件的其他戴爾易安信存儲產(chǎn)品中看到iDRAC管理。

戴爾易安信PowerVault ME4024可使用性非常高,帶有用戶可更換的冗余電源以及雙主動(dòng)-主動(dòng)控制器。用戶可以在線拉取和交換控制器,以及管理控制器之間的固件鏡像。這樣可以輕松使系統(tǒng)保持最新狀態(tài),并在推送固件時(shí)保持同步。還可以利用相同的板載固件工具來更新連接的JBOD和磁盤(控制器可以看到的任何內(nèi)容)。

戴爾易安信PowerVault ME4024 管理


在管理方面,戴爾易安信PowerVault ME4利用ME存儲管理器。打開主屏幕,用戶可以瀏覽系統(tǒng)設(shè)置并設(shè)置操作,例如主機(jī)端口模式。在下面顯示的屏幕中,可以看到每個(gè)光纖通道連接(為FC配置的所有端口)的每個(gè)端口的配置,以及將陣列重新配置為iSCSI或混合的選項(xiàng)。用戶還可以注意到每個(gè)FC端口的端口連接模式,這可以根據(jù)是通過交換機(jī)還是直接連接將服務(wù)器連接到陣列來調(diào)整。某些較小的環(huán)境可以利用這種類型的地形來降低成本和復(fù)雜性。
 

 
下一個(gè)選項(xiàng)卡是“系統(tǒng)”選項(xiàng)卡,允許用戶快速查看系統(tǒng)的各個(gè)部分。將鼠標(biāo)懸停在元素上可以展開該項(xiàng)的信息。在“系統(tǒng)”選項(xiàng)卡上,您可以以圖形形式查看前部或后部,或者查看文本表中顯示的所有信息。此區(qū)域?qū)τ谏钊肓私庀到y(tǒng)細(xì)節(jié)(如驅(qū)動(dòng)器磨損級別、固件修訂或其他非日常統(tǒng)計(jì)信息)非常有用。


 
池選項(xiàng)卡允許用戶設(shè)置、獲取信息或刪除存儲池。他們還可獲得基本信息,如容量、類別和可用容量。如果用戶要將磁盤添加到陣列中,則可以使用操作添加磁盤組以擴(kuò)展存儲容量。


 
與“池”選項(xiàng)卡相似,用戶可以通過“卷”選項(xiàng)卡快速查看使用相關(guān)信息創(chuàng)建的當(dāng)前卷,并創(chuàng)建新卷或擴(kuò)展或刪除現(xiàn)有卷。在此區(qū)域還可以將卷映射到主機(jī),并包括卷選項(xiàng),如設(shè)置層優(yōu)先級。



戴爾易安信PowerVault ME4024 配置


戴爾易安信PowerVault ME4024提供了24個(gè)磁盤,其中一半是讀取密集型960GB SSD,另一半是1.8TB 10K SAS HDD。ME4024支持緩存和分層,當(dāng)將數(shù)據(jù)推入該層時(shí),后者可提供閃存的全部性能優(yōu)勢。為了加快我們的測試過程并顯示兩種存儲類型的性能特征,我們創(chuàng)建了僅包含閃存或僅包含旋轉(zhuǎn)介質(zhì)的存儲池。在生產(chǎn)系統(tǒng)中,用戶將在同一個(gè)池中同時(shí)擁有兩種存儲類型,并且陣列將根據(jù)訪問模式來管理數(shù)據(jù)的上下移動(dòng)。
 
對于存儲,我們利用了購買此存儲陣列的客戶通常使用的RAID10。每種存儲類型有12個(gè)驅(qū)動(dòng)器和一個(gè)雙控制器布局,我們將它們分成兩組,每組6個(gè)驅(qū)動(dòng)器。這樣一來我們在每個(gè)控制器上創(chuàng)建了一個(gè)6驅(qū)動(dòng)器RAID10池,其中包含三個(gè)磁盤組。此配置分別用于SSD和HDD。
 
對于后端連接,ME4024支持三種模式:iSCSI、FC或混合FC/iSCSI。該系統(tǒng)配備了所有16Gb FC光纖通道,因此我們采用了純光纖通道配置。這利用了連接到我們的雙交換機(jī)FC結(jié)構(gòu)的所有8個(gè)端口(每個(gè)控制器4個(gè))?偟膩碚f,存儲陣列的理論帶寬為128Gb(16GB/s),此時(shí)我們的雙端口8主機(jī)群集支持256Gb或32GB/s峰值。
 

戴爾易安信PowerVault ME4024 性能測評

 
SQL Server性能
StorageReview的Microsoft SQL Server OLTP測試協(xié)議采用了事務(wù)處理性能委員會基準(zhǔn)C(TPC-C基準(zhǔn))的當(dāng)前草案,這是一個(gè)在線事務(wù)處理基準(zhǔn),用于模擬復(fù)雜應(yīng)用程序環(huán)境中的活動(dòng)。在衡量數(shù)據(jù)庫環(huán)境中的存儲基礎(chǔ)架構(gòu)的性能優(yōu)勢和瓶頸時(shí),TPC-C基準(zhǔn)比合成性能基準(zhǔn)更適用。
 
每個(gè)SQL Server虛擬機(jī)都配置了兩個(gè)虛擬磁盤:用于啟動(dòng)的100GB卷和用于數(shù)據(jù)庫及日志文件的500GB卷。從系統(tǒng)資源的角度來看,我們?yōu)槊總(gè)虛擬機(jī)配置了16個(gè)vCPU、64GB的DRAM,并利用LSI Logic SAS SCSI控制器。雖然之前測試過的Sysbench工作負(fù)載在存儲I/O和容量方面都使平臺飽和,但SQL測試會尋找延遲性能。
 
本次測試使用在Windows Server 2012 R2 guest虛擬機(jī)上運(yùn)行的SQL Server 2014,并由戴爾的Benchmark Factory for Databases進(jìn)行測試。雖然我們對這個(gè)基準(zhǔn)的傳統(tǒng)用法是在本地或共享存儲上測試大型3000 scale的數(shù)據(jù)庫,但在這個(gè)迭代中,我們將重點(diǎn)放在將四個(gè)1500 scale的數(shù)據(jù)庫均勻地分布在服務(wù)器上。
 
SQL Server測試配置(每個(gè)虛擬機(jī))

•   Windows Server 2012 R2
•   存儲空間占用量:分配600GB,使用500GB
•   SQL Server 2014版

•   數(shù)據(jù)庫大小:1,500 scale
•   虛擬客戶端負(fù)載:15,000
•   RAM緩沖區(qū):48GB

•   測試時(shí)長:3小時(shí)

•   2.5小時(shí)預(yù)處理
•   30分鐘采樣周期

 
就我們的SQL Server事務(wù)性能而言,戴爾易安信PowerVault ME4總共具有12622.2 TPS,單個(gè)虛擬機(jī)的范圍為3152.5 TPS至3158.6 TPS。


 
從SQL Server的平均延遲來看,ME4的總延遲為10.5ms,每個(gè)虛擬機(jī)的延遲從6ms到15ms不等。 


 
Sysbench MySQL性能
 
我們的第一個(gè)本地存儲應(yīng)用程序基準(zhǔn)測試由一個(gè)通過SysBench測量的Percona MySQL OLTP數(shù)據(jù)庫組成。此測試還測量平均TPS(每秒事務(wù)數(shù))、平均延遲和平均第99%延遲。
 
每個(gè)Sysbench虛擬機(jī)配置三個(gè)虛擬磁盤:一個(gè)用于啟動(dòng)(約92GB),一個(gè)帶有預(yù)構(gòu)建數(shù)據(jù)庫(約447GB),第三個(gè)用于測試數(shù)據(jù)庫(270GB)。從系統(tǒng)資源的角度來看,我們?yōu)槊總(gè)虛擬機(jī)配置了16個(gè)vCPU、60GB的DRAM,并利用LSI Logic SAS SCSI控制器。
 
Sysbench測試配置(每個(gè)虛擬機(jī))

•   CentOS 6.3 64位
•   Percona XtraDB 5.5.30-rel30.1

•   數(shù)據(jù)庫表:100
•   數(shù)據(jù)庫大。10,000,000
•   數(shù)據(jù)庫線程:32
•   RAM緩沖區(qū):24GB

•   測試時(shí)長:3小時(shí)

•   2小時(shí)預(yù)處理32個(gè)線程
•   1小時(shí)32線程

 
對于Sysbench,我們測試了包括4個(gè)虛擬機(jī)和8個(gè)虛擬機(jī)的虛擬機(jī)組合。對于平均事務(wù)處理測試,ME4達(dá)到了9330.1 TPS(4個(gè)虛擬機(jī))和13606.8 TPS(8個(gè)虛擬機(jī))。



 

對于Sysbench平均延遲,ME4配備4個(gè)虛擬機(jī)時(shí)延遲為13.7ms,8個(gè)虛擬機(jī)時(shí)延遲為18.9ms。



 

在我們的最壞情況下(第99百分位)的延遲,ME4達(dá)到了33.5ms(4個(gè)虛擬機(jī))和39.5ms(8個(gè)虛擬機(jī))。



 

VDBench工作負(fù)載分析
在對存儲陣列進(jìn)行基準(zhǔn)測試時(shí),應(yīng)用程序測試是最好的,排在第二位的是合成測試。合成測試雖然不能完全代表實(shí)際的工作負(fù)載,但它確實(shí)具有可重復(fù)性因素,有助于對存儲設(shè)備進(jìn)行基準(zhǔn)測試,從而可以輕松地在不同的解決方案之間進(jìn)行逐項(xiàng)比較。這些工作負(fù)載提供了一系列不同的測試配置文件,包括“four corners”測試,常見的數(shù)據(jù)庫傳輸大小測試,以及來自不同VDI環(huán)境的trace。所有這些測試都使用了常見的vdBench工作負(fù)載生成器和腳本引擎,可以在大型計(jì)算測試集群中自動(dòng)執(zhí)行并捕獲結(jié)果。這使我們能夠在各種存儲設(shè)備上重復(fù)相同的工作負(fù)載,包括閃存陣列和單個(gè)存儲設(shè)備。

配置文件:

•   4K隨機(jī)讀。100%讀取,128個(gè)線程,0-120% iorate
•   4K隨機(jī)寫入:100%寫入,64線程,0-120% iorate
•   64K順序讀。100%讀取,16個(gè)線程,0-120% iorate
•   64K順序?qū)懭耄?00%寫入,8個(gè)線程,0-120% iorate
•   合成數(shù)據(jù)庫:SQL和Oracle
•   VDI完整克隆和鏈接克隆Trace

 
戴爾易安信PowerVault ME4最有可能用作混合產(chǎn)品,但它也可以全部采用旋轉(zhuǎn)磁盤或全部采用閃存。我們分別對SSD和HDD進(jìn)行了測試,幫助讀者大致了解該設(shè)備對位于這兩層內(nèi)部的數(shù)據(jù)的反應(yīng)。當(dāng)在同一池中使用旋轉(zhuǎn)媒體和閃存進(jìn)行操作時(shí),系統(tǒng)將自動(dòng)處理數(shù)據(jù)分層,使用購買ME4時(shí)包括在內(nèi)的許可證。
 
對于隨機(jī)4K讀取性能,HDD的峰值性能為4986 IOPS,延遲為820ms。SSD保持在1ms以下直至260K IOPS,峰值為299962 IPOS,延遲為13.6ms。



 

對于隨機(jī)4K寫入性能,HDD的峰值性能為3621 IOPS,延遲為566ms。SSD保持在1ms以下直至大約150K IOPS,峰值為167569 IOPS,延遲為12.2ms。



 

接下來,我們使用64K基準(zhǔn)測試切換到順序測試。在讀取方面,HDD的峰值為11764 IOPS或735MB/s,延遲為41.5ms(盡管延遲會在基準(zhǔn)中間附近達(dá)到80ms左右的峰值)。SSD保持了亞毫秒級延遲,直到約34K IOPS或約2.2GB/s,然后在延遲6ms時(shí)達(dá)到83860 IOPS或5.2GB/s的峰值,在中間處再次出現(xiàn)了較大的峰值(接近9ms)。 



 

對于連續(xù)64K寫入,HDD的運(yùn)行非常穩(wěn)定,直到達(dá)到13664 IOPS或854MB/s的峰值,延遲為18.3ms。SSD固態(tài)硬盤在保持一致性能方面也具有很大優(yōu)勢,一直保持在1ms以下直到17.5K IOPS,然后以大約12ms的延遲達(dá)到約18200 IOPS或1.15GB/s的峰值,然后性能下降并且其延遲增加。 



 

我們接下來的基準(zhǔn)測試是SQL測試。在SQL中,配備HDD的ME4的峰值為4752 IOPS,延遲為215ms。SSD在227K IOPS之前一直保持亞毫秒級的延遲性能,隨后在251860 IOPS達(dá)到峰值,延遲為4ms。



 

對于SQL 90-10,HDD的峰值為4441 IOPS,延遲為230ms。SSD保持在1ms以下直至大約210K IOPS,峰值為233040 IOPS,延遲為4.4ms。



 

對于SQL 80-20,HDD的峰值性能為4131 IOPS,延遲為244ms。SSD保持在1ms以下直至大約195K IOPS,峰值為214547 IOPS,延遲為4.8ms。 



 

繼續(xù)看我們的Oracle工作負(fù)載測試,我們可以看到HDD峰值為4138 IOPS,延遲為302ms。SSD在193K IOPS之前一直保持亞毫秒級的延遲,隨后在212272 IOPS達(dá)到峰值,延遲為5.98ms。



 

對于Oracle 90-10,HDD的峰值為4477 IOPS,延遲為152ms,然后下降了一些。在大部分測試時(shí)間里,SSD的延遲時(shí)間不到1ms,然后在231521 IOPS達(dá)到峰值,延遲為2.8ms。



 

Oracle 80-20的HDD峰值為4017 IOPS,延遲為175ms。SSD保持了低于1ms的延遲直到193K IOPS,然后在213965 IOPS達(dá)到峰值,延遲為3ms。 



 

接下來,我們切換到VDI完整克隆和鏈接克隆測試。對于VDI完全克隆啟動(dòng),HDD的峰值為4257 IOPS,延遲為249ms。SDD的峰值為212565 IOPS,延遲為4.8ms。 



 

在VDI-FC初次登錄時(shí),HDD的峰值為3614 IOPS,延遲為265ms。SDD保持了亞毫秒的延遲直到大約70K IOPS,然后在約76K IOPS時(shí)達(dá)到峰值,延遲為10ms,然后略有下降。 



 

對于VDI FC Monday登錄,HDD峰值約為3400 IOPS,延遲為120ms。SSD保持在1ms以下直至大約75K IOPS,峰值為83371 IOPS,延遲為5.9ms。 



 

切換到VDI鏈接克隆(LC)測試,在啟動(dòng)測試中,HDD的峰值為5588 IOPS,延遲為870ms。SSD在181K IOPS之前一直保持亞毫秒級的延遲性能,隨后在 203898 IOPS達(dá)到峰值,延遲為2.5ms。



 

在VDI LC初次登錄時(shí),HDD的峰值為4067 IOPS,延遲為63.2ms。閃存存儲一直保持在1ms以下直到略低于50K IOPS為止,并在54120 IOPS 達(dá)到峰值,延遲為4.5ms。 



 

最后,對于VDI LC Monday登錄,HDD達(dá)到了3900 IOPS的峰值,延遲約為120ms,然后略有下降。SSD保持在1ms以下直至大約49K IOPS,峰值為57K IOPS,延遲為7ms。 


 

結(jié)論

在存儲陣列方面,并不是所有企業(yè)都在尋找性能最高、功能齊全的存儲設(shè)備。許多企業(yè)尋求的是性能強(qiáng)勁、可靠且價(jià)格合理的存儲陣列。這正是戴爾易安信PowerVault ME4等平臺作為入門級產(chǎn)品推出的亮點(diǎn),其速度和價(jià)位適合大多數(shù)SMB/edge使用情形。ME4以低于1萬美元的起價(jià)和按需定制的定價(jià)模型殺入市場。PowerVault ME4購買者還將獲得全包許可包,支持閃存緩存/分層,并支持iSCSI或FC部署等等其他功能。

在性能方面,PowerVault ME4可提供高達(dá)320k IOPS的吞吐量。在我們的測試中,使用半填充讀取密集型閃存的配置,在我們的虛擬化環(huán)境中,使用兩個(gè)RAID10池(每個(gè)控制器一個(gè)池),我們獲得了300k IOPS 4K讀取。4K隨機(jī)寫入性能為167k IOPS,這對于這一細(xì)分市場中的存儲平臺來說也是非常了不起的。測得的帶寬也很強(qiáng),峰值超過5GB/s讀取和1.15GB寫入。
 
不過,真正讓人大開眼界的是,它在針對SQL Server和MySQL性能的應(yīng)用程序測試中表現(xiàn)出的出色程度。在這些方面,我們看到了SQL Server測試的平均延遲為10.5ms,即使與更昂貴的全閃存陣列相比,這也是非常好的。Sysbench性能測試從9K TPS擴(kuò)展到了13.6K TPS,這一點(diǎn)也非常強(qiáng)勁。該平臺的唯一缺點(diǎn)是,如果試圖在一個(gè)比預(yù)期環(huán)境更大的環(huán)境中使用它,性能就會下降。不過,這是中端全閃存產(chǎn)品的領(lǐng)域,它們可以更好地處理增加的負(fù)載。在戴爾易安信產(chǎn)品線中,這要么是Unity要么是SC存儲產(chǎn)品線。 
 
不過,總的來說,ME4很清楚自己的定位。我們的結(jié)果同時(shí)考慮了HDD和全閃存池。大多數(shù)用例將介于兩者之間,是ME4混合配置。一些SSD在加速HDD卷方面大有幫助。如果有一個(gè)可以從全閃存中受益的應(yīng)用程序,組織可以輕松地將卷固定到閃存層。對于入門市場來說,不僅性能表現(xiàn)強(qiáng)勁,其他方面也在水準(zhǔn)。圖形用戶界面易于理解和配置,擴(kuò)展選項(xiàng)可以將我們的測評設(shè)備擴(kuò)展到最多3PB,而ME4084則可擴(kuò)展到4PB。此外,還有一系列深層次的企業(yè)功能。這個(gè)價(jià)格區(qū)間在市場上有很多選擇,但“非常好”的選擇并不多。PowerVault ME4顯然是入門級存儲市場的領(lǐng)導(dǎo)者。


 
更多信息

原文鏈接:
https://www.storagereview.com/zh-hans/review/戴爾易安信powervault-me4-系列測評

標(biāo)簽: PowerVault 測評 

版權(quán)申明:本站文章部分自網(wǎng)絡(luò),如有侵權(quán),請聯(lián)系:west999com@outlook.com
特別注意:本站所有轉(zhuǎn)載文章言論不代表本站觀點(diǎn)!
本站所提供的圖片等素材,版權(quán)歸原作者所有,如需使用,請與原作者聯(lián)系。

上一篇:超半數(shù)IT教師身兼數(shù)職 寧暢“區(qū)縣教育解決方案”助教學(xué)減負(fù)

下一篇:41項(xiàng)測試一次過!寧暢八款服務(wù)器獲Windows Server權(quán)威認(rèn)證