大資料流量 資料中心發展的瓶頸

2021-09-23 06:43:59 字數 2338 閱讀 5113

我們都知道,大資料通常與資料中心不斷增長的結構和非結構化工作負載相關。而網路負責處理傳輸到伺服器

、儲存陣列和雲服務的資料流量。伺服器之間的密集型i/o吞吐量常常發生在資料中心或者廣域網之間。伴隨著大資料的來臨和應用的不斷增長,新的問題將會出現。由於傳統的it設施在當初設計的時候,沒有考慮到大資料的情形,瓶頸問題將變得更加普遍,尤其是在儲存一端,問題更加明顯。

這樣一來,it業務中就會出現一種新的分支:面向新一代資料中心的資料管理。下面,我們就給大家介紹大流量阻礙資料中心發展的幾大緣由:

一、大流量是一種新型工作負載

大流量是指橫跨廣域網連線的資料中心內伺服器間的通訊流量,它不同於通常情況下的大資料工作負載——也就是使用者對機器或者機器之間的通訊流量。

二、傳統it不能勝任大流量要求

導致大流量出現的主要原因是it過去幾年所形成的優勢:虛擬化的廣泛部署和擴充套件系統;遠端實時遷移;資料複製和備份;專門針對基於wan分布式系統而編寫的尖端應用,比如hadoop, mapreduce, mongodb和cassandra。

三、大流量增長沒有止境

大流量增長沒有具體的指標可供參考,它的增長將永無止境。forrester research**說,在未來幾年,由機器執行產生的應用資料將達到50%的年增長。而且,儲存巨頭emc官方發布過乙份報告,認為在2009至2023年間,將實現44倍資料擴容,這意味著資料帶來的流量增長將是乙個巨大挑戰。

四、大流量對it人員影響巨大

不斷增長的大流量將對大型組織機構的影響最為深遠,而在其中,尤以生產一線的工人、cio、cto、儲存管理員、災備和伺服器

工作人員、網路管理員和資料中心管理員等受影響最大。

五、資料中心和管理面臨考驗

日益增長的大流量將會給企業的資料中心及其管理帶來嚴峻考驗,因為它們需要解決傳統和當前二者不同情形的資料傳輸過程中的問題。而且,還需要確保系統中基本的資料儲存和訪問功能正常執行。這些,將直接影響到業務的連續性、災備和關鍵業務執行。

六、如何優化現有的系統

可能的解決辦法包括擴充現有網路頻寬、重複資料刪除、壓縮和精簡配置軟體。資料中心也考驗使用傳統的wan優化軟體,使用應用加速解決方案,或者針對這種新型的大流量特點開發新技術。

七、解決方案面臨的現實問題

某些解決方案在某些情況下不可能得以執行。比如,如果資料中心彼此相隔遙遠,有效的優化方案實際效果可能並不明顯;或者,服務商不能為站點之間提供足夠的頻寬。

八、網路優化的相關問題

當企業對其網路的頻寬和安全性進行優化,cio和cto需要事先知道對網路和資料中心帶來何種影響。比如,在舊有系統中引人新軟體,可能會出現不能與其他舊軟體或者上一代版本軟體實現相容的問題,而這容易引發系統崩潰。

九、優化的常規指南

企業該對如何界定資料,以確保優化方案能在it運營中無縫執行。考慮的因素應該包括:部署的難易程度、完全透明的網路滲透、與現有系統的相容以及低功耗。

十、大資料未來情形

未來資料將不斷增長,資料中心靜態運算和儲存資源將被傳送到統一的資源池中,以省時省力的經濟方式充分利用虛擬化和雲服務,從而減輕內部資料中心的工作負載。

華為大資料中心山西 華為大資料中心落戶山西呂梁

山西新聞8月18日電 記者 宋立超 18日,華為山西 呂梁 大資料中心在山西省呂梁市正式落成掛牌。據介紹,華為山西 呂梁 大資料中心專案,是山西省呂梁市與華為技術 於2016年7月簽約合作 由呂梁市離石區2017年10月開工建設的省級重點專案。該專案占地51畝,總投資11.76億元,建成投用後,年產...

東芝儲存引領資料中心發展

作為資料中心領域的領軍品牌之一,東芝儲存9月27日參與了在北京舉行的 2016開放資料中心峰會 odcc 本屆odcc峰會致力於打造中國開放平台,推動資料中心 伺服器等行業發展和標準化程序,眾多行業精英 資深專家 企業匯聚一堂。此次峰會,東芝不僅hk4r系列和mg04aca系列企業級硬碟分別獲得大獎...

國雙 緊跟新基建,推動大資料中心健康發展

自3月4日 政治局常務委員會會議提出,加快5g網路 資料中心等新型基礎設施建設進度以來,新基建的話題熱度一直居高不下。其中,作為首次納入 加快建設條目的大資料中心引起了業界的高度關注。在國金 研究所估算的2020年七大新基建領域投資規模中,資料中心的投資規模達到千億級。大資料中心為何會入圍新基建?我...