五大商業分析技術趨勢與使用方式2012-04-30 08:34位元網網界網
字型大小：a+|a-
分析技術與商業智慧型的發展使得首席資訊官們能夠以較低的成本、隨時隨地快速而深入地處理商業資料。
目前，趨勢中心對如何應對分析挑戰的關注力度並不亞於他們考慮在新商業視角中如何充分利用機遇的力度。例如，隨著越來越多的公司開始不得不面對海量資料以及考慮如何利用這些資料，管理與分析大型不同資料集的技術開始出現。提前分析成本與效能趨勢意味著公司能夠提出比以前更為複雜的問題，提供更為有用的資訊以幫助他們運營業務。
在採訪中，首席資訊官們總結出了5大影響他們進行分析的it趨勢。它們分別為：大資料的增長、快速處理技術、it商品的成本下降、移動裝置的普及和社交**的增長。
1. 大資料
大資料指非常龐大的資料集，尤其是那些沒有被整齊的組織起來無法適應傳統資料倉儲的資料集。網路蜘蛛資料、社交**反饋和伺服器日誌，以及來自**鏈、行業、周邊環境與監視感測器的資料都使得公司的資料變得比以往越來越複雜。
儘管並不是每個公司都需要處理大型、非結構型資料集的技術。verisk analytics公司首席資訊官perry rotella認為所有的首席資訊官都應當關注大資料分析工具。verisk幫助金融公司評估風險，與保險公司共同防範保險詐騙，其在2023年的營收超過了10億美元。
rotella認為，技術領導者對此應當採取的態度是，資料越多越好，歡迎資料的大幅增長。rotella的工作是預先尋找事物間的聯絡與模型。
hms公司首席資訊官cynthia nustad認為，大資料呈現為一種「**性」增長趨勢。hms公司的業務包括幫助控制聯邦醫療保險(medicare)和醫療補助(medicaid)專案成本和私有雲服務。其客戶包括40多個州的健康與人類服務專案和130多個醫療補助管理計畫。hms通過阻止錯誤支付在2023年幫助其客戶挽回了18億美元的損失，節約了數十億美元。nustad稱：「我們正在收集並追蹤大量素材，包括結構性與非結構性資料，因為你並不是總是知道你將在其中尋找什麼東西。」
大資料技術中談論最多的一項技術是hadoop。該技術為開源分布式資料處理平台，最初是為編輯網路搜尋索引等任務開發的。hadoop為多個「非關係型(nosql)」技術(其包括couchdb 和 mongodb)中的一種，其通過特殊的方式組織網路級資料。
hadoop可將資料的子集合分配給成百上千臺伺服器的處理，每台伺服器匯報的結果都將被乙個主作業排程程式整理，因此其具有處理拍位元組級資料的能力。hadoop既能夠用於分析前的資料準備，也能夠作為一種分析工具。沒有數千台空閒伺服器的公司可以從亞馬遜等雲廠商那裡購買hadoop例項的按需訪問。
nustad稱，儘管並不是為了其大型的聯邦醫療保險和醫療補助索賠資料庫，但是hms正在探索nosql技術的使用。其包括了結構性資料，並且能夠被傳統的資料倉儲技術所處理。她稱，在回答什麼樣的關係型技術是經實踐證明最好用的解決方案時，從傳統關係型資料庫管理出發是並不明智。不過，nustad認為hadoop正在防止欺詐與浪費分析上發揮著重要作用，並且具備分析以各種格式上報的病人看病記錄的潛力。
在採訪中，那些體驗過hadoop的受訪首席資訊官們，包括rotella和shopzilla 公司首席資訊官jody mulkey在內都在將資料服務作為公司一項業務的公司中任職。
mulkey稱：「我們正在使用hadoop做那些以往使用資料倉儲做的事情。更重要的是，我們獲得了以前從未用過的切實有用的分析技術。」例如，作為一家比較購買**，shopzilla每天會積累數太位元組的資料。他稱：「以前，我們必須要對資料進行取樣並對資料進行歸類。在處理海量資料時，這一工作量非常繁重。」自從採用了hadoop，shopzilla能夠分析原始資料，跳過許多中間環節。
good samaritan醫院是一家位於印第安納州西南的社群醫院，其處於另一種型別。該醫院的首席資訊官chuck christian稱：「我們並沒有我認為是大資料的東西。」儘管如此，管理規定要求促使其儲存整如龐大的電子醫療記錄等全新的資料型別。他稱，這無疑要求他們要能夠從資料中收集醫療保健品質資訊。不過，這可能將在地區或國家醫療保健協會中實現，而不是在他們這種單個醫院中實現。因此，christian未必會對這種新技術進行投資。
island one resorts公司首席資訊官john ternent稱，其所面臨的分析挑戰取決於大資料中的「大」還是「資料」。不過，目前他正在謹慎地考慮在雲上使用hadoop例項，以作為一種經濟的方式分析複雜的抵押貸款組合。目前公司正在管理著佛羅里達州內的8處分時度假村。他稱：「這種解決方案有可能解決我們目前正遇到的實際問題。」
2.商業分析速度加快
肯塔基大學首席資訊官vince kellen認為，大資料技術只是快速分析這一大趨勢中的乙個元素。他稱：「我們期待的是一種更為先進的海量資料分析方法。」與更為快速地分析資料相比，資料的大小並不重要，「因為你想讓這一過程快速完成」。
由於目前的計算能夠在記憶體中處理更多的資料，因此與在硬碟中搜尋資料相比，其計算出結果的速度要更快。即使你僅處理數g資料，但情況依然與此。
儘管經過數十年的發展，通過快取頻繁訪問的資料，資料庫效能提公升了許多。在載入整個大型資料集至伺服器或伺服器集群的記憶體時，這一技術變得更加實用，此時硬碟只是作為備份。由於從旋轉的磁碟中檢索資料是乙個機械過程，因此與在記憶體中處理資料相比，其速度要慢許多。
rotella稱，他現在幾秒中進行的分析在五年前需要花上乙個晚上。rotella的公司主要是對大型資料集進行前瞻性分析，這經常涉及查詢、尋找模型、下次查詢前的調整。在分析速度方面，查詢完成時間非常重要。他稱：「以前，執行時間比建模時間要長，但是現在建模時間要比執行時間長。」
列式資料庫伺服器改變了關係型資料庫的傳統行與列結構，解決了另一些效能需求。查詢僅訪問有用的列，而不是讀取整個記錄和選取可選列，這極大地提高了組織或測量關鍵列的應用的效能。
ternent警告稱，列式資料庫的效能優勢需要配合正確的應用和查詢設計。他稱：「為了進行區別，你必須以適當的方式問它適當的問題。」此此同時，他還指出，列式資料庫實際上僅對處理超過500g位元組資料的應用有意義。他稱：「在讓列式資料庫發揮作用之前，你必須收集一規模的資料，因為它依賴一定水平的重複提公升效率。」
保險與金融服務巨頭john hancock公司的首席資訊官allan hackney稱，為了提高分析效能，硬體也需要進行提公升，如增加gpu晶元，其與遊戲系統中用到的圖形處理器相同。他稱：「視覺化需用到的計算方法與統計分析中用到的計算方法非常相似。與普通的pc和伺服器處理器相比，圖形處理器的計算速度要快數百倍。我們的分析人員非常喜歡這一裝置。」
3. 技術成本下降
隨著計算能力的增長，分析技術開始從記憶體與儲存**的下降中獲益。同時，隨著開源軟體逐漸成為商業產品的備選產品，競爭壓力也導致商業產品**進一步下降。
ternent為開源軟體的支持者。在加入island one公司之前，ternent為開源商業智慧型公司pentaho的工程副總裁。他稱：「對於我來說，開源決定著涉足領域。因為像island one這樣的中等規模公司能夠用開源應用r替代sas進行統計分析。」
以前開源工具僅擁有基本的報告功能，但是現在它們能夠提供最為先進的**分析。他稱：「目前開源參與者能夠橫跨整個連續統一體，這意味著任何人都能夠使用它們。」
hms公司的 nustad認為，計算成本的變化正在改變著一些基礎性架構的選擇。例如，建立資料倉儲的乙個傳統因素是讓資料一起進入擁有強大計算能力的伺服器中以處理它們。當計算能力不足時，從作業系統中分離分析工作負載可以避免日常工作負載的效能出現下降。nustad稱，目前這已經不再是乙個合適的選擇了。
她稱：「隨著硬體與儲存越來越便宜，你能夠讓這些作業系統處理乙個商業智慧型層。」通過重定資料格式和將資料裝載至倉庫中，直接建立在操作應用上的分析能夠更為迅速地提供答案。
hackney觀察認為，儘管價效比趨勢有利於管理成本，但是這些潛在的節約優勢將被日益增長的能力需求所抵消。儘管john hancock每台裝置的儲存成本在今年下降了2至3%，但是消耗卻增長了20%。
4.移動裝置的普及
與所有的應用一樣，商業智慧型正日益移動化。對於nustad來說，移動商業智慧型具有優先權，因為每個人都希望nustad能夠隨時隨地親自訪問關於她的公司是否達到了服務級協議的報告。她還希望為公司的客戶提供資料的移動訪問，幫助客戶監控和管理醫療保健開銷。她稱：「這是乙個客戶非常喜歡的功能。在五年前，客戶不需要這一功能，但是現在他們需要這一功能了。」
對於首席資訊官來說，要迎合這一趨勢更多的是為智慧型手機、平板電腦和觸控螢幕裝置建立適用的使用者介面，而不是更為複雜的分析能力。或許是出於這方面的原因，kellen認為這相對容易。他稱：「對於我來說，這只是小事情。」
rotella並不認為這很簡單。他稱：「移動計算影響著每乙個人。許多人開始使用ipad工作，同時其它的移動裝置正在呈現**式增長。這一趨勢正在加速並改變我們與公司內部計算資源互動的方式。」例如，verisk已經開發了能夠讓理賠人在現場快速進行分析的產品，因此他們能夠進行重置成本評估。他稱：「這種方式對我們的分析產生了影響，同時也讓每乙個需要它的人隨手就能使用。」
rotella稱：「引發這種挑戰的因素在於技術的更新速度。兩年前，我們沒有ipad，而現在許多人都在使用ipad。隨著多種作業系統的出現，我們正力爭搞清楚其是如何影響我們的研發的，這樣一來我們就不必一而再、再而三的編寫這些應用。」
island one的ternent指出，另一方面，為每一種移動平台建立原生應用的需求可能正在消退，因為目前手機和平板電腦上的瀏覽器擁有了更為強大的功能。ternent稱：「如果我能夠使用一款專門針對移動裝置的基於web的應用，那麼我並不能肯定我將會對定製的移動裝置應用進行投資。」
5.社交**的加入
隨著臉譜、推特等社交**的興起，越來越多的公司希望分析這些由**產生的資料。新推出的分析應用支援人類語言處理、情感分析和網路分析等統計技術，這些並不是典型商業智慧型工具套件的組成部分。
與其他公司一樣，大學也對監督他們大學的聲譽十分感興趣。與此同時，kellen表示，他可能還將尋找機會以開發專門用於解決學校所關注問題的應用，如監督學生入學率等問題。例如，監控學生在社交**上的帖子能夠有幫于學校與管理人員盡早了解學生在大學裡遇到的麻煩。kellen稱，目前戴爾已經做了這些工作，其產品支援公司探測人們關於故障膝上型電腦的推文。他稱，it開發人員還應當尋找一些辦法將社交**分析得出的報警資訊推送至應用中，以便於公司對相關事件快速做出反應。
hackney稱，發現這類關聯的意義在於讓公司領導相信對社交**的投資具有高回報。他稱：「在我所從事的行業中，每個人都是精算師，每個人都在計算，他們不會將任何東西建立在想當然之上。」
工業大資料應用的三大挑戰和五大商業趨勢
在裝置執行的過程中，自然磨損本身會使產品的品質發生一定的變化。通過資訊科技 物聯網技術的發展，通過感測器技術，實時感知資料，知道產品出了什麼故障，需要配件，使得生產過程中的這些因素能夠被精確控制，從而真正實現生產的智慧型化。一定程度上，工廠 車間的感測器所產生的大資料直接決定了 工業4.0 所要求的...
2 機器視覺技術發展的五大趨勢
在過去的一年裡，人工智慧 ai 大資料 3d成像和機械人過程自動化等領域在取得了空前的發展。在即將到來的2019年，機器視覺技術應用還將蓬勃發展，新機器視覺認為五大發展趨勢將引領行業應用。工業自動化正在推動工廠變得更加智慧型，並可以取代人工減少勞動力。機器視覺用於質量控制檢查已經得到了廣泛的應用，但...
資料中心IT技術的五大發展趨勢
種種跡象表明，2016年將是資料中心it技術面臨許多挑戰的一年。資料中心將引進顛覆性技術，計算能力將繼續呈指數增長，而企業將需要迅速響應快速變化的需求，與此同時，還要求資源和高效率保持不變。而面對這些挑戰，可以 資料中心的it技術將在2016年出現這些變化 1 物聯網技術 通過將智慧型技術應用到資料...