|
在當今日益復雜的市場環(huán)境中,競爭逐漸演變成為一場規(guī)模空前、永無休止的數(shù)據(jù)大戰(zhàn)。激烈的市場競爭要求企業(yè)和機構(gòu)必須不斷根據(jù)可用的信息進行快速、準確以及更深入地理解與分析,以便做出正確的決策,從而贏得更有價值和利潤的市場與客戶。然而,數(shù)據(jù)規(guī)模的不斷膨脹和數(shù)據(jù)產(chǎn)生速度的空前增長,給公司和機構(gòu)帶來了與日俱增的壓力,尤其是在更大存儲空間以及更快速、更深入、更全面地分析數(shù)據(jù)方面。
事實上,面對呈指數(shù)級別增長的信息數(shù)量和速度,傳統(tǒng)的數(shù)據(jù)存儲和分析技術(shù)顯然已經(jīng)力不從心——因為為操作型(而不是分析型)應用設計的運行環(huán)境一直無法滿足數(shù)據(jù)存儲與分析的諸多要求,比如大數(shù)據(jù)集、大量并發(fā)用戶、復雜查詢和即席查詢等等。然而,Sybase專門為數(shù)據(jù)倉庫系統(tǒng)設計的一種存儲和管理的列式數(shù)據(jù)庫——Sybase IQ完全能夠滿足企業(yè)的以上需求,它目前已經(jīng)成為那些需要分析而獲得成功的企業(yè)的首選智能方法。
Sybase IQ簡介
Sybase IQ是世界領先的、基于列的分析服務器,它包含了許多特殊的技術(shù)以專門滿足數(shù)據(jù)倉庫應用的諸多需求,如:數(shù)據(jù)的快速加載、靈活高效的查詢和訪問、無限的并發(fā)用戶支持、高效的存儲和數(shù)據(jù)壓縮等等。
Sybase IQ是唯一能夠基于企業(yè)的全部信息,按照任意條件,面向所有用戶,提供更快速、更準確分析的分析服務器。憑借基于列的核心架構(gòu)和創(chuàng)新功能,Sybase IQ從多個層面提供了靈活性和可擴展性,能夠為最大的數(shù)據(jù)集、最為復雜的分析任務以及快速增長的BI用戶群,提供非凡的查詢性能。
作為一款高度優(yōu)化的分析型服務器,Sybase IQ不僅可以實現(xiàn)出色的數(shù)據(jù)壓縮,還擁有良好的查詢性能和閃電般的加載速度。憑借Sybase IQ獨特的壓縮能力,全球最大的數(shù)據(jù)倉庫僅用160TB的存儲空間即可成功存儲1PB的原始數(shù)據(jù),其中包括電子郵件、文檔、多媒體資源等非結(jié)構(gòu)化數(shù)據(jù),創(chuàng)造了全球最大的數(shù)據(jù)倉庫吉尼斯世界紀錄。
Sybase IQ將卓越的速度和靈活性與低總體擁有成本結(jié)合在一起,讓企業(yè)能夠?qū)崿F(xiàn)以前無法實現(xiàn)、難以實現(xiàn)或成本昂貴的關鍵業(yè)務分析和報表功能。
Sybase IQ不僅具備以上快速查詢、高度可擴展性與靈活性、節(jié)約存儲成本/數(shù)據(jù)壓縮、降低維護成本、加快部署等系列優(yōu)勢,最新版本Sybase IQ 15.2還具備全文檢索、聯(lián)合查詢、Web分析及實時加載四大功能,同時Sybase IQ 15.2也是業(yè)界第一個以列式分析方式提供全文檢索和聯(lián)合查詢的數(shù)據(jù)庫;另外,Sybase IQ還在非集群Linux®和x86系統(tǒng)中,創(chuàng)造了1 TB級別2 TPC-H™基準的最佳數(shù)據(jù)倉庫性能。
除了以上系列優(yōu)勢,針對最具挑戰(zhàn)性的高級分析環(huán)境,Sybase IQ還擁有著性能卓越的五大選項,能夠幫助企業(yè)提升高級分析環(huán)境的性能與功能,實現(xiàn)數(shù)據(jù)資產(chǎn)價值最大化。這五大選項分別為:數(shù)據(jù)庫內(nèi)分析選項,多路并發(fā)網(wǎng)格選項,大對象管理選項,超大規(guī)模數(shù)據(jù)庫選項以及高級安全選項。
Sybase IQ五大選項之一——“數(shù)據(jù)庫內(nèi)分析”,提升高級分析環(huán)境性能與功能
在目前高度競爭的市場環(huán)境下,為了能夠成功實現(xiàn)如投資管理、贏得客戶與保持客戶、擴大市場份額、增加利潤等業(yè)務目標,就需要企業(yè)能夠盡可能快速與精確的進行數(shù)據(jù)分析,而有效地預測與分析則要求企業(yè)必須擁有快速與洞徹處理大量數(shù)據(jù)的能力。
傳統(tǒng)分析方法無法滿足新需求
對于傳統(tǒng)的分析方法來說,如何在大數(shù)據(jù)量、吞吐量與準確性之間維持平衡一直都是巨大的挑戰(zhàn)。而當數(shù)據(jù)量、準確性、處理時間全部成為成功的關鍵因素時,傳統(tǒng)的分析方法總是只能“滿足其二(或其一)”。原因之一就是傳統(tǒng)的方法在進行數(shù)據(jù)分析時要求將數(shù)據(jù)從數(shù)據(jù)庫中移出然后再進行分析,這種數(shù)據(jù)移動占用了整個分析進程75%以上的時間,對所提交業(yè)務所需的結(jié)果帶來了嚴重的限制。
Sybase IQ數(shù)據(jù)庫內(nèi)分析功能從根本上重建分析,提升業(yè)務性能與可擴展性
Sybase IQ新增了數(shù)據(jù)庫內(nèi)分析功能,這一功能使其能夠提供一個同時實現(xiàn)所有三個目標的分析平臺。對于業(yè)務來說,這不僅意味著企業(yè)可以對未來業(yè)務風險與機會進行更好的預測、同時能夠在基于更即時的結(jié)果的前提下做出更明智的決策,還意味著能夠更及時的捕捉趨勢與異常,使運營決策更有效、更經(jīng)濟。
數(shù)據(jù)庫內(nèi)分析可以立即提升業(yè)務性能與可擴展性。通過使用該機制,數(shù)據(jù)在結(jié)果被過濾和處理之前不會離開數(shù)據(jù)庫,也就是說,數(shù)據(jù)分析在數(shù)據(jù)庫內(nèi)可以即時完成,這就大大節(jié)省了數(shù)據(jù)移動所占用的大量的時間;同時通過將數(shù)據(jù)保持在數(shù)據(jù)庫內(nèi),還大大提高了數(shù)據(jù)安全的級別。更進一步的好處還在于分析代碼與模型在整個企業(yè)中共享,允許即席分析,并且可以應用于最當下的數(shù)據(jù)集。
Sybase IQ可以通過三種方式實現(xiàn)數(shù)據(jù)庫內(nèi)分析:
第一種方式,提供豐富的內(nèi)建數(shù)學與分析函數(shù)的庫,包括數(shù)據(jù)轉(zhuǎn)換,它們駐留于Sybase IQ內(nèi),即時可用,這極大地擴展了Sybase IQ數(shù)據(jù)庫內(nèi)分析的能力。這些分析函數(shù)可基于標準進行訪問,只要熟悉SQL,即可對數(shù)據(jù)庫內(nèi)邏輯進行擴展;
第二種方式,內(nèi)建的ANSISQL擴展允許對大數(shù)據(jù)集進行聚合分析,為諸如相關與協(xié)方差的計算快速生成結(jié)果;
第三種方式,其產(chǎn)品經(jīng)過Sybase IQ數(shù)據(jù)庫內(nèi)分析功能認證的統(tǒng)計與數(shù)據(jù)挖掘軟件合作伙伴所提供的新的可插拔的分析算法庫,將全面的統(tǒng)計和預測分析能力帶入Sybase IQ。比如通過內(nèi)嵌的經(jīng)過認證的Fuzzy Logix的據(jù)庫內(nèi)分析的庫DB Lytix,提供了豐富的函數(shù),從描述性統(tǒng)計到高度復雜的Monte Carlo仿真以及模式識別。這些函數(shù)支持大量的業(yè)務應用,包括:
- 電信—客戶流失分析與價格優(yōu)化
- 保險—暴露評估,保險理賠與客戶保持
- 銀行—投資組合分析,風險管理與客戶保持
- 醫(yī)療衛(wèi)生與生命科學—預防保健與藥物試驗分析
市場營銷—活動分析與方案評級
這些用例均可進行審核,而且可被快速部署到生產(chǎn)環(huán)境中。另外,這些庫可為特定的應用場景快速提供額外的分析解決方案。
Sybase IQ五大選項之二——多路并發(fā)網(wǎng)格選項,實現(xiàn)分析環(huán)境新級別的可擴展性、功能與性能
Sybase IQ Multiplex是一個高度可擴展的共享磁盤多路并發(fā)網(wǎng)格技術(shù),這項技術(shù)允許基于獨立的數(shù)據(jù)處理節(jié)點的并行數(shù)據(jù)加載和查詢。事實上,因為擁有著其他方法無與倫比的巨大優(yōu)勢,Sybase IQ Multiplex已經(jīng)成為部署強大功能和高性能報表或分析環(huán)境的首選技術(shù),它的優(yōu)勢包括:
可擴展性:利用Sybase IQ Multiplex技術(shù),企業(yè)可以隨著分析環(huán)境的擴張而不斷增加所需的節(jié)點。也就是說,可以不斷擴展Sybase IQ環(huán)境以支持數(shù)以萬計的用戶和并發(fā)的混合負載任務,而無需擔心數(shù)據(jù)加載速度減慢或查詢性能變差。
靈活性:利用Sybase IQ Multiplex技術(shù),企業(yè)可以使用一個友好的圖形化用戶管理界面或命令行接口快速輕松地配置Sybase IQ Multiplex環(huán)境。
高可用性:利用Sybase IQ Multiplex技術(shù),任何節(jié)點發(fā)生故障都不會影響到其他節(jié)點的查詢?nèi)蝿铡R驗檫@一技術(shù)可以輕松地監(jiān)控、檢測并管理發(fā)生故障的任一節(jié)點,并可將失敗的任務轉(zhuǎn)移到其他節(jié)點。
Sybase IQ Multiplex支持每CPU多個用戶,該架構(gòu)允許服務器的增加獨立于存儲容量的增加。即服務器相對于CPUs的數(shù)量可以是異構(gòu)的,不同的服務器可以包含不同數(shù)量的CPU。通過利用這一選項,還可以通過動態(tài)設定讀、寫節(jié)點提升環(huán)境的靈活性和功能。
圖1:利用Sybase IQ Multiplex技術(shù),可以根據(jù)需要從一個服務器開始增加CPU和內(nèi)存或增加服務器和CPU,不影響(或者幾乎不影響)可擴展性。也可以將TB級的硬盤增加到SAN,對性能也沒有明顯的影響。
經(jīng)濟性:Sybase IQ Multiplex允許使用適合企業(yè)的資源部署一個強大的報表或分析解決方案,包括低成本的硬件和操作系統(tǒng)。從而,企業(yè)無須購買另外的、第三方的“集群”軟件。
Sybase IQ Multiplex支持混合集群架構(gòu),它為永久的Sybase IQ數(shù)據(jù)使用共享存儲,為目錄元數(shù)據(jù)、臨時數(shù)據(jù)和事務日志使用獨立的節(jié)點存儲。該架構(gòu)允許使用多個節(jié)點管理大量的工作負荷。使用Sybase IQ Multiplex,可以通過多個寫節(jié)點加載數(shù)據(jù),并允許共享的數(shù)據(jù)庫目標被一個用戶寫入的同時,可以被多個用戶查詢。
更強大更靈活:Sybase IQ多路并發(fā)網(wǎng)格選項使企業(yè)可以逐步擴展并行查詢?nèi)蝿?、加載任務或者同時擴展這兩個任務。該選項允許企業(yè)在多個服務器中指定Sybase IQ服務器作為讀節(jié)點或?qū)懝?jié)點,這些服務器通過高速互聯(lián)的方式連接到一個共享磁盤陣列。指定讀節(jié)點或?qū)懝?jié)點的功能使企業(yè)可以靈活的按照需要擴展分析環(huán)境。
該選項為企業(yè)的分析環(huán)境提供了線性增長的擴展性。而且當企業(yè)使用低成本的服務器進行部署時,企業(yè)僅需付出相當于大型對稱多處理器(SMP)的很小一部分成本,卻能在性能和擴展性上獲得巨大的價值。同時,這種可擴展性也不會帶來很高的管理成本。
Sybase IQ五大選項之三——大對象管理選項,實現(xiàn)非結(jié)構(gòu)化數(shù)據(jù)的存儲、檢索與分析
不論是處理事務、生成報表或者驅(qū)動高性能的分析應用,企業(yè)的數(shù)據(jù)管理系統(tǒng)都需要執(zhí)行廣泛的功能以保證企業(yè)平穩(wěn)運行。但是,另人驚訝的是,即使是在提供了最高級別的性能的數(shù)據(jù)管理系統(tǒng)下,也有很大一部分企業(yè)數(shù)據(jù)是從未被接觸到的。事實上,沒有被接觸的數(shù)據(jù)可能高達80%。而這些數(shù)據(jù)就是非關系型或者非結(jié)構(gòu)化的數(shù)據(jù)——常常是膨脹速度非??旆浅S袃r值的事務關鍵型信息。它們以不同的格式如電子郵件、媒體文件以及各種文檔類型可能存儲在文件系統(tǒng)中或者數(shù)據(jù)庫之外的其他地方,使得基于標準的數(shù)據(jù)管理解決方案根本無法訪問或難于訪問。
面對這80%極有價值的信息,Sybase IQ 的大對象(LOB)管理選項提供了一種存儲與檢索非結(jié)構(gòu)化數(shù)據(jù)對象的方法,該方法將關系型和非結(jié)構(gòu)化數(shù)據(jù)在單一的空間中進行管理,使企業(yè)可以使用相同的應用和界面訪問兩種類型的數(shù)據(jù)。另外,Sybase IQ還可以按照需要獨立的管理包含TB級甚至PB級的LOBs,這些都是業(yè)務分析領域的重大進步(LOB數(shù)據(jù)包括圖片、地圖、文檔(文本文件、Word文件、PPT文件等)、聲音、視頻以及XML文檔等)。
- 能夠從兩種類型數(shù)據(jù)的聯(lián)合中獲益的應用例子將包括:
- 電子郵件歸檔以遵循合規(guī)性
- 法律數(shù)據(jù)保護以遵循合規(guī)性
- 多媒體數(shù)據(jù)銀行
- 擁有360度客戶視角的CRM系統(tǒng)
- 保險理賠處理
當使用Sybase IQ管理結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的時候,數(shù)據(jù)庫管理員發(fā)現(xiàn)他們可以全面控制應用所使用的數(shù)據(jù),而不僅僅是結(jié)構(gòu)化數(shù)據(jù)。這不僅消除了那些“管理文件系統(tǒng)中的非結(jié)構(gòu)化數(shù)據(jù)”的系統(tǒng)管理員對數(shù)據(jù)流動的復雜安排,同時還消除了文件系統(tǒng)發(fā)生故障或停機時文件不可訪問的風險。事實上,集中式的數(shù)據(jù)訪問意味著一個更穩(wěn)固和更安全的系統(tǒng),Sybase IQ LOB管理選項為管理非結(jié)構(gòu)化數(shù)據(jù)提供了一個全面而強大的企業(yè)級DBMS功能。
飛速加載、檢索、搜索與查詢
眾所周知,傳統(tǒng)的文件系統(tǒng)在處理大量的排序文件時效率低下,而Sybase IQ支持并行和批量數(shù)據(jù)加載,通過降低磁盤I/O提升LOBs加載速度,這種數(shù)據(jù)加載方法比加載到傳統(tǒng)文件系統(tǒng)速度快得多。將Sybase IQ獨特的數(shù)據(jù)壓縮技術(shù)應用到LOB對象,尤其是文本數(shù)據(jù),企業(yè)還會得到比文件系統(tǒng)更加高效的數(shù)據(jù)存儲。同時,數(shù)據(jù)壓縮也使得非結(jié)構(gòu)化LOB數(shù)據(jù)的檢索速度顯著提高。
Sybase IQ五大選項之四——超大規(guī)模數(shù)據(jù)庫管理選項,最大化不斷增長的數(shù)據(jù)資產(chǎn)價值
與日俱增、飛速增長的數(shù)據(jù)量對企業(yè)管理超大規(guī)模數(shù)據(jù)庫的能力提出挑戰(zhàn),Sybase IQ超大規(guī)模數(shù)據(jù)庫管理(VLDB)選項允許以值的范圍對數(shù)據(jù)進行邏輯分區(qū),從而提升超大規(guī)模數(shù)據(jù)集的可管理性。該選項也允許通過定義一個與特定查詢集相關的可管理的子集來進行范圍分區(qū),從而在更大的粒度上管理分析環(huán)境中的數(shù)據(jù)。同時,該選項還可以以表空間對象作為邏輯組進行數(shù)據(jù)分區(qū),以方便管理或者應對將某些數(shù)據(jù)從整個數(shù)據(jù)集中獨立出去的情況。并可以將表空間定義為只讀、讀寫、離線或在線,通過僅僅備份或恢復相關和需要的數(shù)據(jù),來縮短備份和恢復周期。
通過Sybase IQ超大規(guī)模數(shù)據(jù)庫管理(VLDB)選項的分區(qū)功能,企業(yè)可以將數(shù)據(jù)分組以滿足設定的業(yè)務和企業(yè)需求,比如信息生命周期管理政策;企業(yè)可以對數(shù)據(jù)分區(qū)進行獨立管理以達到備份和恢復的目的,還可以將不太關鍵的數(shù)據(jù)遷移到較為低廉的存儲上。
利用VLDB選項進行信息生命周期管理
Sybase VLDB選項允許企業(yè)執(zhí)行信息生命周期管理政策,并為企業(yè)帶來巨大的好處。這些好處包括:
- 降低存儲成本
- 減少用于備份的時間和資源
- 減少停機時間
- 減少損失的風險
圖1顯示了一個信息生命周期管理進程是如何工作的,使用數(shù)據(jù)分區(qū)將當前的數(shù)據(jù)與只讀數(shù)據(jù)分離出來。
圖2顯示了這樣一個進程如何使你隨著數(shù)據(jù)的增長維持加載和查詢的高性能,同時隨著數(shù)據(jù)的老化而控制存儲的成本。
Sybase IQ五大選項之五——高級安全選項,保護有價值的數(shù)據(jù)資產(chǎn)
目前,越來越多的關鍵業(yè)務系統(tǒng)運行在數(shù)據(jù)庫平臺上,數(shù)據(jù)信息的安全對企業(yè)運營來說至關重要,Sybase IQ高級安全選項為Sybase IQ環(huán)境提供了最高級別的安全性。對于靜態(tài)數(shù)據(jù),高級安全選項允許用戶基于Kerberos服務器認證進行訪問,支持FIPs 140-2認證算法,提供強大的與ASE兼容的在列、表、數(shù)據(jù)庫級上的數(shù)據(jù)加密。對于數(shù)據(jù)的傳輸,該選項提供了客戶-服務器通訊加密,并支持IPV6協(xié)議。
通過在列、表、數(shù)據(jù)庫級上的數(shù)據(jù)加密保護靜態(tài)數(shù)據(jù)
Kerberos是一種認證協(xié)議,它確保通過任何網(wǎng)絡連接在客戶端和服務器端的雙向認證。換句話說,該功能允許對Sybase IQ連接、操作系統(tǒng)以及(或者)網(wǎng)絡登錄維護一個單一的登錄ID。Kerberos證書可以用于連接到Sybase IQ,無需指定一個用戶ID口令。有了Kerberos,Sybase IQ環(huán)境可以得到保護,免于竊聽或其他惡意(或無意)的暴露或干擾。
FIPS 140-2認證意味著Sybase IQ提供了與聯(lián)邦信息處理標準140-2認可的加密技術(shù)兼容的加密手段。由FIPS 140-2支持的非確定性的加密方法能夠確保最高級別的安全,因為相同的輸入數(shù)據(jù)以給定的鍵值加密每次都會生成不同的輸出格式,然而它可以使用該鍵值進行解密。Sybase IQ高級安全選項在所有支持的平臺上都支持FIPS兼容加密。
實際上,列加密在保證了高級的安全性的同時還增加了靈活性,它允許用戶可以在單一的數(shù)據(jù)庫內(nèi)定制安全級別。該選項可加密一列或多個列的數(shù)據(jù),這使有不同數(shù)據(jù)訪問需求的多個用戶群可以使用相同的數(shù)據(jù)庫,而無需擔心敏感數(shù)據(jù)會暴露給不應該訪問該數(shù)據(jù)的用戶。Sybase IQ通過使用ENCRYPT和DECRYPT函數(shù)支持現(xiàn)行的用戶加密列,這些函數(shù)可以在應用內(nèi)調(diào)用。
提供客戶-服務器通訊加密保護數(shù)據(jù)傳輸
高級安全選項擴展了Sybase IQ對傳輸層安全(TLS)的支持。類似于安全套接層,TLS是一個位于網(wǎng)絡協(xié)議棧中TCP/IP之上的一個加密協(xié)議。Sybase IQ企業(yè)版本身就提供了對TLS免費RSA的內(nèi)在支持,高級安全選項增加了FIPS認證的RSA。
對IPV6協(xié)議的支持在增加Sybase IQ環(huán)境安全性的同時,也增加了簡便性和靈活性。IPV6更大的地址空間避免了地址空間的衰竭,消除了網(wǎng)絡地址轉(zhuǎn)換的必要。這大大簡化了網(wǎng)絡管理。更進一步,對IPV6的支持包括IPSEC,一個IPV6強制組件,它通過對數(shù)據(jù)流上的每個IP包進行認證和加密來保證互聯(lián)網(wǎng)協(xié)議通訊的安全。
對于數(shù)據(jù)傳輸,F(xiàn)IPS傳輸層通過保證客戶-服務器通訊的安全而保護企業(yè)數(shù)據(jù),另外,高級安全選項對IPV6的支持,不但增加了靈活性,也為數(shù)據(jù)傳輸提供了額外的安全保證。對于靜態(tài)數(shù)據(jù),Kerberos認證允許安全的單一登錄,列加密也增加了數(shù)據(jù)安全的靈活性和準確性。通過保護數(shù)據(jù)傳輸與靜態(tài)數(shù)據(jù),高級安全選項為Sybase IQ提供了更高級別的安全。
總結(jié)
目前,強大的列式分析型服務器Sybase IQ的系列優(yōu)勢已經(jīng)得到了業(yè)界一致的肯定——Sybase在Gartner2010年數(shù)據(jù)倉庫數(shù)據(jù)庫管理系統(tǒng)魔力象限中以位于“領導者”象限的評選結(jié)果勝出;同時,全球超過1800名客戶、3000多個項目、頂尖的行業(yè)分析師的支持、媒體的報導以及專家的文章和博客都表明著Sybase IQ正在全球廣受認可與矚目。
美國最大和發(fā)展最迅速的藥品收益管理公司之一HealthTrans的系統(tǒng)運營副總裁Duane Green曾經(jīng)高度贊賞Sybase IQ,“Sybase IQ可以讓我們和客戶將大量雜亂的數(shù)據(jù)轉(zhuǎn)換為有意義、可使用的信息,而且速度、節(jié)約成本、低維護……無可挑剔,還有什么不滿意的呢?”
今后,以上五大選項的卓越性能將使Sybase IQ如虎添翼,從而也將幫助全球企業(yè)應對最具挑戰(zhàn)性的分析環(huán)境,最大化不斷增長的數(shù)據(jù)資產(chǎn)價值,提升企業(yè)競爭力,助力企業(yè)贏占新市場及穩(wěn)固客戶。
it知識庫:五大選項讓Sybase IQ如虎添翼,轉(zhuǎn)載需保留來源!
鄭重聲明:本文版權(quán)歸原作者所有,轉(zhuǎn)載文章僅為傳播更多信息之目的,如作者信息標記有誤,請第一時間聯(lián)系我們修改或刪除,多謝。