信息中心
James R Giles：駕馭大數據,探究新機會
IBM 2013技術峰會（IBM Tech Summit 2013）IBM于2013年7月11日-12日在京舉行。大會以“見智，見未來”為主題，集前沿信息技術、前端理念于一體，吸引數千技術人和行業專家參會，聚焦移動應用、大數據、云計算、DevOps軟件持續交付、應用整合、社交商務、專家集成系統等炙手可熱的趨勢主題，是目前IBM在國內舉行的規模最大、涉獵領域最廣泛、參加人數最多的高端技術盛會。本次大會的演講嘉賓陣容強大，被譽為“大數據時代的預言家”的《大數據時代》作者維克托？邁爾—舍恩伯格博士現身現場，以及數十位來自IBM的院士、杰出工程師、相關領域的全球首席技術官和首席架構師。這些技術領袖和科學家將與IBM在國內外眾多企業用戶和行業專家一起為現場的技術達人們帶來一系列的精彩分享：包括上百場技術主題演講、28場分論壇、22場動手實驗室和80個未來產品的現場演示。
IBM杰出工程師、InfoSphere Stream高級開發經理James R Giles在主題演講中表示，IBM意識到大數據是一個非常關鍵的領域，就像過去很多重要的年代一樣，主機時代、大型機時代、WebSphere，現在是一個新紀元，就是大數據紀元。
以下是演講節選：
James Giles：移動、社交、感應器、互聯網等等，之前我們已經聽說到數據急劇增加，我們也聽說到數據的重要性，對于企業、對于未來來說非常重要。我們看待大數據的一種方式，數據本身是下一種的自然資源，我們自然資源有什么用呢？第一，可以開掘它、轉變它、銷售它，有的時候甚至要保護它，就像自然資源一樣，我們也需要做同樣的事情來對待大數據。對于大數據來說非常有趣的是，它不是有限的，而是無限的，數據會不斷增加，越來越多。現在我們是淹沒在數據中，我們怎么樣才能夠將我們獲得洞察的需求和獲得價值平衡起來，和大的數據量平和起來。
IBM意識到大數據是一個非常關鍵的領域，就像過去很多重要的年代一樣，主機時代、大型機時代、WebSphere，現在是一個新紀元，就是大數據紀元。剛才談了自然資源，談到大數據就像自然資源一樣，也談到現在數據的規模，IBM現在正在建立一個完整的、一整套的能夠解決這個挑戰的解決方案，既有系統，也有基礎架構、服務、云以及中間件，也有數據倉庫技術的拓展，另外我們也有一些新的像Hadoop技術，以及出現的一些新技術，像流計算等等。我們怎么樣對這些大量數據進行處理呢？我們有分析功能，這些都是我們可以從數據當中發掘價值的一種方式。
我們在和客戶合作的時候意識到一點，數據是有各種類型的，有些數據可能是移動數據，有些數據是靜態數據，數據有各種各樣類型，有結構性、非結構性數據，我們就需要有不同的方式來處理這些數據。有的時候我們可能需要對這個數據進行即時的反饋，我們需要快速對于客戶的反饋進行回應，有些數據可能是靜態的數據，我們不用擔心它的結構和管理的問題，因為這些數據只是一種靜態的數據。但有的時候我們可能需要各種形態的數據，需要使得數據隨時可以獲得。有了這樣一些功能的時候，人們現在開始越來越依賴的一件事情是，要能夠去管理這些數據，能夠理解，能夠從不同的數據源，不同類型的分析中去理解，我們怎么樣得出結論，怎么樣做出決策，所以管理、安全、商業的持續性都是這些企業現在所需要的，他們需要擁抱新的大數據時代。
下面談幾個客戶案例，我們有一個美國的客戶叫Constant Contact這個客戶主要是幫助客戶進行電子郵件的營銷。因為你發郵件的時間非常重要，如果你發郵件別人接到的時候正好是回家的時候，他就不會看這個郵件。這家公司就是幫助客戶確定對于每一個個人在發郵件最佳的時刻是什么，而且不僅僅是讀郵件，而且是能夠回應你這個郵件的時間是什么。它就找IBM，跟我們進行合作，我們幫助他們進行分析性能的提高，提高了40分。他們需要去分析客戶的電子郵件的分析，這樣就知道每一個客戶最佳的發送時間是什么，我們得做幾件事情，把分析性能提高了，分析時間從幾個小時縮減為幾秒鐘。另外，因為他們能夠更多地分析這個數據，更加深刻地分析這些數據，他們就可以更好地對于每一個客戶進行優化，所以很多客戶電子郵件營銷活動有效性就提高了15-25%，這也很快變成了一些底線的收入，這是一個非常好的例子，說明使用大數據技術能夠使得你更好地了解你的客戶，更好地和客戶進行互動。
之前我也說過BigInsight，這是基于Hadoop企業級的解決方案，它是一個大型的MapReduce編程工具，這里可以看到所有Hadoop元素，我們可以做很多重要的事情，使得企業更好地利用大數據，我們有GPFS文件系統，有高級的分析方法，還有更加容易管理數據的工具，這些都是在BigInsight里面，這些都是IBM可以帶給我們客戶的。
再舉一個例子，這是亞太地區的一個企業，是一家遠程通訊公司，這家公司需要一些具體的細節的數據，而且數據的數量在急劇增加，他們使用傳統技術的時候，他們把數據輸入到數據倉庫的時候進行處理，然后獲得結果，但是他們卻沒有辦法在大數據時代進行傳統的操作，所以IBM公司幫助他們和我們的數據倉庫結合起來，給他們做流計算，同時在數據的收集和數據的轉換過程中急劇加速了數據的處理。他們發現結果是數據合并的時間縮短了91%，數據加載時間縮短了92%，獲得結果的時間從12個小時降低到1秒鐘。帶來其它的利益，不僅僅從IT基礎架構方面幫助了他們，由于把12個小時變成了1秒鐘，所以他們現在可以提供一些實時的服務。除此之外他們還看到存儲需求降低了93%，他們使用服務器的數量減少了85%，所以這確實是非常偉大的節約。
下面談一下流計算，流計算是一種新的IBM所創造出的技術，來幫助我們能夠做到這一點。把它和我們的數據倉庫結合起來，是一種智能的方式，讓我們獲得更好的結果。所以我們有InfoSphere Streams產品，它會在一個集群的環境中做很多事情，可以過濾、分析數據，可以對數據進行采樣，都是實時進行的。另外還有一點非常重要的，在有很多類型數據源的時候，可能需要把它們放在上下文的環境中，比如分析你的電子郵件，CLM的、網絡的數據來源，你需要它變成一種可以理解的數據，所以我們現在是可以將這些數據源結合起來，然后幫助我們的客戶更好地理解這些數據。因此，我們在IBM發現了五種高價值的大數據的用戶案例，一是大數據用來探究查找可視化和了解所有的大數據，提升業務知識。二是實現增強型客戶視圖。三是安全性、智能的擴展、運營的分析、數據倉庫的擴充等等，今天待會兒我會邀請大家去分會場了解大數據的用例，大數據是一個征程，希望大家從新的自然資源中獲利，IBM在這里是幫助大家的，我們有很多資源，你們今天會了解到很多資源，我們有BigData大學等等，還有一些書籍和培訓會等等，我們會幫助大家走上這個征程。謝謝大家。
集成系統網絡情報信息數據庫
CIO頻道人物視窗
CIO頻道方案案例庫
大數據建設方案案例庫
電子政務建設方案案例庫
互聯集成系統構建方案案例庫
商務智能建設方案案例庫
系統集成類軟件信息研發企業名錄