
隨著互聯網技術的不斷發展和Web 2.0 技術的廣泛推廣使用,社交網絡、Blog、Wiki、Twitter、Webmail、免費空間等的出現,不僅給人們帶來了生活方式、生產方式上很多的便捷與好處,也促使著URL過濾技術的進化。URL過濾不僅有利于保障企業的生產效率,防止網絡沉迷與濫用,而且是網絡安全架構的一個重要組成部分。傳統的URL 過濾技術再也無法跟上當今web互聯網數據的龐大規模、復雜性以及急速的增長速度。Anchiva的數據云URL過濾技術應需而生,面臨日益多樣化的web數據不僅最大程度的滿足了實時分類的需求,而且真正做到了與語言、文化、地域無關,只與具體用戶實際使用請求相關的URL過濾,將用戶的需求和利益放在第一位,同時每一個用戶也不是完全孤立的,通過云數據中心有效的結合在一起,共享互動成果,符合人類文明的進步,符合時代的進步。
當今,互聯網給我們帶來了生活方式、生產方式上很多的便利與快捷。龐大的網絡信息資源,使人們通過瀏覽器就能便捷的獲取到生活或生產過程中所需要的信息。但是,過分或不適當的網絡資源訪問不僅給企業帶來了生產力和網絡帶寬的損失,還嚴重威脅著企業的網絡安全架構和信息系統,甚至網絡上的不適當或非法內容還極大危害著企業員工個人的身心健康甚至給企業帶來法律問題。
面臨以上種種問題,該如何解決?全部關閉網絡的大門不符合現代人類文明的發展與進步,也不利于合理商業業務的開展。單純依靠使用者自我約束的網絡使用制度也已經無法執行。于是,誕生了專門針對URL進行過濾的技術,以此達到對員工上網瀏覽內容的控制與管理。
20世紀90年代中期,URL過濾解決方案依靠企業內部IT人員人工建立、更新與編輯站點黑白名單。這一做法的缺點是,所有分類由一個或少數幾個人自由決定,對于這種資源密集型而且缺乏客觀性的站點分類方法,不僅會使許多被認可的網站被封鎖或被禁止的網站允許通過,而且隨著web站點的快速增長與相關技術的日益復雜,這種方案很難實現客觀、細粒度的URL分類,顯然不能成為企業或單位有效的URL過濾方案。
20世紀90年代末,出現了專門對URL進行收集、分類的廠商。URL過濾技術開始采用本地數據庫分類引擎。URL及其內容在根據預先定義的類別下通過分類引擎進行相應的關鍵字查找分析與分類(如賭博、色情及網上購物等),分類好的URL存儲在一個集中的主數據庫中,然后通過更新復制一份副本移交到客戶本地數據庫中。這種URL過濾方案的缺點是,隨著網頁數量的激增,由于一刀切的關鍵字分類技術和本地分類數據庫的限制,無法實現更高、更準確的覆蓋率和更廣泛的URL分類。
2000年初,URL過濾解決方案試圖采用啟發式內容分析的方法,這種動態的分類技術,通過智能分析網站標題和網頁html主體中相關內容的概率來確定URL類別。從理論上講,相比前兩類URL分類方案,這是一種很好的分類方法,然而在實際中它本身卻存在問題,很多基于啟發式的Web內容分析結果沒有相關的配套技術實時地發送給終端用戶,而且采用的仍然是傳統的本地數據庫進行存儲。但是當今web2.0時代,web數據是一個不定數據且日益多樣化的集合體,而每個用戶的需求卻獨特且具體,基于本地URL數據庫的過濾技術,只能過濾存儲本地用戶需要的數據,不能存儲所有相關及最新數據,以執行快速和準確的監測,因此這種傳統的URL過濾技術也無法應對高度復雜且快速發展壯大的web2.0網絡。
據Google調查,互聯網上的網頁數量以每天一億的數量急速增長。以上三種URL 分類方法已經不能夠準確有效的收集、分類所有的URL類別。數據存儲和處理要求也已經遠遠超出了本地數據庫能力。于是在2009年,業界出現了數據云的URL過濾技術,這類廠商有Commtouch、Anchiva等。這種數據云URL過濾機制,基于云技術的URL收集、分類處理及發放策略,并不依賴于本地數據庫有限的資源進行分析與檢測,也不依賴于數據庫更新最新的URL分類,利用的是專門的分類服務器群,根據實際網絡的使用與普及方式對網頁內容及語義進行全面分析后的分類。與傳統的云不同的是,真正做到了云的客戶端自動主動地去云的服務器端獲取所需的數據,而不是單純的基于云服務端的定時推送更新方法。下面我們將借助Anchiva的數據云URL過濾機制對數據云URL過濾技術進行簡單的介紹。
Anchiva(安啟華)數據云的URL分析過濾技術由兩部分組成:部署在企業網絡邊界處的Anchiva web安全網關(SWG)和Anchiva基于云的URL分類中心。網關設備和URL分類中心實時通信獲取最新的URL分類。不僅打破了傳統本地數據庫的限制,而且與其他基于云的技術不同的是Anchiva web安全網關中具有URL緩存技術,這個本地的緩存為每一個獨立的用戶存儲最為相關的URL,這些設備本地的URL類別,有效地確保了URL匹配的最佳性能,并且采用的是一種本地緩存自動學習的機制,隨著企業用戶使用時間的增長,這個本地緩存的URL庫會更加的貼近每一個用戶的實際需求,將能給客戶更加精準的URL過濾。
CIO頻道人物視窗
CIO頻道方案案例庫
大數據建設方案案例庫
電子政務建設方案案例庫
互聯集成系統構建方案案例庫
商務智能建設方案案例庫
系統集成類軟件信息研發企業名錄