■劉晴

梭子魚Web應(yīng)用防火墻助力網(wǎng)站數(shù)據(jù)采集管理

■劉晴

網(wǎng)站數(shù)據(jù)持續(xù)地被腳本、bots病毒和其它一些自動執(zhí)行的程序采集，這有時候是件好事，有時候卻并非如此，通常介于兩者之間。

對不熟悉的人來說，采集就是從網(wǎng)站復(fù)制或提取信息，那些提供比價購物服務(wù)以及數(shù)據(jù)監(jiān)控的應(yīng)用往往需要通過信息的抓取來實現(xiàn)。這通常被認為是合法的采集，遵守了內(nèi)容提供商的服務(wù)條款。而惡意的采集形式是在未經(jīng)許可的情況下把一個網(wǎng)站上的內(nèi)容轉(zhuǎn)發(fā)到另外一個網(wǎng)站，完全不考慮版權(quán)和服務(wù)條款。

梭子魚Web應(yīng)用防火墻可以幫助您管理對您網(wǎng)站數(shù)據(jù)的采集行為，保護服務(wù)器、應(yīng)用和數(shù)據(jù)不受Web以及其他攻擊的威脅。主要功能有以下幾點：

啟發(fā)式指紋和IP信譽：可以根據(jù)IP地址的歸屬地以及梭子魚IP信譽庫的查詢結(jié)果來限制訪問的IP。然后管理員可以設(shè)定對這些受限制的IP的訪問策略，比如直接阻斷來自梭子魚黑名單的連接，也可以限制嘗試訪問的次數(shù)，或者通過要求輸入驗證碼來驗證疑似鏈接的身份。

拒絕指定用戶客戶端的訪問。如果一個信息采集者以及它的客戶端信息已經(jīng)被甄別，那么就可以設(shè)定梭子魚WEB應(yīng)用網(wǎng)關(guān)拒絕來自此類連接的流量。

防止強制瀏覽：強制瀏覽即試圖訪問網(wǎng)站上未鏈接的內(nèi)容。比如，公司網(wǎng)站有一些頁面只有員工可以訪問，訪問這些頁面需要在瀏覽器的地址欄直接輸入URL。強制瀏覽發(fā)現(xiàn)這些網(wǎng)頁并搜索一些有價值的內(nèi)容或其它數(shù)據(jù)，從而導(dǎo)致信息的泄露。

利用這些主要功能，您可以基于各種策略來保護網(wǎng)站的數(shù)據(jù)。通過部署梭子魚Web應(yīng)用防火墻，您可以禁止未授權(quán)的數(shù)據(jù)被采集，同時也可以只允許采集有鏈接的資源。