什麼是爬蟲技術 什麼是網路爬蟲

來源:時尚少女範 1.06W
什麼是爬蟲技術 什麼是網路爬蟲

1、爬蟲技術即網路爬蟲(又稱為網頁蜘蛛,網路機器人,在FOAF社群中間,更經常的稱為網頁追逐者),是一種按照一定的規則,自動地抓取全球資訊網資訊的程式或者指令碼。另外一些不常使用的名字還有螞蟻、自動索引、模擬程式或者蠕蟲。

2、網路爬蟲按照系統結構和實現技術,大致可以分為以下幾種型別:通用網路爬蟲(GeneralPurposeWebCrawler)、聚焦網路爬蟲(FocusedWebCrawler)、增量式網路爬蟲(IncrementalWebCrawler)、深層網路爬蟲(DeepWebCrawler)。實際的網路爬蟲系統通常是幾種爬蟲技術相結合實現的。

熱門標籤