http數據抓取是幹嘛的

數據抓取，以其最一般的形式，是指一種計算機程序從另一程序生成的輸出中提取數據的技術。

數據抓取通常體現在網頁抓取中，網頁抓取是使用應用程序從網站提取有價值信息的過程。

網頁抓取分為3個步驟：

1、首先，用於提取信息的代碼段（我們稱為抓取機器人）將 HTTP GET請求發送到特定網站。

2、當網站響應的時，抓取器將解析HTML文檔以獲取特定的數據模式。

3、數據提取後，被轉換為抓取機器人設計者所設計的特定格式。