Scrapy - 用 Python 寫的 Web Crawler (網站爬蟲) 框架 - Python - bestlong 怕失憶論壇

bestlong 怕失憶論壇 › 論壇 › Python › Scrapy - 用 Python 寫的 Web Crawler (網站爬蟲) 框架 ...

查看: 7765\|回復: 0	go Scrapy - 用 Python 寫的 Web Crawler (網站爬蟲) 框架 [複製鏈接]

Rank: 9 Rank: 9 Rank: 9

1^#

發表於 2010-9-21 16:08 |只看該作者 |倒序瀏覽 |打印

Scrapy 是一個快速的高級別屏幕抓取和網頁抓取框架，用來抓取網站的結構化數據和提取自己的網頁。可用於範圍廣泛的用途，從數據挖掘技術監測和自動化測試。

下圖為 Scrapy 的架構概念圖，其中綠線表達資料在各個元件的流動方向

我是雪龍
http://blog.bestlong.idv.tw
http://www.bestlong.idv.tw

回復引用

GMT+8, 2025-5-2 03:11 , Processed in 0.014734 second(s), 12 queries .

Powered by Discuz! X1.5

Scrapy - 用 Python 寫的 Web Crawler (網站爬蟲) 框架 [複製鏈接]