摘要：針對微博平臺大數據的采集、挖掘、分析等熱點問題,深入介紹并分析了采集平臺的相關理論技術,通過對采集平臺功能結構及后臺數據庫設計、頁面爬取和解析、反爬蟲的應用技術設計、分布式策略設計等四個方面的技術研究,設計并實現了一種基于分布式的微博數據采集平臺;給出了主從模式系統架構;達到了用戶只需根據需要輸入待爬取微博頁面的ID,并選擇要采集的數據類型,即可獲得所需數據的目的。經測試,系統搭建成本低,爬取性能高,可運用于微博數據的輿情分析和數據調研等研究方面的基礎數據采集。