蜘蛛框架老版本

"蜘蛛框架老版本"是一款早期的轻量级Python爬虫开发框架，主要用于结构化数据采集。其核心特点包括基于线程池的并发抓取、XPath/正则表达式支持、内置去重机制及简单的数据管道功能。老版本采用经典的Scheduler-Worker架构，通过队列调度任务，支持断点续爬和基础反反爬策略（如UserAgent轮换）。但存在扩展性较差、异步支持不足等局限性，依赖较旧版本的Python 2.x环境，部分功能需手动封装。文档以中文为主，社区维护较弱，后期逐渐被Scrapy等现代化框架替代，适合小规模定向采集需求。