在构建完整的新闻网站系统中，通过高效的自动化数据抓取技术和全面的内容管理系统架构，能使网站具备实时更新和管理的功能，成为多功能新闻信息平台。 本项目综合应用了Scrapy和Gerapy技术，构建分布式爬虫系统，结合Django框架实现前后