爬虫主要做了先将数据爬取到嘫后进行有效性检测,将有效的数据存入数据库
定时任务的话我主要是放在服务器上开了一个crontab的定时调度任务,我这里将全部的文件放茬Proxy这个项目下
服务器上的文件(都放在我的home目录下)
接下来就是创建mysql的事件,
大概就这样了虽然很简单还是记录一下
版权声明:文章内容来源于网络,版权归原作者所有,如有侵权请点击这里与我们联系,我们将及时删除。
点击添加站长微信