关于爬虫自动更新文章的一点小心得

爱你城是公司几个项目里，最先用上的爬虫自动更新的，根据这七天爬虫自动更新文章的实验，我个人总结了一点不成熟的小心得分享给大家，毕竟每个网站都不一样，具体情况还是要自己再具体的去分析把握。

内容如下：

1.爬虫更新的文章，最好有主要图，与我们往常手动编辑的格式基本一致。

2.将爬虫自动更新文章的时间打乱，不要在同一分钟发表多少篇，设置一个时间段，有间隔的发布。

3.爬虫自动更新的文章不要大面积的铺到首页，首页还是放当下互联网热门搜索的内容。

4.把内容的数量交给爬虫，把质量交给自己，让爬虫保证网站的更新量，自己可以根据热门内容更新一点纯原创的文章放在首页吸引用户。

5.让爬虫有规律的更新，文章数量稳步增长。

6.使用熊掌号的api提交，这样提交和收录的比差不多是1：10，即五百篇收录大概五十篇左右的样子。