QingSearch spider
1. QingSearch spider User-Agent字段是什么?QingSearch spider(+https://qingsearch.com/doc/spider.html)
2. QingSearch spider 访问我的网站过快怎么办?
QingSearch spider对于同一个 IP 地址的服务器主机,只建立一个连接,抓取间隔速度控制在几秒一次。
一个网页被收录后,最快也要过几周以后才会去更新。
如果持续不断地抓取您的网站,请注意您的网站上的网页是否每次访问都产生新的链接。
如果您认为 QingSearch spider 对于您的网站抓取过快,请与我们联系,最好能提供访问日志中 QingSearch spider 访问的部分。
3. QingSearch spider 喜欢收录什么样的页面?
内容优良而独特的页面,如果您的页面内容和互联网上已存在的其他页面有高度的相似性,可能不会被 QingSearch spider 收录
链接层次较浅的页面,过深的链接层次,尤其是动态网页的链接,会被丢弃而不收录
如果是动态网页,请控制一下参数的数量和URL的长度
QingSearch spider更偏好收录静态网页
重定向次数越多的页面,越有可能被 QingSearch spider 丢弃
域名长度超过20个字符的页面会被QingSearch spider丢弃
4. QingSearch spider 如何反应我网站上页面的更新?
QingSearch spider 会根据网页的重要性和历史变化情况来动态调整更新时间,更新已经抓取过的页面
5. QingSearch spider 会封锁那些网站?
作弊网站
内容低劣的网站
违反国家政策和法律的网站
网站标题、描述、内页含有敏感词的网站
6. 如何让 QingSearch spider 解除对我网站的封锁?
在您的网站的问题改正之后,
发送邮件至:support@qianyuthink.com,进行申请解除封锁。