除了抓取遵从robots.txt
区别还在于,尽量不存储和展示内容网站的内容。
结果要显示来源,要引导用户回原始网页。

标签: none

添加新评论