对于爬虫技术的争议一直存在，请就规范爬虫技术提出你的建议。