数据爬取作为数据采集的一种高效实现形式，能够在深度和广度上覆盖互联网中大部分的网页链接和内容数据，确保所抽取数据的代表性，极大地降低网络数据检索收集的效率和成本。随着网络空间加速拓展和海量数据蓬勃爆发，更先进的抓取策略、代码架构和技术系统不断被开发应用，数据爬取技术在精准性、时效性、个性化.上进展飞速，已经成为国内外诸多互联网企业最为常用的一项技术手段。但是随着围绕数据自动化技术进行爬取和挖掘行为急剧增多，这也带来了数据权属、知识产权和商业机密保护、个人信息隐私界限、不正当竞争、计算机信息系统安全等方面的巨大争议。尤其是近期在金融、内容、电商等各类场景的数据爬取案件频发，对互联网和大数据商业业态产生重大影响，引起了产业界、监管者和全社会的广泛关注。随着我国数据治理法律体系加紧完善和执法力度不断提升，数据爬取这一“灰色地带”也将被提上数据治理议程，其已成为非常紧迫的现实问题。
