“爬虫”在英语中常见的表达是 web crawler 或 web spider,两者都用于描述在网络上自动抓取数据的程序。
Web crawler:更正式、常用的术语,指按照一定规则自动浏览万维网并获取网页信息的程序或脚本,常用于搜索引擎的数据采集。
Web spider:形象化表达,同样指自动抓取网页内容的程序,与“crawler”意思相近,但使用频率稍低。
例句:The search engine uses a web crawler to index new pages. (该搜索引擎使用网络爬虫来索引新页面。)
We need to develop a web spider to collect data from various websites. (我们需要开发一个网络爬虫来从不同网站收集数据。)
其他相关术语:Scraper:指专门用于从特定网站提取数据的爬虫程序,功能更聚焦于数据抓取。
Bot:泛指自动化程序,包括爬虫在内,但需根据上下文判断具体含义。
选择术语时,需根据具体场景和语境判断。在技术文档或学术交流中,web crawler 是最准确、常用的表达。