楼上(shang)说的很(hen)多,我(wo)补充(chong)一下,正确的(de)应该(gai)叫网络蜘蛛(zhu),又称爬虫(chong),本质是搜索引(yin)擎派出的(de)一个(ge)执行抓取任务的程序(xu)蜘蛛池的本(ben)质(zhi)是大量的(de)网站互相链(lian)接,每个站单(dan)独产生大(da)量的内容吸(xi)引蜘蛛(zhu)来爬(pa),几千个网站互链(lian)时,可以想象(xiang)蜘蛛的链(lian)接(jie)
Copyright © 2023-2024