爬蟲一般是指網絡爬蟲。網絡爬蟲又稱為網頁蜘蛛,網絡機器人,是一種按照一定的規則,自動地抓取網際網路資訊的程式或者腳本。網頁URL爬蟲是指爬取html網頁上所有URL的爬蟲。 擷取網頁上所有url 把擷取到的url存放到txt檔案中