我正在将一堆网站移动到一台新服务器上,并确保我不会错过任何内容,希望能够为程序提供一个网站列表,并为其下载每个网页/图像。有没有可以做到这一点的软件?我也可以用它来下载一些WordPress的网站的副本,所以我可以上传静态文件(我的一些WP网站永远不会更新,所以很难设置新的数据库等)最佳网站蜘蛛?
Q
最佳网站蜘蛛?
0
A
回答
2
您可能会收到很多的意见。这里是一个:http://www.httrack.com/
0
wget是你的工具。
在unix/linux系统上,它可能已经安装。对于Windows系统,请从http://gnuwin32.sourceforge.net/packages/wget.htm下载。
它是一个命令行工具,有一堆命令行选项用于控制它抓取目标网站的方式。使用“wget --help”列出所有可用的选项。
相关问题
- 1. asp.net(网络蜘蛛)
- 2. 阻止网络蜘蛛
- 3. 蜘蛛不爬行网页
- 4. 如何绘制蜘蛛网
- 5. 减慢蜘蛛网址
- 6. 蜘蛛是否只抓取站点地图中的网址
- 7. 为几个网站使用一个Scrapy蜘蛛
- 8. 处理内存时使用节点和jsdom蜘蛛网站
- 9. 获取scrapy蜘蛛抓取整个网站
- 10. 防止scrapy蜘蛛爬行网站的一部分太长
- 11. 如何更改Scrapy蜘蛛网站的订单?
- 12. Python的scrapy蜘蛛
- 13. 布局像蜘蛛
- 14. Scrapy DOMAIN_NAME的蜘蛛
- 15. Scrapy与Scrapy蜘蛛
- 16. 未知的ZAP蜘蛛网结果
- 17. 网络蜘蛛需要的帮助
- 18. Scrapy - 蜘蛛抓取重复网址
- 19. 从蜘蛛(Scrapy)无法获取网址
- 20. 制作网络爬虫/蜘蛛
- 21. JQuery中的蜘蛛网图表
- 22. 在“蜘蛛网”内获取矩形?
- 23. Highcharts蜘蛛网图表调用series.setData
- 24. Python网络蜘蛛:如何解决captcha?
- 25. 建议想:网络蜘蛛用Perl
- 26. 附表scrapyd蜘蛛和蜘蛛通过配置选项
- 27. Web蜘蛛与Wget的蜘蛛有什么不同?
- 28. Scrapy从主蜘蛛运行多个蜘蛛?
- 29. 使用Scrapy创建蜘蛛,蜘蛛生成错误
- 30. 如何喂蜘蛛蜘蛛爬行内的链接?
属于superuser.com – 2009-10-24 15:39:58
您是否无法通过FTP连接到该站点并下载文件?如果你能做到这一点,它会容易得多,而且你不必担心文件被遗漏,因为当前没有链接到它们。 – David 2009-10-25 06:14:00