如何获取具有相同页面和内容名称的网站?

纳吉·秃头

我正在尝试镜像具有页面的网站:

http://www.site.com/news

和内容:

http://www.site.com/news/36-news/news-one
http://www.site.com/news/37-news/news-two
http://www.site.com/news/38-news/another-news-here

这就是我正在使用的

wget -m -Dsite.com -e robots=off -r -q -R gif,png,jpg,jpeg,GIF,PNG,JPG,JPEG \
    -t 10 http://www.site.com &

运行wget时,它将创建一个名为的HTML文件news

我无法下载内容,因为具有该名称的文件news已经存在(我正在运行Ubuntu:目录不能与文件具有相同的名称)

以下是在wget运行的情况下出现的消息-q

www.site.com/news/36-news:不是目录
www.site.com/news/36-news/news-one:不是目录

比内斯利

你可以试试看--no-clobber但是,在我看来,您似乎更适合使用功能更全的东西,例如httrack这是命令行选项的手册:http : //www.httrack.com/html/fcguide.html

您可以像这样为所有目录添加前缀:

httrack "http://www.site.com/news" -O /tmp/site -N "my%p/%n.%t"

因此,与您的命令类似的完整命令可能类似于:

httrack "http://www.site.com/news" -O /tmp/site -N "my%p/%n.%t" --retries=10 --ext-depth=0 --robots=0 +*.gif +*.png +*.jpg +*.jpeg +*.GIF +*.PNG +*.JPG +*.JPEG

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

如何获取具有相同名称和相同属性名称的节点到集合?

来自分类Dev

如何使用JDOM以相同的名称编写和获取具有相同名称的所有xml元素

来自分类Dev

如何使用JDOM以相同的名称编写和获取具有相同名称的所有xml元素

来自分类Dev

如何在具有相同名称但不同文件的javascript链接的页面中获取selenium的xpath?

来自分类Dev

如何从具有相同名称的Multi CheckBox获取价值

来自分类Dev

如何获取具有相同名称的SiteCollections列表?

来自分类Dev

如何从具有相同名称的XML获取特定值

来自分类Dev

具有相同 blob 内容的多个名称

来自分类Dev

使用wget镜像具有相同名称的路径和子文件夹的网站

来自分类Dev

选择并获取与页面上其他元素具有相同类的范围的内容

来自分类Dev

jQuery查找具有相同类的多个链接href,并根据获取页面更改每个链接的名称

来自分类Dev

如何使用Chrome扩展程序内容脚本将具有相同域的多个网站进行匹配

来自分类Dev

iOS-支持具有相同版本和内容但具有不同应用名称和捆绑ID的多个应用

来自分类Dev

iOS-支持具有相同版本和内容但具有不同应用名称和捆绑ID的多个应用

来自分类Dev

如何建立具有多个页面和一个页面应用程序的网站?

来自分类Dev

Typedef和枚举具有相同的名称?

来自分类Dev

Basex XQL合并具有相同标签名称的内容,而不管文档中的位置如何

来自分类Dev

Basex XQL合并具有相同标签名称的内容,而不管文档中的位置如何

来自分类Dev

如何在具有相同名称和相同日期的对象数组中添加值

来自分类Dev

如何搜索具有相同名称和相同级别的 XML 节点值?

来自分类Dev

循环以根据名称与行内容相同的条件创建具有特定文件名和内容的输出文件

来自分类Dev

不同的函数如何具有相同的名称?

来自分类Dev

如何从不同的网站获取相同类型的内容?

来自分类Dev

如何使用“Angular 4 应用程序”的“量角器”访问具有“相同属性和标签名称”的页面中的“元素”

来自分类Dev

获取具有不同名称和相同for循环的单选按钮值

来自分类Dev

如何使用xmllint xpath获取具有相同标签名称的所有属性

来自分类Dev

获取具有相同名称的所有属性

来自分类Dev

从具有相同名称的节点获取所有属性

来自分类Dev

单击时如何从具有相同ID的多个父div中获取子div内容

Related 相关文章

  1. 1

    如何获取具有相同名称和相同属性名称的节点到集合?

  2. 2

    如何使用JDOM以相同的名称编写和获取具有相同名称的所有xml元素

  3. 3

    如何使用JDOM以相同的名称编写和获取具有相同名称的所有xml元素

  4. 4

    如何在具有相同名称但不同文件的javascript链接的页面中获取selenium的xpath?

  5. 5

    如何从具有相同名称的Multi CheckBox获取价值

  6. 6

    如何获取具有相同名称的SiteCollections列表?

  7. 7

    如何从具有相同名称的XML获取特定值

  8. 8

    具有相同 blob 内容的多个名称

  9. 9

    使用wget镜像具有相同名称的路径和子文件夹的网站

  10. 10

    选择并获取与页面上其他元素具有相同类的范围的内容

  11. 11

    jQuery查找具有相同类的多个链接href,并根据获取页面更改每个链接的名称

  12. 12

    如何使用Chrome扩展程序内容脚本将具有相同域的多个网站进行匹配

  13. 13

    iOS-支持具有相同版本和内容但具有不同应用名称和捆绑ID的多个应用

  14. 14

    iOS-支持具有相同版本和内容但具有不同应用名称和捆绑ID的多个应用

  15. 15

    如何建立具有多个页面和一个页面应用程序的网站?

  16. 16

    Typedef和枚举具有相同的名称?

  17. 17

    Basex XQL合并具有相同标签名称的内容,而不管文档中的位置如何

  18. 18

    Basex XQL合并具有相同标签名称的内容,而不管文档中的位置如何

  19. 19

    如何在具有相同名称和相同日期的对象数组中添加值

  20. 20

    如何搜索具有相同名称和相同级别的 XML 节点值?

  21. 21

    循环以根据名称与行内容相同的条件创建具有特定文件名和内容的输出文件

  22. 22

    不同的函数如何具有相同的名称?

  23. 23

    如何从不同的网站获取相同类型的内容?

  24. 24

    如何使用“Angular 4 应用程序”的“量角器”访问具有“相同属性和标签名称”的页面中的“元素”

  25. 25

    获取具有不同名称和相同for循环的单选按钮值

  26. 26

    如何使用xmllint xpath获取具有相同标签名称的所有属性

  27. 27

    获取具有相同名称的所有属性

  28. 28

    从具有相同名称的节点获取所有属性

  29. 29

    单击时如何从具有相同ID的多个父div中获取子div内容

热门标签

归档