Linux使用Wget实现整站下载

作者: 晴刃 | 来源:发表于2021-05-03 08:17 被阅读0次

引言

在Windows下有个叫做"整站下载器"的软件,可以用来抓取网站的数据下载到本地,而Linux上只需要用到我们平时最常用的命令行下载器Wget,就能完成整个网站数据的下载操作。

文章目录

  • 0×1.使用Wget实现整站下载
  • 0×2.仅下载指定后缀的文件
  • 0×3.不下载指定后缀的文件

0×1.使用Wget实现整站下载

下载整站数据,只需一条简单的命令:

#下面的命令会在终端所在目录创建一个www.qingsword.com目录,将网站www.qingsword.com上的数据全部下载到这个目录中
qing@qingsword.com$ wget -rck -np www.qingsword.com

#对应参数解释:
#-r,递归下载
#-c,断点续传,若网站长时间未响应或中途断开,此参数可以让数据断点续传
#-k,转换链接为本地链接
#-np,--no-parent不追溯至父级

0×2.仅下载指定后缀的文件

#参数-A指定,仅下载png与css后缀的文件,网站中其他类型的文件将不会被下载
qing@qingsword.com$ wget -rck -np -A '*.png','*.css' www.qingsword.com

0×3.不下载指定后缀的文件

#参数-R指定,除了html以及css后缀的文件外,下载其余所有文件
qing@qingsword.com$ wget -rck -np -R '*.html','*.css' www.qingsword.com

相关文章

  • Linux使用Wget实现整站下载

    引言 在Windows下有个叫做"整站下载器"的软件,可以用来抓取网站的数据下载到本地,而Linux上只需要用到我...

  • wget下载整站

  • python wget

    wget 下载整个网站,或者特定目录 - DP. - 博客园 windows wget下载地址 wget抓取整站做...

  • 文件下载命令

    linux 文件下载命令 wget是linux最常用的下载命令, 一般的使用方法是: wget + 空格 + 要下...

  • wget命令详解

    使用linux下载的时候经常会碰到这个命令,记录一下。 wget命令介绍 wget是Linux中的一个下载文件的工...

  • wget: command not found

    当使用wget下载linux下的类库的时候,出现的问题 这里已经说了,主要是linux 下没有找到wget 这个库...

  • Linux 下编译ffmpeg android so库

    1、下载ffmpeg和NDK ffmpeg使用4.2.2为例,先下载到linux wget https://ffm...

  • linux安装tree

    下载tree ftp地址如下,ftp://mama.indstate.edu/linux/tree/ 使用wget...

  • linux下载的三种命令(转载)

    wget wget是linux自带的下载工具,支持FTP和HTTP等,使用比较方便。 命令参数:-O  指定输出名...

  • Linux命令行笔记

    常用系统工作命令 wget 使用命令行下载网络文件 “wget [参数] 下载地址” elinks 实现一个纯文本...

网友评论

    本文标题:Linux使用Wget实现整站下载

    本文链接:https://www.haomeiwen.com/subject/oaffdltx.html