wget下载网站整个目录

wget -r -p -np -k -P ./data/ http://example.com/eg/

具体参数:

-P    表示下载到哪个目录
-r    表示递归下载
-np   表示不下载旁站连接
-k    表示将下载的网页里的链接修改为本地链接
-p    获得所有显示网页所需的元素
时间: 2024-08-05 19:31:14

wget下载网站整个目录的相关文章

wget 下载到指定目录

下载myfile.zip 到 /home/abc 目录wget -P /home/abc http://abc/myfile.zip [[email protected] cbx2012]# wget -P /home/cbx2012 https://raw.githubusercontent.com/hughesjr/chromium_el_builder/master/chrome_pepperflash_copy.sh[[email protected] cbx2012]# wget -P

Linux下wget下载整个FTP目录(含子目录)--转载

[plain] view plain copy wget -nH -m --ftp-user=your_username --ftp-password=your_password ftp://your_ftp_host/* 解释:-nH:不创建以主机名命名的目录.–cut-dirs:希望去掉原来的目录层数,从根目录开始计算.如果想完全保留FTP原有的目录结构,则不要加该参数.-m:下载所有子目录并且保留目录结构.–ftp-user:FTP用户名–ftp-password:FTP密码ftp://*

wget下载网站

命令格式如下: wget -r -p -np -k http://URL -r:在本机建立服务器端目录结构: -p: 下载显示HTML文件的所有图片: -np:只下载目标站点指定目录及其子目录的内容: -k: 转换非相对链接为相对链接.

Linux下wget下载整个FTP目录(含子目录)

wget -nH -m --ftp-user=your_username --ftp-password=your_password ftp://your_ftp_host/* 解释:-nH:不创建以主机名命名的目录.–cut-dirs:希望去掉原来的目录层数,从根目录开始计算.如果想完全保留FTP原有的目录结构,则不要加该参数.-m:下载所有子目录并且保留目录结构.–ftp-user:FTP用户名–ftp-password:FTP密码ftp://*.*.*.*/*:FTP主机地址.最后可以跟目录

apache使用.htaccess文件实现屏蔽wget下载网站内容

经发现,虽然wget遵循 robots.txt 规则,但是那个还是可以绕过去,现在56云小编把我自己使用的屏蔽方法分享给大家: 屏蔽下载任何文件 .htaccess SetEnvIfNoCase User-Agent "^wget" bad_bot <Limit GET POST> Order Allow,Deny Allow from all Deny from env=bad_bot </Limit> 屏蔽下载部分文件 .htaccess SetEnvIfN

mac使用wget下载网站(仿站)

wget -c -r -np -k -L -p http://www.xxxx.com 参考 wget的安装 http://blog.csdn.net/ssihc0/article/details/7572180 mac下仿站工具,在回复中有网友列出了命令 http://www.v2ex.com/t/147870#reply13 可以自己 wget --help 查看各个参数是什么意思

Linux之wget下载

一.介绍 Linux系统下载文件工具,用来从指定的URL下载文件 二.使用方法 语法:wget [参数] [URL地址] 选项: -c接着下载没下载完的文件 -b启动后转入后台执行 -P指定下载目录 -O变更下载文件名 --ftp-user --ftp-password使用FTP用户认证下载 参数:指定的文件下载URL地址 三.案例 1.使用wget下载单个文件 wget http://cn2.php.net/distributions/php-5.6.13.tar.gz 2.下载并以不同的文件

wget 下载整个网站,或者特定目录

需要下载某个目录下面的所有文件.命令如下 wget -c -r -np -k -L -p www.xxx.org/pub/path/ 在下载时.有用到外部域名的图片或连接.如果需要同时下载就要用-H参数. wget -np -nH -r --span-hosts www.xxx.org/pub/path/ -c 断点续传-r 递归下载,下载指定网页某一目录下(包括子目录)的所有文件-nd 递归下载时不创建一层一层的目录,把所有的文件下载到当前目录-np 递归下载时不搜索上层目录,如wget -c

wget镜像网站并且下载到指定目录 2012-06-20 19:40:56

wget镜像网站并且下载到指定目录 2012-06-20 19:40:56 分类: Python/Ruby wget -r -p -np -k -P /tmp/ap http://www.example.com -P 表示下载到哪个目录 -r 表示递归下载 -np 表示不下载旁站连接. -k 表示将下载的网页里的链接修改为本地链接.-p 获得所有显示网页所需的元素