中国DOS联盟论坛

中国DOS联盟

-- 联合DOS 推动DOS 发展DOS --

联盟域名:www.cn-dos.net  论坛域名:www.cn-dos.net/forum
DOS,代表着自由开放与发展,我们努力起来,学习FreeDOS和Linux的自由开放与GNU精神,共同创造和发展美好的自由与GNU GPL世界吧!

游客:  注册 | 登录 | 命令行 | 会员 | 搜索 | 上传 | 帮助 »
作者:
标题: 求助贴:用WGET批量下载网页 上一主题 | 下一主题
gene771771
初级用户





积分 105
发帖 77
注册 2006-11-9
来自 重庆
状态 离线
『楼 主』:  求助贴:用WGET批量下载网页

因为学习的原因,好久没有来这里了。。。终于,快毕业了,我把学校网络上的免费资料全部下载下来,于是想到用WGET,但是其中涉及到三个变量,我不知道怎么写了,所以来求助。。。谢谢热心的朋友们。。。

我想要下载的网页是
http://202.202.12.56:8088/qikan/ ... /0612pdf/061299.pdf
...
http://202.202.12.56:8088/qikan/ ... /0612pdf/061201.pdf
...
http://202.202.12.56:8088/qikan/ ... /0601pdf/060199.pdf
...
http://202.202.12.56:8088/qikan/ ... /0601pdf/060101.pdf
...
http://202.202.12.56:8088/qikan/ ... /0512pdf/051299.pdf
...
http://202.202.12.56:8088/qikan/ ... /0512pdf/051201.pdf
...

发现规律了吗,年月日都在变化的。。。我只会单一变量的。。。头疼~~~

[ Last edited by gene771771 on 2007-7-3 at 11:30 AM ]

2007-7-3 11:29
查看资料  发送邮件  发短消息 网志  OICQ (280385115)  编辑帖子  回复  引用回复
lxmxn
版主




积分 11386
发帖 4938
注册 2006-7-23
状态 离线
『第 2 楼』:  

用批处理将地址写入url.txt文件,然后wget -i url.txt即可。

2007-7-3 11:47
查看资料  发送邮件  发短消息 网志   编辑帖子  回复  引用回复
gene771771
初级用户





积分 105
发帖 77
注册 2006-11-9
来自 重庆
状态 离线
『第 3 楼』:  

谢谢斑竹,但是,要下载的地址太多了,要是全部导入*.txt太费事的吧,能不能用个FOR循环?

2007-7-3 11:51
查看资料  发送邮件  发短消息 网志  OICQ (280385115)  编辑帖子  回复  引用回复
lxmxn
版主




积分 11386
发帖 4938
注册 2006-7-23
状态 离线
『第 4 楼』:  

用批处理的话很快的。

是从200几年的地址开始下载呢还是从2005-2006?

2007-7-3 11:53
查看资料  发送邮件  发短消息 网志   编辑帖子  回复  引用回复
gene771771
初级用户





积分 105
发帖 77
注册 2006-11-9
来自 重庆
状态 离线
『第 5 楼』:  

从1999--2006 每年都有01-12期,每期都有01-99页

2007-7-3 11:56
查看资料  发送邮件  发短消息 网志  OICQ (280385115)  编辑帖子  回复  引用回复
lxmxn
版主




积分 11386
发帖 4938
注册 2006-7-23
状态 离线
『第 6 楼』:  


@echo off&SetLocal EnableDelayedExpansion
for /L %%a in (1999 1 2006) do (
        set year=%%a
        set year=!year:~-2!
        for /L %%b in (1 1 12) do (
                set mouth=0%%b
                set mouth=!mouth:~-2!
                for /l %%c in (1,1,99) do (
                        set count=0%%c
                        set count=!count:~-2!
                        >>url.txt echo\http://202.202.12.56:8088/qikan/periodical.articles/kjjjsc/kjjj%%a/!year!!mouth!pdf/%%a!mouth!!count!.pdf
                )
        )
)
start url.txt
生成rul.txt,数量比较大,可能时间比较久点。

   此帖被 +4 点积分    点击查看详情   
评分人:【 gene771771 分数: +2  时间:2007-7-3 16:00
评分人:【 asnahu 分数: +2  时间:2009-6-23 05:27


2007-7-3 12:05
查看资料  发送邮件  发短消息 网志   编辑帖子  回复  引用回复
gene771771
初级用户





积分 105
发帖 77
注册 2006-11-9
来自 重庆
状态 离线
『第 7 楼』:  

谢谢你,我已经在下载了。。。

2007-7-3 15:43
查看资料  发送邮件  发短消息 网志  OICQ (280385115)  编辑帖子  回复  引用回复

请注意:您目前尚未注册或登录,请您注册登录以使用论坛的各项功能,例如发表和回复帖子等。


可打印版本 | 推荐给朋友 | 订阅主题 | 收藏主题



论坛跳转: