昨天坛友让帮忙爬的秀人,今天来分享了
https://hostloc.com/thread-1013618-1-1.html
@akkba
源站是这个
urlxiurenb.net/url
我分成了两个部分爬的,一个是秀人,一个是其他分类
秀人的29万多张,近80g
all的是其他分类,27万多张,近70g
下面两个都是txt链接地址,wget-itxt名即可食用
http://141.94.115.57:81/xiuren.zip
http://141.94.115.57:81/all.zip
欢迎楼下大佬分流txt以及图包
-----------------------------------------------------
**网友回复**:
引用:wissmiss发表于2022-5-920:09
在下载了谢谢大佬
网友回复:
引用:lewss发表于2022-5-920:13
小鸡硬盘不够大怎么下载?
网友回复:
给大家来个PowerShell的下载命令吧,方便大家在Windows下直接下载。
可以直接按uploadfile后面的路径自动建文件夹,保留楼主的目录结构:
$urls=Get-Content"E:/xiuren.txt"
$lastPath=""
$currentPath=""
$outputFile=""
foreach($urlin$urls){
$outputFile=$url.replace("https://p.xiurenb.net/uploadfile","E:/target")
$currentPath=$outputFile.Substring(0,$outputFile.length-16)
if($lastPath-ne$currentPath){
$lastPath=$currentPath
mkdir-p$currentPath
}
Invoke-WebRequest-Uri$url-OutFile$outputFile
}
网友回复:
引用:wissmiss发表于2022-5-920:09
在下载了谢谢大佬
网友回复:
引用:wissmiss发表于2022-5-920:09
在下载了谢谢大佬
网友回复:
引用:yanzhiling2002发表于2022-5-920:28
这两个zip文件下载不了大佬
网友回复:
引用:yanzhiling2002发表于2022-5-920:28
这两个zip文件下载不了大佬
网友回复:
引用:听风的歌发表于2022-5-920:42
高清原图无水印吗
网友回复:
光是文件列表,对我这样的小白来说,搞不定啊。
直接图片打包到云盘撒。
最好按主题分类,全在一个包里,电脑肯定扛不住。
网友回复:
没那么大硬盘了,蛋疼,等大佬传一份阿里或者谷歌吧
网友回复:
引用:etc小号发表于2022-5-920:33
我这没问题啊,你那显示什么
网友回复:
引用:wissmiss发表于2022-5-920:09
在下载了谢谢大佬
网友回复:
引用:etc小号发表于2022-5-920:12
你的速度怎么样。我这大概5m/s的样子
网友回复:
请教下大佬,。这个怎么在后台自动下载啊。我一关闭xshell它就停了
网友回复:
引用:pxy185发表于2022-5-1013:54
请教下大佬,。这个怎么在后台自动下载啊。我一关闭xshell它就停了
网友回复:
引用:5004589发表于2022-5-1015:08
wget都会了,开screen呀!
网友回复:
格式太不友好了,建个鸡拉下来,还要打包,鸡的io那么差
网友回复:
引用:canxunhulian发表于2022-5-922:02
原图来我这acg.ngmjj私我打折
网友回复:
给大家来个PowerShell的下载命令吧,方便大家在Windows下直接下载。
可以直接按uploadfile后面的路径自动建文件夹,保留楼主的目录结构:
$urls=Get-Content"E:/xiuren.txt"
$lastPath=""
$currentPath=""
$outputFile=""
foreach($urlin$urls){
$outputFile=$url.replace("https://p.xiurenb.net/uploadfile","E:/target")
$currentPath=$outputFile.Substring(0,$outputFile.length-16)
if($lastPath-ne$currentPath){
$lastPath=$currentPath
mkdir-p$currentPath
}
Invoke-WebRequest-Uri$url-OutFile$outputFile
}
网友回复:
引用:canxunhulian发表于2022-5-922:02
原图来我这acg.ngmjj私我打折
网友回复:
引用:张大牛发表于2022-5-1016:05
老哥网站挺好看的,你这是什么程序?