全球主机交流论坛

标题: 把小说整理了下，现在是67945本，去除了无效的部分（分享） [打印本页]

作者: etc小号 时间: 2022-10-9 20:44
标题: 把小说整理了下，现在是67945本，去除了无效的部分（分享）
食用方法

wget https://r2.557557.xyz/bntxturl.txt

wget -i bntxturl.txt

现在在我服务器上，套了cf缓存了，可以慢慢下，g口的服务器。

作者: acpp 时间: 2022-10-9 20:45
房东太太和少年**都没啊

作者: vps理论研究家 时间: 2022-10-9 20:49
太慢了，传盘子里分享吧

作者: antbt 时间: 2022-10-9 20:53
少年阿~宾都没有，差评！

作者: lastfree 时间: 2022-10-9 20:57
谢谢大佬，下载中。

作者: luceos 时间: 2022-10-9 21:07
文件总共得多大？

作者: bso 时间: 2022-10-9 21:17
那我不是白下了
Total wall clock time: 3h 22m 2s
Downloaded: 68528 files

作者: gitee 时间: 2022-10-9 21:18
谢谢大佬

/**
* 活着的意义从哪儿来？
* 找啊，活下去的理由
* 不断颠覆，不断否定
* 没有一个一劳永逸的理由的
*
* Link https://greasyfork.org/zh-CN/scripts/396933-hostloc-zsbd
*/

作者: 韭菜 时间: 2022-10-9 21:26
win 用wget下来的文件名都是乱码

作者: mimiye 时间: 2022-10-9 21:26

bso 发表于 2022-10-9 21:17
那我不是白下了
Total wall clock time: 3h 22m 2s
Downloaded: 68528 files

大佬，win下载文件名乱码怎么处理

作者: 缦汐 时间: 2022-10-9 21:35
感谢大佬

作者: yushui 时间: 2022-10-9 21:54
会乱码吗

作者: jore 时间: 2022-10-9 21:55
为啥不打个包

作者: ttyang 时间: 2022-10-9 22:43
测试可以下载
过来说谢谢的

作者: riofredinand 时间: 2022-10-9 22:46
总共多大呢

作者: deed 时间: 2022-10-10 00:56
那我在下一次

作者: 66y 时间: 2022-10-10 06:21

bso 发表于 2022-10-9 21:17
那我不是白下了
Total wall clock time: 3h 22m 2s
Downloaded: 68528 files

求大佬分享

作者: 66y 时间: 2022-10-10 06:44
下载中~~

作者: bbsbbs 时间: 2022-10-10 08:30
总容量大概多大

作者: etc小号 时间: 2022-10-10 11:56

bbsbbs 发表于 2022-10-10 08:30
总容量大概多大

144g

作者: GreatX 时间: 2022-10-10 12:18
下载中

作者: yanzhiling2002 时间: 2022-10-10 13:04
楼主可以打个包吗，下的有点费劲

作者: etc小号 时间: 2022-10-10 13:10

yanzhiling2002 发表于 2022-10-10 13:04
楼主可以打个包吗，下的有点费劲

打包了我服务器顶不住，cf缓存不了这么大的
现在这样可以放很久，慢慢下吧

作者: yanzhiling2002 时间: 2022-10-10 13:21

etc小号发表于 2022-10-10 13:10
打包了我服务器顶不住，cf缓存不了这么大的
现在这样可以放很久，慢慢下吧 ...

wget有点慢，有啥多线程的办法

作者: henbf 时间: 2022-10-10 13:32

yanzhiling2002 发表于 2022-10-10 13:21
wget有点慢，有啥多线程的办法

已经有文件列表了，直接贴迅雷里面呗

作者: yanzhiling2002 时间: 2022-10-10 13:33

etc小号发表于 2022-10-10 13:10
打包了我服务器顶不住，cf缓存不了这么大的
现在这样可以放很久，慢慢下吧 ...

专门给虚拟机加了一个200G的硬盘，原来的不够了。

作者: yanaxiao 时间: 2022-10-10 13:44
我下载不了，提示这个错误

Incomplete or invalid multibyte sequence encountered
--2022-10-10 01:42:48-- https://txt.hostloc.ltd/txt/%CE%D2%D3%D0%D2%BB%B1%FA%B4%F2%D2%B0%B5%B6.txt
Reusing existing connection to txt.hostloc.ltd:443.
HTTP request sent, awaiting response... 404 Not Found
2022-10-10 01:42:48 ERROR 404: Not Found.

作者: etc小号 时间: 2022-10-10 13:53

yanaxiao 发表于 2022-10-10 13:44
我下载不了，提示这个错误

Incomplete or invalid multibyte sequence encountered

我试了下没啥问题啊，你是按照我那个操作来得吗

作者: yanaxiao 时间: 2022-10-10 14:01

etc小号发表于 2022-10-10 13:53
我试了下没啥问题啊，你是按照我那个操作来得吗

是的。

作者: qer 时间: 2022-10-10 14:19
谢谢大佬速度还不错

作者: canxiaoa 时间: 2022-10-10 14:25
提示: 作者被禁止或删除内容自动屏蔽

作者: etc小号 时间: 2022-10-11 12:03

canxiaoa 发表于 2022-10-10 14:25
居然不是ghs的小说,失望 (

有奇怪类型的好像

作者: lucifeilu 时间: 2022-10-11 23:01
发个bt种子

作者: zhujisudi 时间: 2022-10-11 23:12

etc小号发表于 2022-10-10 11:56
144g

压缩下应该不大吧

作者: etc小号 时间: 2022-10-11 23:22

zhujisudi 发表于 2022-10-11 23:12
压缩下应该不大吧

67g的样子，但是压缩之后cf没法缓存，我服务器根本顶不住。

作者: host0108 时间: 2022-10-11 23:45
搞成bt种子呗

作者: WwzwW 时间: 2022-10-12 14:13
本帖最后由 WwzwW 于 2022-10-12 15:02 编辑

脚本写好了，拿去用吧

wget https://r2.557557.xyz/bntxturl.txt ;
count=$(wc -l bntxturl.txt | awk '{print $1}');
## echo $count
for ((i=1; i<=${count}; i++))
do
url=$(sed -n "${i},${i}p" bntxturl.txt) ;
## echo $url
wget -q $url -P /home/ ; # 下载目录
done

复制代码

作者: WwzwW 时间: 2022-10-12 14:53
本帖最后由 WwzwW 于 2022-10-12 15:03 编辑

如果想用rclone之类的软件拷贝，比如下载100个文件就拷贝同步，再删除，可以用下面的脚本：

wget https://r2.557557.xyz/bntxturl.txt ;
count=$(wc -l bntxturl.txt | awk '{print $1}');
## echo $count
for ((i=1; i<=${count}; i++))
do
url=$(sed -n "${i},${i}p" bntxturl.txt) ;
## echo $url
wget -q $url -P /home/book/ ; # 下载目录
echo "${i} $url"
if echo "$i" | grep -q -E '\00$'; then
## rclone 在这儿执行
rclone -v copy --transfers 8 /home/book/ drive:/book/
rm -rf /home/book/*
fi
done

复制代码

作者: plato0516 时间: 2022-10-12 15:20

下载速度倒是挺快的，但是想拖到百度云就有点考量了....

作者: SuperMaster 时间: 2022-10-13 11:31
感谢分享。

都是完本的小说吗？

如果是未完本的一起打包就比较乱。要是全部都是完本的就厉害了。

作者: etc小号 时间: 2022-10-13 11:34

SuperMaster 发表于 2022-10-13 11:31
感谢分享。

都是完本的小说吗？

全是完本的，这网站就是完本网站

作者: 柳逸寒 时间: 2022-10-13 11:42
等个天翼云盘

作者: zhbbo 时间: 2022-10-13 11:46
全部下载占用磁盘有多大？

作者: 理想三旬 时间: 2022-10-13 15:07
感谢大佬

欢迎光临全球主机交流论坛 (https://loc.193.gs/)