性感美女 Archives

性感美女爬虫<重构版> [Windows] [23.05.21]

2023年6月12日 34 条评论

更新日志：

1.重构下载代码

2.重写了一部分代码逻辑

3.这个是5月份的代码，忘了发了。哈哈哈

更新日志： 1.重构下载代码 2.重写了一部分代码逻辑 3.这个是5月份的代码，忘了发了。哈哈哈

更新日志：
1.重构下载代码
2.重写了一部分代码逻辑
3.这个是5月份的代码，忘了发了。哈哈哈

参数：

C:\Users\obaby>F:\Pycharm_Projects\meitulu-spider\dist\xgmn8_v2.exe

****************************************************************************************************

USAGE:

spider -h <help> -a <all> -q <search> -e <early stop>

Arguments:

-a <download all site images>

-q <query the image with keywords>

-h <display help text, just this>

Option Arguments:

-p <image download path>

-r <random index category list>

-c <single category url>

-e <early stop, work in site crawl mode only>

-s <site url eg: https://www.jpxgmn.net (no last backslash "/")>

****************************************************************************************************

参数： C:\Users\obaby>F:\Pycharm_Projects\meitulu-spider\dist\xgmn8_v2.exe **************************************************************************************************** USAGE: spider -h <help> -a <all> -q <search> -e <early stop> Arguments: -a <download all site images> -q <query the image with keywords> -h <display help text, just this> Option Arguments: -p <image download path> -r <random index category list> -c <single category url> -e <early stop, work in site crawl mode only> -s <site url eg: https://www.jpxgmn.net (no last backslash "/")> ****************************************************************************************************

参数：
C:\Users\obaby>F:\Pycharm_Projects\meitulu-spider\dist\xgmn8_v2.exe
****************************************************************************************************
USAGE:
spider -h <help> -a <all> -q <search> -e <early stop>
Arguments:
         -a <download all site images>
         -q <query the image with keywords>
         -h <display help text, just this>
Option Arguments:
         -p <image download path>
         -r <random index category list>
         -c <single category url>
         -e <early stop, work in site crawl mode only>
         -s <site url eg: https://www.jpxgmn.net (no last backslash "/")>
****************************************************************************************************

业余爱好『Favourite』

精品美女吧爬虫【Windows】【23.04.16】

2023年4月16日 33 条评论

精品美女吧爬虫

Verson: 23.04.16

Blog: http://www.h4ck.org.cn

****************************************************************************************************

USAGE:

spider -h <help> -a <all> -q <search> -e <early stop>

Arguments:

-a <download all site images>

-h <display help text, just this>

Option Arguments:

-p <image download path>

-r <random index category list>

-c <single category url>

-e <early stop, work in site crawl mode only>

-s <site url eg: https://www.jpxgmn.net (no last backslash "/")>

****************************************************************************************************

精品美女吧爬虫 Verson: 23.04.16 Blog: http://www.h4ck.org.cn **************************************************************************************************** USAGE: spider -h <help> -a <all> -q <search> -e <early stop> Arguments: -a <download all site images> -h <display help text, just this> Option Arguments: -p <image download path> -r <random index category list> -c <single category url> -e <early stop, work in site crawl mode only> -s <site url eg: https://www.jpxgmn.net (no last backslash "/")> ****************************************************************************************************

精品美女吧 爬虫
Verson: 23.04.16
Blog: http://www.h4ck.org.cn
****************************************************************************************************
USAGE:
spider -h <help> -a <all> -q <search> -e <early stop>
Arguments:
         -a <download all site images>
         -h <display help text, just this>
Option Arguments:
         -p <image download path>
         -r <random index category list>
         -c <single category url>
         -e <early stop, work in site crawl mode only>
         -s <site url eg: https://www.jpxgmn.net (no last backslash "/")>
****************************************************************************************************

业余爱好『Favourite』

秀人集爬虫【22.09.04】【Windows】

2022年9月4日 100 条评论

更新日志：

22.9.4

1.调整超时时间为10秒

2.换了个进度条

3.下载异常处理可能不生效的问题

22.4.12

增加-e early stop参数，配合整站爬取使用，单独无效.如果没有完成整站爬取不要使用该参数，终止逻辑过于简单粗暴。首次爬取尽量使用批处理死循环，开多进程处理。

22.1.18

1.兼容更新后的秀人集网站，支持搜索以及全站爬取。

2.修改默认域名为https://www.xiurenji.net（暂时可以不使用-s 参数）。

22.1.20

1.修复页面异常可能导致的异常终止

22.1.24

1.增加-r参数，支持分类重拍，可以开启多个进程进行爬取。说实话就是姐姐太懒了，不想写多线程。

2.增加-c参数，支持爬取特定分类，请直接-c 分类地址。具体参数见下方使用说明。

更新日志： 22.9.4 1.调整超时时间为10秒 2.换了个进度条 3.下载异常处理可能不生效的问题 22.4.12 增加-e early stop参数，配合整站爬取使用，单独无效.如果没有完成整站爬取不要使用该参数，终止逻辑过于简单粗暴。首次爬取尽量使用批处理死循环，开多进程处理。 22.1.18 1.兼容更新后的秀人集网站，支持搜索以及全站爬取。 2.修改默认域名为https://www.xiurenji.net（暂时可以不使用-s 参数）。 22.1.20 1.修复页面异常可能导致的异常终止 22.1.24 1.增加-r参数，支持分类重拍，可以开启多个进程进行爬取。说实话就是姐姐太懒了，不想写多线程。 2.增加-c参数，支持爬取特定分类，请直接-c 分类地址。具体参数见下方使用说明。

更新日志：
22.9.4
1.调整超时时间为10秒
2.换了个进度条
3.下载异常处理可能不生效的问题
22.4.12
增加-e early stop参数，配合整站爬取使用，单独无效.如果没有完成整站爬取不要使用该参数，终止逻辑过于简单粗暴。首次爬取尽量使用批处理死循环，开多进程处理。
22.1.18
1.兼容更新后的秀人集网站，支持搜索以及全站爬取。
2.修改默认域名为https://www.xiurenji.net（暂时可以不使用-s 参数）。
22.1.20
1.修复页面异常可能导致的异常终止
22.1.24
1.增加-r参数，支持分类重拍，可以开启多个进程进行爬取。说实话就是姐姐太懒了，不想写多线程。
2.增加-c参数，支持爬取特定分类，请直接-c 分类地址。具体参数见下方使用说明。

业余爱好『Favourite』

微图坊爬虫 [Chrome Support]【22.08.21】【Windows】

2022年8月21日 10 条评论

更新记录：

1.修复部分页面链接失效导致创建目录之后不能下载的问题；

2.修复登录模式下超出浏览次数导致下载失败的问题，提前结束进程；

更新记录： 1.修复部分页面链接失效导致创建目录之后不能下载的问题； 2.修复登录模式下超出浏览次数导致下载失败的问题，提前结束进程；

更新记录：
1.修复部分页面链接失效导致创建目录之后不能下载的问题；
2.修复登录模式下超出浏览次数导致下载失败的问题，提前结束进程；

微软『Windows』

秀人集爬虫【22.04.12】【Windows】【Mac M1】

2022年4月12日 123 条评论

更新日志：

22.4.12

22.1.18

1.兼容更新后的秀人集网站，支持搜索以及全站爬取。

2.修改默认域名为https://www.xiurenji.net（暂时可以不使用-s 参数）。

22.1.20

1.修复页面异常可能导致的异常终止

22.1.24

1.增加-r参数，支持分类重拍，可以开启多个进程进行爬取。说实话就是姐姐太懒了，不想写多线程。

2.增加-c参数，支持爬取特定分类，请直接-c 分类地址。具体参数见下方使用说明。

更新日志： 22.4.12 增加-e early stop参数，配合整站爬取使用，单独无效.如果没有完成整站爬取不要使用该参数，终止逻辑过于简单粗暴。首次爬取尽量使用批处理死循环，开多进程处理。 22.1.18 1.兼容更新后的秀人集网站，支持搜索以及全站爬取。 2.修改默认域名为https://www.xiurenji.net（暂时可以不使用-s 参数）。 22.1.20 1.修复页面异常可能导致的异常终止 22.1.24 1.增加-r参数，支持分类重拍，可以开启多个进程进行爬取。说实话就是姐姐太懒了，不想写多线程。 2.增加-c参数，支持爬取特定分类，请直接-c 分类地址。具体参数见下方使用说明。

更新日志：
22.4.12
增加-e early stop参数，配合整站爬取使用，单独无效.如果没有完成整站爬取不要使用该参数，终止逻辑过于简单粗暴。首次爬取尽量使用批处理死循环，开多进程处理。
22.1.18
1.兼容更新后的秀人集网站，支持搜索以及全站爬取。
2.修改默认域名为https://www.xiurenji.net（暂时可以不使用-s 参数）。
22.1.20
1.修复页面异常可能导致的异常终止
22.1.24
1.增加-r参数，支持分类重拍，可以开启多个进程进行爬取。说实话就是姐姐太懒了，不想写多线程。
2.增加-c参数，支持爬取特定分类，请直接-c 分类地址。具体参数见下方使用说明。

使用参数：

****************************************************************************************************

USAGE:

spider -h <help> -a <all> -q <search>

Arguments:

-a <download all site images>

-q <query the image with keywords>

-h <display help text, just this>

Option Arguments:

-p <image download path>

-r <random index category list> （该参数会重新排列分类列表，可以开启多个进程同时进行爬取）

-c <single category url> （支持单分类爬取，如果只想爬取某一个分类请使用该参数）

-e <early stop, work in site crawl mode only> （配合整站爬取使用，多次检测到已经下载自动跳过该分类）

-s <site url eg: http://www.xiurenji.vip (no last backslash "/")>

*************************************************************************************

**************************************************************************************************** USAGE: spider -h <help> -a <all> -q <search> Arguments: -a <download all site images> -q <query the image with keywords> -h <display help text, just this> Option Arguments: -p <image download path> -r <random index category list> （该参数会重新排列分类列表，可以开启多个进程同时进行爬取） -c <single category url> （支持单分类爬取，如果只想爬取某一个分类请使用该参数） -e <early stop, work in site crawl mode only> （配合整站爬取使用，多次检测到已经下载自动跳过该分类） -s <site url eg: http://www.xiurenji.vip (no last backslash "/")> *************************************************************************************

****************************************************************************************************
USAGE:
spider -h <help> -a <all> -q <search>
Arguments:
         -a <download all site images>
         -q <query the image with keywords>
         -h <display help text, just this>
Option Arguments:
         -p <image download path>
         -r <random index category list> （该参数会重新排列分类列表，可以开启多个进程同时进行爬取）
         -c <single category url> （支持单分类爬取，如果只想爬取某一个分类请使用该参数）
         -e <early stop, work in site crawl mode only> （配合整站爬取使用，多次检测到已经下载自动跳过该分类）
         -s <site url eg: http://www.xiurenji.vip (no last backslash "/")>
*************************************************************************************

微软『Windows』

性感美女爬虫 Windows【22.04.12】

2022年4月12日 39 条评论

22.4.12

增加-e early stop参数，配合整站爬取使用，单独无效。如果没有完成整站爬取不要使用该参数，终止逻辑过于简单粗暴。首次爬取尽量使用批处理死循环，开多进程处理。

22.1.24

1.增加-r参数，支持分类重拍，可以开启多个进程进行爬取。说实话就是姐姐太懒了，不想写多线程。

2.增加-c参数，支持爬取特定分类，请直接-c 分类地址。具体参数见下方使用说明。

22.1.26

1.调整timeout参数

2.增加加载失败重试逻辑

22.4.12 增加-e early stop参数，配合整站爬取使用，单独无效。如果没有完成整站爬取不要使用该参数，终止逻辑过于简单粗暴。首次爬取尽量使用批处理死循环，开多进程处理。 22.1.24 1.增加-r参数，支持分类重拍，可以开启多个进程进行爬取。说实话就是姐姐太懒了，不想写多线程。 2.增加-c参数，支持爬取特定分类，请直接-c 分类地址。具体参数见下方使用说明。 22.1.26 1.调整timeout参数 2.增加加载失败重试逻辑

22.4.12
增加-e early stop参数，配合整站爬取使用，单独无效。如果没有完成整站爬取不要使用该参数，终止逻辑过于简单粗暴。首次爬取尽量使用批处理死循环，开多进程处理。
22.1.24
1.增加-r参数，支持分类重拍，可以开启多个进程进行爬取。说实话就是姐姐太懒了，不想写多线程。
2.增加-c参数，支持爬取特定分类，请直接-c 分类地址。具体参数见下方使用说明。
22.1.26
1.调整timeout参数
2.增加加载失败重试逻辑