.:. 草榴社區 » 技術討論區 » [原创] 汤不热抓取工具(附小白使用指南)(0814更新)
手機版 轉到動態網頁 回帖 發布主題
--> 本頁主題: [原创] 汤不热抓取工具(附小白使用指南)(0814更新)
Verocotor


級別: 新手上路 ( 8 )
發帖: 207
威望: 23 點
金錢: 17 USD
貢獻: 79 點
註冊: 2013-02-16


[原创] 汤不热抓取工具(附小白使用指南)(0814更新)



技术交流,请版主大大谅解一下~

5月份时候写了一个简单的脚本,用于抓取汤不热内容。后来几次更新,代码乱成一团糟,昨晚用了几个小时,全部重写了一下。独乐乐不如众乐乐,把这个工具介绍给大家,可以试用一下。

不能附链接,请手动复制并访问以下网址
Github项目地址:  github.com/seanhuai/tumblr-source-list
技术文档地址:  www.ruye.org.cn/2017/08/tumblr-source-list

当前版本 0.170814.2 fixed

有 github 账户的,不介意点个 star~
有操作能力的用户,参考以下指南图片自行操作
没有经验的,参考本文后附面向小白的使用指南

 
 
 
 
 

面向小白的使用指南:
注意:以下说明需要建立在已翻墙的基础上,你需要知晓你的代理软件的工作端口。

准备工作:
1. 百度 'git' ,进入 git-scm.com 下载客户端。百度 'python'  下载 3.0 版以上客户端。(Windows 用户下载 Windows 版本即可)
2. 安装 git 客户端,安装完成后,开始菜单中选择 git 文件夹,启动 git-bash。
3. 执行命令 cd /d (此处的 d 意为你设定的下载位置,/d 即指设定为 D盘,/d/abc  即指设定为 D盘下abc文件夹,其余同理 ),执行完成后,输入命令 git clone https://github.com/seanhuai/tumblr-source-list 下载本工具代码
4. 执行命令 cd tumblr-source-list 进入本工具文件夹
(可选:修改 packages 文件夹下 _profiles.py 文件中 port 属性值为你的代理软件的工作端口)

操作指南:
1. 基本命令: python app.py (模式) (值)
2. 模式:当前支持 username / posturl 两个模式
3. 用户模式:获取指定用户的图片或视频资源,该模式下值按 ‘python app.py username 用户名 资源类型 获取内容页数’ 输入,媒体类型仅支持 photo / video 两种类型。
举个栗子:
获取 u44002 用户的 3页 图片,输入  python app.py  username  u44002 photo 3 回车即可。
获取 u44002 用户的 6页 视频,输入  python app.py  username  u44002 video 6  回车即可。
4. 链接模式:获取指定 tumblr链接 包含的内容,该模式下值按 ‘python app.py posturl 链接’ 输入。
举个栗子:
获取 https://wsyghf.tumblr.com/post/150478441406 这个页面的内容,输入 python app.py posturl https://wsyghf.tumblr.com/post/150478441406 回车即可。

常见问题:
1. 返回401错误:
apikey 不正确,或输入的网址格式错误
2. 返回429错误:
超出api获取限制,请自行注册apikey,详情访问 api.tumblr.com
3. 提示 ‘你正在获取的内容不宜于未成年人......’  等内容:
如果你获取的是敏感内容(不适宜于未成年人的内容)时,会有此提示,如输入 Y 后回车将继续执行,输入其他内容将中断执行。
4. 不提示 ‘你正在获取的内容不宜于未成年人......’  等内容,但有乱码提示:
可能是字符集设置问题,不影响操作,可参考上一条处理。


[ 此貼被Verocotor在2017-08-14 18:21重新編輯 ]
TOP Posted:2017-08-11 18:04 | 回樓主
mayizhen


級別: 光明使者 ( 14 )
發帖: 90353
威望: 17918 點
金錢: 114 USD
貢獻: 563 點
註冊: 2011-12-02


支持技术分享
------------------------
+
TOP Posted:2017-08-11 18:11 | 回1樓
百味人生1981


級別: 俠客 ( 9 )
發帖: 1779
威望: 179 點
金錢: 56 USD
貢獻: 77 點
註冊: 2016-05-03


支持原创感谢分享技术帖
TOP Posted:2017-08-11 18:14 | 回2樓
无心出岫


級別: 新手上路 ( 8 )
發帖: 38
威望: 4 點
金錢: 38 USD
貢獻: 0 點
註冊: 2017-08-08

1024
TOP Posted:2017-08-11 18:19 | 回3樓
上邪丶


級別: 新手上路 ( 8 )
發帖: 323
威望: 33 點
金錢: 68 USD
貢獻: 0 點
註冊: 2015-05-20

新手不懂怎么使用有没有教程
TOP Posted:2017-08-11 18:19 | 回4樓
三省武神


級別: 新手上路 ( 8 )
發帖: 266
威望: 61 點
金錢: 114 USD
貢獻: 0 點
註冊: 2017-02-22

1024
TOP Posted:2017-08-11 18:21 | 回5樓
xiana506


級別: 聖騎士 ( 11 )
發帖: 7634
威望: 728 點
金錢: 109 USD
貢獻: 1175 點
註冊: 2016-03-28

感谢分享
TOP Posted:2017-08-11 18:23 | 回6樓
那一夜的温柔


級別: 騎士 ( 10 )
發帖: 2896
威望: 416 點
金錢: 56 USD
貢獻: 3 點
註冊: 2015-02-04

技术帝,感谢分享
TOP Posted:2017-08-11 18:25 | 回7樓
xialu


級別: 俠客 ( 9 )
發帖: 1856
威望: 183 點
金錢: 757 USD
貢獻: 10 點
註冊: 2016-04-21

谢谢分享
TOP Posted:2017-08-11 18:55 | 回8樓
雨夜忆佳人


級別: 新手上路 ( 8 )
發帖: 724
威望: 73 點
金錢: 585 USD
貢獻: 11 點
註冊: 2017-04-10

感觉很厉害的样子。感谢分享。
TOP Posted:2017-08-11 19:00 | 回9樓
扒蒜小妹


級別: 新手上路 ( 8 )
發帖: 967
威望: 97 點
金錢: 0 USD
貢獻: 0 點
註冊: 2017-02-03

技术不错,记得曾经有个聚聚把抓取的大包分享了,可以里面很多都不全。
TOP Posted:2017-08-11 19:01 | 回10樓
子曰淡定


級別: 俠客 ( 9 )
發帖: 1112
威望: 112 點
金錢: 102 USD
貢獻: 50 點
註冊: 2017-02-23


感谢分享
TOP Posted:2017-08-11 19:03 | 回11樓
zhangyukele


級別: 新手上路 ( 8 )
發帖: 513
威望: 52 點
金錢: 67 USD
貢獻: 2 點
註冊: 2014-04-25

看不懂。1024
TOP Posted:2017-08-11 19:04 | 回12樓
幽灵雨雪


級別: 新手上路 ( 8 )
發帖: 806
威望: 81 點
金錢: 78 USD
貢獻: 0 點
註冊: 2015-10-03

技术啊,虽说看不懂
TOP Posted:2017-08-11 19:11 | 回13樓
狂艹6


級別: 精靈王 ( 12 )
發帖: 3392
威望: 1654 點
金錢: 100546 USD
貢獻: 7500 點
註冊: 2015-07-05
認證: 技術區認證會員

技术贴,必须前排支持一下
------------------------
6
TOP Posted:2017-08-11 19:19 | 回14樓
hirochan


級別: 俠客 ( 9 )
發帖: 1450
威望: 146 點
金錢: 5109 USD
貢獻: 3000 點
註冊: 2014-10-23

支持技术分享,好像汤上的视频都很短
TOP Posted:2017-08-11 19:33 | 回15樓
Herb


級別: 精靈王 ( 12 )
發帖: 946
威望: 143 點
金錢: 60 USD
貢獻: 75120 點
註冊: 2015-01-19

玩代码的都是技术达人
TOP Posted:2017-08-11 19:38 | 回16樓
蓝靖宇


級別: 俠客 ( 9 )
發帖: 1874
威望: 244 點
金錢: 220 USD
貢獻: 0 點
註冊: 2011-12-10


后悔原来没注册汤
TOP Posted:2017-08-11 19:38 | 回17樓
暴走


級別: 騎士 ( 10 )
發帖: 5634
威望: 564 點
金錢: 327 USD
貢獻: 1080 點
註冊: 2015-10-24

感谢分享
------------------------
P
TOP Posted:2017-08-11 19:40 | 回18樓
曲茎向天歌


級別: 新手上路 ( 8 )
發帖: 886
威望: 95 點
金錢: 51 USD
貢獻: 8 點
註冊: 2011-06-06

技术贴必须支持1024
TOP Posted:2017-08-11 19:41 | 回19樓
无敌小号


級別: 新手上路 ( 8 )
發帖: 55
威望: 6 點
金錢: 65 USD
貢獻: 0 點
註冊: 2016-03-18

1024
TOP Posted:2017-08-11 19:41 | 回20樓
静静的蝎子


級別: 俠客 ( 9 )
發帖: 1582
威望: 159 點
金錢: 345 USD
貢獻: 2 點
註冊: 2017-03-30

试试看
TOP Posted:2017-08-11 19:47 | 回21樓
yuaaida


級別: 俠客 ( 9 )
發帖: 682
威望: 139 點
金錢: 31956 USD
貢獻: 100 點
註冊: 2017-01-29

支持技术贴
TOP Posted:2017-08-11 19:48 | 回22樓
科比无罪


級別: 聖騎士 ( 11 )
發帖: 8496
威望: 989 點
金錢: 33 USD
貢獻: 54 點
註冊: 2014-12-13


很厉害的样子
------------------------
z
TOP Posted:2017-08-11 19:49 | 回23樓
很哇塞的汉子


級別: 新手上路 ( 8 )
發帖: 657
威望: 67 點
金錢: 116 USD
貢獻: 201 點
註冊: 2015-10-13

感谢分享
TOP Posted:2017-08-11 19:52 | 回24樓

.:. 草榴社區 -> 技術討論區

快速回帖 頂端
內容
HTML 代碼不可用

使用簽名
Wind Code自動轉換

按 Ctrl+Enter 直接提交