本帖最后由 ermao 于 2021-4-8 21:19 编辑
https://gitee.com/erma0/douyin
取数据 + 写界面 + 下载
根据抖音各种链接或各种id,通过网页接口采集视频作品,并下载作品到本地。
支持用户主页链接或sec_uid/话题挑战和音乐原声链接或ID。
支持下载喜欢列表(需喜欢列表可见)。
在程序目录打开命令行,输入
双击打开,或者在程序目录打开命令行,输入
完全不懂Python的朋友用或。
- 直接运行可查看命令列表,或使用参数查看帮助
- 使用函数名调用程序
例如采集某用户全部作品:
例如采集某用户喜欢的前10个作品:
例如采集某音乐原声前10个作品:
- [x] 采集用户作品
- [x] 调用Aria2下载
- [x] 话题/原声作品采集
- [x] 喜欢作品采集
- [x] 导入文件批量采集
- [x] 命令行调用
- [x] 用webview写界面
- [x]
打包exe 不打包了,直接装个Python环境更简单
- 网页接口恢复了,一次请求即可取回数据
- UID几乎没用了,拼不成主页链接了,所有接口都是sec_uid
- signature可固定了,不用再扣JS了
- 作品中直接包含无水印视频地址了,不需要移动端UA也可跳转
- 话题/音乐作品数目
- 2021.04.02 喜欢列表也有数据了
- aria2p库使用体验还不错
- 大部分Aria2下载都是通过rpc接口实现的,这个也一样
- 需要自己下载来开启服务,所以要用代码实现自动启动服务
- 若文件已存在则跳过下载的方法:
- 可行,但控制台使用会报错,虽然报错不影响
- 可行,且控制台不报错
- 添加下载任务时通过指定指定文件名,即
- Aria2会根据指定路径及指定文件名自动创建下载目录
- Aria2指定路径及文件名中不能传入非法字符串(*|等),所以写了静态方法
- 监听事件要手动停止,不停止会阻塞进程,导致程序无法关闭
- 未发现实时获取任务进度及下载速度的函数,自己写了循环监听回调方法
- 通过或实现子进程打开程序,无界面,不阻塞
- 继承父类后重写init时,通过super().init()调用父类构造方法
- 继承父类后重写方法时,不能重写私有方法,不能读取私有成员
- 参数指定类型提示挺好用,方便调用参数的函数时自动补全
- 可通过简单判断系统是否为64位
- Pylance的自动导入依赖功能很好用,就是感觉时灵时不灵,重新开关后又可以用
- vscode默认启动路径是当前项目路径,在中加一句即可,不过自动补全pylance就无法识别相对目录了
- 用pipreqs一键生成当前项目依赖:cmd切换到项目路径,
- 最简单的方法就是直接一个fire.Fire(),暴露全部函数
- 如果用类或对象暴露,类参数需要单独指定
- 组合命令需要用不同的类,暴露的类中引入需用组合命令的类,但是在这个批量下载的场景下感觉比较繁琐,所以直接加了个参数,分两个函数来调用
- 可以把一个类的实例暴露给页面js_api,通过调用Python函数
- 也可以把Flask等服务实例暴露给页面js_api(无需url参数),在内部实现index.html
- Python中通过调用JS方法
- 在UI中,类的初始化无法传参,所以需要重新定义init
- 在UI中,需要公开的类实例方法不能以下划线开头
- 创建UI时设置的窗口宽高,好像和网页中大小不一样,值需要比网页中大一些
|