Docker 部署高性能抖音 TikTok 数据爬取工具,支持无水印视频下载
一、项目简介
此项目基于 PyWebIO、FastAPI 和 HTTPX,是一个高效的异步数据爬取工具,专注于抖音/TikTok平台的数据提取。通过Web端界面,用户可以在线批量解析并下载无水印的视频或图集。此外,本项目还提供了数据爬取API和iOS快捷指令,用于无水印内容的下载。您可以选择自行部署或对本项目进行改造,以实现更多功能。在您的项目中,可以直接调用 `scraper.py` 文件,或者通过现有的pip包安装,将其作为解析库来轻松获取数据。
支持功能:
网页端批量解析(支持抖音/TikTok混合解析)
在线下载视频或图集。
制作pip包方便快速导入你的项目
iOS快捷指令快速调用API实现应用内下载无水印视频/图集
完善的API文档(Demo/演示)
丰富的API接口:抖音网页版API(视频解析、用户信息、用户视频图片、直播流等),TikTok网页版API(视频解析、用户信息、用户视频图片、直播流等)、哔哩哔哩网页版API(单个视频详细信息、视频流地址、用户视频作品等)
二、安装准备
2.1、Docker 安装
确保当前服务器安装了 Docker,如果没有可以自行安装,也可以直接部署。
# docker 信息docker info
2.2、Cookie 获取(以抖音为例)
登陆网页版抖音,然后随便进入一个用户的主页,按 F12 打开开发者工具。按照下面步骤:选择 Network -> Fetch/XHR -> 刷新页面 -> 点击 post/? 接口 -> 复制 Cookie 所有的值(有用!)。如下图:
三、Docker 部署
3.1、修改Cookie
因为 douyin 风控的原因,需要替换成自己的 Cookie(而且在cookie失效时需要替换)
# 拉取代码git clone https://github.com/Evil0ctal/Douyin_TikTok_Download_API.git# 修改cookie 以抖音为例 (tiktok 目录在 crawler/tiktok )cd Douyin_TikTok_Download_API/crawlers/douyin/web/# 编辑 config.yamlvim config.yaml# 替换cookie,这个参数后面的替换成刚才获取到的cookieCookie: __ac_nonce=06629f03b000ca74fd5d0........
3.2、构建镜像
你可以选择使用 DockerHub 中构建好的镜像,也可以自己构建(推荐,因为要修改配置中的抖音cookie)
# 构建镜像(先安装docker 和 修改Cookie)docker build -t douyin-tiktok-api:latest .# 拉取官方镜像docker pull evil0ctal/douyin_tiktok_download_api:latest
注:如官方镜像拉取失败,请查看这篇文章:国内docker镜像无法访问,通过cloudflare白嫖个人docker镜像加速
3.3、运行容器
# 自己构建的镜像docker run -itd -p 80:80 --name douyin-tiktok-api --restart=always -v /etc/localtime:/etc/localtime:ro douyin-tiktok-api:latest# 官方镜像docker run -itd -p 80:80 --name douyin-tiktok-api --restart=always -v /etc/localtime:/etc/localtime:ro evil0ctal/douyin_tiktok_download_api:latest
3.4、验证容器
容器运行检查
docker ps
访问地址
# localhost 替换成当前服务器地址http://localhost:80# api文档界面http://localhost:80/docs
3.5、停止和删除容器
# Stopdocker stop douyin-tiktok-api
# Removedocker rm douyin-tiktok-api
四、Linux 部署
4.1、部署脚本
# 脚本是在Ubuntu 20.04 LTS上测试的,其他系统可能会有问题,如果有问题请自行解决。wget -O install.sh https://raw.githubusercontent.com/Evil0ctal/Douyin_TikTok_Download_API/main/bash/install.sh && sudo bash install.sh
4.2、启停命令
# 启动systemctl start Douyin_TikTok_Download_API.service# 停止systemctl stop Douyin_TikTok_Download_API.service
4.3、开机自启
# 添加开机自启systemctl enable Douyin_TikTok_Download_API.service# 删除开机自启systemctl disable Douyin_TikTok_Download_API.service
4.4、更新项目
cd /www/wwwroot/Douyin_TikTok_Download_API/bash && sudo bash update.sh
五、测试截图
抖音用户信息
用户主页视频数据
单个视频详情
六、项目地址
开源地址
https://github.com/Evil0ctal/Douyin_TikTok_Download_API
web端体验地址
https://douyin.wtf
文档地址
https://douyin.wtf/docs
推荐本站淘宝优惠价购买喜欢的宝贝:
本文链接:https://zblog.hqyman.cn/post/10656.html 非本站原创文章欢迎转载,原创文章需保留本站地址!
休息一下~~