warcforceone/gfycat-grab

warcforceone/gfycat-grab 镜像说明

镜像概述

warcforceone/gfycat-grab是ArchiveTeam项目下的Gfycat内容归档工具镜像，基于开源组件（如seesaw、wget-lua）构建，支持多种运行模式，帮助用户参与Gfycat平台的内容归档工作，避免数据因平台变更或关闭而丢失。

核心功能

1. 多运行模式：支持通过ArchiveTeam Warrior平台简化参与流程，或独立运行以获得更灵活的配置；
2. 进度可视化：默认提供Web界面（http://localhost:8001）查看归档进度；
3. 高效归档：支持多线程并发与多IP绑定，提升归档效率；
4. 跨系统适配：兼容Debian/Ubuntu、CentOS、openSUSE、OS X、Arch Linux等多种操作系统。

使用场景

• 参与ArchiveTeam的Gfycat归档项目，贡献计算资源；
• 个人或组织需备份Gfycat平台上的特定内容；
• 学习Web归档技术与工具链的实践应用。

配置说明

基本准备

替换所有命令中的YOURNICKHERE为你希望在归档追踪器上显示的昵称（无需注册）。

运行方式

1. 通过Warrior运行

参考ArchiveTeam Warrior安装指南，安装后在Warrior界面选择"gfycat"项目即可。

2. 独立运行（无Warrior依赖）

1. 克隆仓库并进入目录：

   bash
   git clone https://github.com/ArchiveTeam/gfycat-grab.git && cd gfycat-grab
   

2. 安装依赖：

   bash
   pip install --upgrade seesaw
   ./get-wget-lua.sh
   

3. 启动归档：

   bash
   run-pipeline pipeline.py --concurrent 2 YOURNICKHERE
   

   • 无root权限时，使用--user参数安装到用户目录：

     bash
     wget https://raw.github.com/pypa/pip/master/contrib/get-pip.py ; python get-pip.py --user ; ~/.local/bin/pip install --upgrade --user seesaw
     ~/.local/bin/run-pipeline pipeline.py --concurrent 2 YOURNICKHERE
     

3. 多IP多实例运行

需seesaw版本≥0.0.16，指定绑定IP：

bash
run-pipeline pipeline.py --concurrent 2 YOURNICKHERE --disable-web-server --context-value bind_address=123.4.5.6

Docker部署示例

bash
docker run -d --name gfycat-archive -p 8001:8001 warcforceone/gfycat-grab run-pipeline pipeline.py --concurrent 2 YOURNICKHERE

（注：根据需求调整端口映射与并发数，如需绑定IP可添加--context-value bind_address=你的IP参数。）

系统特定配置

Debian/Ubuntu

bash
adduser --system --group --shell /bin/bash archiveteam
apt-get update && apt-get install -y git-core libgnutls28-dev lua5.1 liblua5.1-0 liblua5.1-0-dev screen python-dev python-pip bzip2 zlib1g-dev flex autoconf
pip install --upgrade seesaw
su -c "cd /home/archiveteam; git clone https://github.com/ArchiveTeam/gfycat-grab.git; cd gfycat-grab; ./get-wget-lua.sh" archiveteam
screen su -c "cd /home/archiveteam/gfycat-grab/; run-pipeline pipeline.py --concurrent 2 --address '127.0.0.1' YOURNICKHERE" archiveteam

CentOS

bash
yum -y install autoconf automake flex gnutls-devel lua-devel python-pip zlib-devel
pip install --upgrade seesaw
# 后续步骤同Debian/Ubuntu（克隆仓库、安装wget-lua、启动）

故障排查

• wget-lua构建失败：尝试手动移动编译后的文件：cd get-wget-lua.tmp && mv src/wget ../wget-lua；
• seesaw模块缺失：检查权限或使用pip2 install seesaw重新安装；
• rsync版本问题：OS X用户可尝试alias rsync=/usr/local/bin/rsync解决上传错误。

更多问题可参考ArchiveTeam文档或加入IRC频道#deadcat咨询。