Closed trim21 closed 2 years ago
定期导出 wiki 数据方便一些不需要实时数据的场景，顺便希望减少一些爬虫。
导出的数据为主键和原始wiki内容，即用户在/subject/1/edit或类似页面填写的原始内容。
会导出的数据包括：
条目：
人物：
角色同人物
条目之间的关联，条目，人物，角色两两之间的关联。
会导出为json lines格式，每个表单独一个文件。使用gzip压缩后放在github releases。
每周GMT+8 周三凌晨五点更新。
条目的原始SQL经过7z压缩后约100MB，整体应该不会很大。
@Sai
GMT+8 周三凌晨五点是访问低谷
Sai
commented
2 years ago Sai
commented
2 years ago
定期导出 wiki 数据方便一些不需要实时数据的场景，顺便希望减少一些爬虫。
导出的数据为主键和原始wiki内容，即用户在/subject/1/edit或类似页面填写的原始内容。
会导出的数据包括：
条目：
人物：
角色同人物
条目之间的关联，条目，人物，角色两两之间的关联。
会导出为json lines格式，每个表单独一个文件。使用gzip压缩后放在github releases。
每周GMT+8 周三凌晨五点更新。
条目的原始SQL经过7z压缩后约100MB，整体应该不会很大。
@Sai