search

Foair / course-crawler

🎓 中国大学MOOC、学堂在线、网易云课堂、好大学在线、爱课程 MOOC 课程下载。
https://mooc.xoy.io
MIT License
774 stars 196 forks source link

针对现阶段某些bug的修复&新功能使用的说明 #23

Open SigureMo opened 6 years ago

SigureMo commented 6 years ago

详情请参见我的文档，这里不会做太多更新了 我的分支点这里

由于Foair最近不资到去哪里了，所以最近出的某些bug本branch无法解决，我在我的branch对一些bug进行了修正，可以保证在一段时间内网易系课程（icourse163、study_mooc、study_163、open_163）和livedu的正常使用，但不会再去做很费时费力的新功能的支持（比如对付费破解功能的支持），下面对我的branch下的某些修改进行说明，方便Foair回来时候更快地对bug进行修正，并对文档中未说明部分进行额外的说明

我可爱的Foair，你快回来呀，想死你了:sob:

Foair commented 5 years ago

19 和 #21 已经修复，我看了一下你改的，那样就匹配不到任何富文本了，附件也都没有。

其他的，我慢慢改吧，容我缓一下，尽量每天更新，以后再也不拖更了。

感谢这些天一直热心回答问题，进行 bug 的修复。辛苦了 (^o^)

SigureMo commented 5 years ago

你总算回来了:grinning:

那个#19和#21貌似是我疏忽了？刚刚看了眼正则就看出来有问题:joy:

剩下的你慢慢改吧，这段时间我先溜了:stuck_out_tongue_closed_eyes:

SigureMo commented 5 years ago

近期更新的平台实在太多……基本就是这一个月内吧，学堂在线全面改版，中M视频接口全面改m3u8（包括pc端新旧接口，以及移动端），连好多年没有变过的网易公开课都改新界面了，即便是不会花费太多时间，我也无力去为每一个去支持与测试了，当然我也是不想放弃的，有很多想法我还没有去做，但是实在是……精力有限……

其实，有些新技术的应用对于爬虫来说更加方便了，不需要慢慢去爬取 HTML 并解析了，相应地，对用户也是更加的友好了，所以，今后我建议还是直接在平台上观看吧\~ 如果哪天我有需求，也许会再对我需求的某门课做下支持吧\~

Hanson7300 commented 4 years ago

近期更新的平台实在太多……基本就是这一个月内吧，学堂在线全面改版，中M视频接口全面改m3u8（包括pc端新旧接口，以及移动端），连好多年没有变过的网易公开课都改新界面了，即便是不会花费太多时间，我也无力去为每一个去支持与测试了，当然我也是不想放弃的，有很多想法我还没有去做，但是实在是……精力有限……

其实，有些新技术的应用对于爬虫来说更加方便了，不需要慢慢去爬取 HTML 并解析了，相应地，对用户也是更加的友好了，所以，今后我建议还是直接在平台上观看吧~ 如果哪天我有需求，也许会再对我需求的某门课做下支持吧~

edX今年1月更新了策略,不付费,过期以后没法回看;新版学堂在线也设置了课程有效期;同时强力推荐各种费用不菲的认证证书项目,用高校的信用做背书(反正不是学历证书,想发多少发多少);高校MOOC过去一直是用爱发电,而现在微信公众号里各路神仙都在卖课,高校MOOC平台也需要盈利,所以感觉以后好的资源会越来越难以获得,唉

xhlove commented 4 years ago

对于网易云课堂的付费课程倒不是很麻烦 在https://vod.study.163.com/eds/api/v1/vod/video这个api的返回数据中 对k进行解密得到用于解密视频的aes key就行了。 k的解密方法也简单，这里提供一下算法：

k = "..."
k = list(base64.b64decode(k.encode()))
cipher = AES.new(b"3fp4xs922ouw5q72", AES.MODE_CBC, bytes(k[:16]))
k = cipher.decrypt(bytes(k[16:])).decode("utf-8")
aes_key = json.loads(k.strip())["k"]

update： 写快了，这个解出来是key的url，并不是解密视频的key，另外这个url只能访问一次。