学习通视频反爬解析与批量下载方法
本文以 C语言程序设计基础 公开课为例,公开课与加入学习的课程爬取方式不太一样,但底层的请求逻辑是一样的。 个人爬虫开发思想: 在浏览器的原生Javascript环境中运行JS代码以实现数据抓取。与传统Python爬虫相比,能够基本跳过环境的逆向、还原时间。 1.…
88 2025-04-07 0 阅读更多Javascript优雅的逐步运行异步函数
1.引言 关于如何逐步运行异步函数这种问题已经在网上搜了很久了。有用,但不是很有用,至少能让我知道有Async/Await和Promise这两种东西。 众所周知JS为了提升运行效率会优先执行无需等待的代码,需要耗时很长时间的代码会自动创建至子线程运行,等运行完成后再…
1,834 2023-05-22 0 阅读更多