Playwright加载网页慢？设计一个页面缓存模块

0.前言 这个问题主要是针对某个tx系产品做Playwright自动化时，网页样式和JS指向的CDN地址死活加载不出来。同样的该系列的其他网站也是因为CDN无法加载导致网站无法进入。多次测试后发现就是tx那边的CDN把我们的IP给封了。 那怎么办？IP被封业务还是要继续下去的…

    122    2025-10-13    0 阅读更多

Windows Playwright NotImplementedError问题深究

0. 引言 今天来看一下这个困扰我很久的问题。是关于在FastAPI / NiceGUI 等基于Uvicorn环境下使用Async Playwright 提示NotImplementedError的问题。 本解决方案仅适用基于Uvicorn的异步环境，若需解决在Jupyter中无法使用Async Playwright的问题，请参阅：Runni…

    843    2025-06-18    0 阅读更多

对抗抖音X-Bogus、msToken新思路

0.前言 抖音为了对抗爬虫等非法访问行为，所有的网站均采用了JSVMP代码保护方案，以确保请求合法性及数据包完整有效性。所有的操作均在浏览器内部使用JS生成，若无法逆向X-Bogus及msToken算法，又或是自行补全参数生成环境将会耗费开发者大量时间。 虽然我们（一…

    2,471    2024-08-10    0 阅读更多