允许另一个节点的用户,使用自己的帐号信息,爬取 b 站、微博抖音之类的公开页面,发送给这个用户。
大家一起相互帮助,每天大量抓取页面看新闻就很方便了。
有点类似于 PT.
允许另一个节点的用户,使用自己的帐号信息,爬取 b 站、微博抖音之类的公开页面,发送给这个用户。
大家一起相互帮助,每天大量抓取页面看新闻就很方便了。
有点类似于 PT.
容易被风控吧,一些付费墙文章镜像的模式可能更容易?
ps,记得很久很久以前记得有类似的浏览器扩展,在一些需要付费登录的网站,可以通过扩展获取一个用于登录的账号。 又搜了一下, https://bugmenot.com/
看来是类似这样的东西
記得以前好像有過類似的
原理是共享 cookie ,後來就全沒了
B站、电视直播这种已知源格式这种应该相对容易点,类似于invidious这种东西
弄浏览器没必要,大家都有自己顺手的主用浏览器。
我弄了个类似的玩意
,虽然有在github上开源,但被我弄的有点屎山了,ai重弄一个更好的很容易。
如果想爬得快就得分布式。单个帐号只能爬一部分数据。
比如想把 B 站给扒下来的话。
你猜某些服务商卖的动态家宽是哪里来的
,就是他们的定制app把用户当作exit node来用的