求推特爬虫(付费合作)
需求:
- 抓取账号最新的推文,频率较高。例如输入账号 ID ,自动每 30 秒抓一次,不间断
- 目标账号较多,需要同时监控上万计的账号
若有意向,可加微信联系合作:doingli
报个价吧先
一眼打狗
一堆开源吧
现在 twitter 的 api 需要付费了吧
apidance.pro/
有这么多 kol 要监测么
土狗现在还好冲吗。
github.com/mikf/gallery-dl
几万可还行,有那么多要监控的账号吗
你们说的这个”狗“是什么意思啊? V 友们说话好难懂哦
几万个账号,30s 抓一次,是不是只能用 twitter 的付费 api 最稳妥
当网友评论 [土狗现在还好冲吗。] 和 [一眼打狗] 时,他们可能是在讨论以下内容:
- 加密货币( Meme 币)
土狗:在加密货币社区中,“土狗”通常指一些低市值、高风险、甚至带有搞笑或 meme 性质的加密货币(如 Dogecoin 、Shiba Inu 等)。
好冲吗:询问现在是否适合买入或投资这些加密货币。
一眼打狗:可能是指一眼就能看出某个加密货币是“土狗币”(即高风险、低价值的币)。
示例对话
A:土狗现在还好冲吗?
B:一眼打狗,别冲了,风险太大。
yt-dlp 就能抓 X ,有视频还能顺便把视频下载了,写个脚本调用 yt-dlp 并行大量去处理就行了
想要求最稳的话,是。否则不需要,刮刀跑这点量很轻松
这个不是下载视频的吗
#15 是啊,如果 twitter 页面没有视频 yt-dlp 也会把内容用 json 返回回来,有视频会同时下载视频和 json ,不用自己去研究页面结构了
rapidapi.com/davethebeast/api/twitter241
你是什么部门的?
这么大的量估计很快就封 ip 了,得用 openapi 了
成本很高。还好 twitter 没有 facebook 那么严格
30S 一次 不更新的博文也抓? 正常一个账号没必要 30S 一次的,间隔可以再长一点,账号太多的话要考虑推封 IP 的清空,除非有大量代理,从中找平衡点。要爬数据可以找我,哈哈哈
Apify store 去搜吧, 一大堆付费的. 还能使用 apify 的 residential 设备
打狗跟赌博有什么区别,都是在暴富跟归零之间疯狂试探
#13 这不是抓 youtube 的么,还能抓推特啊
有没有公司的产品是基于多家公有云的。一家云出了问题,可以平滑切换到其他云计算厂商?感觉现在一家云厂商出故障,都只能干着急。那我如果不差钱,同时买多家的云产品,a 有问题,我可以…
手里的 pixel7a , 下午换了一个移动的 NFC SIM 卡, 使用 和包 app ,办理了一个公交卡,充值 10 块钱, 然后去坐公交,刷卡失败; 回到小区,办理一个门…
之前有一个 google voice 的号码,一直要求提供美国实体手机号,一直没处理。最近发现号码被收回了,重新注册时发现需要提供美国实体手机号码,现在有没有办法获得这个手机号…