V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
inory009
V2EX  ›  程序员

一个基于腾讯云函数服务的代理池

  •  1
     
  •   inory009 · 2021-04-18 20:05:59 +08:00 · 5457 次点击
    这是一个创建于 1341 天前的主题,其中的信息可能已经有所发展或是发生改变。

    前几天阅读一篇文章发现腾讯云函数可以作为免费的 HTTP 代理池使用。这几天用 mitmproxy 实现了一个代理服务器,中途遇到各种 bug 。。所以采用了直接序列化 requests 实现的,欢迎来玩玩,提提 issue 之类。

    项目地址: https://github.com/shimmeris/SCFProxy

    13 条回复    2021-04-19 12:21:41 +08:00
    fancyhan
        1
    fancyhan  
       2021-04-18 21:03:10 +08:00 via iPhone
    腾讯律师函警告
    prenwang
        2
    prenwang  
       2021-04-18 21:53:33 +08:00
    idc 的 ip 都是被各大网站降权的
    wangyu17455
        3
    wangyu17455  
       2021-04-18 22:13:03 +08:00 via Android
    这样算是滥用吧?
    scukmh
        4
    scukmh  
       2021-04-18 22:20:06 +08:00
    @prenwang 本来就不是给你用来搞 爬虫 的。主要用途是 R(ed)T 。
    scukmh
        5
    scukmh  
       2021-04-18 22:20:56 +08:00
    @scukmh 专治各种买了威胁情报的厂商(跑
    HeyWeGo
        7
    HeyWeGo  
       2021-04-18 23:37:53 +08:00
    那片文章出自某个公众号吧,没出多久就删了,显然作者知道有人会以此出头
    ch2
        8
    ch2  
       2021-04-19 00:22:18 +08:00 via iPhone
    @wangyu17455 不算滥用,这个本质上跟你自己开一台服务器搭 mitmproxy 没有任何区别。而且云函数的 ip 每个用户分到的都是固定的几个,不会让你随便换 ip 的,搭出来的成品没有任何用处
    eason1874
        9
    eason1874  
       2021-04-19 01:09:45 +08:00
    我留意过日志,确实来来去去就几个 IP,不清楚是用户级别的限制还是产品级别的限制,反正肯定做不成 IP 池。
    lovestudykid
        10
    lovestudykid  
       2021-04-19 02:58:15 +08:00 via iPhone
    不知道腾讯怎样,aws lambda 、vercel 都是禁止做代理的。实际上也没用,ip 很少,很容易被 recaptcha 限制
    zhuweiyou
        11
    zhuweiyou  
       2021-04-19 09:49:05 +08:00
    可以说没啥用, 你多请求几次就会发现总是那几个 IP
    inory009
        12
    inory009  
    OP
       2021-04-19 12:03:12 +08:00
    @zhuweiyou 也不是说一定要做代理池,更大的作用是攻防场景下连接 webshell 用来隐藏自己的真实 ip 之类
    inory009
        13
    inory009  
    OP
       2021-04-19 12:21:41 +08:00
    测试了一下 200 个请求分配了 71 个 ip,个人感觉还行
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5269 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 08:09 · PVG 16:09 · LAX 00:09 · JFK 03:09
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.