V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
anzu
V2EX  ›  问与答

关于下载字节流的问题

  •  
  •   anzu · 2020-09-29 11:11:51 +08:00 · 581 次点击
    这是一个创建于 1306 天前的主题,其中的信息可能已经有所发展或是发生改变。

    举个 python 的例子,其它语言应该差不多。

    async def example():
        chunk_size = 1024
        async with aiohttp.ClientSession() as session:
            async with session.get('example_url') as resp:
                with open('filename', 'wb') as fd:
                    while True:
                        chunk = await resp.content.read(chunk_size)
                        if not chunk:
                            break
                        fd.write(chunk)
                        # do something
                        pass
    

    我理解是程序只有在 read 的时候才会去请求远程数据,而不是一次性下载到内存

    那么问题来了,如果 fd.write 或后面 do something 的阻塞时间较长,远程服务器多久会断开链接?这取决于什么因素?

    是否可以利用 do something 的阻塞时间做下载限流?

    1 条回复    2020-09-29 12:34:48 +08:00
    unixeno
        1
    unixeno  
       2020-09-29 12:34:48 +08:00 via Android
    read 是从 buffer 里 read
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   1666 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 16:36 · PVG 00:36 · LAX 09:36 · JFK 12:36
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.