pymongo+gevent Pool 导致 mongodb 扛不住怎么办？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

推荐学习书目

› Learn Python the Hard Way

Python Sites

› PyPI - Python Package Index

› http://diveintopython.org/toc/index.html

› Pocoo

值得关注的项目

› PyPy

› Celery

› Jinja2

› Read the Docs

› gevent

› pyenv

› virtualenv

› Stackless Python

› Beautiful Soup

› 结巴中文分词

› Green Unicorn

› Sentry

› Shovel

› Pyflakes

› pytest

Python 编程

› pep8 Checker

Styles

› PEP 8

› Google Python Style Guide

› Code Style from The Hitchhiker's Guide

这是一个创建于 2946 天前的主题，其中的信息可能已经有所发展或是发生改变。

pymongo+gevent pool 导致 mongodb 卡死，报了一堆 AutoReconnectError 错误和 connection close ，我 pymongo 的 pool 和 gevent pool 都设置的不大（都为 100 ）有什么办法能很好的调控，又还能保证速度呢？

5 条回复 • 2016-10-30 22:43:34 +08:00

20150517

2016-10-29 22:26:21 +08:00

你不帖代码怎么看,或许是你的 query 有问题,或者是你的连接没有关闭,可能性太多了

SlipStupig

2016-10-30 00:45:55 +08:00

@20150517 代码有点多，基本上就是读取一个地方的数据写到数据库里，在__del__定义了 close ，但是似乎没有作用

ldbC5uTBj11yaeh5

2016-10-30 00:53:22 +08:00

@SlipStupig 大兄弟，用 __del__ 来实现 RAII 语义，在 python 里面不是正确的姿势。

正确的做法是使用 with 句式， contextlib 可能是你想要的。 https://docs.python.org/2.7/library/contextlib.html

SlipStupig

2016-10-30 11:30:53 +08:00

@jigloo 找到原因了，我用 signal 去关闭的，结果发现官网说的不对，直接 close 就行

JamesPan

2016-10-30 22:43:34 +08:00

这是把 __del__ 当作析构函数来用？