Flask单元测试和SQLAlchemy使用所有连接

Question

Flask单元测试和SQLAlchemy使用所有连接

postgresqlsqlalchemyflaskflask-sqlalchemy

5

我最近在运行我的Flask应用程序的单元测试时遇到了一个问题，大约有100个单元测试。所有单元测试都将通过，但是当一次性运行它们时，它们会失败并显示以下错误：

OperationalError: (OperationalError) FATAL:  remaining connection slots are reserved for non-replication superuser connections

所有内容都在本地机器的virtualbox/vagrant/ubuntu12.04实例中运行。我的postgres max_connections设置为100，因此我认为连接没有关闭，在运行了100次测试后，我使用了所有可用的连接。

这个人Flask unit tests with SQLAlchemy and PostgreSQL exhausts db connections看起来遇到了完全相同的问题。Mike/Zzzeek (sqlalchemy开发者)甚至回复说可能在create_app()中发生了某些事情，因此我也将其包含在下面。

这是否意味着我没有在某个地方关闭连接？所有这些错误都是由我的unittest的setUp()方法中的db.create_all()触发的。

# test.py

class TestCase(DataMixin, Base):
    """Base test class"""

    def create_app(self):
        return create_app(TestConfig())

    def setUp(self):
        db.create_all()

    def tearDown(self):
        db.session.remove()
        db.drop_all()

# app.py

def create_app(config=None):
    app = Flask(__name__)

    # Config
    app.config.from_object(BaseConfig())
    if config is not None:
        app.config.from_object(config)

    # Extensions
    db.init_app(app)
    mail.init_app(app)
    bcrypt.init_app(app)

    # Blueprints
    app.register_blueprint(core_blueprint, url_prefix='/')
    app.register_blueprint(accounts_blueprint, url_prefix='/account')
    app.register_blueprint(admin_blueprint, url_prefix='/admin')
    app.register_blueprint(cart_blueprint, url_prefix='/cart')

    # Login Manager
    login_manager.setup_app(app, add_context_processor=True)
    login_manager.login_view = "accounts.login"
    login_manager.user_callback = load_user

    # Templates
    app.jinja_env.globals['is_admin'] = is_admin
    app.jinja_env.globals['is_staff'] = is_staff

    @app.context_processor
    def inject_cart():
        cart = count = None
        if current_user.is_authenticated():
            cart = current_user.get_cart()
        return dict(cart=cart)

    # Error Handling
    @app.errorhandler(404)
    def page_not_found(error):
        return render_template('404.html'), 404

    return app

- Adam P

1

可能是Flask单元测试与SQLAlchemy和PostgreSQL耗尽数据库连接的重复问题。 - Dag Høidahl

2个回答

8

我在这里找到了答案--https://dev59.com/mmkv5IYBdhLWcg3waAJT#17998485，以及一个很好的解释--https://dev59.com/mmkv5IYBdhLWcg3waAJT#16390645 解决方案是在tearDown()中添加db.get_engine(self.app).dispose()。

class TestCase(Base):
    def setUp(self):
        db.create_all()

    def tearDown(self):
        db.session.remove()
        db.drop_all()
        db.get_engine(self.app).dispose() # This

- Adam P

网页内容由stack overflow 提供, 点击上面的

可以查看英文原文，
原文链接

- Juan-Pablo Scaletti · Accepted Answer

更新：已测试并修复

不要每次都创建新的连接和重新创建数据库（速度慢），可以使用子会话，在每次测试后执行回滚。

连接会被重复利用，这也会解决你遇到的问题。

class TestCase(Base):

    @classmethod
    def setUpClass(cls):
        cls.app = create_app(MyConfig())
        cls.client = cls.app.test_client()
        cls._ctx = cls.app.test_request_context()
        cls._ctx.push()
        db.create_all()

    @classmethod
    def tearDownClass(cls):
        db.session.remove()
        db.drop_all()
        db.get_engine(cls.app).dispose()

    def setUp(self):
        self._ctx = self.app.test_request_context()
        self._ctx.push()
        db.session.begin(subtransactions=True)

    def tearDown(self):
        db.session.rollback()
        db.session.close()
        self._ctx.pop()

如果您需要为每个测试创建一个应用程序实例，只需将其添加到setUp方法中，但仍然保留在setUpClass中。

下面是完整的测试示例，需要flask_sqlalchemy和psycopg2。创建名为“test”的测试数据库，并将其连接限制设置为15。

from flask import Flask
from flask.ext.sqlalchemy import SQLAlchemy
from unittest import TestCase as Base


db = SQLAlchemy()

def create_app(config=None):
    app = Flask(__name__)
    app.config.from_object(config)
    db.init_app(app)
    return app


class MyConfig(object):
    SQLALCHEMY_DATABASE_URI = "postgresql://localhost/test"
    TESTING = True


class TestCase(Base):
    @classmethod
    def setUpClass(cls):
        cls.app = create_app(MyConfig())
        cls.client = cls.app.test_client()
        cls._ctx = cls.app.test_request_context()
        cls._ctx.push()
        db.create_all()

    @classmethod
    def tearDownClass(cls):
        db.session.remove()
        db.drop_all()   

    def setUp(self):
        self._ctx = self.app.test_request_context()
        self._ctx.push()
        db.session.begin(subtransactions=True)

    def tearDown(self):
        db.session.rollback()
        db.session.close()
        self._ctx.pop()


class TestModel(TestCase):

    def test_01(self):
        pass

    def test_02(self):
        pass

    def test_03(self):
        pass

    def test_04(self):
        pass

    def test_05(self):
        pass

    def test_06(self):
        pass

    def test_07(self):
        pass

    def test_08(self):
        pass

    def test_09(self):
        pass

    def test_10(self):
        pass

    def test_11(self):
        pass

    def test_12(self):
        pass

    def test_13(self):
        pass

    def test_14(self):
        pass

    def test_15(self):
        pass

    def test_16(self):
        pass


if __name__ == "__main__":
    import unittest
    unittest.main()