使用Python/Django和supervisor的成长过程

发布于 2025-01-05 06:09:51 字数 361 浏览 1 评论 0原文

我正在使用 django 1.3，并且正在使用 Supervisor 在 Web 上下文之外运行脚本。

该进程的内存使用量每分钟都在增长

代码看起来或多或少像这样：

while(1):
   for auction in auction_list:
       auction.update_auction()

    db.reset_queries()
    db.close_connection()
    sleep(1)

添加 close_connection 通过避免表上的锁帮助我解决了这个问题，但现在我遇到了这个不断增长的进程问题。

我该如何管理才能避免这种情况？

原文

I am using django 1.3 and i am running a script outside of a web context using supervisor.

The memory usage of the process is growing every minute

The code look more or less like this :

while(1):
   for auction in auction_list:
       auction.update_auction()

    db.reset_queries()
    db.close_connection()
    sleep(1)

Adding close_connection helped me out by avoiding LOCKS on the table but now i have this growing process problem.

How could i manage things to avoid this ?

分享到QQ

分享到微博

如果你对这篇内容有疑问，欢迎到本站社区发帖提问参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。

发布评论

需要登录才能够评论，你可以免费注册一个本站的账号。

那小子欠揍 2025-01-12 06:09:51

我找到了解决方案。 close_connection() 负责增加内存。看来它来自于数据库的连接/断开。

我是这样进行的：

    while(1):
        # Get auction list
        auction_list = Auction.objects.all()

        # Checking auctions
        for auction in auction_list:
            auction.update_auction()


        # Remove connection statements
        db.reset_queries()

        # Release lock tables
        db.transaction.commit_unless_managed()

        # Pause
        sleep(1)

使用 commit_unless_management() ，守护进程保持连接打开，并且在不完全锁定 MyISAM 表的情况下不会在内存中增长。

I found a solution. The close_connection() was responsible for the growing memory. It seems that it cames from the connection/disconnection from the database.

I proceeded this way:

    while(1):
        # Get auction list
        auction_list = Auction.objects.all()

        # Checking auctions
        for auction in auction_list:
            auction.update_auction()


        # Remove connection statements
        db.reset_queries()

        # Release lock tables
        db.transaction.commit_unless_managed()

        # Pause
        sleep(1)

With commit_unless_managed() the daemon keeps the connection open and doesn't grow in memory without locking completely the MyISAM table.

回复收藏 0 原文