셀러리가 DBPageNotFoundError와 함께 죽습니다

Question

셀러 리 작업자와 rabbitmq가있는 3 대의 컴퓨터가 있는데 한 명의 작업자가 비트 플래그로 실행됩니다.이 모든 작업은 감독자가 담당하며 때로는 샐러리가 이러한 오류로 사망합니다. 이 오류는 비트 작업자에게만 나타나지만 나타나면 모든 컴퓨터의 작업자가 사망합니다. (셀러리 == 3.1.12, 다시마 == 3.0.20)은

[2014-07-05 08:37:04,297: INFO/MainProcess] Connected to amqp://user:**@192.168.15.106:5672// 
[2014-07-05 08:37:04,311: ERROR/Beat] Process Beat 
Traceback (most recent call last): 
File "/var/projects/env/local/lib/python2.7/site-packages/billiard/process.py", line 292, in _bootstrap 
self.run() 
File "/var/projects/env/local/lib/python2.7/site-packages/celery/beat.py", line 527, in run 
self.service.start(embedded_process=True) 
File "/var/projects/env/local/lib/python2.7/site-packages/celery/beat.py", line 453, in start 
humanize_seconds(self.scheduler.max_interval)) 
File "/var/projects/env/local/lib/python2.7/site-packages/kombu/utils/__init__.py", line 322, in __get__ 
value = obj.__dict__[self.__name__] = self.__get(obj) 
File "/var/projects/env/local/lib/python2.7/site-packages/celery/beat.py", line 491, in scheduler 
return self.get_scheduler() 
File "/var/projects/env/local/lib/python2.7/site-packages/celery/beat.py", line 486, in get_scheduler 
lazy=lazy) 
File "/var/projects/env/local/lib/python2.7/site-packages/celery/utils/imports.py", line 53, in instantiate 
return symbol_by_name(name)(*args, **kwargs) 
File "/var/projects/env/local/lib/python2.7/site-packages/celery/beat.py", line 357, in __init__ 
Scheduler.__init__(self, *args, **kwargs) 
File "/var/projects/env/local/lib/python2.7/site-packages/celery/beat.py", line 184, in __init__ 
self.setup_schedule() 
File "/var/projects/env/local/lib/python2.7/site-packages/celery/beat.py", line 376, in setup_schedule 
self._store['entries'] 
File "/usr/lib/python2.7/shelve.py", line 121, in __getitem__ 
f = StringIO(self.dict[key]) 
File "/usr/lib/python2.7/bsddb/__init__.py", line 270, in __getitem__ 
return _DeadlockWrap(lambda: self.db[key]) # self.db[key] 
File "/usr/lib/python2.7/bsddb/dbutils.py", line 68, in DeadlockWrap 
return function(*_args, **_kwargs) 
File "/usr/lib/python2.7/bsddb/__init__.py", line 270, in <lambda> 
return _DeadlockWrap(lambda: self.db[key]) # self.db[key] 
DBPageNotFoundError: (-30985, 'DB_PAGE_NOTFOUND: Requested page not found') 

Answer 1

나는이 문제로 실행했는데 원인은 (일반적으로 "celerybeat 스케줄"라는 이름의) 손상된 DB 파일이었다. 해결책은 기존 db 파일을 삭제하고 프로세스를 다시 시작하는 것입니다.

Relavent : bsddb.db.DBPageNotFoundError https://mail.python.org/pipermail/python-list/2009-October/554552.html

Answer 2

은 내가 /tmp 디렉토리에 일부 임시 파일을 제거했다. 하나는 celeryd-<NAME_OF_WORKER>-state이고 celeryd-<NAME_OF_WORKER>-state-renamed으로 명명되었습니다. 그 (것)들을 제거한 후에 나는 영향을받은 노동자를 다시 시작할 수 있었다.