繁体   English   中英

如何使 Python 脚本在 Linux 中像服务或守护进程一样运行

[英]How to make a Python script run like a service or daemon in Linux

我写了一个 Python 脚本来检查某个电子邮件地址并将新电子邮件传递给外部程序。 我怎样才能让这个脚本全天候执行 24/7,例如将它变成 Linux 中的守护进程或服务。我是否还需要一个在程序中永不结束的循环,或者是否可以通过多次重新执行代码来完成?

您在这里有两个选择。

  1. 制作一个适当的cron 作业来调用您的脚本。 Cron 是 GNU/Linux 守护进程的通用名称,它根据您设置的时间表定期启动脚本。 您将脚本添加到 crontab 或将它的符号链接放入一个特殊目录,守护进程处理在后台启动它的工作。 您可以在 Wikipedia 上阅读更多内容。 有多种不同的 cron 守护进程,但您的 GNU/Linux 系统应该已经安装了它。

  2. 使用某种python 方法(例如一个库)让你的脚本能够自我守护。 是的,它需要一个简单的事件循环(其中您的事件是定时器触发,可能由睡眠功能提供)。

我不建议您选择 2.,因为实际上您会重复 cron 功能。 Linux 系统范式是让多个简单的工具交互并解决您的问题。 除非有其他原因需要创建守护程序(除了定期触发),否则请选择其他方法。

此外,如果您在循环中使用 daemonize 并且发生崩溃,则此后没有人会检查邮件(正如Ivan Nevostruev对此答案的评论中所指出的那样)。 而如果脚本作为 cron 作业添加,它只会再次触发。

这是从这里获取的一个不错的类:

#!/usr/bin/env python

import sys, os, time, atexit
from signal import SIGTERM

class Daemon:
        """
        A generic daemon class.

        Usage: subclass the Daemon class and override the run() method
        """
        def __init__(self, pidfile, stdin='/dev/null', stdout='/dev/null', stderr='/dev/null'):
                self.stdin = stdin
                self.stdout = stdout
                self.stderr = stderr
                self.pidfile = pidfile

        def daemonize(self):
                """
                do the UNIX double-fork magic, see Stevens' "Advanced
                Programming in the UNIX Environment" for details (ISBN 0201563177)
                http://www.erlenstar.demon.co.uk/unix/faq_2.html#SEC16
                """
                try:
                        pid = os.fork()
                        if pid > 0:
                                # exit first parent
                                sys.exit(0)
                except OSError, e:
                        sys.stderr.write("fork #1 failed: %d (%s)\n" % (e.errno, e.strerror))
                        sys.exit(1)

                # decouple from parent environment
                os.chdir("/")
                os.setsid()
                os.umask(0)

                # do second fork
                try:
                        pid = os.fork()
                        if pid > 0:
                                # exit from second parent
                                sys.exit(0)
                except OSError, e:
                        sys.stderr.write("fork #2 failed: %d (%s)\n" % (e.errno, e.strerror))
                        sys.exit(1)

                # redirect standard file descriptors
                sys.stdout.flush()
                sys.stderr.flush()
                si = file(self.stdin, 'r')
                so = file(self.stdout, 'a+')
                se = file(self.stderr, 'a+', 0)
                os.dup2(si.fileno(), sys.stdin.fileno())
                os.dup2(so.fileno(), sys.stdout.fileno())
                os.dup2(se.fileno(), sys.stderr.fileno())

                # write pidfile
                atexit.register(self.delpid)
                pid = str(os.getpid())
                file(self.pidfile,'w+').write("%s\n" % pid)

        def delpid(self):
                os.remove(self.pidfile)

        def start(self):
                """
                Start the daemon
                """
                # Check for a pidfile to see if the daemon already runs
                try:
                        pf = file(self.pidfile,'r')
                        pid = int(pf.read().strip())
                        pf.close()
                except IOError:
                        pid = None

                if pid:
                        message = "pidfile %s already exist. Daemon already running?\n"
                        sys.stderr.write(message % self.pidfile)
                        sys.exit(1)

                # Start the daemon
                self.daemonize()
                self.run()

        def stop(self):
                """
                Stop the daemon
                """
                # Get the pid from the pidfile
                try:
                        pf = file(self.pidfile,'r')
                        pid = int(pf.read().strip())
                        pf.close()
                except IOError:
                        pid = None

                if not pid:
                        message = "pidfile %s does not exist. Daemon not running?\n"
                        sys.stderr.write(message % self.pidfile)
                        return # not an error in a restart

                # Try killing the daemon process       
                try:
                        while 1:
                                os.kill(pid, SIGTERM)
                                time.sleep(0.1)
                except OSError, err:
                        err = str(err)
                        if err.find("No such process") > 0:
                                if os.path.exists(self.pidfile):
                                        os.remove(self.pidfile)
                        else:
                                print str(err)
                                sys.exit(1)

        def restart(self):
                """
                Restart the daemon
                """
                self.stop()
                self.start()

        def run(self):
                """
                You should override this method when you subclass Daemon. It will be called after the process has been
                daemonized by start() or restart().
                """

您应该使用python-daemon库,它会处理一切。

来自 PyPI:用于实现行为良好的 Unix 守护进程的库。

您可以使用 fork() 将脚本与 tty 分离并让它继续运行,如下所示:

import os, sys
fpid = os.fork()
if fpid!=0:
  # Running as daemon now. PID is fpid
  sys.exit(0)

当然你还需要实现一个无限循环,比如

while 1:
  do_your_check()
  sleep(5)

希望这让你开始。

假设您真的希望您的循环作为后台服务 24/7 全天候运行

对于不涉及使用库注入代码的解决方案,您可以简单地创建一个服务模板,因为您使用的是 linux:

[Unit]
Description = <Your service description here>
After = network.target # Assuming you want to start after network interfaces are made available
 
[Service]
Type = simple
ExecStart = python <Path of the script you want to run>
User = # User to run the script as
Group = # Group to run the script as
Restart = on-failure # Restart when there are errors
SyslogIdentifier = <Name of logs for the service>
RestartSec = 5
TimeoutStartSec = infinity
 
[Install]
WantedBy = multi-user.target # Make it accessible to other users

将该文件放在您的守护程序服务文件夹(通常是/etc/systemd/system/ )中的*.service文件中,并使用以下 systemctl 命令进行安装(可能需要 sudo 权限):

systemctl enable <service file name without .service extension>

systemctl daemon-reload

systemctl start <service file name without .service extension>

然后,您可以使用以下命令检查您的服务是否正在运行:

systemctl | grep running

您还可以使用 shell 脚本使 python 脚本作为服务运行。 首先创建一个shell脚本来运行这样的python脚本(scriptname任意名称)

#!/bin/sh
script='/home/.. full path to script'
/usr/bin/python $script &

现在在 /etc/init.d/scriptname 中创建一个文件

#! /bin/sh

PATH=/bin:/usr/bin:/sbin:/usr/sbin
DAEMON=/home/.. path to shell script scriptname created to run python script
PIDFILE=/var/run/scriptname.pid

test -x $DAEMON || exit 0

. /lib/lsb/init-functions

case "$1" in
  start)
     log_daemon_msg "Starting feedparser"
     start_daemon -p $PIDFILE $DAEMON
     log_end_msg $?
   ;;
  stop)
     log_daemon_msg "Stopping feedparser"
     killproc -p $PIDFILE $DAEMON
     PID=`ps x |grep feed | head -1 | awk '{print $1}'`
     kill -9 $PID       
     log_end_msg $?
   ;;
  force-reload|restart)
     $0 stop
     $0 start
   ;;
  status)
     status_of_proc -p $PIDFILE $DAEMON atd && exit 0 || exit $?
   ;;
 *)
   echo "Usage: /etc/init.d/atd {start|stop|restart|force-reload|status}"
   exit 1
  ;;
esac

exit 0

现在您可以使用命令 /etc/init.d/scriptname start 或 stop 启动和停止您的 python 脚本。

一个简单且受支持的版本Daemonize

从 Python Package Index (PyPI) 安装它:

$ pip install daemonize

然后使用像:

...
import os, sys
from daemonize import Daemonize
...
def main()
      # your code here

if __name__ == '__main__':
        myname=os.path.basename(sys.argv[0])
        pidfile='/tmp/%s' % myname       # any name
        daemon = Daemonize(app=myname,pid=pidfile, action=main)
        daemon.start()

cron显然是许多用途的绝佳选择。 但是,它不会按照您在 OP 中的要求创建服务或守护程序。 cron只是定期运行作业(意味着作业开始和停止),并且不超过一次/分钟。 cron存在问题——例如,如果您的脚本的先前实例在下一次cron计划出现并启动新实例时仍在运行,是否可以? cron不处理依赖项; 它只是在计划说到时尝试开始工作。

如果您发现确实需要守护进程(永不停止运行的进程)的情况,请查看supervisord 它提供了一种简单的方法来包装一个普通的、非守护进程的脚本或程序,并使其像守护进程一样运行。 这比创建原生 Python 守护进程要好得多。

在 linux 上使用$nohup命令怎么样?

我用它在我的 Bluehost 服务器上运行我的命令。

如果我错了,请指教。

如果您正在使用终端(ssh 或其他东西),并且希望在从终端注销后保持脚本长时间工作,您可以尝试以下操作:

screen

apt-get install screen

在里面创建一个虚拟终端(即 abc): screen -dmS abc

现在我们连接到 abc: screen -r abc

所以,现在我们可以运行 python 脚本: python keep_sending_mails.py

从现在开始,您可以直接关闭终端,但是,python 脚本将继续运行而不是被关闭

由于这个keep_sending_mails.py的 PID 是虚拟屏幕的子进程而不是终端(ssh)

如果你想回去检查你的脚本运行状态,你可以再次使用screen -r abc

Ubuntu 有一种非常简单的方法来管理服务。 对于python,不同之处在于所有依赖项(包)必须位于运行主文件的同一目录中。

我只是设法创建这样的服务来向我的客户提供天气信息。 脚步:

  • 像往常一样创建您的 Python 应用程序项目。

  • 在本地安装所有依赖项,例如: sudo pip3 install package_name -t 。

  • 创建命令行变量并在代码中处理它们(如果需要)

  • 创建服务文件。 一些(极简主义)像:

     [Unit] Description=1Droid Weather meddleware provider [Service] Restart=always User=root WorkingDirectory=/home/ubuntu/weather ExecStart=/usr/bin/python3 /home/ubuntu/weather/main.py httpport=9570 provider=OWMap [Install] WantedBy=multi-user.target
  • 将文件另存为 myweather.service(例如)

  • 如果在当前目录中启动,请确保您的应用程序运行

     python3 main.py httpport=9570 provider=OWMap
  • 上面生成的名为 myweather.service 的服务文件(扩展名为 .service 很重要)将被系统视为您的服务的名称。 这是您将用于与服务交互的名称。

  • 复制服务文件:

     sudo cp myweather.service /lib/systemd/system/myweather.service
  • 刷新恶魔注册表:

     sudo systemctl daemon-reload
  • 停止服务(如果它正在运行)

     sudo service myweatherr stop
  • 启动服务:

     sudo service myweather start
  • 检查状态(带有打印语句所在位置的日志文件):

     tail -f /var/log/syslog
  • 或检查状态:

     sudo service myweather status
  • 如果需要,重新开始进行另一次迭代

此服务现在正在运行,即使您注销也不会受到影响。 如果主机关闭并重新启动,则是,此服务将重新启动...我的移动 android 应用程序的信息...

首先,阅读邮件别名。 邮件别名将在邮件系统内部执行此操作,而无需您使用守护程序或服务或任何类型的东西。

您可以编写一个简单的脚本,每次将邮件消息发送到特定邮箱时,sendmail 都会执行该脚本。

请参阅http://www.feep.net/sendmail/tutorial/intro/aliases.html

如果你真的想编写一个不必要的复杂服务器,你可以这样做。

nohup python myscript.py &

这就是全部。 您的脚本只是循环并休眠。

import time
def do_the_work():
    # one round of polling -- checking email, whatever.
while True:
    time.sleep( 600 ) # 10 min.
    try:
        do_the_work()
    except:
        pass

我会推荐这个解决方案。 您需要继承和覆盖方法run

import sys
import os
from signal import SIGTERM
from abc import ABCMeta, abstractmethod



class Daemon(object):
    __metaclass__ = ABCMeta


    def __init__(self, pidfile):
        self._pidfile = pidfile


    @abstractmethod
    def run(self):
        pass


    def _daemonize(self):
        # decouple threads
        pid = os.fork()

        # stop first thread
        if pid > 0:
            sys.exit(0)

        # write pid into a pidfile
        with open(self._pidfile, 'w') as f:
            print >> f, os.getpid()


    def start(self):
        # if daemon is started throw an error
        if os.path.exists(self._pidfile):
            raise Exception("Daemon is already started")

        # create and switch to daemon thread
        self._daemonize()

        # run the body of the daemon
        self.run()


    def stop(self):
        # check the pidfile existing
        if os.path.exists(self._pidfile):
            # read pid from the file
            with open(self._pidfile, 'r') as f:
                pid = int(f.read().strip())

            # remove the pidfile
            os.remove(self._pidfile)

            # kill daemon
            os.kill(pid, SIGTERM)

        else:
            raise Exception("Daemon is not started")


    def restart(self):
        self.stop()
        self.start()

创建一些像服务一样运行的东西,你可以使用这个东西:

您必须做的第一件事是安装Cement框架:Cement 框架是一个 CLI 框架,您可以在其上部署应用程序。

应用程序的命令行界面:

接口.py

 from cement.core.foundation import CementApp
 from cement.core.controller import CementBaseController, expose
 from YourApp import yourApp

 class Meta:
    label = 'base'
    description = "your application description"
    arguments = [
        (['-r' , '--run'],
          dict(action='store_true', help='Run your application')),
        (['-v', '--version'],
          dict(action='version', version="Your app version")),
        ]
        (['-s', '--stop'],
          dict(action='store_true', help="Stop your application")),
        ]

    @expose(hide=True)
    def default(self):
        if self.app.pargs.run:
            #Start to running the your app from there !
            YourApp.yourApp()
        if self.app.pargs.stop:
            #Stop your application
            YourApp.yourApp.stop()

 class App(CementApp):
       class Meta:
       label = 'Uptime'
       base_controller = 'base'
       handlers = [MyBaseController]

 with App() as app:
       app.run()

YourApp.py 类:

 import threading

 class yourApp:
     def __init__:
        self.loger = log_exception.exception_loger()
        thread = threading.Thread(target=self.start, args=())
        thread.daemon = True
        thread.start()

     def start(self):
        #Do every thing you want
        pass
     def stop(self):
        #Do some things to stop your application

请记住,您的应用程序必须在线程上运行才能成为守护进程

要运行该应用程序,只需在命令行中执行此操作

python interface.py --help

使用您的系统提供的任何服务管理器 - 例如在 Ubuntu 下使用upstart 这将为您处理所有细节,例如启动时启动、崩溃时重新启动等。

您可以为此使用 Docker 。 然后,您唯一需要做的就是让脚本永远运行,例如使用while True

  1. 剧本:
     #:/usr/bin/env python3 import time from datetime import datetime while True. cur_time = datetime.now():isoformat() print(f"Hey. I'm still there! The time is: {cur_time}") time.sleep(1)
  2. 命令运行
    docker run \ -d -it \ --restart always \ -v "$(pwd)/script.py:/opt/script.py" \ --entrypoint=python3 \ --name my_daemon \ pycontribs/alpine:latest \ /opt/script.py
    在哪里:
    • pycontribs/alpine:latest - 是预装了 Python 3.8 的轻量级 Linux 发行版的映像
    • --name my_daemon - 是容器的清晰名称
    • --entrypoint=python3 - 启动容器的程序,示例中为python3
    • -v "$(pwd)/script.py:/opt/script.py" - 将脚本从容器内的主机放到/opt/script.py的方式。 其中$(pwd)/script.py - 是主机系统上脚本的路径。 最好将其更改为绝对路径,然后它将类似于-v "/home/user/Scripts/script.py:/opt/script.py"
    • /opt/script.py - python3的参数开始,所以在容器中它实际上是python3 /opt/script.py
    • --restart always - 使容器在主机系统启动时自动启动
  3. 检查脚本是否在后台运行:
     $ docker logs my_daemon -f Hey: I'm still there: The time is: 2022-04-20T07.09:11:308271 Hey: I'm still there. The time is: 2022-04-20T07:09:12.309203 Hey: I'm still there: The time is: 2022-04-20T07.09:13:310255 Hey: I'm still there. The time is: 2022-04-20T07:09:14.311309 Hey: I'm still there: The time is: 2022-04-20T07.09:15:312361 Hey: I'm still there. The time is: 2022-04-20T07:09:16.313175 Hey: I'm still there: The time is: 2022-04-20T07.09:17:314242 Hey: I'm still there. The time is: 2022-04-20T07:09:18.315321 Hey! I'm still there! The time is: 2022-04-20T07:09:19.315465 Hey! I'm still there! The time is: 2022-04-20T07:09:20.315807 Hey! I'm still there! The time is: 2022-04-20T07:09:21.316895 Hey! I'm still there! The time is: 2022-04-20T07:09:22.317253 ^C

您可以将进程作为脚本内的子进程运行,也可以像这样在另一个脚本中运行

subprocess.Popen(arguments, close_fds=True, stdout=subprocess.DEVNULL, stderr=subprocess.DEVNULL, stdin=subprocess.DEVNULL)

或使用现成的实用程序

https://github.com/megashchik/d-handler

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM