【问题标题】:How to stop BaseHTTPServer.serve_forever() in a BaseHTTPRequestHandler subclass?如何在 BaseHTTPRequestHandler 子类中停止 BaseHTTPServer.serve_forever()?
【发布时间】:2010-09-21 02:00:16
【问题描述】:

我在一个单独的线程中运行我的HTTPServer(使用无法停止线程的线程模块......)并且希望在主线程也关闭时停止服务请求。

Python 文档指出BaseHTTPServer.HTTPServerSocketServer.TCPServer 的子类,它支持shutdown 方法,但HTTPServer 中缺少它。

整个BaseHTTPServer 模块的文档很少:(

【问题讨论】:

    标签: python http basehttpserver


    【解决方案1】:

    我应该首先说“我自己可能不会这样做,但我过去曾这样做过”。 serve_forever(来自 SocketServer.py)方法如下所示:

    def serve_forever(self):
        """Handle one request at a time until doomsday."""
        while 1:
            self.handle_request()
    

    您可以用while self.should_be_running 替换(在子类中)while 1,并从不同的线程修改该值。比如:

    def stop_serving_forever(self):
        """Stop handling requests"""
        self.should_be_running = 0
        # Make a fake request to the server, to really force it to stop.
        # Otherwise it will just stop on the next request.
        # (Exercise for the reader.)
        self.make_a_fake_request_to_myself()
    

    编辑:我挖出了我当时使用的实际代码:

    class StoppableRPCServer(SimpleXMLRPCServer.SimpleXMLRPCServer):
    
        stopped = False
        allow_reuse_address = True
    
        def __init__(self, *args, **kw):
            SimpleXMLRPCServer.SimpleXMLRPCServer.__init__(self, *args, **kw)
            self.register_function(lambda: 'OK', 'ping')
    
        def serve_forever(self):
            while not self.stopped:
                self.handle_request()
    
        def force_stop(self):
            self.server_close()
            self.stopped = True
            self.create_dummy_request()
    
        def create_dummy_request(self):
            server = xmlrpclib.Server('http://%s:%s' % self.server_address)
            server.ping()
    

    【讨论】:

    • 我认为您可以在“self.stopped = True”之后调用“self.serve_forever()”并避免实现“create_dummy_request(self)”。到目前为止,它对我有用,但我可能缺少一些微妙之处。
    • 就我在 Python 2.7 中查看 BaseServer.serve_forever() 源代码而言,我看到它已经实现了一个标志 __shutdown_request,加上顶部的 __is_shut_down threading.Event。所以我在这里看到的实际答案是allow_reuse_address = True 行。
    【解决方案2】:

    基于http://docs.python.org/2/library/basehttpserver.html#more-examples 的另一种方法是:代替serve_forever(),只要满足条件就继续服务,服务器在每个请求之前和之后检查条件。例如:

    import CGIHTTPServer
    import BaseHTTPServer
    
    KEEP_RUNNING = True
    
    def keep_running():
        return KEEP_RUNNING
    
    class Handler(CGIHTTPServer.CGIHTTPRequestHandler):
        cgi_directories = ["/cgi-bin"]
    
    httpd = BaseHTTPServer.HTTPServer(("", 8000), Handler)
    
    while keep_running():
        httpd.handle_request()
    

    【讨论】:

    • 在看到这里和那里的所有其他黑客之后,这是一个仅依赖于官方记录的行为的罕见答案,因此它被认为是规范的。投票赞成!
    • 我使用了这段代码,并在k​​eep_running()中添加了一些站点更新代码,发现它只在收到请求时执行。 +1 完美。这是真正的答案。
    【解决方案3】:

    在我的 python 2.6 安装中,我可以在底层 TCPServer 上调用它 - 它仍然在您的 HTTPServer 中:

    TCPServer.shutdown
    
    
    >>> import BaseHTTPServer
    >>> h=BaseHTTPServer.HTTPServer(('',5555), BaseHTTPServer.BaseHTTPRequestHandler)
    >>> h.shutdown
    <bound method HTTPServer.shutdown of <BaseHTTPServer.HTTPServer instance at 0x0100D800>>
    >>> 
    

    【讨论】:

    • 啊。是的,我正在阅读 2.6 文档 - 唉,我正在运行 2.5。真可惜。我的白痴。
    • 请注意,即使在关机后,套接字仍将侦听接口/端口(在 Python v2.7 上测试)。您还应该致电:h.socket.close()
    • 使用shutdown 方法要记住的重要部分是必须从与服务线程不同的线程调用。因此,如果您想关闭以响应请求处理程序,您需要启动一个(守护程序)线程,该线程将其 target= 设置为您的 h.shutdown 函数。
    【解决方案4】:

    事件循环在 SIGTERM、Ctrl+C 或调用 shutdown() 时结束。

    server_close() 必须在server_forever() 之后调用才能关闭监听套接字。

    import http.server
    
    class StoppableHTTPServer(http.server.HTTPServer):
        def run(self):
            try:
                self.serve_forever()
            except KeyboardInterrupt:
                pass
            finally:
                # Clean-up server (close socket, etc.)
                self.server_close()
    

    可通过用户操作停止的简单服务器(SIGTERM、Ctrl+C、...):

    server = StoppableHTTPServer(("127.0.0.1", 8080),
                                 http.server.BaseHTTPRequestHandler)
    server.run()
    

    服务器在线程中运行:

    import threading
    
    server = StoppableHTTPServer(("127.0.0.1", 8080),
                                 http.server.BaseHTTPRequestHandler)
    
    # Start processing requests
    thread = threading.Thread(None, server.run)
    thread.start()
    
    # ... do things ...
    
    # Shutdown server
    server.shutdown()
    thread.join()
    

    【讨论】:

      【解决方案5】:

      我觉得你可以用[serverName].socket.close()

      【讨论】:

      • 这是唯一对我有用的方法,尝试使用 server.shutdown() 中断而不是 some_flag。只有 socket.close() 达到了预期。
      • 我遇到了同样的问题。我相信我的问题是我试图从内部处理程序调用 server.shutdown() 并且该序列导致死锁,因为我怀疑服务器在从 shutdown() 调用返回之前正在等待处理程序完成。这样做的缺点是我在标准输出上打印了一个看起来很吓人的异常,我想以某种方式抑制它。
      • 我已经尝试过了,但它会抛出异常。最新版本已导出 shutdown() 函数。
      【解决方案6】:

      在 python 2.7 中,调用 shutdown() 有效,但前提是您通过 serve_forever 提供服务,因为它使用异步选择和轮询循环。具有讽刺意味的是,使用 handle_request() 运行您自己的循环会排除此功能,因为它意味着一个愚蠢的阻塞调用。

      来自 SocketServer.py 的 BaseServer:

      def serve_forever(self, poll_interval=0.5):
          """Handle one request at a time until shutdown.
      
          Polls for shutdown every poll_interval seconds. Ignores
          self.timeout. If you need to do periodic tasks, do them in
          another thread.
          """
          self.__is_shut_down.clear()
          try:
              while not self.__shutdown_request:
                  # XXX: Consider using another file descriptor or
                  # connecting to the socket to wake this up instead of
                  # polling. Polling reduces our responsiveness to a
                  # shutdown request and wastes cpu at all other times.
                  r, w, e = select.select([self], [], [], poll_interval)
                  if self in r:
                      self._handle_request_noblock()
          finally:
              self.__shutdown_request = False
              self.__is_shut_down.set()
      

      这是我的代码的一部分,用于从另一个线程执行阻塞关闭,使用事件等待完成:

      class MockWebServerFixture(object):
          def start_webserver(self):
              """
              start the web server on a new thread
              """
              self._webserver_died = threading.Event()
              self._webserver_thread = threading.Thread(
                      target=self._run_webserver_thread)
              self._webserver_thread.start()
      
          def _run_webserver_thread(self):
              self.webserver.serve_forever()
              self._webserver_died.set()
      
          def _kill_webserver(self):
              if not self._webserver_thread:
                  return
      
              self.webserver.shutdown()
      
              # wait for thread to die for a bit, then give up raising an exception.
              if not self._webserver_died.wait(5):
                  raise ValueError("couldn't kill webserver")
      

      【讨论】:

        【解决方案7】:

        我成功使用这个方法(Python 3)从网络应用程序本身(一个网页)停止服务器:

        import http.server
        import os
        import re
        
        class PatientHTTPRequestHandler(http.server.SimpleHTTPRequestHandler):
            stop_server = False
            base_directory = "/static/"
            # A file to use as an "server stopped user information" page.
            stop_command = "/control/stop.html"
            def send_head(self):
                self.path = os.path.normpath(self.path)
                if self.path == PatientHTTPRequestHandler.stop_command and self.address_string() == "127.0.0.1":
                    # I wanted that only the local machine could stop the server.
                    PatientHTTPRequestHandler.stop_server = True
                    # Allow the stop page to be displayed.
                    return http.server.SimpleHTTPRequestHandler.send_head(self)
                if self.path.startswith(PatientHTTPRequestHandler.base_directory):
                    return http.server.SimpleHTTPRequestHandler.send_head(self)
                else:
                    return self.send_error(404, "Not allowed", "The path you requested is forbidden.")
        
        if __name__ == "__main__":
            httpd = http.server.HTTPServer(("127.0.0.1", 8080), PatientHTTPRequestHandler)
            # A timeout is needed for server to check periodically for KeyboardInterrupt
            httpd.timeout = 1
            while not PatientHTTPRequestHandler.stop_server:
                httpd.handle_request()
        

        这样,通过基地址http://localhost:8080/static/(例如http://localhost:8080/static/styles/common.css)提供的页面将由默认处理程序提供服务,从服务器计算机访问http://localhost:8080/control/stop.html将显示stop.html然后停止服务器,任何其他选项将被禁止。

        【讨论】:

        • while 循环使用了大约 100% 的 CPU。请参阅“socketserver.py”中最新的“server_forever”方法源。它正在执行“select(poll_interval)”,这实际上是在执行 time.Sleep(0.5) 被可用的服务器套接字读取中断。所以内部循环通常只占用百分之几的 CPU(只要没有套接字活动)。
        【解决方案8】:

        这是python 3.7 的Helgi's answer 的简化版本:

        import threading
        import time
        from http.server import ThreadingHTTPServer, SimpleHTTPRequestHandler
        
        
        class MyServer(threading.Thread):
            def run(self):
                self.server = ThreadingHTTPServer(('localhost', 8000), SimpleHTTPRequestHandler)
                self.server.serve_forever()
            def stop(self):
                self.server.shutdown()
        
        
        if __name__ == '__main__':
            s = MyServer()
            s.start()
            print('thread alive:', s.is_alive())  # True
            time.sleep(2)
            s.stop()
            print('thread alive:', s.is_alive())  # False
        

        【讨论】:

        • 不错的答案。在 3.7 上测试过,效果很好。
        • 非常好的答案。最好的。这改变了我的一整天。非常感谢。
        【解决方案9】:

        我尝试了所有可能的解决方案,但最终遇到了一个“有时”的问题 - 不知何故,它并没有真正做到 - 所以我最终制定了一个对我来说一直有效的肮脏解决方案:

        如果以上所有方法都失败了,那么使用以下方法蛮力杀死你的线程:

        import subprocess
        cmdkill = "kill $(ps aux|grep '<name of your thread> true'|grep -v 'grep'|awk '{print $2}') 2> /dev/null"
        subprocess.Popen(cmdkill, stdout=subprocess.PIPE, shell=True)
        

        【讨论】:

          【解决方案10】:
          import http.server
          import socketserver
          import socket as sck
          import os
          import threading
          
          
          class myserver:
              def __init__(self, PORT, LOCATION):
                  self.thrd = threading.Thread(None, self.run)
                  self.Directory = LOCATION
                  self.Port = PORT
                  hostname = sck.gethostname()
                  ip_address = sck.gethostbyname(hostname)
                  self.url = 'http://' + ip_address + ':' + str(self.Port)
                  Handler = http.server.SimpleHTTPRequestHandler
                  self.httpd = socketserver.TCPServer(("", PORT), Handler)
                  print('Object created, use the start() method to launch the server')
              def run(self):
                  print('listening on: ' + self.url )
                  os.chdir(self.Directory)
                  print('myserver object started')        
                  print('Use the objects stop() method to stop the server')
                  self.httpd.serve_forever()
                  print('Quit handling')
          
                  print('Sever stopped')
                  print('Port ' + str(self.Port) + ' should be available again.')
          
          
              def stop(self):
                  print('Stopping server')
                  self.httpd.shutdown()
                  self.httpd.server_close()
                  print('Need just one more request before shutting down'
          
          
              def start(self):
                  self.thrd.start()
          
          def help():
              helpmsg = '''Create a new server-object by initialising
          NewServer = webserver3.myserver(Port_number, Directory_String)
          Then start it using NewServer.start() function
          Stop it using NewServer.stop()'''
              print(helpmsg)
          

          不是一个有经验的python程序员,只是想分享一下我的综合解决方案。这里和那里主要基于sn-ps。我通常在我的控制台中导入这个脚本,它允许我使用它们的特定端口为不同位置设置多个服务器,与网络上的其他设备共享我的内容。

          【讨论】:

            【解决方案11】:

            这是 Python 3.7+ 的上下文风格版本,我更喜欢它,因为它会自动清理并且您可以指定要服务的目录:

            from contextlib import contextmanager
            from functools import partial
            from http.server import SimpleHTTPRequestHandler, ThreadingHTTPServer
            from threading import Thread
            
            
            @contextmanager
            def http_server(host: str, port: int, directory: str):
                server = ThreadingHTTPServer(
                    (host, port), partial(SimpleHTTPRequestHandler, directory=directory)
                )
                server_thread = Thread(target=server.serve_forever, name="http_server")
                server_thread.start()
            
                try:
                    yield
                finally:
                    server.shutdown()
                    server_thread.join()
            
            
            def usage_example():
                import time
            
                with http_server("127.0.0.1", 8087, "."):
                    # now you can use the web server
                    time.sleep(100)
            

            【讨论】:

              猜你喜欢
              • 1970-01-01
              • 1970-01-01
              • 1970-01-01
              • 1970-01-01
              • 1970-01-01
              • 1970-01-01
              • 1970-01-01
              • 1970-01-01
              • 1970-01-01
              相关资源
              最近更新 更多