python3.4 Pyqt4 웹 요청 asyncio

Question

Python4 (QwebPage)에서 asynchrone (asyncio와 같은) 웹 요청을 수행 할 수 있습니까? 이 코드와 병렬로 여러 URL을 호출하는 방법을 예를 들어

:

#!/usr/bin/env python3.4 

import sys 
import signal 

from PyQt4.QtCore import * 
from PyQt4.QtGui import * 
from PyQt4.QtWebKit import QWebPage 

class Crawler(QWebPage): 
    def __init__(self, url): 
     QWebPage.__init__(self) 
     self._url = url 
     self.content = '' 

    def crawl(self): 
     signal.signal(signal.SIGINT, signal.SIG_DFL) 
     self.connect(self, SIGNAL('loadFinished(bool)'), self._finished_loading) 
     self.mainFrame().load(QUrl(self._url)) 

    def _finished_loading(self, result): 
     self.content = self.mainFrame().toHtml() 
     print(self.content) 
     sys.exit(0) 

    def main(): 
     app = QApplication(sys.argv) 
     crawler = Crawler(self._url, self._file) 
     crawler.crawl() 
     sys.exit(app.exec_()) 

if __name__ == '__main__': 
    crawl = Crawler('http://www.example.com') 
    crawl.main() 

감사

Answer 1

을 당신은 asyncio을 통해 작업 self.mainFrame().load(QUrl(self._url))을 할 수 없습니다, 죄송합니다 - 방법은 Qt는 자체에서 구현.

그러나 이벤트 루프를 quamash 설치하고 비동기 적으로 aiohttp.request coroutine을 호출하여 웹 페이지를 가져올 수 있습니다.

그래도 QWebPage과 작동하지 않습니다.

Answer 2

요청은 이미 비동기 적으로 완료되었으므로 QWebPage의 여러 인스턴스를 생성하면됩니다. 답장을 보내

import sys, signal 
from PyQt4 import QtCore, QtGui, QtWebKit 

urls = [ 
    'http://qt-project.org/doc/qt-4.8/qwebelement.html', 
    'http://qt-project.org/doc/qt-4.8/qwebframe.html', 
    'http://qt-project.org/doc/qt-4.8/qwebinspector.html', 
    'http://qt-project.org/doc/qt-4.8/qwebpage.html', 
    'http://qt-project.org/doc/qt-4.8/qwebsettings.html', 
    'http://qt-project.org/doc/qt-4.8/qwebview.html', 
    ] 

class Crawler(QtWebKit.QWebPage): 
    def __init__(self, url, identifier): 
     super(Crawler, self).__init__() 
     self.loadFinished.connect(self._finished_loading) 
     self._id = identifier 
     self._url = url 
     self.content = '' 

    def crawl(self): 
     self.mainFrame().load(QtCore.QUrl(self._url)) 

    def _finished_loading(self, result): 
     self.content = self.mainFrame().toHtml() 
     print('[%d] %s' % (self._id, self._url)) 
     print(self.content[:250].rstrip(), '...') 
     print() 
     self.deleteLater() 

if __name__ == '__main__': 

    app = QtGui.QApplication(sys.argv) 
    signal.signal(signal.SIGINT, signal.SIG_DFL) 
    crawlers = [] 
    for index, url in enumerate(urls): 
     crawlers.append(Crawler(url, index)) 
     crawlers[-1].crawl() 
    sys.exit(app.exec_())