如何在 Qt 中使用 QWebPage 安全地抓取多个 URL 而不会崩溃？

使用 QWebPage 抓取多个 URL：防止崩溃

在 Qt 中，连续抓取多个页面时，使用 QWebPage 检索动态 Web 内容可能会出现问题。以下问题突出显示了潜在的崩溃情况：

问题：

使用 QWebPage 渲染第二个页面通常会导致崩溃。当用于渲染的对象没有正确删除时，会发生零星的崩溃或段错误，从而导致重用时出现潜在问题。

QWebPage 类概述：

QWebPage 类提供了方法用于加载和渲染网页。当加载过程完成时，它会发出 loadFinished 信号。

解决方案：

要解决崩溃问题，建议创建单个 QApplication 和 WebPage 实例并使用网页的 loadFinished 信号连续获取和处理 URL。

PyQt5 网页示例：

<code class="python">import sys

class WebPage(QWebEnginePage):

    def __init__(self, verbose=False):
        super().__init__()
        self._verbose = verbose
        self.loadFinished.connect(self.handleLoadFinished)

    def process(self, urls):
        self._urls = iter(urls)
        self.fetchNext()

    def fetchNext(self):
        try:
            url = next(self._urls)
        except StopIteration:
            MyApp.instance().quit()  # Close app instead of crashing
        else:
            self.load(QUrl(url))

    def processCurrentPage(self, html):
        # Custom HTML processing goes here
        print('Loaded:', str(html), self.url().toString())

    def handleLoadFinished(self):
        self.toHtml(self.processCurrentPage)</code>

用法：

<code class="python">import sys

app = QApplication(sys.argv)
webpage = WebPage(verbose=False)

# Example URLs to process
urls = ['https://example.com/page1', 'https://example.com/page2', ...]

webpage.process(urls)

sys.exit(app.exec_())</code>

此方法可确保 QWebPage 对象得到正确管理，并通过在单个事件循环内控制 URL 的获取和处理来避免崩溃。

以上是如何在 Qt 中使用 QWebPage 安全地抓取多个 URL 而不会崩溃？的详细内容。更多信息请关注PHP中文网其他相关文章！