使用带有 QTableView 和 QAbstractTableModel 的大型记录集——仅检索可见行

Question

我正在使用 PyQt 并在 QTableView 中显示数据表。我只是在寻找一种方法来避免在屏幕上出现不超过 100 行时将整个数据集调用到内存中。从理论上讲，如果我只是检索可见数据，我应该能够几乎立即浏览包含数十万条记录的表。

据我了解，当 QTableView 想要显示一个数据单元格时，它会调用我的表模型（它是 QAbstractTableModel 的子类）的“data()”函数。该函数接收应该显示的单元格的行和列索引。如果我已经加载了我需要的所有数据，这对我来说非常有用。

但是，如果我还没有所有数据，我是否必须对每个单元格进行查询？还有另一种方法可以做到这一点吗？也许有一种方法可以逐行而不是逐个单元格地获取数据。也许有一个针对 MySql 的特定于数据库的解决方案，这就是我们正在使用的。

Answer 1

这是绝对可行的。我使用这种技术可以顺利滚动具有数万甚至数十万行的 pandas 表。就像您说的那样，您将需要使用QAbstractTableModel 将您的数据子类化。

代码可能看起来很大，但这里的关键是要记住，代码的主要部分是为每个可见数据单元调用的“数据”。

类似于：

class MyTableModel(QAbstractTableModel):
    def __init__(self, datain, headerdata, parent=None, *args):
        QAbstractTableModel.__init__(self, parent, *args)
        self.arraydata = datain
        self.headerdata = headerdata

    def rowCount(self, parent):
        return len(self.arraydata)

    def columnCount(self, parent):
        return len(self.arraydata[0])

    def data(self, index, role):
        if not index.isValid():
            return QVariant()
        elif role == Qt.TextAlignmentRole:
            return QVariant(Qt.AlignRight | Qt.AlignVCenter)
        elif role == Qt.DisplayRole:
            return QVariant(str(self.arraydata[index.row()][index.column()]))
        return QVariant()

活动小部件将是 QWidget 的子类，带有 __init__ 类似：

class DbsVarWindow(QWidget):
    """Display a Qt window of a Zacks Dbs Var. inputs:
        * fname file name (full path) of the dbs file
        * vname var name (openvest munged name' to display"""
    def __init__(self, fname, vname,  *args):
        QWidget.__init__(self, *args)
        dbs = ZacksDbs(fname)
        vals = dbs.get(vname)#[:,:10]
        tickers = dbs.get('ticker')

        # set the title
        self.setWindowTitle(vname)
        # set the minimum size
        self.resize(800, 600)

        # set the model and table view settings
        tablemodel = MyTableModel(vals,tickers, self)
        tableview = QTableView()
        # try some sorting
        tableview.setSortingEnabled(True)
        # allow drag to rearrange columns
        tableview.horizontalHeader().setMovable(True)
        tableview.setModel(tablemodel)
        # set the font
        font = QFont("Courier", 12, 1)
        tableview.setFont(font)

        layout = QVBoxLayout(self)
        layout.addWidget(tableview)
        self.setLayout(layout)
        self.show()

带有tableview.setModel(tablemodel) 的那一行是将您的数据（表格模型）与小部件挂钩。

如果代码过多，请见谅。这与我所能收集到的一个典型的例子一样接近。