【发布时间】:2017-08-04 06:36:36
【问题描述】:
我有大约 220 万个点的 3D 数据(3 维点),需要 65 MB 的内存进行存储。谁能建议我一个能够处理和处理这种大小数据的 Python 库?
您可以查看以逗号分隔值形式表示的数据示例,如下所示
337507.38、3817723.32、458.49
337507.94、3817723.25、458.16
337508.33、3817723.26、458.51
337508.83、3817723.23、458.43
337509.21、3817723.24、458.83
X、Y、Z轴的值用逗号隔开
【问题讨论】:
-
numpy 和 Pandas 用于处理数据,mayavi 用于绘图
-
和 gdal 用于导出空间数据供以后使用
-
2200 万乘以 3 坐标乘以 4(即使只使用每个值 4 字节的浮点数)超过 260Mb,你是如何得到 65Mb 的?
-
@6502 我猜要么是压缩,要么是他歪曲了某些东西
标签: python database python-3.x dataframe bigdata