【发布时间】:2021-06-03 08:57:28
【问题描述】:
我是第一次使用空间数据。我必须比较两个具有经纬度和经度详细信息的数据框。我已将两者都转换为 GeoPandas 数据框。
import pandas as pd
from pandas import DataFrame
import geopandas as gpd
from neighbors import nearest_neighbor
df = pd.DataFrame([[1973,22.525158,88.330775],[1976,72.85136,19.10840],[898,91.78523,26.15012]],columns=['id', 'lat', 'long'])
gdf1 = gpd.GeoDataFrame(df, geometry=gpd.points_from_xy(df.long,df.lat))
df2 = pd.DataFrame([['06c979eaa59f',29.873870,76.965620],['19aedbb2e743',20.087574,76.180045],['5060a3931a43',31.289770,75.572340]],columns=['id','lat','lon'])
gdf2 = gpd.GeoDataFrame(df2, geometry=gpd.points_from_xy(df2.lon,df2.lat))
我的 DF1 有 100 万行,而 df2 有大约 7000 行。我正在尝试为 DF1 中的每条记录从 DF2 获取最近的邻居。
我尝试了两种方法。两者都运行得非常快,结果可行。但是,它们并不准确。
方法一:
在这个页面中,我使用了来自sklearn.neighbors 的最近邻法。这将返回以米为单位的结果。但是,当我手动检查两个数据帧的 lat long 之间的距离时,我总是发现最近的邻居返回 1/4 的距离。
例如上面方法返回的距离是125米,google map和https://www.geodatasource.com/distance-calculator都返回500米左右的距离。距离的差异一直在返回结果的 4 倍左右波动。
方法二:
在第二种方法中,我遵循了 gis.stackexchange.com 中给出的代码。
https://gis.stackexchange.com/questions/222315/geopandas-find-nearest-point-in-other-dataframe
import itertools
from operator import itemgetter
import geopandas as gpd
import numpy as np
import pandas as pd
from scipy.spatial import cKDTree
from shapely.geometry import Point, LineString
df = pd.DataFrame([[1973,22.525158,88.330775],[1976,72.85136,19.10840],[898,91.78523,26.15012]],columns=['id', 'lat', 'long'])
gdf1 = gpd.GeoDataFrame(df, geometry=gpd.points_from_xy(df.long,df.lat))
df2 = pd.DataFrame([['06c979eaa59f',29.873870,76.965620],['19aedbb2e743',20.087574,76.180045],['5060a3931a43',31.289770,75.572340]],columns=['id','lat','lon'])
gdf2 = gpd.GeoDataFrame(df2, geometry=gpd.points_from_xy(df2.lon,df2.lat))
在此,我用自己的数据框替换了 gpd1 和 gpd2。
def ckdnearest(gdfA, gdfB, gdfB_cols=['id']):
# resetting the index of gdfA and gdfB here.
gdfA = gdfA.reset_index(drop=True)
gdfB = gdfB.reset_index(drop=True)
A = np.concatenate(
[np.array(geom.coords) for geom in gdfA.geometry.to_list()])
B = [np.array(geom.coords) for geom in gdfB.geometry.to_list()]
B_ix = tuple(itertools.chain.from_iterable(
[itertools.repeat(i, x) for i, x in enumerate(list(map(len, B)))]))
B = np.concatenate(B)
ckd_tree = cKDTree(B)
dist, idx = ckd_tree.query(A, k=1)
idx = itemgetter(*idx)(B_ix)
gdf = pd.concat(
[gdfA, gdfB.loc[idx, gdfB_cols].reset_index(drop=True),
pd.Series(dist, name='dist')], axis=1)
return gdf
c = ckdnearest(gdf1, gdf2)
上面的运行速度非常快并返回结果。但是返回的距离值至少比我得到的低 100 倍。
乘数:107.655914
在上面的excel图片中,第一列表示python返回的结果,第二列表示上面给出的同一网站返回的结果。虽然结果中的这些近似值让我开始,但我想要准确的结果。如何比较上面给出的两个数据框并获得 DF1 中每一行的最准确的最近距离。
【问题讨论】:
标签: python pandas geospatial