【发布时间】:2020-03-25 20:09:28
【问题描述】:
我正在尝试为 Dataphile(我的 YouTube 频道)制作“获得奥运奖牌最多的柔道运动员”的条形图比赛。 这是我的问题:在我的数据集 (csv) 中,一些运动员的名字中有口音,我无法正确解码。
例如,在第 5 行的my dataset 中,ahtlete 的名字是“Andreas Tölzer”。
这是我的代码:
years = [str(y) for y in range(1972,2020, 4)]
sex = ["mens", "womens"]
cat = ["extra-lightweight", "lightweight", "half-lightweight", "half-middleweight", "middleweight", "half-heavyweight", "heavyweight", "open-class"]
df_results = pd.DataFrame(columns=["Athlete"] + years)
all_df = {}
for s in sex: # gets all sexes
for c in cat: #gets all weight categories
for y in years: # gets all years with summer olympics
try:
all_df[y] = pd.read_csv(r"C:\Users\joris\Coding\judo_olympics\olympics_summer_" + y + "_JUD_" + s + "-" + c +"_final_standings.csv")
df_med = all_df[y].head(4)[["Athlete"]]
iter_years = iter(years)
for w in years:
if int(w) >= int(y):
df_med.insert(len(df_med.columns), w, 1)
else:
df_med.insert(len(df_med.columns), w, 0)
df_results = df_results.append(df_med)
except FileNotFoundError:
pass
df_results = df_results.groupby("Athlete").sum()
df_results.index = df_results.index.str.normalize('NFKD').str.encode('ascii', errors='ignore').str.decode('utf-8') # got that from the internet
Here,我们可以在输出中看到运动员的名字没有被正确解码。
我想要简单地将带重音的字母更改为没有重音的相同字母(例如:“é”将变为“e”)。
我的数据集中不应该有来自其他字母的字母,只有烦人的口音。
如果您有解决方案或需要我的代码中的更多信息,请告诉我。
谢谢!
【问题讨论】:
-
您似乎在最后一行将 CSV 中的 Unicode 编码为 ASCII。重音符号在 ASCII 中不起作用。
-
您的输入数据集一团糟。它被解码错误两次。
'Tölzer'.encode('cp1252').decode('utf8').encode('cp1252').decode('utf8') -> 'Tölzer'。以 UTF-8 格式读取原始数据并在 Excel 中正确显示,使用'utf-8-sig'编码 CSV 文件。
标签: python pandas dataframe unicode utf