【发布时间】:2011-12-19 23:19:25
【问题描述】:
我们有用户生成的雇主名称,有各种变体。例如,人们输入或导入:
谷歌
谷歌公司
谷歌公司
谷歌公司
到数据库搜索这个,看起来像是一家不同的公司。我们更改了一些内容,将每个雇主映射到一个“规范化”的名称,但总共有 70,000 个,很难手动完成。
是否有人对如何规范化现有条目以及如何维护我们对所有传入名称执行此操作有建议?
【问题讨论】:
-
我一直在这方面进行一些研究,发现最近的一篇论文讨论了一种提取、发现(通过聚类)和规范化(通过增强的编辑距离计算)组织名称的方法。 NEMO
标签: ruby-on-rails mongodb fuzzy-comparison