【发布时间】:2017-12-01 13:14:50
【问题描述】:
我知道Dedupe 使用主动学习来删除重复项并执行记录链接。
但是,我想知道我们是否可以将带有已匹配对(标签数据)的excel表作为主动学习的输入?
【问题讨论】:
标签: python-2.7 record-linkage python-dedupe
我知道Dedupe 使用主动学习来删除重复项并执行记录链接。
但是,我想知道我们是否可以将带有已匹配对(标签数据)的excel表作为主动学习的输入?
【问题讨论】:
标签: python-2.7 record-linkage python-dedupe
不直接。
您需要将数据转换为markPairs 可以使用的格式。
类似:
labeled_examples = {'match' : [],
'distinct' : [({'name' : 'Georgie Porgie'},
{'name' : 'Georgette Porgette'})]
}
deduper.markPairs(labeled_examples)
我们确实提供了一个方便的函数来将电子表格数据转换成这种格式trainingDataDedupe。
(我是重复数据删除的作者)
【讨论】: