【问题标题】:Extracting information about Programming skills from dbpedia using Python? [closed]使用 Python 从 dbpedia 中提取有关编程技能的信息? [关闭]
【发布时间】:2017-03-28 06:18:47
【问题描述】:

假设我有一些令牌,我想知道某个特定令牌是否是编程技能,所以我想与 dbpedia 交叉验证它以了解它是否是编程技能。我怎么能做到这一点?我使用了一些代码:

from SPARQLWrapper import SPARQLWrapper, JSON

sparql = SPARQLWrapper("http://dbpedia.org/sparql")
sparql.setQuery("""
    PREFIX rdfs: <http://www.w3.org/2000/01/rdf-schema#>
    SELECT ?label
    WHERE { <http://dbpedia.org/resource/Python_(programming_language)> rdfs:label ?label }   
    """)

sparql.setReturnFormat(JSON)
results = sparql.query().convert()

for result in results["results"]["bindings"]:
print(result["label"]["value"])

但是从输出中我没有得到关于 Python 是否是一种编程语言的信息。

【问题讨论】:

    标签: python dbpedia


    【解决方案1】:

    在我看来,如果实体Python_(programming_language) 存在,则意味着Python 是一种编程语言。使用你的方法,如果你想检查令牌X是否是编程,你可以查询页面X_(programming_language)是否退出。但这一事实并非适用于所有编程语言。

    更好的方法是获取所有编程语言的列表,然后检查您的令牌是否在此列表中。你可以使用this query

    from SPARQLWrapper import SPARQLWrapper, JSON
    
    sparql = SPARQLWrapper("http://dbpedia.org/sparql")
    sparql.setQuery("""
        SELECT ?pl ?label
        WHERE { 
            ?pl rdfs:label ?label .
            ?pl rdf:type dbo:ProgrammingLanguage .
            FILTER (LANG(?label)='en')
        }  
        """)
    
    sparql.setReturnFormat(JSON)
    results = sparql.query().convert()
    results = results["results"]["bindings"]
    programming_languages = [item["label"]["value"] for item in results]
    print programming_languages
    # [u'ALGOL', u'AMOS (programming language)', u'APL (programming language)', ...]
    

    【讨论】:

    • 其实我想实现这个概念:假设我有一些已知技能的技能字典。职位描述中的一个句子被确定为具有至少两个已知技能(已知技能是技能数据库中存在的那些) .Sentence 被转换成记号。通过与 DBpedia 交叉引用,每个未知标记都被验证为实际技能。现在假设未知令牌是“数据结构”,那么我如何使用 dbpedia 将这个令牌验证为技能。
    • 我没看清楚,如果未知token是“数据结构”,你期待什么?如果能提供一些更详细的例子就更好了
    • 我想实现 ML 算法来自动学习什么是工作技能,并从职位发布和简历中提取它们。首先,我们使用一些已知技能创建技能字典。使用工作描述的训练集迭代更新此技能字典。现在假设职位描述中的一句话是['必须对数据结构有很好的了解']。经过一些清理操作后,我有了令牌 ['knowledge','Data Structure']。现在我想从 dbpedia 验证这些令牌是否是技能。我该如何做到这一点,以便在验证后我将在技能字典中添加数据结构。
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2011-03-08
    • 1970-01-01
    • 1970-01-01
    • 2011-04-15
    相关资源
    最近更新 更多