【发布时间】:2021-06-09 13:36:50
【问题描述】:
有人知道使用 Azure 数据工厂从 Twitter/LinkedIn API 获取结构化/非结构化数据吗?请让我知道是否有人对此有所了解。
【问题讨论】:
标签: azure azure-data-factory linkedin-api
有人知道使用 Azure 数据工厂从 Twitter/LinkedIn API 获取结构化/非结构化数据吗?请让我知道是否有人对此有所了解。
【问题讨论】:
标签: azure azure-data-factory linkedin-api
据我所知,我们没有可用于获取数据的目录连接器 Yom 可以在这里找到支持的数据存储列表https://docs.microsoft.com/en-us/azure/data-factory/connector-overview#supported-data-stores
如果您需要将数据移入/移出不在 Azure 数据工厂内置连接器列表中的数据存储,以下是一些可扩展选项:
1.对于数据库和数据仓库,通常可以找到相应的ODBC驱动程序,通过它可以使用通用的ODBC连接器。 2.对于SaaS应用: 如果它提供 RESTful API,您可以使用通用 REST 连接器。 如果它有 OData 源,您可以使用通用 OData 连接器。 如果它提供 SOAP API,您可以使用通用 HTTP 连接器。 如果它有 ODBC 驱动程序,您可以使用通用 ODBC 连接器。 3.对于其他人,检查您是否可以将数据加载或公开为任何 ADF 支持的数据存储,例如Azure Blob/File/FTP/SFTP/etc,然后让 ADF 从那里提取。您可以通过 Azure Function、自定义活动、Databricks/HDInsight、Web 活动等调用自定义数据加载机制。
【讨论】: