概述
Fivetran是一个基于saas的数据集成服务,它可以帮助您集中来自不同来源的数据,您可以直接从浏览器中管理这些数据。您可以将Fivetran视为一个数据管道,它允许您使用受支持的连接器连接、提取和加载数据(甚至执行后转换)到数据目的地。
这个Python集成从Fivetran中提取元数据,并将它们导入Collibra平台。亚愽视频集成将作为资产导入的Fivetran实体包括:
- Fivetran Groups(作为一个社区),
- Fivetran目的地,
- Fivetran连接器,
- Fivetran任务,
- Fivetran警告。
除此之外,集成将创建到匹配的Catalog资产(数据库、模式、表)的关系/链接,这些资产在Collibra中使用Data Catalog分别被吸收。亚愽视频
用例
- 作为一名数据工程师或数据架构师,我想导入Fivetran目的地、连接器、任务和警告,这样我就可以在Collibra中可视化这些Fivetran实体,以及它们是如何相互关联的。亚愽视频
- 作为一名数据工程师或数据架构师,我想将Fivetran目的地、连接器、任务和警告链接到所摄取的Catalog数据资产,这样我就可以看到连接器数据资产和目的地数据资产的端到端谱系。
请注意:这是一个python应用程序,可以作为作业或REST web服务运行,以创建模板和摄取Fivetran数据到Collibra。亚愽视频更多细节请参见文档。
如欲获得有关此项目的支持,您可以与我们的专业服务团队联系,或在数据公民社区.
媒体
更多的细节
发布说明
增加了从外部*.ini文件中提取配置的选项
增加了从Vault或Secrets管理器中提取配置而不更改模板的选项
为上面的每个选项添加了可选的命令参数(请确保您检查了这一点)
当使用默认选项时,这个版本应该向后兼容v2.0.2
更新collibra p亚愽视频ython包以支持JWT
ACCESS_TOKEN被添加为在对Collibra进行API调用时发送承载令牌(JWT)的配置之一亚愽视频
在撰写本文时,PyPi的最新版本是>=2.0.0
兼容性
- Fivetran API V1
- Python
- 亚愽视频Collibra数据智能云
- 亚愽视频Collibra数据智能On-Prem
依赖
- Fivetran API V1
- Python 3.9 +
License和使用要求
- 亚愽视频Collibra目录
版本历史
发布说明
- 修正了一些映射到Fivetran API v1的错误,例如从连接器的“名称”到“模式”。
- 更新了CMA文件。
兼容性
- Fivetran API V1
- Python
- 亚愽视频Collibra数据智能云
- 亚愽视频Collibra数据智能On-Prem
依赖
- Fivetran API V1
- Python 3.9 +
License和使用要求
- 亚愽视频Collibra目录
发布说明
- 更新至Fivetran API v1(已发布版本)
- 增加了Fivetran Connector和Column之间的关系,将collibra_api_client文件夹替换为来自PyPi的包。亚愽视频请参阅requirements.txt
- 添加关于“系统位置”属性的说明
兼容性
- Fivetran API V1
- Python
- 亚愽视频Collibra数据智能On-Prem
- 亚愽视频Collibra数据智能云
依赖
- Fivetran API V1
- Python 3.9 +
License和使用要求
- 亚愽视频Collibra目录
发布说明
根据v1.0.0的初始反馈更新运营模型
修改了关系,删除了fivetran组映射文件
删除了列到列的沿袭
删除了连接器和源架构之间的链接
利用Fivetran API v2
兼容性
- Python
- Fivetran API V2
- 亚愽视频Collibra数据智能云
- 亚愽视频Collibra数据智能On-Prem
依赖
- Fivetran API v2
- Python 3.9 +
License和使用要求
- 亚愽视频Collibra目录
发布说明
Python应用程序,具有以下主要功能:
- 将Fivetran Groups, Destinations, Connectors表示为Collibra中的资产。亚愽视频
- 将目标/连接器链接到目录资产。
- 在链接到目标和连接器的Catalog资产之间创建列级谱系。
兼容性
- Python
- Fivetran API
- 亚愽视频Collibra数据智能云
- 亚愽视频Collibra数据智能On-Prem
依赖
- 亚愽视频Collibra API v2
- Python3.9 +
License和使用要求
- 亚愽视频Collibra目录
浏览与同样使用此应用程序的客户的讨论。
亚愽视频collibra主办的讨论将连接您与其他使用此应用程序的客户。
以下条款适用于您收到此产品源代码的程度。
尽管条款二进制代码许可协议根据该集成模板的许可,Collibra授予您(被许可方)访问集成模板的源代码的权利,以便为被许可方的内亚愽视频部使用目的复制和修改所述源代码,并仅用于开发与Collibra产品和服务的连接和/或集成。
仅就此集成模板而言,根据二进制代码许可协议定义的术语“软件”应包括其源代码版本。除上述规定外,《二进制代码许可协议》的所有剩余条款均适用于本协议项下集成模板的许可。