ETL数据治理
想要建立数据仓库,却苦于没有合适的工具和方法吗!
FastBI的ETL数据治理模块就是您的最佳选择!
它能够帮助您简单、快速、高效地完成各种类型数据的抽取、转换、加载和清洗,让您的数据中心更加完善和规范!

想要建立数据仓库,却苦于没有合适的工具和方法吗!
FastBI的ETL数据治理模块就是您的最佳选择!
它能够帮助您简单、快速、高效地完成各种类型数据的抽取、转换、加载和清洗,让您的数据中心更加完善和规范!
数据治理产品模块,可以帮助您通过多种方式建立数据仓库,如:SQL语句、Excel文件上传、Http接口、企业微信/钉钉/飞书应用对接等。您还可以采用代码脚本方式自定义建仓。无缝对接主流的各种数据来源,进行数据的清洗、治理和整合,为您的数据分析和应用提供坚实的支撑。
通过SQL建仓方式,您可以轻松地从各种主流数据库来源,如:MySQL、Oracle、SQL Server等,引入并清洗数据,并根据您设定的建仓规则,如:完全更新、部分更新、主键追加更新等,将数据存储到您指定的数据仓库中。此外,在数据清洗和转化的过程中,您还可以使用高级功能,如:取数参数配置、执行任务前事件、执行任务后事件等。
通过EXCEL建仓方式,您可以将上传的EXCEL文件中的数据按照设置的规则存储到您指定的数据仓库中。在数据清洗和转化的过程中,您可以对EXCEL中的数据进行列转行、行转列、添加扩展列等操作。任务建立好后,您还可以批量上传文件,以不同的方式更新仓库中的数据,如:覆盖更新、追加更新、主键更新等。这样,哪怕EXCEL源文件丢失了,也不影响数据的使用了。
随着SAAS类型的管理系统的普及,企业需要将云端的数据同步到本地的数据仓库中。您可以通过Http接口建仓功能,按照自定义的规则,从SAAS系统中获取所需的数据,并存储到您指定的数据仓库中。在获取数据时,您还可以设置headers参数、查询参数等,实现获取数据的过滤和清洗。数据存入本地后,您就可以方便地进行SAAS系统与其他系统中数据的关联分析与应用了。
钉钉、企业微信、飞书等平台是企业内部管理的常用工具,它们包含了丰富的企业管理和经营数据。您可以通过第三方应用建仓功能,例如:企微审批建仓任务、钉钉应用建仓任务、飞书审批建仓任务等,无需编写代码,通过简单的可视化配置,即可将应用中数据,如:OA审批应用中的数据,存储到您指定的本地数据仓库中。在获取数据时,您还可以通过设置过滤条件,来选择需要的数据。
在企业数据分析的场景中,有时候需要借助python脚本,对数据进行一定的清洗、加工和整理。自定义建仓任务功能,对python脚本进行了很好的支持,您可以将自己定义的Python脚本文件引入到产品中,系统即可将通过脚本获取到数据,并存储到您指定的本地数据仓库中。之后,您就可以利用产品的强大分析能力,对这些数据进行深入挖掘和可视化展示啦。