[元数据] 采集适配器是如何实现的?平台能否支持开发和上传自定义适配器?

1681
1

lay_esensoft 数据小白Lv1

发表于2023-1-29 17:10

悬赏1

已解决

楼主
1.例如:MySQL适配器,元模型中定义了表、字段...等,适配器是如何依据元模型的定义去抓取MySQL元数据的?

2.平台目前不支持kafka,那么如果我想要抓取kafka相关的元数据,是否可以自研一个适配器,抓取topic、topic下的分区等,并上传到平台?

最近看过此主题的会员

cdsdog

13610969610

esen_4J13LI3F3Y19

esen_4BM2ADT76Z1

chestnut

竹松梅

佳佳123

hillmen

妮妮2022

jblunt3m25s

最佳答案
1、元模型为定义元数据提供基础,方便在创建元数据时提供一套标准。元数据适配器采集时,会根据对应的适配器匹配对应的元模型包,采集元模型包里定义的元数据的属性、关系的模型。元数据的采集需要依赖元模型。
2、如果要采集kafka元数据的话,不仅仅要定义一套元模型,还需要去定义一套对应的采集适配器,这个得定制化开发才行,如果说仅仅是想采集查看kafka元数据,理论上可以尝试自己去建立维护一套元模型,然后用excel去整理kafka的元信息,用excel采集适配器去采集
1个回答

只看楼主

幺小木 数据达人Lv4

发表于2023-1-29 17:10

只看该作者

取消 关注该作者的回复

沙发

1、元模型为定义元数据提供基础,方便在创建元数据时提供一套标准。元数据适配器采集时,会根据对应的适配器匹配对应的元模型包,采集元模型包里定义的元数据的属性、关系的模型。元数据的采集需要依赖元模型。
2、如果要采集kafka元数据的话,不仅仅要定义一套元模型,还需要去定义一套对应的采集适配器,这个得定制化开发才行,如果说仅仅是想采集查看kafka元数据,理论上可以尝试自己去建立维护一套元模型,然后用excel去整理kafka的元信息,用excel采集适配器去采集

登录后可回答问题,请登录注册

快速回复 返回顶部 返回列表

小时

全天响应

分钟

快速处理问题

工程师强势助力

明星产品
解决方案
联系合作

渠道咨询电话:137-0120-6790

技术支持QQ:400-0011-866(工作日9:00-18:00)

产品建议邮箱yixin@esensoft.com

关注我们

扫TA学习更多干货

一对一专家交流

版权所有© 2006-2024 北京亿信华辰软件有限责任公司 京ICP备07017321号 京公网安备11010802016281号