金融界2024年1月16日消息,据国家知识产权局公告,腾讯科技(深圳)有限公司申请一项名为“元数据采集方法、装置、电子设备及计算机可读存储介质”,公开号CN117411882A,申请日期为2022年7月。
专利摘要显示,本申请提供了一种元数据采集方法、装置、电子设备及计算机可读存储介质,涉及大数据技术领域,该方法包括:在接收任务调度平台下发的元数据采集任务后,基于数据源类型进行数据源类型自适应,并基于当前的设备环境资源信息进行资源自适应;在完成自适应后进行元数据采集,并将采集到的元数据推送至云端消息队列MQ,以供预设消费管道通过云端MQ消费元数据并存储至预设元数据库中。该方案一方面在建立采集器与目标数据源之间的连接时进行了数据源类型的自适应,能够保证公有云环境下对不同资源类型的适应性,另一方面在进行数据采集之前,进行了当前资源的自适应,能够做到资源与采集数据量的适配来保证资源自适应性,进而保证元元数据采集稳定性。
来源:金融界