国家知识产权局信息显示,西安烽火软件科技有限公司、南京烽火星空通信发展有限公司申请一项名为“基于元数据分离的Spark数据源到Ray Dataset跨引擎直读优化方法”的专利,公开号CN123068371A,申请日期为2026年9月。
专利摘要显示,本发明公开了一种基于元数据分离的Spark数据源到Ray Dataset跨引擎直读优化方法,属于分布式AI计算框架与大数据处理技术领域;通过JDBC接口获取目标表的元数据信息,包括数据存储路径、分区结构及Schema,不依赖Spark DataFrame的创建或物化;基于元数据构建分布式文件系统上实际数据文件的完整路径并按分区条件过滤;元数据获取完成后立即启动Ray Data原生文件读取能力,直接从分布式文件系统并行读取数据文件生成Ray Dataset,无需等待Spark作业完成。本发明实现了元数据获取与数据读取两条路径的完全分离,消除了跨语言序列化开销和双份内存冗余,显著提升了跨引擎数据接入效率。
天眼查资料显示,西安烽火软件科技有限公司,成立于2011年,位于西安市,是一家以从事计算机、通信和其他电子设备制造业为主的企业。企业注册资本200万人民币。通过天眼查大数据分析,西安烽火软件科技有限公司专利信息58条,此外企业还拥有行政许可3个。
南京烽火星空通信发展有限公司,成立于2005年,位于南京市,是一家以从事计算机、通信和其他电子设备制造业为主的企业。企业注册资本53972.38万人民币。通过天眼查大数据分析,南京烽火星空通信发展有限公司共对外投资了9家企业,参与招投标项目424次,财产线索方面有商标信息99条,专利信息231条,此外企业还拥有行政许可13个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
热门跟贴