金融界2024年4月2日消息,据国家知识产权局公告,华为技术有限公司申请一项名为“一种数据访问方法、装置及设备“,公开号CN117806842A,申请日期为2022年9月。
专利摘要显示,本申请提供了一种数据访问方法、装置及设备,该方法应用于大数据分布式处理系统中的第一工作节点,大数据分布式处理系统包括数据管理节点以及至少一个工作节点,该方法包括:获取第一数据的元数据,第一数据为所述第一工作节点中的第一执行器中的第一任务请求访问的共享数据,第一数据的元数据用于指示第一数据在共享内存池中的存储位置信息,共享内存池包括数据管理节点的内存池以及各工作节点的内存池;根据第一数据的元数据,从共享内存池获取第一数据;将第一数据存储至第一工作节点的内存池,第一工作节点的内存池用于存储第一工作节点中各执行器共享的数据。第一工作节点仅在其内存池中存储一份第一数据,因此可以减少存储资源的消耗。
来源:金融界