数据传输的方法、客户端、中间服务器、节点及电子设备
授权
摘要
本公开实施例涉及数据传输的方法、客户端、中间服务器、大数据服务器集群中的节点、电子设备及存储介质。客户端为Spark客户端且配置有Pandas，中间服务器启用Spark REST服务，与大数据服务器集群进行数据传输的方法包括：获取第一待传输数据，第一待传输数据为可序列化的数据；转换第一待传输数据为序列结构数据；向中间服务器传输序列结构数据，中间服务器用于向大数据服务器集群传输序列结构数据。本公开实施例将待传输数据转换为序列结构数据，可利用中间服务器线上传输，接收端再将序列结构数据转换为内存数据，用户无需在文件和内存数据之间进行显性的转换，同时避免线下直接操作文件系统，进而不受操作权限的限制。
基本信息
专利标题 ：
数据传输的方法、客户端、中间服务器、节点及电子设备
专利标题（英）：
暂无
公开（公告）号 ：
CN111092947A
申请号 ：
CN201911319365.X
公开（公告）日 ：
2020-05-01
申请日 ：
2019-12-19
授权号 ：
CN111092947B
授权日 ：
2022-05-10
发明人 ：
陈龙刘熙阳倪煜杜俭峰
申请人 ：
北京金山云网络技术有限公司
申请人地址 ：
北京市海淀区小营西路33号3F02室
代理机构 ：
北京开阳星知识产权代理有限公司
代理人 ：
郭鑫
优先权 ：
CN201911319365.X
主分类号 ：
H04L29/08
IPC分类号 ：
H04L29/08
法律状态
2022-05-10 ：
授权
2020-05-29 ：
实质审查的生效
IPC(主分类) : H04L 29/08
申请日 : 20191219
申请日 : 20191219
2020-05-01 ：
公开
注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
