返回

kryo 是否无法序列化大于 2 GB 的对象?

发布时间:2022-08-16 01:56:03 304
# html# java# java# apache

我读过 spark 中 kryo 缓冲区的最大大小可以是 2048 mb,它应该大于我的程序将序列化的最大对象(来源:https ://spark.apache.org/docs/latest/tuning .html)。但是如果我的最大对象大于 2gb,我该怎么办?在这种情况下我必须使用 java 序列化程序吗?还是java序列化器也有这个2g的限制?

特别声明:以上内容(图片及文字)均为互联网收集或者用户上传发布,本站仅提供信息存储服务!如有侵权或有涉及法律问题请联系我们。
举报
评论区(1)
按点赞数排序
用户头像
下一篇
python-Django UnboundLocalError 2022-08-15 23:47:49