Kryo

Kryo

文章 7 浏览 66

Spark,什么时候我们需要启用 KryoSerializer?

我有一个spark(版本2.4.7)工作, JavaRDD rows = javaSparkContext.newAPIHadoopFile(...) .map(d -> { Foo foo = Foo.parseFrom(d._2.copyBytes())…

悍妇囚夫 2025-01-11 04:20:29 0 0

如何在不使用阻塞队列的情况下将消息传递到另一个线程?

我有一个非常简单的服务器(使用 kryonet)。客户端仅存储汽车的当前状态(x、y、角度等)并发送加速和转弯请求。 服务器正在接收请求并将它们添加到…

伤痕我心 2024-12-13 21:20:16 3 0

使用 kryo 注册课程的策略

我最近发现了 kryonet 库,它非常棒并且非常适合我的需求。 然而,我遇到的一个问题是制定一种好的策略来注册所有可以转移的类。 我知道我可以在每个…

梦中楼上月下 2024-12-09 22:27:09 0 0

Infinispan+kyro/Google Protocol Buffers 实现空间和时间效率更高的序列化?

如果我理解正确的话,Infinispan/JBoss Cache 使用Java 自己的序列化机制,该机制可能很慢并且占用相对较多的存储空间。我一直在寻找可以实现以下目标…

酸甜透明夹心 2024-11-28 09:45:00 4 0

增加 Kryonet 中服务器/客户端的缓冲区大小

如何增加 Kryonet 中服务器/客户端构造函数中的缓冲区大小?…

网白 2024-11-27 11:37:44 2 0

Java Kryonet [类未注册异常]

我发现这个 API 名为 Kryonet。好吧,我尝试实现项目页面中提供的示例。然而,它并不成功。 服务器代码: public class KryoTest { public KryoTest()…

硬不硬你别怂 2024-11-25 14:28:20 3 0

为什么在使用 Kryo 时会出现 NullPointerException?

这是我正在使用的完整代码。 Kryo kryo = new Kryo(); kryo.register(PlayerPOJO.class); ByteBuffer buffer = ByteBuffer.allocateDirect(256); Play…

习惯那些不曾习惯的习惯 2024-11-14 22:09:32 2 0

使用 Kryo 将多个对象序列化到单个文件中

据我所知,Kryo 序列化/反序列化是针对每个对象进行的。是否可以将多个对象序列化到一个文件中?另一个类似的问题中建议的解决方法之一是使用对象数组…

乖不如嘢 2024-10-20 10:06:38 5 0

Kryo 序列化库:它在生产中使用吗?

Kryo 是一个非常新且有趣的 Java 序列化库,也是 thrift-protobuf 基准测试。如果您使用过 Kryo,它是否已经足够成熟,可以在生产代码中进行尝试? 更…

梦里寻她 2024-08-30 16:31:59 10 0

Spaksql Error:Kryo serialization failed: Buffer overflow

我使用sparksql编写的job以yarn-client方式提交后出现了kryo序列化缓存溢出的情况,报错如下: Caused by: org.apache.spark.SparkException: Job ab…

兮子 2022-09-04 08:17:52 25 0

大数据环境搭建: Apache Storm + Kryo + Kafka 小问题

由Apache Storm + AVRO + Kafka 三大Apache家族成员进行大数据平台进行搭建算是比较常见的啦, 最近发现Apache Storm上使用了Kryo作为序列化的工具, …

剑心龙吟 2022-09-02 08:43:09 20 0

Kryo 3.0 反序列化的问题

之前 Kryo 2.x 版本时候就更多问题,今天发布了 3.0 版本,升级一下试着对一个字符串列表进行序列化和反序列化后还是出错,报错如下: Exception in t…

屌丝范 2021-12-01 12:16:10 989 0

如何使用kryo作为序列化的传输方式

如题:如何配置dubbox开启kryo的序列化方式…

疑心病 2021-11-28 16:35:39 826 0

使用msm序列化session, Unable to serialize object of ...

我使用Memcached Session Manager把tomcatsession 序列化到 memcahced,项目中使用Spring Security, 查看后台报错: Caused by: com.esotericsoftware.k…

臻嫒无言 2021-11-26 12:31:14 715 0

kryo序列化测试数据

@鉴客 你好,想跟你请教个问题:感谢你分享的关于kryo的测试结果。但我在实际测试中发现总时间并未能达到10倍(kryo比java原生),所以麻烦把你的测…

能否归途做我良人 2021-11-26 07:56:25 858 0
更多

推荐作者

佚名

文章 0 评论 0

羁客

文章 0 评论 0

文章 0 评论 0

夏日落

文章 0 评论 0

隐诗

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文