Java代码结合Cassandra集群调用Spark Cassandra Connector为何速度极慢?
Spark 结合 Cassandra 集群的 Java 代码性能异常问题
- 测试场景:小数据量下多场景测试
- 核心现象:单节点Cassandra部署时功能执行正常;切换为Cassandra集群部署后,同一功能耗时超过15秒
- 代码情况:Java代码完全参照示例编写,仅调用
dataset.collectAsList()或dataset.head(10)方法 - 对比结果:Scala在spark-shell中执行相同逻辑时无性能问题
- 环境差异:测试多个JDK版本,Mac OS下无异常,Windows、CentOS等Linux系统均出现此问题
相关截图


内容的提问来源于stack exchange,提问作者Deng Steve
相关产品推荐
相关产品推荐

