在AWS EMR Zeppelin中通过Spark连接MySQL时遇连接超时错误
看起来你已经把驱动相关的配置都搞定了——jar包路径正确，驱动类也初始化成功，结果卡在网络连接超时上，这种情况我之前也碰到过，大概率是网络、权限或者配置细节的问题，咱们一步步排查：
1. 先验证EMR集群到MySQL的网络连通性
连接超时最常见的原因就是网络不通。你可以登录EMR主节点，用telnet或者nc命令直接测试MySQL的端口是否能访问：
# 用telnet测试 telnet our-host.readm.co.nz 3306 # 或者用nc（如果telnet没装的话） nc -zv our-host.readm.co.nz 3306
如果这一步就超时，那问题肯定在网络安全配置上：
- 检查MySQL实例的安全组：确保入站规则里允许EMR集群所在的安全组（或者EMR节点的私网/公网IP）访问3306端口；
- 检查EMR集群的安全组/网络ACL：出站规则没有限制访问3306端口；
- 如果MySQL是在VPC里，还要确认EMR集群和MySQL实例是否在同一个VPC，或者是否通过对等连接、NAT网关等打通了网络。
2. 确认MySQL的连接地址和端口没出错
有时候可能是域名解析出问题，或者端口记错了。你可以先在EMR节点上ping一下MySQL的域名，看看能不能解析到正确的IP：
ping our-host.readm.co.nz
如果解析异常，直接用MySQL实例的私网IP代替域名试试连接，排除DNS的问题。另外，也可以登录MySQL服务器，用netstat -tulpn | grep mysql确认MySQL确实监听在3306端口。
3. 检查MySQL用户的访问权限
就算用户名密码正确，MySQL的用户权限是绑定IP的——比如testuser可能只允许从本地或者某个特定IP访问，EMR节点的IP不在允许范围内就会连不上。你可以登录MySQL服务器，执行这条SQL查看用户的权限范围：
SELECT user, host FROM mysql.user WHERE user='testuser';
如果host列是localhost或者某个固定IP，那就得修改权限，允许EMR节点的IP访问：
# 允许任何IP访问（嫌不安全的话可以换成EMR集群的IP段） GRANT ALL ON testdb.* TO 'testuser'@'%' IDENTIFIED BY 'your-password'; FLUSH PRIVILEGES;
4. 简化Spark JDBC配置，排除分区参数干扰
你的配置里加了分区相关的参数（partitionColumn、numPartitions等），虽然这个一般不会导致超时，但可以先简化配置，先测试基础连接是否正常：
val jdbcDF = spark.read.format("jdbc").options( Map( "url" -> "jdbc:mysql://our-host.readm.co.nz:3306/testdb?user=testuser&password=****", "dbtable" -> "testdb.tablename", "driver" -> "com.mysql.jdbc.Driver" ) ).load()
如果简化后能成功连接，再逐步加分区参数，排查是不是分区配置的细节问题（比如lowerBound/upperBound设置不合理，导致MySQL瞬间处理太多连接）。
5. 检查MySQL的连接数限制
如果MySQL的max_connections设置太小，而你用了20个分区，可能会瞬间打满连接数，导致超时。你可以登录MySQL服务器，执行以下命令查看：
# 查看最大连接数 SHOW VARIABLES LIKE 'max_connections'; # 查看当前已使用的连接数 SHOW STATUS LIKE 'Threads_connected';
如果当前连接数接近最大值，要么调大max_connections，要么减少numPartitions的数量，避免一次性发起太多连接。
内容的提问来源于stack exchange，提问作者ds_user
