【问题标题】:Astyanax not respecting configured socket timeoutAstyanax 不遵守配置的套接字超时
【发布时间】:2016-12-13 23:44:12
【问题描述】:

这是我的设置:

  • 4 个节点 Cassandra 1.2.19
  • Astyanax 1.56.49

我正在设置类似的配置

AstyanaxContext<Keyspace> context = new AstyanaxContext.Builder()
    .forCluster(service.getClusterName())
    .forKeyspace(service.getKeySpaceName())
    .withAstyanaxConfiguration(new AstyanaxConfigurationImpl()
         .setDiscoveryType(NodeDiscoveryType.NONE)
         .setCqlVersion("3.0.0")
         .setDefaultReadConsistencyLevel(consistencyLevel.getAstyanaxValue())
         .setDefaultWriteConsistencyLevel(consistencyLevel.getAstyanaxValue())
    )
    .withConnectionPoolConfiguration(new ConnectionPoolConfigurationImpl("b2bConnectionPool")
         .setPort(service.getPort())
         .setMaxConnsPerHost(5)
         .setSeeds(StringUtils.join(hosts, ","))
         // increase default timeout for heavy operations (milliseconds)
         .setSocketTimeout(15000)
         .setSSLConnectionContext(sslContext)
         .setAuthenticationCredentials(credentials)
    )
    .withConnectionPoolMonitor(new CountingConnectionPoolMonitor())
    .buildKeyspace(ThriftFamilyFactory.getInstance());

现在有一个可重现的查询,需要很长时间,最后抛出一个OperationTimeoutException:

com.netflix.astyanax.connectionpool.exceptions.OperationTimeoutException: OperationTimeoutException: [host=myhost(myip):13260, latency=10001(40007), attempts=4]TimedOutException()
    at com.netflix.astyanax.thrift.ThriftConverter.ToConnectionPoolException(ThriftConverter.java:171) ~[astyanax-thrift-1.56.49.jar:na]
    at com.netflix.astyanax.thrift.AbstractOperationImpl.execute(AbstractOperationImpl.java:65) ~[astyanax-thrift-1.56.49.jar:na]
    at com.netflix.astyanax.thrift.ThriftColumnFamilyQueryImpl$1$2.execute(ThriftColumnFamilyQueryImpl.java:190) ~[astyanax-thrift-1.56.49.jar:na]
    at com.netflix.astyanax.thrift.ThriftColumnFamilyQueryImpl$1$2.execute(ThriftColumnFamilyQueryImpl.java:182) ~[astyanax-thrift-1.56.49.jar:na]
    at com.netflix.astyanax.thrift.ThriftSyncConnectionFactoryImpl$ThriftConnection.execute(ThriftSyncConnectionFactoryImpl.java:151) ~[astyanax-thrift-1.56.49.jar:na]
    at com.netflix.astyanax.connectionpool.impl.AbstractExecuteWithFailoverImpl.tryOperation(AbstractExecuteWithFailoverImpl.java:119) ~[astyanax-core-1.56.49.jar:na]
    at com.netflix.astyanax.connectionpool.impl.AbstractHostPartitionConnectionPool.executeWithFailover(AbstractHostPartitionConnectionPool.java:338) ~[astyanax-core-1.56.49.jar:na]
    at com.netflix.astyanax.thrift.ThriftColumnFamilyQueryImpl$1.execute(ThriftColumnFamilyQueryImpl.java:180) ~[astyanax-thrift-1.56.49.jar:na]

异常消息显示“latency=10001”,我认为这应该是配置为 15000 毫秒的套接字超时,但显然不是。如何增加 astyanax 中查询操作的超时时间?

【问题讨论】:

  • 我无法用 cqlsh 重现该问题,但我可以用一个小型 java 程序重现该查询。我将尝试答案中提到的配置更改,然后提供反馈。
  • 增加超时(见答案)就可以了。

标签: java cassandra timeout astyanax


【解决方案1】:

尝试查询具有更大数据的节点时,我遇到了类似的超时异常。我在 cassandra.yaml 中修改了这 4 个值,它解决了所有的超时错误。

协调器应该等待读操作完成多长时间 read_request_timeout_in_ms: 15000

协调器应等待 seq 或索引扫描完成多长时间 range_request_timeout_in_ms: 30000

协调器应该等待写入完成多长时间 write_request_timeout_in_ms: 30000

协调器应该等待计数器写入完成多长时间 counter_write_request_timeout_in_ms: 15000

注意:您需要在集群中的所有节点中执行此操作,并且还需要在所有节点中重新启动 Cassandra。

【讨论】:

  • 感谢您的回答。我会试试的。
【解决方案2】:

我相信您没有遇到套接字超时,而是我认为无法通过 Astyanax 控制的 rpc 超时。在您的堆栈跟踪中,包裹在 OperationTimeoutException 中的异常是 TimedOutException,当发生 rpc 超时(默认为 10 秒)时会抛出该异常。如果套接字超时,将抛出SocketTimeoutException。

尝试使用 cqlsh 执行查询,您将收到 Request did not complete within rpc_timeout 消息。

在您的&lt;cassandra_home&gt;/conf/cassandra.yaml 中尝试设置:

read_request_timeout_in_ms: 20000
rpc_timeout_in_ms: 20000

重新启动服务器并再次尝试执行查询。

【讨论】:

  • 感谢您的回答。我会试试的。
猜你喜欢
  • 1970-01-01
  • 2018-03-30
  • 1970-01-01
  • 2010-09-06
  • 2015-02-04
  • 2020-04-04
  • 1970-01-01
  • 2015-09-14
  • 2011-12-01
相关资源
最近更新 更多