<div dir="ltr">I try to deploy stx-monitor on 3 nworker nodes with label like this:<div><br></div><div>```</div><div>worker-3       Ready    <none>   2d18h   v1.16.2   <a href="http://beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,elastic-client=enabled,elastic-controller=enabled,elastic-data=enabled,elastic-master=enabled,kubernetes.io/arch=amd64,kubernetes.io/hostname=worker-3,kubernetes.io/os=linux">beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,elastic-client=enabled,elastic-controller=enabled,elastic-data=enabled,elastic-master=enabled,kubernetes.io/arch=amd64,kubernetes.io/hostname=worker-3,kubernetes.io/os=linux</a><br>worker-4       Ready    <none>   2d18h   v1.16.2   <a href="http://beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,elastic-client=enabled,elastic-controller=enabled,elastic-data=enabled,elastic-master=enabled,kubernetes.io/arch=amd64,kubernetes.io/hostname=worker-4,kubernetes.io/os=linux">beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,elastic-client=enabled,elastic-controller=enabled,elastic-data=enabled,elastic-master=enabled,kubernetes.io/arch=amd64,kubernetes.io/hostname=worker-4,kubernetes.io/os=linux</a><br>worker-5       Ready    <none>   2d16h   v1.16.2   <a href="http://beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,elastic-master=enabled,kubernetes.io/arch=amd64,kubernetes.io/hostname=worker-5,kubernetes.io/os=linux">beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,elastic-master=enabled,kubernetes.io/arch=amd64,kubernetes.io/hostname=worker-5,kubernetes.io/os=linux</a><br></div><div>```</div><div>When I check logs:</div><div><br></div><div>```</div><div>us: <_Rendezvous of RPC that terminated with:<br>       status = StatusCode.UNKNOWN<br>   details = "release mon-kibana failed: timed out waiting for the condition"<br>  debug_error_string = "{"created":"@1591538841.195787781","description":"Error received from peer","file":"src/core/lib/surface/call.cc","file_line":1017,"grpc_message":"release mon-kibana failed: timed out waiting for the condition","grpc_status":2}"<br>><br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller Traceback (most recent call last):<br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller   File "/usr/local/lib/python3.6/dist-packages/armada/handlers/tiller.py", line 473, in install_release<br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller     metadata=self.metadata)<br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller   File "/usr/local/lib/python3.6/dist-packages/grpc/_channel.py", line 533, in __call__<br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller     return _end_unary_response_blocking(state, call, False, None)<br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller   File "/usr/local/lib/python3.6/dist-packages/grpc/_channel.py", line 467, in _end_unary_response_blocking<br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller     raise _Rendezvous(state, None, None, deadline)<br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller grpc._channel._Rendezvous: <_Rendezvous of RPC that terminated with:<br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller        status = StatusCode.UNKNOWN<br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller  details = "release mon-kibana failed: timed out waiting for the condition"<br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller         debug_error_string = "{"created":"@1591538841.195787781","description":"Error received from peer","file":"src/core/lib/surface/call.cc","file_line":1017,"grpc_message":"release mon-kibana failed: timed out waiting for the condition","grpc_status":2}"<br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller ><br>2020-06-07 14:07:21.196 7963 ERROR armada.handlers.tiller <br>2020-06-07 14:07:21.199 7963 DEBUG armada.handlers.tiller [-] [chart=kibana]: Helm getting release status for release=mon-kibana, version=0 get_release_status /usr/local/lib/python3.6/dist-packages/armada/handlers/tiller.py:539<br>2020-06-07 14:07:21.402 7963 DEBUG armada.handlers.tiller [-] [chart=kibana]: GetReleaseStatus= name: "mon-kibana"<br>info {<br>  status {<br>    code: FAILED<br>  }<br>  first_deployed {<br>    seconds: 1591538240<br>    nanos: 977775758<br>  }<br>  last_deployed {<br>    seconds: 1591538240<br>    nanos: 977775758<br>  }<br>  Description: "Release \"mon-kibana\" failed: timed out waiting for the condition"<br>}<br>namespace: "monitor"<br> get_release_status /usr/local/lib/python3.6/dist-packages/armada/handlers/tiller.py:547<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada [-] Chart deploy [kibana] failed: armada.exceptions.tiller_exceptions.ReleaseException: Failed to Install release: mon-kibana - Tiller Message: b'Release "mon-kibana" failed: timed out waiting for the condition'<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada Traceback (most recent call last):<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada   File "/usr/local/lib/python3.6/dist-packages/armada/handlers/tiller.py", line 473, in install_release<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada     metadata=self.metadata)<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada   File "/usr/local/lib/python3.6/dist-packages/grpc/_channel.py", line 533, in __call__<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada     return _end_unary_response_blocking(state, call, False, None)<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada   File "/usr/local/lib/python3.6/dist-packages/grpc/_channel.py", line 467, in _end_unary_response_blocking<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada     raise _Rendezvous(state, None, None, deadline)<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada grpc._channel._Rendezvous: <_Rendezvous of RPC that terminated with:<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada    status = StatusCode.UNKNOWN<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada  details = "release mon-kibana failed: timed out waiting for the condition"<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada         debug_error_string = "{"created":"@1591538841.195787781","description":"Error received from peer","file":"src/core/lib/surface/call.cc","file_line":1017,"grpc_message":"release mon-kibana failed: timed out waiting for the condition","grpc_status":2}"<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada ><br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada <br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada During handling of the above exception, another exception occurred:<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada <br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada Traceback (most recent call last):<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada   File "/usr/local/lib/python3.6/dist-packages/armada/handlers/armada.py", line 225, in handle_result<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada     result = get_result()<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada   File "/usr/local/lib/python3.6/dist-packages/armada/handlers/armada.py", line 236, in <lambda><br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada     if (handle_result(chart, lambda: deploy_chart(chart))):<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada   File "/usr/local/lib/python3.6/dist-packages/armada/handlers/armada.py", line 214, in deploy_chart<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada     chart, cg_test_all_charts, prefix, known_releases)<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada   File "/usr/local/lib/python3.6/dist-packages/armada/handlers/chart_deploy.py", line 239, in execute<br>2020-06-07 14:07[402248.574350] serial8250: too much work for irq4<br>:21.404 7963 ERROR armada.handlers.armada     timeout=timer)<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada   File "/usr/local/lib/python3.6/dist-packages/armada/handlers/tiller.py", line 486, in install_release<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada     raise ex.ReleaseException(release, status, 'Install')<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada armada.exceptions.tiller_exceptions.ReleaseException: Failed to Install release: mon-kibana - Tiller Message: b'Release "mon-kibana" failed: timed out waiting for the condition'<br>2020-06-07 14:07:21.404 7963 ERROR armada.handlers.armada <br>2020-06-07 14:07:21.406 7963 ERROR armada.handlers.armada [-] Chart deploy(s) failed: ['kibana']<br>2020-06-07 14:07:21.478 7963 INFO armada.handlers.lock [-] Releasing lock<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli [-] Caught internal exception: armada.exceptions.armada_exceptions.ChartDeployException: Exception deploying charts: ['kibana']<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli Traceback (most recent call last):<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli   File "/usr/local/lib/python3.6/dist-packages/armada/cli/__init__.py", line 38, in safe_invoke<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli     self.invoke()<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli   File "/usr/local/lib/python3.6/dist-packages/armada/cli/apply.py", line 213, in invoke<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli     resp = self.handle(documents, tiller)<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli   File "/usr/local/lib/python3.6/dist-packages/armada/handlers/lock.py", line 81, in func_wrapper<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli     return future.result()<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli   File "/usr/lib/python3.6/concurrent/futures/_base.py", line 425, in result<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli     return self.__get_result()<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli   File "/usr/lib/python3.6/concurrent/futures/_base.py", line 384, in __get_result<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli     raise self._exception<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli   File "/usr/lib/python3.6/concurrent/futures/thread.py", line 56, in run<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli     result = self.fn(*self.args, **self.kwargs)<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli   File "/usr/local/lib/python3.6/dist-packages/armada/cli/apply.py", line 256, in handle<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli     return armada.sync()<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli   File "/usr/local/lib/python3.6/dist-packages/armada/handlers/armada.py", line 252, in sync<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli     raise armada_exceptions.ChartDeployException(failures)<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli armada.exceptions.armada_exceptions.ChartDeployException: Exception deploying charts: ['kibana']<br>2020-06-07 14:07:21.486 7963 ERROR armada.cli<br></div><div>```</div><div>What mean the error above?</div><div>I just want to know, is stx-monitor stable or still experimental? Because I could not found documentation about it.</div><div><br></div></div>