# 网络故障

+ 过滤 tikv.log 进一步确认
```
[2021/08/29 15:51:03.086 +08:00] [ERROR] [raft_client.rs:407] ["connection aborted"] [addr=10.x.9.8:20160] [receiver_err=None] [sink_error=Some(RemoteStopped)] [store_id=2]
[2021/08/29 15:51:03.086 +08:00] [ERROR] [raft_client.rs:707] ["connection abort"] [addr=10.0.x.8:20160] [store_id=2]
[2021/08/29 15:51:03.160 +08:00] [ERROR] [raft_client.rs:407] ["connection aborted"] [addr=10.x.9.29:20160] [receiver_err=None] [sink_error=Some(RemoteStopped)] [store_id=1177000]
[2021/08/29 15:51:03.160 +08:00] [ERROR] [raft_client.rs:707] ["connection abort"] [addr=10.0.x.29:20160] [store_id=1177000]
[2021/08/29 15:51:08.108 +08:00] [ERROR] [raft_client.rs:407] ["connection aborted"] [addr=10.x.9.8:20160] [receiver_err=None] [sink_error=Some(RemoteStopped)] [store_id=2]
[2021/08/29 15:51:08.108 +08:00] [ERROR] [raft_client.rs:707] ["connection abort"] [addr=10.0.x.8:20160] [store_id=2]
[2021/08/29 15:51:08.178 +08:00] [ERROR] [raft_client.rs:407] ["connection aborted"] [addr=10.x.9.29:20160] [receiver_err=None] [sink_error=Some(RemoteStopped)] [store_id=1177000]
[2021/08/29 15:51:08.178 +08:00] [ERROR] [raft_client.rs:707] ["connection abort"] [addr=10.0.x.29:20160] [store_id=1177000]
[2021/08/29 15:51:13.150 +08:00] [ERROR] [raft_client.rs:407] ["connection aborted"] [addr=10.x.9.8:20160] [receiver_err=None] [sink_error=Some(RemoteStopped)] [store_id=2]
...
```
  + Store 9.47 与 Store 9.29 （Store ID 1177000）和 9.8 （Store ID 2）从 15:30 起每隔 5 秒钟报一次 connection aborted 错误
------------------------------------------------------------
有可能出现，待写入的目标 Reigon 的 Leader 因网络原因和 Raftgroup 中的另外两个 peer 通讯异常，导致 Leader 的写请求无法 commit，且不断堆积，阻塞在 Raftstore，最终引发 Scheduler 流控
    - TiKV-Details --> Errors --> Server report failures
通过该监控项，能够看到各个 Store 间是否出现了 unreachable 现象。从下图可见 Store 9.47，从 15:35 ~ 19:00 期间，到 Store ID 1177000，以及 Store ID 2 出现持续的 unreachable 现象

    - 过滤 tikv.log 进一步确认
过滤 Store 9.47 的 tikv.log 可见，Store 9.47 与 Store 9.29 （Store ID 1177000）和 9.8 （Store ID 2）从 15:30 起每隔 5 秒钟报一次 connection aborted 错误
由此可见，Store 9.47，Store 9.29 （Store ID 1177000）和 9.8 （Store ID 2）间的网络通讯确实出现了问题，建议继续排查网络质量。