1 問題源起
上游系統(tǒng)通過公司rpc框架調(diào)用我們系統(tǒng)接口超時(shí)(默認(rèn)超時(shí)時(shí)間為100ms)數(shù)量從50次/分突然上漲到2000次/分,在發(fā)生變化時(shí)間段里我們的系統(tǒng)也沒有做過代碼變更,但上游系統(tǒng)的調(diào)用確發(fā)生了變化。由于處于主要鏈路上,sre同學(xué)找過來詢問原因,所以開始了問題排查。
2 問題初步定位
排查rpc超時(shí)的基本思路是這樣的:
1) &nb