Please enable JavaScript.
Coggle requires JavaScript to display documents.
:star: Failure Analysis CTS and CTS-on-GSI net.test issue, AATS-XTS …
:star: Failure Analysis
CTS and CTS-on-GSI net.test issue
Man
MY-WK/Steven
TWN-AATS
:question:someone 造成
:warning: 有可能會發生
:silhouettes:補強
將IP camera 放到更高點, 啟動哨兵模式
Machine
MY
TWN-AATS:
:question:DUT broken
:warning:風險: DUT crash
-無偵測機制
-無補救機制
:silhouettes:補強
script 新增retry xts 前, console DUT 看是否活著
若死掉, 會先在jenkins log 註明,以利查詢
考慮在死掉後, 啟動reboot 版子機制
:question:Router #1 broken
:warning: 風險: router crash
:silhouettes:補強
script 新增retry xts前, ping google server
如果no response, reset router
:question:Slave Node broken
:warning: 風險: Slave Node crash
目前有偵測機制: 定期回報master node
-但無reboot 機制
:no_entry: 可行辦法如下, 暫時無實施必要,
master node query slave node status
當no status , 考慮stand along
reboot slave node
:question:QC Router broken
:warning:風險: router crash
:silhouettes:補強
請IT jump 此router, 讓router #1直接接到ISP 專線
:question:ISP broken
:warning: 風險ISP crash
:silhouettes:補強
router #1 補強措施
如果reset router #1,在有限次數後, 將會看其他NTS 是否也有類似情況
若也有, 將請IT 解決
:question:Google server broken
:warning:Google Server crash
:no_entry:暫無想法
:check:目前已實施, 參照sw image degrade
Method
MY
manual
TWN-AATS
script :question:
Materials
TWN-AATS
:question:CTS Tool Rev degrade
:warning:風險: 有可能
:check:raise issue or upgrade tool
:question:SW Image degrade
:warning:風險: 有此現象
:check:目前已實施
RD 手動再驗
-若無此現象, may find AATS log 離開
-若有此現象, 將會先raise Jira
-同時 check Michael and TT
:question:Adb version degrade
:warning: 風險: 目前vts 有類似情況
-rev.41 and rev.39 不同結果
:no_entry:目前看adb source code
:silhouette:補強-
如果adb source code, 有看到方法, 會利用watch -n 1 *.batch 來做detect and recover
MY
Environment
MY
TWN-AATS
:question:Slave<-> Router #1 <-> DUT 有broken
:warning: 有此風險
:silhouettes:補強
-參照Machine
-參照Materials
-參照Man
-參照Method
:question: DUT<-> Router #1 <-> QC Router 有broken
:warning: 有此風險
:silhouettes:補強同上
:question:QC Router <-> ISP <-> ...<-> Google Server有broken
:warning:有此風險
:silhouettes:補強同上
:star: Corrective Action:
如下
AATS-XTS
Issue Root Cause Analysis