tags: Linux, SRE

SRE 讀書會 Round 4 #16 - 線上讀書會共筆

活動資訊

現場共筆

49 | 案例篇：內核線程 CPU 利用率太高，我該怎麼辦？

  • 特殊ps:
    • 0 ps: idle ps
    • 1 ps: init ps
      • systemd process
      • user space - parents
    • 2 ps: kthreadd process
  • kernel ps:
    • ksoftirqd
    • kthreadd
    • kswaod0
    • kworker
    • migration
    • jbd2/sda1-8
    • pdflush

Q1. 火焰圖(FlameGraph)工作案場是否有使用過?
A1. 追CPU/IO卡住的時候可以使用，也可以用perf
可以用APM

參考資料

How to generate PHP Flamegraphs

50/51 | 案例篇：動態追蹤怎麼用？

效能調整方法:

  1. GDB設置應用程式斷點
  2. 程式碼debugger

Prode(探針):靜態/動態/硬體事件

perf跟著核心released

linux常用動態追蹤fteace/perf/eBPF

  • perf

Q1. perf/火焰圖/ftrace有什麼不同?
A1. 網通產品比較容易使用，Web App.比較少用

Q2. prod環境是否有人會開APM，
A2. use case: 被反應很慢的時候

​​​​* (JAVA)VisialVM 
​​​​JMS EXPORTER:收集效能數據
​​​​jconsole

​​​​* .NET:IIS runtime data
​​​​application insight

​​​​* Python http://pramodkumbhar.com/2019/05/summary-of-python-profiling-tools-part-i/

​​​​*https://zipkin.io/

現在features我們要求塞入tracing,也是採樣整條function

​​​​* 標準做法: 先水平擴展,再用LOG復現環境,再觀察問題

gafana 有釋出相關的dashboard
https://grafana.com/blog/2020/05/22/new-in-grafana-7.0-trace-viewer-and-integrations-with-jaeger-and-zipkin/

參考資料

Select a repo