Çalışma zamanı / rehber
Çalışma zamanı performans analizine giriş
Temel kavramları, ölçüm yöntemini, araç seçimini ve perf ile bpftrace kurulumunu öğrenin.
Bu sayfada
- 1. Performans analizinin cevapladığı sorular
- 2. Çalışan bir programı gözlemlemenin üç yolu
- 3. Bir yöntem: belirtiden kanıta
- 4. Hangi araç hangi soruyu yanıtlıyor?
- 5. Bir Linux makinesi hazırlamak
- Araçları kur
- Önce sürümleri kaydet
- İzinler
- Araçların açıklayabilmesi için programlar oluşturun
- 6. Yavaş bir programla ilk altmış saniyeniz
- 7. Yaygın başlangıç hataları
- Bir sonraki nereye
- Kaynaklar
Bu kılavuz, bir programı profillememiş veya izlememiş okuyucular için başlangıç noktasıdır. Kelime dağarcığını, tekrarlanabilir bir yöntemi, her bir aracın rolünü ve perf ve bpftrace için bir Linux makinesinin nasıl hazırlanacağını açıklar. Daha önce hiçbir çekirdek veya performans bilgisi varsayılmaz; bir C programını derlemek ve bir terminalde komutları çalıştırmak için rahat olmalısınız.
Sonunda bir performans sorusunu tam olarak belirtebilmeli, ilk temel çizgiyi atabilmeli, bir programın * çalışıyor * veya * bekliyor * olup olmadığına karar vermeli ve tahmin etmek yerine bir sonraki aracı seçmelisiniz.
1. Performans analizinin cevapladığı sorular#
"Program yavaş" bir histir, bir ölçüm değil. Bir aracın cevaplayabileceği bir soruya dönüştürün:
- Bir işlem ne kadar sürer? Bu * gecikmedir*: bir başlangıç olayından bir bitiş olayına, örneğin bir istek veya bir işlev çağrısına kadar olan süre.
- Saniyede kaç işlem biter? Bu * aracılığıyla *.
- Bir kaynak ne kadar meşgul? Bu kullanımdır: bir CPU, disk veya kilidin kullanımda olduğu zamanın kesiridir.
- İş bir kaynak için kuyruk mu yapıyor? Bu doygunluk: CPU için çalışan iş parçacıkları, bir cihaz için bekleyen I/O, bir dilsiz için bekleyen iş parçacıkları.
- ** İşlemler başarısız mı?** Başarısız
open()gibi hatalar bir programı yeniden deneyebilir, bekleyebilir veya daha yavaş bir yol alabilir.
İki zaman ölçümü her yerde görünür ve karıştırılmamalıdır:
| Ölçüm | Anlamı | Tipik kaynak |
|---|---|---|
| Duvar saati (geçmiş) zamanı | Gerçek zaman iki an arasında geçti | time's real, clock_gettime(CLOCK_MONOTONIC) |
| CPU zamanı | Bir CPU'nun bu işlemi veya iş parçacığını yürütmeyi gerçekten harcadığı zaman | time's user + sys, /proc/<pid>/stat |
Eğer geçen süre CPU zamanından çok daha büyükse, program ömrünün çoğunu off-CPU geçirdi: uyku, I/O'yu beklemek, kilit beklemek veya çalıştırılabilir ancak programlanmamış. CPU süresi geçen zamana yakınsa (işlek iş parçacığını başına), programon-CPU ve soru olur hangi kod CPU'yu kullanır. Bu tek karşılaştırma, ihtiyaç duyduğunuz araç kutusunun hangi yarısına karar verir.
2. Çalışan bir programı gözlemlemenin üç yolu#
Bu sitedeki her araç üç teknikten birini kullanır. Bir aracın hangisini kullandığını bilmek, neyi görebildiğini ve göremediğini söyler.
- Counting bir toplam tutar ve daha sonra bildirir.
perf stat, komutlar, döngüler, bağlam anahtarları ve sayfa hataları gibi olayları sayar. Saymak ucuzdur, ancak * kaç *, nerede * değil * yazar. - ** Örnekleme** periyodik olarak programı keser ve nerede olduğunu kaydeder, örneğin 99 saniyede iki kez.
perf recordve bpftrace'inprofilesonda örneği. Örnekler, CPU zamanının istatistiksel olarak gittiği * gösterir, ancak kısa veya nadir bir işlev tamamen kaçırılabilir ve örnekleme bir iş parçacığı uyurken hiçbir şey görmez. - Tracing, her
openatsistemi çağrısı veya bir fonksiyona her giriş gibi belirli bir olayın her bir oluşumunu kaydeder.bpftrace,perf tracevestraceizi. İzleme seçilen olaylar için kesindir, ancak her olay zaman maliyeti; Çok sık bir olayın izlenmesi programı fark edilebilir bir şekilde yavaşlatabilir.
Gözlem maliyeti overheadveyaobserver etkisi olarak adlandırılır. Deneyin bir parçası olarak kaydedin: Geçen zamanı araçla ve araç olmadan karşılaştırın. Gözlemin programa etkisi ve analiz karşıtı davranışlar bunu derinlemesine ele alır.
3. Bir yöntem: belirtiden kanıta#
Her soruşturma için aynı döngüyü kullanın. En yaygın hatayı önler: doğrulanmamış bir tahmine dayanarak kodu değiştirmek.
- Sorun'u bir cümlede bir sayıyla tanımlayın: "
./report, 200 işleri için 3 s alır; geçen hafta 0.1 s aldı." - ** Çevreyi kaydet**: çekirdek (
uname -r), CPU modeli, derleyici ve bayraklar, araç sürümleri ve tam komut satırı. Bu bağlam olmadan sonuçlar karşılaştırılamaz. - Başlangıcı al: programı birkaç kez çalıştır ve yayılımı not et. Tekrarlanan çalıştırmalar zaten 10'ye göre değişirse 5% 'lik bir değişiklik anlamsızdır.
- **CPU veya CPU dışı karar ver **: CPU zamanı ile geçen zamanı karşılaştırın (bölüm 6).
- 4 bölümündeki tablodan seçilen tek bir araçla aşağı doğru sürün.
- Henüz ölçmediğiniz bir şeyi öngören bir hipotez oluşturun: "Eğer arama dörtlü ise, girdiyi iki katına çıkarmak kabaca dört kat arama süresi olmalıdır."
- İkinci, bağımsız bir gözlemle tahmini test edin. Ardından kodu değiştirin ve aynı koşullar altında tekrar ölçün.
Sistem kaynakları için tamamlayıcı bir kontrol listesi Brendan Gregg'in **USE yöntemi **: her kaynak için Utilization, **S **ature, ve **E **rrors kontrol edin. Hangi kaynağın dahil olduğunu henüz bilmiyorsanız yararlıdır.
4. Hangi araç hangi soruyu yanıtlıyor?#
| Soru | İlk araç | Sonraki adım |
|---|---|---|
| Ne kadar sürdü ve meşgul müydü? | /usr/bin/time -v ./prog |
real ile user + sys karşılaştırması |
| Hangi iş parçacıkları meşgul veya değişiyor? | pidstat -t -u -w 1 -p <pid> (sysstat) |
Linux’ta süreç, iş parçacığı ve zamanlayıcı durumu |
| Kaç tane komut, döngü, hata ve anahtar var? | perf stat ./prog |
perf ile yürütme analizi ve donanım izleme |
| Hangi işlevler CPU tüketir? | perf record -g ./prog, perf report |
alev grafiği, perf annotate |
| Hangi sistem çağrıları gerçekleşir ve hangi başarısız olur? | bpftrace syscall tek satırlı, perf trace -s |
bpftrace’e giriş: izleme noktaları, filtreler ve haritalar |
| Bir işlev veya syscall ne kadar sürer? | histogram ile bpftrace giriş/dönüş probları | İşlev girişlerini ve dönüşlerini izleme noktalarıyla ölçme |
| Neden bir iş parçacığı çalışmıyor? | sched_switch ile CPU dışı analiz |
Zamanlayıcı zaman çizelgelerini ve sürüme bağlı raporları okuma |
| Program şu anda Donmuş ne yapıyor? | gdb -p <pid> ile thread apply all bt |
perf ve bpftrace ile yavaş, takılan ve hata veren programları inceleme |
strace ve GDB, her olay için hedefi durduran ptrace'yi kullanır; bunlar doğru sorular için mükemmeldir ve zamanlama soruları için maliyetlidir. perf ve bpftrace, her olay için süreci durdurmadan çekirdek içinde veri toplar, bu da genellikle zamanı ölçmek için daha uygun hale getirir.
5. Bir Linux makinesi hazırlamak#
Laboratuvarlar, yerel bir Linux makinesi veya kontrol ettiğiniz sanal bir makine varsayar. Konteynerler ve bazı bulut sanal makineleri donanım sayaçlarını veya blok izlemeyi gizler; araçlar daha sonra <not supported> veya izin hataları bildirir. Bunları asla sıfır olarak değil, * kullanılabilir olmayan ölçümler* olarak ele alın.
Araçları kur#
# Debian
sudo apt install linux-perf bpftrace sysstat gdb build-essential
# Ubuntu (perf comes from the kernel-specific linux-tools package)
sudo apt install linux-tools-common "linux-tools-$(uname -r)" bpftrace sysstat gdb build-essential
# Fedora / RHEL family
sudo dnf install perf bpftrace sysstat gdb gccPaket adları sürümler arasında değişir; Bir tanesi eksikse dağıtımınızın paket dizinini arayın. Ubuntu'nun perf'si çalışan çekirdekle eşleşmelidir, bu nedenle paket adı $(uname -r) içerir.
Önce sürümleri kaydet#
uname -r
perf --version
bpftrace --version
sudo bpftrace --info 2>&1 | head -n 40
lscpu | head -n 20bpftrace --info, BTF ve uprobe desteği gibi çekirdek özelliklerini listeler. Bu çıktıyı sonuçlarınızın yanına kaydedin.
İzinler#
ayrıcalıklı olmayan kullanıcılar için perf erişimi /proc/sys/kernel/perf_event_paranoid tarafından kontrol edilir; daha yüksek değerler daha az izin verir. bpftrace kök veya BPF yeteneklerine ihtiyaç duyar (CAP_BPF, CAP_PERFMON ve bazı sondalar için CAP_SYS_ADMIN). Nasıl çalışacağına karar vermeden önce değerleri okuyun:
cat /proc/sys/kernel/perf_event_paranoid
cat /proc/sys/kernel/kptr_restrictTek kullanımlık bir laboratuvar makinesinde en basit yaklaşım, ölçüm aracını sudo ile çalıştırmaktır. perf_event_paranoid sistem çapında düşürmek, her kullanıcı için güvenlik politikasını değiştirir; paylaşılan veya üretim makinesinde yapmayın. Linux perf güvenlik belgesi her seviyeyi açıklar. Çekirdek sembolleri [unknown] veya sıfır adres olarak görünürse, kptr_restrict veya eksik ayrıcalıklar her zamanki gibidir.
Araçların açıklayabilmesi için programlar oluşturun#
Profilerler adresleri rapor eder; adresleri işlev adlarına ve yığınlara dönüştürmek, yapıdan yardıma ihtiyaç duyar:
-ghata ayıklama bilgilerini (DWARF) tutar, böylece araçlar işlevleri, kaynak satırlarını ve satır içi kodu adlandırabilir.-fno-omit-frame-pointer, kullanıcı yığınlarını yürümek içinperfve bpftrace için en ucuz ve en güvenilir yol olan çerçeve işaretçi zincirini tutar.-O2, yapıyı gerçekçi tutar.-O0yapı ölçüleri kodu oluşturmak, göndermeyeceğiniz. Derleyici ve optimizasyon düzeyi farklarını inceleme kodun ne kadar değiştiğini gösterir.__attribute__((noinline))veyastaticolmayan bir işlev, bir uprobe'un bağlayabileceği ayrı bir sembol tutar. Laboratuvarlar bunu bilerek kullanır; Gerçek programlar küçük işlevleri sıralayabilir, sondaya giriş yapamaz.
Sistem kütüphaneleri çerçeve işaretçileri veya yerel hata ayıklama bilgilerinden yoksun olabilir. Birçok dağıtım ayrı hata ayıklama paketleri veya bir debuginfod sunucusu sağlar; araçların onları nasıl bulduğuna dair Hata ayıklama bilgisini ayırma ve GDB’ye yeniden tanıtma bölümüne bakın.
6. Yavaş bir programla ilk altmış saniyeniz#
Programı time altında bir kez, tercihen GNU zamanı -v ile ekstra sayaçlar için çalıştırın:
/usr/bin/time -v ./prog 2> time.txt
grep -E 'Elapsed|User time|System time|Percent of CPU|context switches|page faults' time.txtSonuç şu sırayla okundu:
- ElapsedkarşıUser + System. Tek iş parçacığı program için kabaca eşittir: on-CPU,
perf recordile devam edin. Çok daha küçük: off-CPU, sistem çağrıları, kilitler ve zamanlayıcı etkinlikleri ile devam edin. - Sistem zamanı. Yüksek sistem süresi, CPU'nun programın adına çekirdek'de meşgul olduğu anlamına gelir: birçok sistem çağrısı, sayfa hataları veya veri kopyalama.
- Gönüllü bağlam anahtarları bir iş parçacığının CPU'dan vazgeçme sürelerini sayar çünkü beklemek zorunda kalır (uyku, I/O, kilit). İstemsiz anahtarlar, programlayıcının CPU'yu uzaklaştırdığı süreyi sayar, bu da CPU rekabetini önerir.
- Sayfa hataları. Birçok major hatası bellek erişimlerini karşılamak için diskten veri okunduğu anlamına gelir.
perf stat, donanım sayaçlarıyla benzer bir ilk bakış sunar ve çalışan bir işlem üzerinde de çalışır:
perf stat ./prog
sudo perf stat -p <pid> -- sleep 10 # attach to a running process for 10 stask-clock'nin yanında "CPU'lar kullanıldı" ile 1.0, bir CPU'nun tüm çalışma için meşgul olduğu anlamına gelir; 0.05'nin yakınında, programın çoğunlukla beklediği anlamına gelir. perf ile CPU profili ve alev grafiği kalan alanlardan geçer.
7. Yaygın başlangıç hataları#
- Bir kez dosyalama. Tekrarlama çalışır ve yayılımı bildirir.
perf stat -r 5bir komutu tekrarlar ve varyasyonu yazdırır. - Yanlış yapıyı sağlamak. Optimizasyon olmadan hata ayıklama yapıları farklı sıcak noktalara sahiptir.
- Bekleme programı için CPU profili okumak. Örnekleme profili yapan bir kişi, iş parçacıkları uyurken hiçbir şey görmez. Program çoğunlukla CPU dışındaysa, CPU profili yavaşlığı değil, küçük yoğun kısmı tanımlar.
[unknown]çerçevelerine güvenmek. Eksik semboller veya kırık yığınlar, optimize edilecek bir işlev değil, düzeltilmesi gereken bir ölçüm problemidir.- ** "Olmamış" olarak "olmamış"ı ele geçirmek.** Bir sonda geç eklenmiş olabilir, olaylar düşmüş olabilir veya örnekleme bunu kaçırmış olabilir. Gönderdiğiniz istek sayısı gibi bildiğiniz bir şeye karşı sayımları kontrol edin.
- Bir kerede birkaç şeyi değiştirmek. Bir değişkeni değiştirin, tekrar ölçün, eski sonucu koruyun.
Bir sonraki nereye#
Sırayla çalışma zamanı rotasını takip edin; her sayfa bir öncekinden gelen kelime dağarcığını yeniden kullanır:
- Linux’ta süreç, iş parçacığı ve zamanlayıcı durumu: bir PID ve TID'nin ne olduğu ve çekirdeğin tuttuğuna karşı çıkan.
- perf ile yürütme analizi ve donanım izleme ile execution analizi, daha sonra eller perf ile CPU profili ve alev grafiği.
- bpftrace’e giriş: izleme noktaları, filtreler ve haritalar, sonra bpftrace ile ilk adımlar.
- perf ve bpftrace ile yavaş, takılan ve hata veren programları inceleme, sonra Az CPU kullanan yavaş bir programı teşhis etme.
- Daha derin zamanlama malzemesi: Geçen süreyi, CPU süresini ve zamanlayıcı gecikmesini ayırma, Çağrı aralığını, geçen süreyi ve iş parçacığının CPU süresini ölçme, ve Zamanlayıcı zaman çizelgelerini ve sürüme bağlı raporları okuma.