調(diào)試嵌入式 Linux 非常復(fù)雜，即使是最有經(jīng)驗的嵌入式系統(tǒng)開發(fā)人員也面臨許多挑戰(zhàn)。但是，專門支持嵌入式 Linux 的可視化跟蹤診斷工具可以大大簡化這項工作。

最近，我的任務(wù)是開發(fā)一個定制的 Linux 驅(qū)動程序來使用外部設(shè)備流式傳輸?shù)臄?shù)據(jù)。雖然 Linux 內(nèi)核有一些原生機制來確保驅(qū)動程序的功能是正確的，但調(diào)試和評估性能遠非簡單。這就是為什么我決定測試新的跟蹤工具（例如支持嵌入式 Linux 的 Tracealyzer）是否以及如何幫助我，從分析驅(qū)動程序和中斷處理程序，到檢查用戶空間應(yīng)用程序和編譯器選項。

我將跟蹤工具與基于 Yocto 的 Linux 發(fā)行版一起使用，首先在板支持包上構(gòu)建自定義層以啟用開源LTTng庫。這為作為 Linux 系統(tǒng)（包括內(nèi)核）的一部分執(zhí)行驅(qū)動程序提供了許多有價值的觀點。它還讓我對驅(qū)動程序有了更全面的了解，以確保沒有性能瓶頸或確定任何瓶頸的原因。

診斷跟蹤工具還可以幫助發(fā)現(xiàn) IRQ 處理程序中的性能問題，而無需使用可怕的 printk 語句。就我而言，它發(fā)現(xiàn)需要通過 I2C 總線確認設(shè)備中斷以防止抖動。如果不使用跟蹤工具，這個隱藏的錯誤直到發(fā)布前不久移除無關(guān)的 printk 調(diào)用時才會被發(fā)現(xiàn)或顯現(xiàn)出來。該工具還揭示了在中斷處理程序中包含 printk 的嚴重影響。使用跟蹤工具有效地避免了在后期修改驅(qū)動程序的需要，這會導(dǎo)致大量的延誤和成本。

使用跟蹤工具，我還能夠測試我的假設(shè)，即設(shè)置進程的 CPU 親和性將如何影響其性能。分析正常和高強度條件下不同執(zhí)行元素之間的交互，顯示了 Linux 內(nèi)核的盡力而為算法。這確定了 Linux 內(nèi)核調(diào)度程序和 iperf 代碼庫的某些區(qū)域，以供進一步調(diào)查。

在評估用戶空間性能時，跟蹤工具可以更加強大。像大多數(shù)嵌入式軟件開發(fā)人員一樣，我開發(fā)針對 Linux 系統(tǒng)的用戶空間應(yīng)用程序。將跟蹤工具的輸出與 LTTng 跟蹤點結(jié)合起來提供了一種寶貴的方法來幫助我確定我的應(yīng)用程序的執(zhí)行情況、識別任何異常行為并提供高級時序統(tǒng)計信息。然后，我可以使用該工具進一步解決任何計時問題并提高應(yīng)用程序的性能。

我還發(fā)現(xiàn)跟蹤工具和 LTTng 庫的結(jié)合非常強大，可以幫助我快速了解某些編譯器選項對執(zhí)行浮點計算的用戶空間應(yīng)用程序性能的影響。通常，這種分析是在應(yīng)用程序完成但應(yīng)用程序性能不佳時進行的，并且可能需要很多時間。在開發(fā)過程中使用該工具來驗證軟件時序幫助我避免了對性能的影響。

總而言之，我發(fā)現(xiàn) Tracealyzer 等跟蹤工具可以成為發(fā)現(xiàn)隱藏錯誤和優(yōu)化嵌入式 Linux 系統(tǒng)性能的強大元素。

諸如用于自上而下探索性分析的高級概述等功能，包括進程交互、進程分叉、CPU 使用率、RAM 使用率、I/O 使用率、文件使用率、狀態(tài)機和用戶定義的指標，提供了寶貴且直觀的跟蹤視圖，用于顯示細節(jié)，在響應(yīng)性和清晰度方面可擴展到大型 Linux 跟蹤。當通過可定制的事件解釋適應(yīng)特定用例時，任何用戶定義的數(shù)據(jù)集（例如間隔和狀態(tài)機）都可以顯示在高度可配置的視圖中。最后，使用開源 LTTng 庫打開了廣泛的功能來探索嵌入式 Linux 設(shè)計的各個方面，從驅(qū)動程序和中斷處理程序到用戶空間應(yīng)用程序和編譯器選項。在開發(fā)過程中使用這種組合不僅可以提高可見性，而且可以在過程的早期解決問題。從我經(jīng)驗豐富的開發(fā)人員的角度來看，這避免了隱藏的錯誤并節(jié)省了項目后期的時間和成本。

支持圖片

圖1。在評估自定義 Linux 內(nèi)核（如圖）時，將開源 LTTng 庫與跟蹤工具結(jié)合使用可以揭示性能問題。

圖 2：此垂直跟蹤視圖使用垂直時間線顯示事件流。它從頂部開始，時間向下增長。每列代表系統(tǒng)中的單個執(zhí)行上下文——通常是任務(wù)或中斷處理程序——列中的矩形顯示特定任務(wù)何時運行。水平標簽（左）標記記錄的軟件事件。該圖是完全響應(yīng)的，因此放大可以顯示更多細節(jié)。

審核編輯：郭婷