要不要選用 Robot Framework 作自動化測試?

要不要選用 Robot Framework 作自動化測試?

筆者公司很多的專案都採用 Robot Framework 進行自動化測試，

到底怎樣的專案適合採用 Robot Framework ，採用或是不採用的主要考量有哪些呢?

這篇文章我們針對 Robot Framework 與一般自動化測試架構的選用考量做一個經驗分享。

什麼是 Robot Framework?

自動化測試的架構有很多。Robot Framework 相當於下列的集合

• 1. Data Driven Testing
• 2. Behavior Driven Development
• 3. Acceptance Testing
• 4. Python + Selenium
• 5. Reporting + Screenshot

其中採用 Robot Framework 最主要的考量通常是 1, 2, 3。

因為採用 Robot Framework 後，測試程式就會長成這樣

*** Test Cases ***
Valid Login
    Open Browser To Login Page
    Input Username    demo
    Input Password    mode
    Submit Credentials
    Welcome Page Should Be Open
    [Teardown]    Close Browser

這就是所謂的 Keyword driven。必須要定義許多的 keyword 背後運作的程式。

例如 Input Username 相對應的 python程式

例如 Open Browser 相對應的程式

另外，這又稱為 Gherkin-style behaviour-driven test development

因為整體的語句就像是 user story 一般，

user Story  = test case  =  automation testing scripts = testing reports

也因此這樣測試的結果報告，大家(PM, RD, non-QA)都會比較看得懂，自動化測試執行了什麼

不用Robot Framework 可以達到同樣的目的嗎?

可以的。如果不用 robot framework 的話，依據每一種程式語言的不同，可以採用不同的模組。

• 1. Data Driven Testing
• 2. Behavior Driven Development
• 3. Acceptance Testing
• 4. Python + Selenium
• 5. Reporting + Screenshot

Robot Framework 缺點?

既然Robot Framework 有這麼多好處，那麼為什麼不用呢?

開發環境 IDE

要定義這樣的 Test Cases 與 keyword，Robot Framework 提供的 IDE RIDE 很簡略。

相對於 Java 可以使用的 Eclipse 或是 Python 的 pyCharm 或是其它IDE來說，

在開發 Robot Framework 的測試程式會因為 IDE 的關係，在開發會有些困難與門檻。

由於這些”關鍵字”有些是 Robot Framework 內建，有些是需要自己定義，

因此，要學習另一套 Robot Framework 所定義的關鍵字與程式結構 (Test Cases,  Keyword)

每一個對應的 keyword 背後其實需要對應 Python 的程式碼。

相對來說程式的寫法與維護，筆者認為是會更大的。

另外，這次定義的 “Open Browser To Login Page”，如果下次寫成 “Open Browsers to visit Login Pages”

Robot Framework 就不認得了! 因為這些關鍵字就像是使用者定義的另外一種程式語言。

*** Test Cases ***
Valid Login
    Open Browser To Login Page
    Input Username    demo
    Input Password    mode
    Submit Credentials
    Welcome Page Should Be Open
    [Teardown]    Close Browser

*** Keywords ***
Open Browser To Login Page
    Open Browser    ${LOGIN URL}    ${BROWSER}
    Maximize Browser Window
    Set Selenium Speed    ${DELAY}
    Login Page Should Be Open

Robot Framework 使用與不使用的考量

其他考量Robot Framework的迷思?

Q: Robot framework 執行會比較快?

Robot framework 底層也是包 Selenium + python，所以並不會比較快。這個絕對不是要不要選用 Robot framework 主要考量

Q: Robot framework 有支援 Windows UI 的測試?

Robot framework 也是額外呼叫AutoIT，所以這也不是要用或是不要用 Robot Framework 的主要原因。

Q: Robot framework 比較好維護比較好讀? 不需要程式背景?

前提是要熟悉 Robot Framework  的關鍵字跟Robot framework 很簡略的IDE。如果要定義其它關鍵字還是需要 Python 的基礎。

是不是比較好維護? 筆者保留。因為要維護關鍵字、 testing cases 與相對應的 python 程式，缺一不可。