~xdavidwu/cskloudv3-thesis

3acc3132ef44315a4f4941e786bd9c11045ad66a — Pinghao Wu 2 hours ago ac95669 main
Evaluation: survey design
2 files changed, 18 insertions(+), 2 deletions(-)

M Sections/5.Evaluation.tex
M ref.bib
M Sections/5.Evaluation.tex => Sections/5.Evaluation.tex +6 -0
@@ 45,6 45,12 @@

\section{使用者問卷調查}

對於一個通用的雲端運算平台,由於各個使用者的使用情境及習慣不盡相同,為了準確的評估平台的效用,需要實行問卷調查以了解實際使用狀況。我們將問卷分為兩大部分,第一部份以 Post Study System Usability Questionnaire (PSSUQ)\cite{lewis2002psychometric} 分析整體平台的使用體驗,而第二部份再對平台的特定功能設計予以評估,並且加上對 Kubernetes 熟悉程度的自評,以了解受試者特性。問卷項目見\ref{ch:survey-items}。

PSSUQ 是常見針對軟體系統的標準問卷調查,根據歷史發展分為三個版本\cite{lewis2019measuring}。本研究採取的是第三版,共十六個項目(問卷中的第一至十六項),其中除了整體滿意度外,可分為三大類:System Usefulness(SysUse,第一至六項)、Information Quality(InfoQual,第七至十二項) 與 Interface Quality(IntQual,第十三至十五項)。每個項目包含一個敘述,受試者評估敘述對自身體驗的符合程度,回答一到七分的指標,兩端分別代表 ``Strongly Agree" 與 ``Strongly Disagree",並且附帶一 ``Not Applicable" (NA) 選項使受試者能夠選擇不參與特定項目的評比,減緩受試者的壓力。

第二部份(第十七至二十四項)沿用 PSSUQ 針對敘述賦予非強制性的一到七分指標形式,針對平台產品擴充,評估各項資源配額的設計,包含單一容器預設值以及 kubectl 頁面設定值,另外附加如局部功能與相似產品的比較敘述等的有效性評估。問卷採用 Google 表單,要求登入 Google 帳號以防止重複填寫,但不收集帳號資訊,以匿名方式進行。

\section{質性分析}

\subsection{Sparkles}

M ref.bib => ref.bib +12 -2
@@ 258,9 258,9 @@
}

@article{lewis2002psychometric,
    title	= {Psychometric evaluation of the PSSUQ using data from five years of usability studies},
    title	= {Psychometric evaluation of the {PSSUQ} using data from five years of usability studies},
    author	= {Lewis, James R},
    journal	= {International Journal of Human-Computer Interaction},
    journal	= {International Journal of Human - Computer Interaction},
    volume	= {14},
    number	= {3-4},
    pages	= {463--488},


@@ 283,3 283,13 @@
    urldate	= {2024-10-15},
}

@article{lewis2019measuring,
    title	= {Measuring perceived usability: {SUS}, {UMUX}, and {CSUQ} ratings for four everyday products},
    author	= {Lewis, James R},
    journal	= {International Journal of Human - Computer Interaction},
    volume	= {35},
    number	= {15},
    pages	= {1404--1419},
    year	= {2019},
    publisher	= {Taylor \& Francis}
}