1. 5 Research Design 中央大學.資訊管理系 范錚強 mailto: ckfarn@mgt.ncu.edu.tw 2010.03

2. Learning Objectives Understand . . . • The basic stages of research design. • The major descriptors of research design. • The major types of research designs. • The relationships that exist between variables in research design and the steps for evaluating those relationships. • 研究精神：排除「威脅」(threats) • 決定適當的研究設計 中央資管：范錚強

3. What Is Research Design? Blueprint Plan Guide Framework 中央資管：范錚強

4. What Tools Are Used in Designing Research? 中央資管：范錚強

5. What Tools Are Used in Designing Research? Project Plan in Gantt chart format 中央資管：范錚強

6. Design in the Research Process 中央資管：范錚強

7. Descriptors of Research Design Question Crystallization Perceptual Awareness Data Collection Method Descriptors Purpose of Study Experimental Effects Time Dimension Research Environment Topical Scope 中央資管：范錚強

8. Exploratory Study Loose structure Expand understanding Provide insight Develop hypotheses Degree of Question Crystallization 中央資管：范錚強

9. 構念層次 X Y 推論：因果關係 抽象化 構念化 抽象化 構念化 x y 因果、共變關係 測量 誤差 誤差 測量 探索：構念的形成 中央資管：范錚強 實質層次

10. Exploratory Study Loose structure Expand understanding Provide insight Develop hypotheses Formal Study Precise procedures Begins with hypotheses Answers research questions Degree of Question Crystallization 中央資管：范錚強

11. 構念層次 因果關係：實徵支持 X Y 學說：因果關係 操作化 操作化 x y 因果、共變關係 統計結論 測量 誤差 誤差 實質層次 操弄、測量 理論驗證 中央資管：范錚強

12. Approaches for Exploratory Investigations • Participant observation • Film, photographs • Projective techniques • Psychological testing • Case studies • Ethnography 民俗誌 • Expert interviews • Document analysis • Proxemics and Kinesics 肢體語言學 中央資管：范錚強

13. Desired Outcomes of Exploratory Studies Established range and scope of possible management decisions Established major dimensions of research task Defined a set of subsidiary questions that can guide research design 尋找規則 Law 和初步檢視可能的原因 中央資管：范錚強

14. Desired Outcomes of Exploratory Studies (cont.) Developed hypotheses about possible causes of management dilemma Learned which hypotheses can be safely ignored Concluded additional research is not needed or not feasible 中央資管：范錚強

15. Secondary Data Analysis Experience Surveys Focus Groups Commonly Used Exploratory Techniques 中央資管：范錚強

16. Face-to-face interaction—one of the best ways to learn from participants. 中央資管：范錚強

17. Experience Surveys • What is being done? • What has been tried in the past with or without success? • How have things changed? • Who is involved in the decisions? • What problem areas can be seen? • Whom can we count on to assist or participate in the research? 中央資管：范錚強

18. Focus Groups • Group discussion • 6-10 participants • Moderator-led • 90 minutes-2 hours 中央資管：范錚強

19. Data Collection Method Monitoring: 觀察、資料蒐集 行為 Communication: 詢問 態度、看法、瞭解程度 中央資管：范錚強

20. The Time Dimension Cross-sectional Longitudinal 中央資管：范錚強

21. Statistical Study Breadth Population inferences Quantitative Generalizable findings Case Study Depth Detail Qualitative Multiple sources of information The Topical Scope 中央資管：范錚強

22. The Research Environment Field conditions Lab conditions Simulations 中央資管：范錚強

23. Purpose of the Study Reporting Descriptive Casual -Explanatory Causal -Predictive 中央資管：范錚強

24. Who? How much? What? When? Where? DescriptiveStudies 中央資管：范錚強

25. Descriptive Studies Descriptions of population characteristics Estimates of frequency of characteristics Discovery of associations among variables 中央資管：范錚強

26. Experiment Study involving the manipulation or control of one or more variables to determine the effect on another variable Ex Post Facto Study After-the-fact report on what happened to the measured variable Experimental Effects 中央資管：范錚強

27. Ex Post Facto Design 中央資管：范錚強

28. Causation and Experimental Design Control/ Matching Random Assignment 中央資管：范錚強

29. Mills Method of Agreement 中央資管：范錚強

30. Mills Method of Difference 中央資管：范錚強

31. Causal Studies Symmetrical Reciprocal Asymmetrical 中央資管：范錚強

32. Understanding Casual Relationships Property Behavior Response Disposition Stimulus 中央資管：范錚強

33. Asymmetrical Casual Relationships Stimulus-Response Property- Disposition Property- Behavior Disposition-Behavior 中央資管：范錚強

34. Exhibit 6-6 Types of Asymmetrical Causal Relationships 中央資管：范錚強

35. Evidence of Causality Covariation between A and B Time order of events No other possible causes of B 中央資管：范錚強

36. Participants’ Perceptional Awareness No deviation perceived Deviations perceived as unrelated Deviations perceived as researcher-induced 中央資管：范錚強

37. 研究中的效度Validity理念 替代效果 構念層次 X 外部效度 Y 構念效度 構念效度 操作化 操作化 內部效度 x y 因果關係 統計結論效度 操弄、測量 共變關係 測量 誤差 操作層次 誤差 中央資管：范錚強

38. 統計結論效度 Statistical Conclusion Validity • Q:研究中的因變數和自變數是否相關？ (共變 co-variation) • 研究設計的敏感度是否足夠顯示資料間的共變 • 若敏感度構，是否有足夠的証據支持「因」和「果」之間有共變？ • 如果有充分証據顯示其間的共變，其強度為何 中央資管：范錚強

39. 對統計結論效度的威脅 • 分析缺乏統計力 • 樣本大小、信心水準的影響 • 違背統計測試的假設 • 母體分布、均質性、自變數之間的獨立性 • 在資料中找尋「規則」 • 多重比對、資料的特例 • 衡量方法的信度 • 實驗操弄的信度 • 實驗情境中的隨機偏誤 • 其他外在的、未被控制的影響因素 • 回答問卷者的系統性誤差 中央資管：范錚強

40. 內部效度 Internal Validity • Q:若A和B共變，其間有何因果關係？ A A->B A??B 替代的 因果關係 B A->C->B B->A C A A + A - + B B B - 第三變項 的干擾 + - C C C + + - 內部效度的精神在於排除第三變項對A-B關係的替代性解釋 中央資管：范錚強

41. 對內部效度的最主要威脅 • 發生歷史事件 • 樣本成熟 • 受測樣本在前測和後測之間的成長，例如，熟悉測試工具 • 測量工具改變 • 統計迴歸 • 例如：將樣本依前測得分分組，高分組退步，低分組進步 • 選擇偏誤 • 樣本流失 • 因果關係的混淆 • 在相關性研究中，經常發生 中央資管：范錚強

42. 構念效度 Construct Validity • 構念的操作化是否良好 • 操作化：操弄和測量 • 必須確保 • 自變數的確反映了相關的構念 • 自變數不會隨著相關、但不同的變數做改變 • 依變數應該反映了相關的構念 • 依變數不應該受無關變數的影響 • 針對同一個構念的不同衡量結果應該收斂 • 針對相關但不同構念的衡量結果應該發散 中央資管：范錚強

43. 對構念效度的威脅 • 操作化前對構念搞不清楚 • 構念的定義、操作化定義、它確切的意義 • 單一操作化的偏誤 • 實驗中，需要多項操弄水準、劑量 • 單一方法的偏誤 • 需要測量多個「外顯」的變數 • 樣本對研究假說的猜測 中央資管：范錚強

44. 對構念效度的威脅2 • 樣本對測量感到緊張 • 樣本對研究有特殊期望 • 構念混淆、模糊，構念的程度差異 • 不同操弄之間的相互影響 • 操弄和測量之間的相互影響 中央資管：范錚強

45. 信度 Reliability • 測量工具的穩定度、可靠度 • 重測信度、折半信度、複本信度 • 測量工具的內部一致性 • 項目間的信度(e.g. Cronbach a) • 評分員間的信度 中央資管：范錚強

46. 外部效度 External Validity • Q: 研究結果能否推論到整個目標母體？ • 母體—我們在說哪一個？ • 目標母體 • 針對目標母體所作的正式描述 • 在實徵研究中，實際達成的樣本所對應的母體 • 另外一個和外部效度相關但不同的觀念： 可類化性Generalizability • 研究結果可推廣到其他母體的程度 中央資管：范錚強

47. 規劃樣本 目標母體 實際達成的樣本 正式描述 實際達成的母體 外部效度 External Validity 中央資管：范錚強

48. 對外部效度的威脅 • 研究情境的影響 • 在某企業中進行研究 • 選擇和操弄間的相互影響 • 自我選擇可能會排除某一類的樣本 • 例如：新藥的測試，自願者求生意願較強 • 研究情境和操弄間的相互影響 • 歷史事件和操弄間的相互影響 • 過程長的研究 中央資管：范錚強

49. 透過抽樣增進外部效度 • 全面隨機抽樣 • 求取代表性、統計力強 • 經常昂貴、實驗室實驗下不可行 • 分層隨機抽樣 • 刻意求取樣本的異質性 • 每一個母體中的子群體都被納入 • 選取典型樣本 • 統計力弱、在學術研究中不利 • 每一個母體中的子群體都被納入 中央資管：范錚強

50. 透過重複研究增進外部效度 • 不同的重複可能、各有優劣 • 同時重複、連續重複 • 獨立研究人員、相同研究人員 • 真實重複、假設重複（大型研究中的不同部份） • 比較好的重複研究 • 多個小型的研究 • 多個情境 • 多個研究者 中央資管：范錚強