Research Design 中央大學. 資訊管理系 范錚強 mailto:
中央資管:范錚強 2 Learning Objectives Understand... The basic stages of research design. The major descriptors of research design. The major types of research designs. The relationships that exist between variables in research design and the steps for evaluating those relationships. 研究精神:排除「威脅」 (threats) 決定適當的研究設計
中央資管:范錚強 3 What Is Research Design? Blueprint Plan Guide Framework
中央資管:范錚強 4 What Tools Are Used in Designing Research?
中央資管:范錚強 5 Project Plan in Gantt chart format What Tools Are Used in Designing Research?
中央資管:范錚強 6 Design in the Research Process
中央資管:范錚強 7 Descriptors of Research Design Experimental Effects Perceptual Awareness Perceptual Awareness Research Environment Question Crystallization Data Collection Method Time Dimension Topical Scope Purpose of Study Descriptors
中央資管:范錚強 8 Degree of Question Crystallization Exploratory Study Loose structure Expand understanding Provide insight Develop hypotheses
中央資管:范錚強 9 構念層次 探索:構念的形成 實質層次 因果、共變關係 推論:因果關係 y 測量 誤差 x 測量 X Y 抽象化 構念化 抽象化 構念化
中央資管:范錚強 10 Degree of Question Crystallization Exploratory Study Loose structure Expand understanding Provide insight Develop hypotheses Formal Study Precise procedures Begins with hypotheses Answers research questions
中央資管:范錚強 11 理論驗證 實質層次 構念層次 統計結論 X Y 學說:因果關係 操作化 x 誤差 操弄、測量 y 測量 誤差 操作化 因果關係:實徵支持 因果、共變關係
中央資管:范錚強 12 Approaches for Exploratory Investigations Participant observation Film, photographs Projective techniques Psychological testing Case studies Ethnography 民俗誌 Expert interviews Document analysis Proxemics and Kinesics 肢體 語言學
中央資管:范錚強 13 Desired Outcomes of Exploratory Studies Established range and scope of possible management decisions Established major dimensions of research task Defined a set of subsidiary questions that can guide research design 尋找規則 Law 和初步檢視可能的原因
中央資管:范錚強 14 Desired Outcomes of Exploratory Studies (cont.) Developed hypotheses about possible causes of management dilemma Learned which hypotheses can be safely ignored Concluded additional research is not needed or not feasible
中央資管:范錚強 15 Commonly Used Exploratory Techniques Secondary Data Analysis Focus Groups Experience Surveys
中央資管:范錚強 16 Face-to-face interaction— one of the best ways to learn from participants.
中央資管:范錚強 17 Experience Surveys What is being done? What has been tried in the past with or without success? How have things changed? Who is involved in the decisions? What problem areas can be seen? Whom can we count on to assist or participate in the research?
中央資管:范錚強 18 Focus Groups Group discussion 6-10 participants Moderator-led 90 minutes-2 hours
中央資管:范錚強 19 Data Collection Method Monitoring: 觀察、資料蒐集 行為 Communication: 詢問 態度、看法、瞭解程度
中央資管:范錚強 20 The Time Dimension Cross-sectional Longitudinal
中央資管:范錚強 21 The Topical Scope Statistical Study Breadth Population inferences Quantitative Generalizable findings Case Study Depth Detail Qualitative Multiple sources of information
中央資管:范錚強 22 The Research Environment Field conditions Lab conditions Simulations
中央資管:范錚強 23 Purpose of the Study ReportingDescriptive Casual - Explanatory Causal - Predictive
中央資管:范錚強 24 Descriptive Studies When? How much? What? Who? Where?
中央資管:范錚強 25 Descriptive Studies Descriptions of population characteristics Descriptions of population characteristics Estimates of frequency of characteristics Estimates of frequency of characteristics Discovery of associations among variables Discovery of associations among variables
中央資管:范錚強 26 Experimental Effects Experiment Study involving the manipulation or control of one or more variables to determine the effect on another variable Ex Post Facto Study After-the-fact report on what happened to the measured variable
中央資管:范錚強 27 Ex Post Facto Design Fishing Club MemberNon-Fishing-Club Member AgeHigh AbsenteeLow AbsenteeHigh AbsenteeLow Absentee Under 30 years to and over005115
中央資管:范錚強 28 Causation and Experimental Design Random Assignment Control/ Matching
中央資管:范錚強 29 Mills Method of Agreement
中央資管:范錚強 30 Mills Method of Difference
中央資管:范錚強 31 Causal Studies Asymmetrical Reciprocal Symmetrical
中央資管:范錚強 32 Understanding Casual Relationships Property Response Stimulus Behavior Disposition
中央資管:范錚強 33 Asymmetrical Casual Relationships Stimulus-Response Disposition-Behavior Property- Behavior Property- Disposition
中央資管:范錚強 34 Exhibit 6-6 Types of Asymmetrical Causal Relationships Relationship TypeNature of RelationshipExamples Stimulus-responseAn event or change results in a response from some object. A change in work rules leads to a higher level of worker output. A change in government economic policy restricts corporate financial decisions. A price increase results in fewer unit sales. Property-dispositionAn existing property causes a disposition. Age and attitudes about saving. Gender attitudes toward social issues. Social class and opinions about taxation. Disposition-behaviorA disposition causes a specific behavior. Opinions about a brand and its purchase. Job satisfaction and work output. Moral values and tax cheating. Property-behaviorAn existing property causes a specific behavior. Stage of the family life cycle and purchases of furniture. Social class and family savings patterns. Age and sports participation.
中央資管:范錚強 35 Covariation between A and B Covariation between A and B Evidence of Causality Time order of events No other possible causes of B No other possible causes of B
中央資管:范錚強 36 Participants’ Perceptional Awareness No deviation perceived Deviations perceived as unrelated Deviations perceived as researcher-induced
中央資管:范錚強 37 研究中的效度 Validity 理念 X Y x y 構念層次 操作層次 構念效度 外部效度 內部效度 統計結論效度 操作化 共變關係 因果關係 測量 誤差 替代效果 構念效度 操作化 誤差 操弄、測量
中央資管:范錚強 38 統計結論效度 Statistical Conclusion Validity Q: 研究中的因變數和自變數是否相關? ( 共變 co-variation ) 研究設計的敏感度是否足夠顯示資料間 的共變 若敏感度構,是否有足夠的証據支持 「因」和「果」之間有共變? 如果有充分証據顯示其間的共變,其強 度為何
中央資管:范錚強 39 對統計結論效度的威脅 分析缺乏統計力 樣本大小、信心水準的影響 違背統計測試的假設 母體分布、均質性、自變數之間的獨立性 在資料中找尋「規則」 多重比對、資料的特例 衡量方法的信度 實驗操弄的信度 實驗情境中的隨機偏誤 其他外在的、未被控制的影響因素 回答問卷者的系統性誤差
中央資管:范錚強 40 內部效度 Internal Validity Q: 若 A 和 B 共變,其間有何因果關係? A->B B->A A->C->B C B A C B A C B A C B A 替代的 因果關係 A??B 第三變項 的干擾 內部效度的精神在於排除第三變項對 A-B 關係的替代性解釋
中央資管:范錚強 41 對內部效度的最主要威脅 發生歷史事件 樣本成熟 受測樣本在前測和後測之間的成長,例如,熟悉測試工具 測量工具改變 統計迴歸 例如:將樣本依前測得分分組,高分組退步,低分組進步 選擇偏誤 樣本流失 因果關係的混淆 在相關性研究中,經常發生
中央資管:范錚強 42 構念效度 Construct Validity 構念的操作化是否良好 操作化:操弄和測量 必須確保 自變數的確反映了相關的構念 自變數不會隨著相關、但不同的變數做改變 依變數應該反映了相關的構念 依變數不應該受無關變數的影響 針對同一個構念的不同衡量結果應該收斂 針對相關但不同構念的衡量結果應該發散
中央資管:范錚強 43 對構念效度的威脅 操作化前對構念搞不清楚 構念的定義、操作化定義、它確切的意義 單一操作化的偏誤 實驗中,需要多項操弄水準、劑量 單一方法的偏誤 需要測量多個「外顯」的變數 樣本對研究假說的猜測
中央資管:范錚強 44 對構念效度的威脅 2 樣本對測量感到緊張 樣本對研究有特殊期望 構念混淆、模糊,構念的程度差異 不同操弄之間的相互影響 操弄和測量之間的相互影響
中央資管:范錚強 45 信度 Reliability 測量工具的穩定度、可靠度 重測信度、折半信度、複本信度 測量工具的內部一致性 項目間的信度 (e.g. Cronbach ) 評分員間的信度
中央資管:范錚強 46 外部效度 External Validity Q: 研究結果能否推論到整個目標母體? 母體 — 我們在說哪一個? 目標母體 針對目標母體所作的正式描述 在實徵研究中,實際達成的樣本 所對應的母體 另外一個和外部效度相關但不同的觀念: 可類化性 Generalizability 研究結果可推廣到其他母體的程度
中央資管:范錚強 47 目標母體 外部效度 External Validity 正式描述 規劃樣本 實際達成的母體 實際達成 的樣本
中央資管:范錚強 48 對外部效度的威脅 研究情境的影響 在某企業中進行研究 選擇和操弄間的相互影響 自我選擇可能會排除某一類的樣本 例如:新藥的測試,自願者求生意願較強 研究情境和操弄間的相互影響 歷史事件和操弄間的相互影響 過程長的研究
中央資管:范錚強 49 透過抽樣增進外部效度 全面隨機抽樣 求取代表性、統計力強 經常昂貴、實驗室實驗下不可行 分層隨機抽樣 刻意求取樣本的異質性 每一個母體中的子群體都被納入 選取典型樣本 統計力弱、在學術研究中不利 每一個母體中的子群體都被納入
中央資管:范錚強 50 透過重複研究增進外部效度 不同的重複可能、各有優劣 同時重複、連續重複 獨立研究人員、相同研究人員 真實重複、假設重複(大型研究中的不同部份) 比較好的重複研究 多個小型的研究 多個情境 多個研究者
中央資管:范錚強 51 研究效度間的取捨 學術性研究 內部效度 構念效度 統計結論效度 外部效度 實務性研究、應用研究 內部效度 外部效度 依變數的構念效度 統計結論效 度 自變數的構念效度 在進行研究設計時,研究者必須清醒的對各種效度 的考量,做全盤的取捨 例如:在研究管理者決策訂定的研究時,應該用學生為 樣本(高可行性、高內部效度、低外部效度);還是在 真實情境用真實的經理人員(低可行性、低內部效度、 高外部效度)
中央資管:范錚強 52 研究方法的選擇 強方法 Strong methods 能明確地呈現內部校度 實驗室研究 弱方法 Weak methods Ex post facto, 自然觀察,訪談 …