퀴즈
퀴즈 0
사전 점검 조사 (이루리 설문조사)
퀴즈 1: 연구방법론이란 무엇인가? 과학적 이론이란 무엇인가?
다음의 개념들을 필히 숙지하고, 연구방법론의 서론 연구방법론의 과학적 위상, pp. 15–38과 제1장 과학적 이론, pp. 39–73의 내용을 정독하세요.
과학 (science)
경험적 현상의 생성경로에 관한 지식을 생산하는데 사용되는 분석규준 혹은 논리적 기제
Analytical canons or logical instruments used to produce knowledge about the processes by which empirical phenomena are generated.상호주관성 (intersubjectivity)
현상의 인지와 해석에 있어서 주관적 인식의 일치상태. 경험과학 연구에 있어서 객관성의 기준이 됨.
A state of agreement among subjective perceptions in the recognition and interpretation of phenomena. In empirical scientific research, intersubjectivity serves as a criterion for objectivity.연구방법론 (research methodology)
과학적 지식을 생산하기 위해 일정한 분석규준을 연구대상에 적용하는 방법과 그러한 방법을 정당화하는 과학철학적 협약
The methods by which specific analytical canons are applied to the object of study to produce scientific knowledge. It also encompasses the philosophy-of-science conventions that justify the use of such methods.가설 (hypothesis)
어떤 현상의 표출양상이나 인과적 생성경로에 대한 기대형 진술
A statement expressing expectations about how a phenomenon will manifest or the causal pathway through which it occurs.명제 (proposition)
독립/설명변인, 간섭변인, 종속변인 간의 관계에 대한 인과형 진술. 선행조건과 더불어 이론의 한 구성요소
A causal statement describing the relationships among independent(explanatory), intervening, and dependent variables. Along with antecedent conditions, propositions constitute an integral component of a theory.변인 (variable)
개념이 이론이나 모형 속에서 일정한 역할을 부여받을 때 얻게 되는 명칭. 현상이나 사물의 속성에 관한 정성적, 정량적 정보를 전달하는 매체
A conceptual element named when assigned a specific role within a theory or model. It acts as a medium conveying qualitative or quantitative information about the properties of phenomena or objects.간섭변인 (intervening variable)
독립/설명변인의 영향력을 종속변인에 전달하는 매개변인으로서, 그 값에 따라 독립변인과 종속변인의 관계양상을 변화시킬 수 있다는 측면에서 통제변인이라 불리기도 함
A mediating variable that transmits the influence of an independent(explanatory) variable onto a dependent variable. It is sometimes referred to as a control variable since it can alter the relationship between independent(explanatory) and dependent variables depending on its value.설명 (explanation)
어떤 현상이 왜 나타났는가라는 가장 기본적인 과학적 의문에 대한 답을 찾기 위해 그러한 현상이 특정 이론의 구체적 표출사례라는 것을 규명하는 작업
The process of identifying a phenomenon as a specific instance of a theory to address the fundamental scientific inquiry of why that phenomenon occurred.귀납확률적 설명 (inductive statistical explanation)
피설명항이 확률적 설명항의 잠정적 귀결이 될 수 있다는 것을 논증하는 작업
A method of argumentation demonstrating that the explanandum (what is being explained) can be provisionally derived as a probable consequence from probabilistic explanans (explanatory statements).연역법칙적 설명 (deductive nomological explanation)
피설명항이 확정적 설명항의 필연적 귀결이라는 것을 논증하는 작업
A method of argumentation demonstrating that the explanandum is a necessary consequence derived definitively from deterministic explanans.이론 (theory)
특정한 현상과 그 원인 사이의 관계를 규정한 인과형 진술로서, 명제와 명제가 성립될 수 있도록 하는 선행조건의 집합체
A causal statement specifying the relationship between a particular phenomenon and its causes, comprising a set of propositions and the antecedent conditions required for these propositions to hold.연역적 이론 (deductive theories)
단정적 법칙으로 구성된 이론 Theories composed of deterministic laws.귀납적 이론 (inductive theories)
확률적 통칙으로 이루어진 이론
Theories composed of probabilistic generalizations.일반이론 (general theories)
시간적, 공간적 범주를 뛰어넘어 항상 설명력을 발휘할 수 있는 이론
Theories with explanatory power extending beyond specific temporal or spatial contexts, universally applicable across various settings.
퀴즈 2: 인과관계와 인과모형
다음의 개념들을 필히 숙지하고, 연구방법론 제2장 인과관계와 인과모형의 내용을 정독하세요.
모형 (model)
현실세계의 모습을 이론적으로 재구성한 분석기제로서, ①연구대상의 핵심적 구성단위, 곧 작동변인들과 ②작동변인들 사이의 인과경로를 보여줌
An analytical instrument that theoretically reconstructs the real world by identifying ①the core constituent units of the research object—namely, operating variables—and ②the causal pathways among those operating variables.작동변인 (operating variable)
인과모형을 구성하고 있는 두 가지 종류의 변인. 즉 종속변인과 설명변인(독립변인, 매개변인)
The two types of variables constituting a causal model: dependent variables and explanatory variables (independent variables and mediating variables).시간적 순차 (time order)
원인(독립변인)은 반드시 결과(종속변인)에 시간적으로 선행해야 한다는 인과관계의 추론척도
A criterion for causal inference stating that the cause (independent variable) must temporally precede the effect (dependent variable).외생변인 (exogenous variable)
모형에 포함되지 않은 외부요인에 의해 그 모습이 결정되는 모형 내 작동변인
An operating variable within a model whose values are determined by factors external to the model itself.상호조응성 (isomorphism)
모형과 실제 현상의 일치성. 구조적 상호조응성과 기능적 상호조응성으로 나누어짐
The degree of correspondence between a model and the actual phenomenon it represents, divided into structural isomorphism and functional isomorphism.탈허위성 (nonspuriousness)
독립변인과 종속변인의 인과관계가 겉으로만 그렇게 보이는 것이 아니라 진정한 것이어야 한다는 인과관계의 추론척도
A criterion for causal inference requiring that the relationship between an independent variable and a dependent variable be genuine rather than merely apparent.항상적 연계 (constant conjunction)
어떤 현상(원인)의 변화가 다른 현상(결과)의 규칙적 변화를 지속적, 안정적으로 수반할 때 그들 사이의 인과관계를 상정할 수 있다는 인과관계의 추론척도
A criterion for causal inference holding that a causal relationship between two phenomena may be posited when changes in one phenomenon (cause) consistently and stably accompany regular changes in another (effect).
퀴즈 3: 과학적 개념
다음의 개념들을 필히 숙지하고, 연구방법론 제3장 과학적 개념, pp. 75–114의 내용을 정독하세요.
개념 (concept)
어떤 부류의 현상이나 사물이 지닌 보편적 속성을 표현하는 추상적 용어
An abstract term that expresses the universal attributes possessed by a certain class of phenomena or objects.개념화 (conceptualization)
① 지칭대상에 명칭을 부여하고, ② 지칭대상이 지닌 보편적 속성의 범주를 만든 후, ③ 각 범주에 속하는 속성의 양을 정확히 측정할 수 있도록 조작하는 작업. 이론적 정의와 조작정의라는 두 단계를 거치게 됨.
① Assigning a name to the object of reference, ② Defining categories of universal attributes that the object possesses, and ③ Operationalizing these categories so that the amount or level of attributes in each category can be accurately measured. This process typically involves two stages: a theoretical definition and an operational definition.경험적 함의 (empirical import)
과학적 개념은 실증지표로서 조작정의 되어야 하며, 그럼으로써 지칭대상의 속성에 관한 명백한 분류척도를 갖추어야 한다는 요건
The requirement that a scientific concept must be operationally defined through empirical indicators, thereby providing a clear classification scale for the attributes of the object being referenced.신뢰성 (reliability)
지표를 사용하여 측정된 결과가 일관되거나 합치되는 정도
The degree to which measurement results, obtained using a particular indicator, are consistent or in agreement.내적 일관성 (internal consistency)
같은 속성을 대안적 지표들을 사용해 측정했을 때 결과가 합치되는 정도
The extent to which results are consistent when the same attribute is measured using alternative indicators.안정성 (stability)
측정결과가 측정하는 사람이나 측정시점에 상관없이 일관성을 갖는 정도, 즉 변이오차(variable error)의 수준
The degree to which measurement results remain consistent regardless of who is measuring or when the measurement occurs, reflecting the level of variable error.체계적 함의 (systematic import)
과학적 개념은 그것을 공유한 이론들과 체계적으로 연결하는 매듭의 역할을 수행해야 한다는 요건. 이론적 함의(theoretical import)로도 불림
The requirement that a scientific concept serve as a link systematically connecting it to the theories that share it. Also referred to as theoretical import.분류척도 (classificatory measure)
지칭대상이 특정한 속성을 갖고 있는지 여부를 밝혀주는 척도. 상호배타적 속성구간이 있어 지칭대상이 어떤 구간에 속하는지를 분류할 수 있게 해줌. 명목척도(nominal measure)라고도 불림
A scale that identifies whether or not the subject possesses a certain attribute. It features mutually exclusive attribute categories, allowing classification of the subject into one of these categories. Also referred to as a nominal measure.비교척도 (comparative measure)
지칭대상에 특정한 속성이 상대적으로 어느 정도 존재하는가를 밝혀주는 척도. 순위척도(ordinal measure)라고도 불림
A scale that indicates the relative degree to which a subject possesses a particular attribute. Also known as an ordinal measure.정량척도 (quantitative measure)
지칭대상이 지닌 속성의 절대량 혹은 절대심도에 관한 수량적 정보를 제공해주는 척도. 절대 0이 있는 비율척도(ratio measure)와 없는 등간척도(interval measure)로 나뉨
A scale providing quantitative information about the absolute amount or intensity of an attribute the subject possesses. It is divided into ratio measures (with a true zero) and interval measures (without a true zero).측정타당성 (measurement validity)
측정지표가 측정하려는 속성을 정확히 측정해주는 정도
The degree to which a measurement indicator accurately measures the attribute it is intended to measure.구성타당성 (construct validity)
측정지표가 다른 지표와 연결되는 양상이 이론적 기대와 상응하는 정도
The extent to which the ways in which a measurement indicator relates to other indicators align with theoretical expectations.내용타당성 (content validity)
지표가 측정대상의 속성을 포괄적으로 측정할 수 있는 정도. 표집타당성(sampling validity)이라고도 함
The degree to which a measurement indicator comprehensively captures the attributes of the subject being measured. Also known as sampling validity.액면타당성 (face validity)
단순히 연구자의 주관에 따라 확보된 측정타당성
Measurement validity secured solely by the researcher’s subjective judgment.예측타당성 (predictive validity)
기준타당성(criterion related validity)이라 칭하기도 하며, 지표가 특정 속성을 얼마나 정확히 예측해주는가를 의미
Also referred to as criterion-related validity, it denotes how accurately an indicator predicts a particular attribute.이론적 정의 (theoretical definition)
추상적 용어를 다른 추상적 용어들로 재구성하는 작업. 해당 용어가 지칭하는 속성의 가장 일반적인 범주를 이론적으로 규정하기 위한 것
The process of reconstructing an abstract term in terms of other abstract terms, aiming to theoretically specify the most general domain of attributes that the term denotes.조작정의 (operational definition)
추상적 개념을 실증지표들로 재구성하는 작업. 이론적 정의로 얻은 속성의 범주를 현실 세계와 연결하려는 목적을 가짐
The process of translating an abstract concept into empirical indicators, with the goal of linking the category of attributes derived from the theoretical definition to the real world.
퀴즈 4: 연구설계
다음의 개념들을 필히 숙지하고, 연구방법론 제4장 연구설계의 내용을 정독하세요.
내적 타당성 (internal validity)
설명변인들이 실제로 종속변인의 변이를 초래할 때 확보되는 모형의 적실성
The accuracy of a model in ensuring that explanatory variables genuinely cause variation in the dependent variable.분석단위 (unit of analysis)
연구대상의 기본적 구성단위
The basic element or entity under study.분할오류 (fallacy of division)
높은 수준의 분석단위에 대한 관측결과를 근거로 그보다 낮은 수준에 놓여 있는 분석단위의 성격을 함부로 추론하는 오류. 생태오류(ecological fallacy)로 불리기도 함
The logical error of inferring characteristics of lower-level units based on observations made at higher-level units. Also known as ecological fallacy.연구설계 (research design)
과학적 연구를 진행하기 위한 일단의 작업지침으로서, ①연구문제, ②분석모형, ③분석의 시간적·공간적 범주, ④개념화와 조작정의, ⑤모집단과 표본, ⑥관측방법, ⑦모형(가설)검증방법 등 일곱 가지 항목으로 구성됨
A systematic framework for conducting scientific research, consisting of seven key components: ① research questions, ② analytical models, ③ temporal and spatial scope, ④ conceptualization and operational definitions, ⑤ population and sample, ⑥ observational methods, and ⑦ hypothesis-testing methods.총체론/신비론 (holism)
총체는 개체의 단순한 집합 그 이상이라고 보는 입장. 즉, 총체의 속성은 개체의 속성, 개체와 개체 간의 관계가 나타내는 속성, 그리고 개체와 총체 사이의 관계가 갖는 속성을 모두 포함한다고 봄
A viewpoint suggesting that the whole is more than merely the sum of its parts, considering attributes of individual units, their interrelations, and relationships between the parts and the whole.합성오류 (fallacy of composition)
총체의 속성은 개체의 속성을 그대로 반영한다고 함부로 추론하는 오류
The logical error of inferring that the properties of a whole directly mirror those of its individual parts.환원론 (reductionism)
총체란 개체의 총합에 불과하다고 보는 입장
The perspective that the whole is merely the sum of its individual parts.모집단 (population)
연구대상이 되는 모든 사례의 집합체
The entire collection of cases relevant to the research.비확률적 표집 (non-probability sampling)
연구설계를 점검하기 위한 예비연구에 사용될 표본을 표집확률을 전혀 고려하지 않고 추출하는 방법
A sampling method that selects samples without considering the probability of selection, usually employed for preliminary or exploratory research purposes.편의표집 (convenience sampling)
주변에서 쉽게 확보할 수 있는 응답자들을 적절히 뽑는 표집방법
A sampling method of selecting easily accessible respondents.판정표집 (judgmental sampling)
대학생, 군인, 생산근로자처럼 특정한 문항에 대해 서로 다른 반응을 보일 수 있다고 여겨지는 사례들을 임의로 선정하는 표집방법
A sampling method that deliberately selects cases presumed to differ significantly in responses to specific questions, such as college students, military personnel, or factory workers.할당표집 (quota sampling)
모집단 내 하위집단의 구성비가 표본에 그대로 반영되도록 사례를 할당하여 추출하는 표집방법
A sampling method in which cases are selected to ensure that subgroups within the population are proportionally represented in the sample.설문조사 (survey research)
개인이나 집단의 태도정향과 행위정향을 파악하기 위해 모집단을 대표하는 표본을 면담하여 표준화된 자료를 얻는 자극적 관측방법
An obtrusive observational method for collecting standardized data through interviews with representative samples to determine individuals’ or groups’ attitudes and behavioral orientations.자극적 관측방법 (obtrusive approach)
관측대상에게 자극을 줄 수밖에 없음에 따라 관측결과의 신뢰성이 훼손될 위험성이 있는 관측방법. 설문조사와 참여관측 등을 포함함
Research methods in which the act of observation inevitably influences subjects, potentially reducing the reliability of results; includes survey research and participant observation.집적통계자료 추출 (archival data extraction)
센서스 자료, 사건통계자료 등 국가기관, 연구기관이나 국제기구에 의해 체계적으로 축적된 자료들 가운데에서 필요한 자료를 뽑거나 재구성하는 간접적 관측방법
An indirect observational method involving the extraction or reconstruction of systematically accumulated data such as census or event statistics from government, research institutions, or international organizations.참여관측 (participant observation)
어떤 사회집단에 침투해 그 속에서 발생하는 현상의 의미, 본질, 생성경로 등을 직접 관측하는 현장조사
Field research that involves direct observation by immersing oneself within a social group to understand the meanings, nature, and developmental processes of phenomena.표집오차 (sampling error)
표본의 특성이 모집단의 특성으로부터 벗어나는 정도. 표본규모를 정하는 통계적 기준으로 사용됨
The extent to which the characteristics of a sample deviate from those of the population; serves as a statistical criterion for determining sample size.확률적 표집 (probability sampling)
모집단의 모든 구성단위가 일정한 확률에 따라 표본으로 뽑힐 수 있도록 만드는 표집방법
A sampling method ensuring that every unit of the population has a known and equal probability of being selected into the sample.단순무작위 표집 (simple random sampling)
표본명단을 갖고 있을 때 모집단에 속한 모든 사례들이 동일한 표집확률을 갖도록 만드는 표집방법
A sampling method that provides all cases within a known population equal probability of selection when a complete sampling frame is available.체계적 표집 (systematic sampling)
표본명단을 갖고 있을 때 명단의 어떤 지점으로부터 일정한 간격에 따라 사례들을 선정하는 표집방법
A sampling method that selects cases at regular intervals from a specified starting point on a sampling frame.층화표집 (stratified sampling)
모집단이 여러 개의 의미 있는 하위집단을 포함하고 있을 때, 표본에 이러한 집단의 구성비가 반영될 수 있도록 하는 표집방법
A sampling method ensuring proportional representation of meaningful subgroups from the population in the sample.군락표집 (cluster sampling)
표본명단이 없을 때 단순무작위 표집의 논리를 적용하기 위한 방법으로서, 모집단을 분할할 수 있는 군락을 선택한 다음 가장 큰 군락단위로부터 가장 작은 군락단위로 좁혀 들어가면서 일정 수의 사례를 차례로 무작위 표집하는 방법
A sampling method used when a sampling frame is unavailable; involves randomly selecting clusters from larger to smaller units within the population, sampling cases systematically.회귀분석 (regression)
정량척도들 사이의 선형적, 비선형적 공변관계를 추적하기 위한 계량통계분석기법으로서, 다양한 유형을 포함함
A quantitative statistical analysis method for investigating linear and nonlinear relationships among quantitative variables.
퀴즈 5-10은 별도의 가이드라인 없이도 해결 가능
중간시험 학습 가이드
시험 개요
형식: Closed Book, 서술형 중심
범위: 제2주차(연구방법론)~제8주차(예측 II)
총점: 100점 / 6문제
시간: 160분 (09:00~11:40)
출제 유형
유형 1. 연구 사례를 읽고 개념을 적용하는 문제
실제 학술 논문의 요약이 제시되고, 그 연구에 수업 개념을 적용하여 설명하는 문제이다. 단순 암기가 아니라 “이 연구에서 X는 무엇에 해당하는가”를 자기 언어로 풀어야 한다.
- 출제 가능 개념: 잠재적 결과 프레임워크, 인과추론의 근본 문제, 무작위 배정의 논리, 이중차분법(DiD), 병행 추세 가정, 생략변수 편향 등
수업에서 다룬 핵심 개념의 정의를 외우는 데 그치지 말고, 임의의 연구 사례에 그 개념을 대입하여 설명하는 연습을 반복할 것. 예를 들어 “이 연구에서 \(Y_i(1)\)은 무엇이고 \(Y_i(0)\)은 무엇인가?”처럼 구체적으로 적용하는 훈련이 필요하다.
유형 2. 측정과 개념화에 대한 비교 및 논술 문제
두 가지 서로 다른 측정 방식(이항 변수 vs. 연속형 변수 등)이 제시되고, 조작적 정의, 측정 수준, 타당성, 개념 확장 등의 관점에서 비교·평가하는 문제이다.
- 출제 가능 개념: 조작적 정의, 측정 수준(명목/서열/등간/비율), 추상화의 사다리, 개념 확장(conceptual stretching), 측정 타당성, 강건성 검증
민주주의, 정치참여, 부패 등 수업에서 다룬 개념들이 실제로 어떻게 측정되는지 사례를 정리하고, 각 측정 방식의 장단점을 설명할 수 있도록 준비할 것.
유형 3. 기술통계, 회귀분석(기초) 수계산 문제
소규모 데이터(n = 5 정도)가 표로 주어지고, 공식이 함께 제시된다. 평균, 분산, 표준편차, 상관계수, OLS 기울기/절편, 잔차, \(R^2\), RMSE 등을 직접 손으로 계산해야 한다.
공식은 시험지에 제공되므로 외울 필요는 없다. 대신 계산 과정에 필요한 개념들을 이해하는 것이 중요하다. 즉, \(\bar{X}\)가 무엇인지, \(sd\)가 무엇을 지칭하는지를 이해하지 못한다면, 공식이 주어지더라도 계산할 수 없기 때문이다.
유형 4. 가상 논문 초록 비판 문제
가상의 연구 초록이 제시되고, 그 연구의 인과적 주장이 타당한지를 수업 내용에 근거하여 평가하는 문제이다.
- 출제 가능 개념: 인과추론의 세 조건(시간적 순차, 항상적 연계, 탈허위성), 생략변수 편향, 내생성, 상관과 인과의 구분, 연구설계의 내적 타당성
연구설계를 수행해본 경험으로써, 타인의 연구를 개괄적으로 소개하는 초록을 평가하며 해당 연구의 설계도가 본문을 일기 전에 이해할 수 있느 방식으로 충분한 정보를 제공되고 있는지 분석할 것을 요한다.
예제 문제
아래는 실제 시험과 동일하지는 않지만 유형을 파악할 수 있도록 구성한 연습 문제이다.
연습. 관찰 연구의 인과적 해석 평가 (20점)
아래는 가상의 연구 요약이다.
이 연구는 OECD 30개국의 2000~2020년 패널 데이터를 활용하여 SNS 이용률이 투표율에 미치는 영향을 분석하였다. 설명변수는 국가별 연간 SNS 이용률(%), 종속변수는 국가 총선 투표율(%)이다. 추정한 결과, SNS 이용률이 10%p 증가할 때 투표율이 평균 1.2%p 감소하는 것으로 나타났다(β̂ = −0.12, p < 0.05, \(R^2\) = 0.47). 연구자는 이를 “SNS가 정치적 무관심을 유발하여 투표율을 낮춘다는 인과적 증거”라고 결론지었다.
(a) 이 연구의 설명변수와 종속변수를 식별하고, 추정된 회귀계수(β̂ = −0.12)가 실질적으로 무엇을 의미하는지 해석하시오. (5점)
(b) 이 연구에서 생략변수 편향(omitted variable bias)의 가능성을 구체적인 변수를 제시하여 설명하시오. (8점)
(c) 연구자가 이 결과를 “인과적 증거”라고 주장하는 것이 적절한지, 인과추론의 세 가지 조건(시간적 순차, 항상적 연계, 탈허위성)을 기준으로 평가하시오. (7점)
풀이 방향 안내
(a) 회귀계수 해석은 “\(X\)가 1단위 변할 때 \(Y\)가 평균적으로 얼마나 변하는가”의 형태로 쓴다. 여기서 1단위가 무엇인지(SNS 이용률 1%p)와 종속변수의 단위(투표율 %p)를 명시해야 한다.
(b) 생략변수 편향을 논할 때는 구체적인 변수를 제시하되, 그 변수가 (1) 설명변수와 상관이 있고 (2) 종속변수에도 영향을 미치는 두 조건을 모두 설명해야 한다. 예를 들어, 경제 불황이라는 변수는 SNS 이용 시간 증가와 동시에 정치적 냉소를 유발할 수 있으므로 생략변수 후보가 된다. 그 외에 시간에 따라 변하지 않는 국가 특성(문화, 정치 제도 등)이나, 시간에 따라 변하는 교란 변수(예: 각 국가의 경기 변동, 정치적 사건)의 가능성을 제시할 것.
(c) 세 조건을 하나씩 점검한다. 시간적 순차가 확보되었는지(SNS 이용률 변화가 투표율 변화보다 선행하는지), 항상적 연계가 있는지(통계적 유의성), 탈허위성이 확보되었는지(제3의 변수 가능성이 배제되었는지)를 각각 판단하고, 관찰 연구의 한계를 종합적으로 서술하면 된다.
핵심 점검 리스트
시험 전 아래 항목에 자신 있게 답할 수 있는지 점검하라.