《传播学社会研究方法——CH2测量、概念化与操作化课件.ppt》由会员分享，可在线阅读，更多相关《传播学社会研究方法——CH2测量、概念化与操作化课件.ppt（47页珍藏版）》请在三一办公上搜索。
1、M.X.Zhang,1,测量、概念化与操作化：在研究者抽象的设想与经验现实之间建立起清晰的联系,测 量(measure)概念化(conceptualization)操作化(operationalization),M.X.Zhang,2,你认为这些说法正确吗？,现代社会恋人之间爱情的成分越多，物质的成分就越少；反之亦然。当个人的受教育程度提高，其对他人的偏见会显著减少。网民的网络技能越高则其从互联网上获益越多。越赞同“党的新闻事业”理念的新闻工作者，越可能在其报道中为民说话。,Outline of this class,An outline of conceptualization and op
2、erationalization in researchConcept 1 TheorizationConcept 2 Validity ValidityMeasure 1 Empirical Analysis Measure 2,&Reliability,Reliability&,抽象建构,抽象建构,概念定义,概念定义,指标或测量,指标或测量,概念化,概念化,操作化,操作化,假设因果关系,验证经验假设,思辩/逻辑过程,实证过程,理论层面,操作层面,经验层面,理论、概念与测量,实施一个研究之时必须考虑/询问以下问题：该研究涵该了哪些关键概念？研究者是如何界定关键概念？概念化的挑战关键概念发源于
3、何处？由既有理论生发？既有的理论/研究如何对该概念和其他概念间的关系予以阐明？理论化的挑战该研究在如何测量这些关键概念？操作化的挑战,Zhu,J.J.H.,&He,Z.(2002).Perceived characteristics,perceived needs,and perceived popularity:Adoption and use of the Internet in China.Communication Research,29(4):466-495.,测量,当社会研究者检验假设、评估解释、为理论提供经验支持或系统的研究某个应用议题或社会世界的某些领域时，他们将测量概念和变量
4、，如智力、社会孤独感、网络依赖、网络成瘾、广告信息卷入度、媒介色情信息限制支持度、关于媒介暴力内容的态度等。定量研究者远远比定性研究者更为关心测量。测量是资料采集前的独立步骤，为此发展出一系列专门的术语和技巧。定量研究者采用演绎取向而不是归纳路径：从概念开始，通过精确细致的测量来捕捉它，并以数字形式来表示。,M.X.Zhang,8,测量、概念化和操作化,日常生活中人们有意无意的测量非物质世界，但通常是用并不太精确的术语；而在物质世界中科学家的测量延展了人类的感觉。测量是根据法则，对研究对象或事件分配若干数字。定量和定性研究者在测量中，都适用两个过程：概念化和操作化。测量的显在工具，常常表现为量
5、表(scales)。,M.X.Zhang,9,测量层次,测量有四个层次：定类(nominal)、定序(ordinal)、定距(interval)和定比(ratio)。测量层次(level of measurement)，说明了连续和离散变量之间的差异。一个变量在何种层次上被测量，直接取决于其被概念化的过程以及研究者所采用的资料采集方法的类型。,M.X.Zhang,10,观念、概念化和概念,由于每个人头脑中的印象并不能直接用来交流，因此人们用每份资料的标签来交流彼此观察到的事物和代表事物的观念。和观念(conception)有关的标签使人们可以相互交流，且使人们可就标签的含义达成共识。达成共识的
6、过程被称为(广义的)“概念化”(conceptualization)，达成共识的结果就是概念(concept)。概念是一组观念。,M.X.Zhang,11,概念化,Conceptualization 概念化Refers to the process through which we specify precisely what we mean when we use particular terms 概念化是捕捉一个构想并通过赋予它一个概念或理论定义的方式来提炼它，即概念化是彻底想通想透构想/概念的意义的过程Relatively abstract,M.X.Zhang,12,操作化,Operat
7、ionalization 操作化Refers to the specification of research procedures that will result in empirical observations representing those concepts in the real world连接概念定义与一套特别的测量技术或程序Has to be concrete and precise操作定义，即通过研究者执行的特定操作行为产生的定义，可以是一份调查问卷、在实地场景中观察事件的方法、在大量媒体中测量信息内容的方法等。,M.X.Zhang,13,概念化与操作化的衔接,Oper
8、ationalization should follow and match conceptualizationWe measure a thing in a specific manner because we have defined the thing in a specific way,M.X.Zhang,14,对“大学质量”的概念化与操作化,Example 1:Quality of UniversityIs Wuhan University a good university?Is it better than or not as good as HUST?Conceptual de
9、finition:As an educational institution,a university is good to the extent that it successfully transmits advanced level knowledge to people in a societyOperationalization:%of faculty members with Ph.D.s Teacher-to-student ratio Availability of advanced teaching facilitiesThe size of the library,M.X.
10、Zhang,15,对“大学质量”的概念化与操作化,Conceptual definition:As a research institution,a university is good to the extent that it successfully produces advanced knowledgeOperationalization:%of faculty members with Ph.D.s Size of graduate schoolResearch output of faculty membersAvailability of research funding Adv
11、anced research facilitiesThe size of the library,M.X.Zhang,16,“广播收听”的概念化与操作化,Example 2:Frequency of radio listeningWhat counts as“listening”?E.g.,amount of time spent listening to the radio,including when radio serves as background,M.X.Zhang,17,“媒介可信度”的概念化与操作化,媒介可信度(Media credibility):概念定义：可信度是为受传者所
12、感受到的信源或传播媒介的一种品质，即不论其传播的内容为何而能令受传者无可争辩的信赖(West,1994)。一个向公众提供了准确及公正无偏的信息的信源，可被认为是可信的(Hass,1981)。操作定义：构建基于5级李克特量表的以下四个题项(items)：“整体上来看，电视(报纸/广播)新闻(1)个人感觉值得信赖；(2)基本上是真实的；(3)立场公正，不试图以主观意志影响人；(4)解释得比较全面、完整”。,M.X.Zhang,18,“物质主义倾向”的操作化,贝尔克的物质主义量表租一辆车比买一辆车对我更有吸引力；（R）我对那些也许应当扔掉的东西总是恋恋不忘；即使是价值很小的东西被偷了，我也会非常不安
13、；我掉了东西之后不会特别不安；（R）较之于大多数人，我较少把自己的东西锁起来；我宁愿买某间东西而不愿从朋友处借来一用；我很担心别人把我拥有的东西借走；旅游时我喜欢照很多照片；我从不丢弃东西。,“互联网采纳”的操作化,Internet adoption.As described above,we conceptualize the adoption of the Internet as a nominal variable of four categories that are mutually exclusive at a given point in time but dynamically
14、 transitory over time.To measure it,we asked two questions in the survey:“Are you currently using the Internet?”and“If not,how likely will you be using it in the next 12 months?”The respondents were explicitly told that“using the Internet”includes not only surfing the Web but also receiving and send
15、ing e-mail messages,online chatting,shopping,trading stocks,and other online activities.Based on their answers to the two questions,respondents were each assigned to one of the four categories:(a)Continuous Adopters(who are currently using the Internet),(b)Discontinued Adopters(who had used the Inte
16、rnet but stopped using it),(c)Potential Adopters(who have not used but are likely to use the Internet within a year),and(d)Unlikely Adopters(who have not used and are not likely to use the Internet any time soon).,Journalistic roles.These variables were measured by asking the respondents to indicate
17、 on a 5-point Likert-type scale,from 1(not at all important)to 5(very important),how important each function described in a statement was.Based on our conceptual analysis of how media roles were being discussed among Chinas journalists,a battery of 18 statements was developed.Some of them were adapt
18、ed from Weaver and Wilhoit(1996),and others were created based on the unique situation in China.Five of the items were designed to assess the media entertainment role.But they did not group into a single factor,nor did they load cleanly on any of the other four factors.These were eliminated from the
19、 subsequent analysis.The remaining 13 formed four clean factors in an exploratory factor analysis.The four factors correspond to the four roles specified in Weaver and Wilhoit:interpretive,disseminator,adversarial,and popular advocacy.12 Based on this result,four indices were created by averaging ac
20、ross the items in each factor.Each index yielded an acceptable level of reliability(see Appendix B for details).,Measurement of Journalistic roles,M.X.Zhang,21,M.X.Zhang,22,测量,并非所有概念都可以被测量，如潜意识、虚假意识、文学价值等，但是这些概念有助于人们思考问题。测量无所谓对错，但有好坏之分，好的测量具有以下特征：概念化的阐述清晰、意义明确易于被操作化与研究中的理论设想具有连惯性符合研究的目的与具体情景,“没有任何神奇
21、的手法可以把建构转变为精确的概念定义，这需要仔细的思考、直接的观察和与其他人交换意见、阅读其他人所思所言，以及尝试各种可能的定义。”单独的一个构想可能同时有数个定义，人们对于这些定义不一定会有完全相同的看法。概念定义常常会与理论架构/范式，以及研究的目的相关，譬如如何界定“社会阶级”？如何界定“好的大学”？“媒介暴力”、“传播攻击性”？某些概念极为抽象和复杂，本身包含了许多次级概念或不同的维度/层面，此种概念常常被称为“构念”(construct)。,如何概念化？,如何概念化？,尽可能多的在既有文献和研究中寻找自己所关注的那个概念，当搜集到不同的定义、不同层面的定义与相关的概念之后，就可以看到
22、这个核心观念的界限范围。在此基础上，可以自己为某一个概念下定义，尤其是，需要列出这个概念所需要表达的外延或外在表征，尤其是当这个构想所表达的是一种态度/感觉/心理状态，这些外延的变化范围，如自高到低等，它们有助于实现操作化。,测量品质,两个标准：信度(reliability)和效度(validity)。信度：在不同的时点上多次测量，产生一致结果的可能性。譬如，同一份问卷，同一个受访者填写两次结果会一样么？它涉及到测量的稳定性、内在一致性和等价性。你喜欢看武侠片么？“喜欢”、“不喜欢”、“说不清楚”。请在0-100之间标出你喜欢看武侠片的程度？陈述(statement/item)愈是具体实在，则
23、测量的信度愈高客观的观察一般会产生更有信度的结果看恐怖片受到惊吓的程度：询问vs皮肤测试问受访者的年龄vs查验其身份证,改善测量信度,清晰概念化所有构想：尤其对复杂的概念或构念必须如此前测后测法：同样的受访者施以两次测量，将测量的结果算术平均多指标测量：将各个指标的分值加总E.g.,Attention to news mediaDo you pay attention to news on television?Do you pay attention to news in the newspapers?Do you pay attention to news on the Internet?
24、Do you pay attention to news on radio?使用成熟量表：少用自建量表，但在借鉴成熟量表时需要对其加以改造，尤其要注意文化差异问题提高测量层次：尽可能用最精确的等级来测量构想Research-worker reliabilityInterviewer training in surveySupervising interviewers in a survey and random checking of completed interviewsInter-coder reliability in content analysis,多指标测量,自变量测量,因变量测
25、量,经验关联？,a1,a2,a3,b2,b1,b3,A,B,复合测量,复合测量,M.X.Zhang,30,研究效度,研究的效度主要有两个：内在效度(internal validity)vs.外在效度(external validity)。统计效度。内在效度：某一个研究设计是否严谨(能排除任何可能混淆的变项)。外在效度：某一个研究结果能否概化(generalize)至现实情境，或更大现实世界范围中，也称之生态效度(ecology validity)。研究最好能兼顾内外在效度，不过通常此二效度很难兼顾。内在效度愈强，其外在效度愈弱；外在效度愈强，其内在效度愈弱。,M.X.Zhang,32,测量效度
26、,Validity refers tothe extent to which an empirical measure adequately reflects the meaning of the concept under consideration,or in other words,the extent to which the operational definition follows the conceptual definition,or in other words,Whether you are measuring what you want to measure所有的效度都
27、在试图回答一个问题：我们是否测量到了我们想测的东西Examples of measures with problematic validityAttitude towards American cultureWhether one likes McDonalds or not,M.X.Zhang,33,测量效度,Familiarity with new media technologiesNumber of hours using the Internet per dayWillingness to express an opinionThe number of dont know answe
28、rs given in a survey settingDeference to governmental authorityMeasured by peoples attitude towards governmental regulation regarding wearing of seat belt,效度,就其核心，测量效度是构想与其指标间的吻合程度，触及的是概念与操作定义两者之间有多契合的问题。然而，“我们永远无法得到绝对效度的原因，是因为构想都是抽象的概念，而指标则是具体的观察。在我们对于这个世界的精神图画与我们在特定时空下所做的特定事物之间，是存在一定距离的。”效度是程度问题(v
29、alidity can be considered as a matter of degree)。效度是动态过程的一部分，会随着证据的积累与时俱增。如果没有效度，所有的测量会变得毫无疑义。,M.X.Zhang,35,效度类别,表面效度内容效度效标效度并发效度预测效度建构效度收敛效度互斥效度,M.X.Zhang,36,表面效度(face validity),涵义：表面上来看，人们会相信定义与测量方法是相符的么？用最简单的也是最基本的主观判断的方法，一般根据测量量表所选的题项来判断，仅从表面上来观察判断其是否能够代表想要测量的构想/构念。也有人认为表面效度与内容效度不同。,M.X.Zhang,37
30、,内容效度(content validity),涵义：测量工具将定义下的所有内容都代表出来了么？一个概念定义含有数个观念：它是包含观念与概念的一个“空间”，测量工具应该是概念空间中所有观念或区域的样本或代表。The degree to which the measure has captured the range of meanings represented by the concept.,效标效度(criterion validity),亦称效标关联效度、独立标准效度、准则效度、参照物效度，逻辑：效标是一个与量表有密切关联的独立标准，将量表所测特性看成因变量，将效标看成自变量，所测特性与
31、效标密切相关的量表才是有效的量表。效标效度的分析方法：考察所测特性(因变量)与效标(自变量)是否有显著的相关(相关分析)或是对效标的不同取值，特性的值是否表，现出显著的差异。难处：效标的确定并不是一件容易的事，择效标一般要根据某种已知的理论、或某种已经得到肯定的结论。,M.X.Zhang,39,效标效度,台湾的“兰屿民众传播行为与现代化程度之研究”，用离岛经验作为测量雅美族人现代化程度的效标。再如：员工士气与工作满意度、电视广告收看与物质主义。依效标取得时间的不同，效标关联效度又区分为“同时(并发)效度”(concurrent validity)与“预测效度”(predicative vali
32、dity)二种。,建构效度(construct validity),针对多重指标的测量工具。关注的是：如果这个测量工具有效，不同的指标产生的是一致结果么？尤其是，当众多指标测量的是一个构念的不同维度/层面，测量的结果与预想的情形是否一样？建构效度分为：收敛效度或趋同效度(convergent validity)和区分效度/互斥效度/歧异效度(discriminant validity)。同一个构想的多个测量指标，产生相同的测量结果或类似的模式；不同构想的多个测量指标产生不同甚至相反的结果或负相关。,建构效度的例子,续上页-经验数据,M.X.Zhang,43,改善测量效度,对于过于抽象或复杂的概
33、念采用替代性变量(surrogate measure)予以测量：用教育程度来替代“政治成熟度”构建复合指标来最大限度捕捉抽象概念的内涵，尤其是用单一指标捕捉不到的：欲对“喜欢美国文化”(liking American culture)，用“喜欢吃麦当劳”来测量，可改为：Whether you like or dislike:A)Sex and the CityB)Hollywood moviesC)McDonalds D)Coca-colaE)American footballF)NBAG)Disneyland H)Nike,M.X.Zhang,44,改善测量效度,使用多个具有相同内涵的指标，
34、使得采用单一指标测量时所多出来的那部分涵义变得无足轻重：如用“公众对政府要求驾驶时系上安全带的态度”来测量“遵从政府管制”，可扩展为多个指标，如 Attitude towards seat belt law,Attitude towards media regulation,Attitude towards the rights of the police to monitor phone calls,Attitude towards the smoking ban,etc.实用建议：尽量收集和阅读与测量内容有关的资料，以最大限度的在测量中囊括相关现象除了研究人员的主观判断之外,最好再请一些专
35、家来帮助判断,效度和信度的关系,毫无信度的测量不可能有效度，因为它未测量任何事物；但毫无效度可言的测量可能信度极高。效度与信度需要平衡，因为概念是抽象的，直接询问人们这个抽象的概念似乎最为有效，但却往往没有信度，E.g.,measuring liking American culture simply by asking whether people like American culture or not.,A,B,C,课外作业(不用上交),在自己感兴趣的领域，在中外学术期刊上查找2-3篇量化实证的学术论文，了解其研究的意义和目的，揣摩其文献综述的写法和逻辑；重点阅读其研究问题的提出与研究假设的发展，并思考其概念化与操作化的过程；重点了解其变量测量的准备、过程与信度和效度检验；请尝试阅读其研究方法部分对受访者抽样和数据分析方法的叙述。,M.X.Zhang,47,The End,
