国际最新文献综述方法: 引文语境分析法, 透明, 严谨, 可复制和可量化!

凡是搞计量经济的，都关注这个号了邮箱：[e-mail]所有计量经济圈方法论丛的code程序, 宏微观数据库和各种软件都放在社群里.欢迎到计量经济圈社群交流访问.

1.洪永淼教授履新后首发文“概率论与统计学在经济学中的应用”2.首发, 邹恒甫教授对年轻学者四句学术箴言, 句句扎心3."实证研究13篇"功夫秘笈, 中青年学者研究必备锦囊！正文关于下方文字内容，作者：郑诗琨，南京大学经济系，通信邮箱：[e-mail]作者之前的文章：为什么受伤的总是女人? 学生评教都存在性别偏见!Anderson MH, Lemken RK. Citation Context Analysis as a Method for Conducting Rigorous and Impactful Literature Reviews. Organizational Research Methods. December 2020. doi:10.1177/1094428120969905Citation context analysis is a detailed and rigorous form of literature review that goes beyond traditional narrative and systematic reviews to better understand the impact of seminal works and influential authors. We discuss the types of questions citation context analyses can answer and provide a set of guidelines for how to effectively conduct them. Citation context analysis holds promise for enabling a more systematic assessment of how theories are used, empirically tested, and critiqued by subsequent citing authors. This has implications for both theory development and testing, and for the improvement of citation practices within the field of organizational studies and the social and physical sciences more broadly.摘要：引文上下文分析是一种详细而严谨的文献综述形式。它超越了传统的叙述性综述和系统性评论，所以可以让人们更好地了解开创性作品和作者的影响力。本文中，我们讨论了几类引文上下文分析可以回答和解决的问题，并提供了一套如何有效实施的指导方针。引文上下文分析能够更系统地评估理论如何被后来的引用者使用、实证检验和评论。这对理论的发展和实践，引文质量的改善都有作用。这种影响不仅在组织研究领域，还在更广阔的社会科学、自然科学领域中。一、介绍引文上下文分析是一种新兴的文献综述形式，它可以帮助学者们详细地探究和描述源文本如何使用重要的思想，并将其传播到后续引用他的作品中。它要求收集给定的作品、一组作品或给定的作者的所有引文，然后使用内容分析技术来检查引文的上下文，并评估该作品对一个或多个领域的实际影响。引文上下文分析可以辨别源著作的影响是如何变化的，以及该著作中的知识主张在多大程度上得到了实证检验或批判挑战。本文认为，引文上下文分析应被视为一种独特的、系统的、严谨的文献综述。它与其他类型的文献综述相比具有一定的优势，有助于以新颖的方式进行理论检验和发展。传统的文献综述通常检查某一领域的文章(叙述性综述)，或关于特定关系的实证研究结果(摘要元分析)。这两种评论都没有系统地汇集所有对某一作品的引用与提及。系统综述则是“一种具有系统的、可复制的和透明的方法的文献综述”(Siddaway等，2019年)。而引文上下文分析的独特优势在于它提供了其他被引作者如何看待被引作品的信息并进行建构。引文上下文分析可以通过结合和应用其他方法所缺乏的定量和定性手段，从而回答其他类型的文献综述不能回答的问题。Small (1982)指出，引文上下文分析通常用于两个目的:(a)对文本中引文的类型或功能进行分类 (b)检查“表征被引用文章的语义内容“。二、考察开创性工作的影响（引文分析的基本思想）标准的文献评论无法充分和严格地解决关于某一特定作品对随后的学术的持续影响的问题。例如，参考有影响力的作者早期作品的普遍做法并不一定反映作者的信念是如何在最初的想法受到他人挑战后发生变化和发展的。尽管某一特定作品的被引用次数与该作品的总体影响相关，但被引用次数并不能确定经典作品被引用的原因。许多引用都是出于微不足道的原因(Hanney et al.， 2005)，而评估一项研究的贡献需要的是关注他人如何使用这一研究成果。引文上下文分析是一种内容分析的定性分析方法，用于对引文上下文进行总结并赋予其意义。它通过将引文内容整合到一个综合数据库中，使用内容分析来提供对引文上下文实质的评估，而不仅仅是简单的计数。其前提是，某一特定作品在某一领域的贡献较少取决于该作品的内容，而更多地取决于其他人如何在他们自己的后续工作中解释和使用该作品(Anderson, 2006)。它通常利用数字化文本资源和专门分析程序的技术，如计算机辅助定性数据分析软件(CAQDAS)。三、引文上下文分析可以解决潜在的研究问题问题代表性研究1.后来的作者引用了焦点作品中的哪些内容?Anderson (2006)Golden-Biddle et al. (2006)Zhen et al. (2020)2.对作品的引用涉及的是次要内容的还是主要论点?Anderson & Lemken (2019)Burton-Jones (2014)Lounsbury & Carberry (2005)3.随着时间的推移，从作品中引用的内容发生了什么变化?Chang (2013a)Gonz´alez-Teruel & Abad-Garcia (2018)McCain & Salvucci (2006)4.有多少对作品的引用是关于他们知识主张的经验证据的?Anderson & Lemken (2019)Greenberg (2009)Siontis et al. (2009)5.这些著作中有多少引用是对其知识主张的批判，这些批判的内容是什么?Anderson & Sun (2010)Coleman & Salamon (1988)Cristea & Naudet (2018)6.焦点作品中的重要概念是否被引用的作者所忽视或扭曲?Anderson (2006)Hansen et al. (2006)Mizruchi & Fein (1999)7.来自不同领域的引用是否会从中引用不同的概念，或者对引用材料的解释和使用是否会有所不同?Chang (2013a)Korom (2019)Solomon et al. (2019)8.有哪些著作和焦点著作一起被引用？Burton-Jones (2014)Coleman & Salamon (1988)Hansen et al. (2006)1.后来的作者引用了焦点作品中的哪些内容?只有考察引用作者的表述，才能严格地识别引用作者所引用的作品的内容，从而确定作品对研究的实际贡献是什么。引文上下文分析将后期学术中开创性著作的实际使用编码化，并且可以帮助识别重要著作中关键知识的扭曲、遗漏和挪用的情况。2.对作品的引用涉及的是次要内容的还是主要论点?被引用是次要的还是实质性的问题对于理论的发展很有意义，因为次要的引用不太可能表明被引用的作品实际上是在引用文章中建立和扩展理论。研究者们在评价学术作品时展现出了一种非常危险的“输入偏置”，即单纯使用引用数量作为衡量该作品所获得的理论和实证支持的质量的指标。但如果这些引用是外围的，不是作品的主要主张，那么随后的理论发展的总体水平很可能远低于它可能看起来的水平。3.随着时间的推移，从作品中引用的内容发生了什么变化?考察作品在一段时间内被引用的内容的变化突出了“将引文上下文分析作为一种历史工具的可能性”(Cozzens, 1985)。这种考察有助于确定被引用的著作中具有持续影响力的部分，而不是一时的风潮或者过时的部分。考查从一段时间的引文使用的引文上下文分析，可以揭示重要的引用模式，也可以检验一个领域是在发展新的知识主张，还是在依靠基本不变的理论或未经检验的断言而停滞不前。4.有多少对作品的引用是关于他们知识主张的经验证据的?除了在元分析中，很少有学术研究考察后续工作如何利用之前工作中的实证结果(Anderson, 2006)，而引文上下文分析可以考察这一点。虽然当有足够数量的实证测试时，元分析对于聚合研究非常有用，但作者引用的绝大多数声明都不是基于元分析。引文上下文分析有助于揭示断言是否经过检验，从而指是否出需要进一步实证检验。5.这些著作中有多少引用是对其知识主张的批判，这些批判的内容是什么?就文献综述而言，关键问题不是否定引用的比例，而是被引用的作者对焦点研究中的主张提出了哪些具体的批评。由于否定引文分散在引文文献中，在引文上下文分析中对否定引文进行整理，对理论的发展具有非常重要的作用。关键引文上下文还可以突出作品需要进一步理论化和实证检验的方面，而这可以显著地改变对作品的解释，甚至说明为什么断言是不正确的。6.焦点作品中的重要概念是否被引用的作者所忽视或扭曲?Small (1978)强调“将引用视为对被引用作品的解释的重要性”，并指出在某些情况下，原作品可能在引用中变成了作者意想不到的东西，阻碍理论的发展。7.来自不同领域的引用是否会从中引用不同的概念，或者对引用材料的解释和使用是否会有所不同?大多数作品可能主要被引用在一个或两个学科，但有些作品确实在许多不同的领域产生了广泛的影响。了解一项工作的跨学科影响程度，以及一项工作在不同领域如何被不同的引用，可以识别不同学术领域知识主张之间可能的联系，以及各个领域假设的边界和差异，从而帮助理论发展。8.有哪些著作和焦点著作一起被引用？虽然对于一个观点引用一系列作品这样的做法看起来冗余，但它们可以反映出构成关于某个主题的重要学术网络的一组作品。尽管许多研究人员已经在文章的参考章节中构建了共同引文网络，但更有启发性、更有力的方法可能是考察共同引文的文献网络，因为这些作品在其他中出于相同的目的被引用。除了以上八个问题，引用上下文分析还可以解决其他问题。目前的引文上下文分析研究仅触及了组织研究中理论和概念的“谱系学”和“进化”过程的表面。未来的工作可以帮助重建管理和其他学科理论，并探索思想如何随着时代传播和改变。四、使用引文上下文分析法进行文献综述的指南1.确定领域和研究问题该领域通常是一个开创性的作品，而学者想要考察其对后续学术的影响。这个领域也可以是一个作者的多部作品，或者是一个特定概念的作品。需要通过对引文的考察来证明被调查的作品或作者的重要性。选择好领域后，研究人员必须选择具体的研究问题（通常是前文提到的八个问题）。当研究人员确定了一组相关的问题，并对每个问题都有明确的解释时，这一步的目标就实现了。2.确定评论的边界对于某些作品或主题，力求综合、全面是合理可行的。对于其他主题，如果引用的作品是广泛的(例如，经典书籍已经被引用了成千上万次)，有必要以某种方式缩小范围，比如只引用高被引期刊上的相关内容，以及采用抽样方法。这一步的目的是为引文上下文分析提供一个边界，可以使用如谷歌Scholar、Web of Science这样的大型数据库，通过搜索可以让研究人员了解引文的总体数量，然后细化引文样本的范围。3.收集引文的上下文并建立一个数据库一旦确定了引用文章的集合，就需要确定每一个引文在文中被引用的次数（需要确定引文的位置，也需要确定引文前后的多少句可以明确英文的涵义，即文字块）。我们假设，更多的上下文意味着引用的文献更重要。CAQDAS工具可以自动化文本选择过程，但自动选择的结果将不可避免地需要调整。最后要考虑的是是否有任何理由排除特定的文献。4.确定并同意代码(或类别)每个评价者阅读引文上下文并辨别每个引文的含义，对每一处引用作出批判性的解释（辨别相似和差异之处），从而制定和分配代码。第一轮的编码应使用开放的评判过程独立完成，以确保客观性，而后达成共识。可以采取先验的方法（根据已经分好的类别），也可以采取紧急的方法（根据引文和研究者的解释来确定代码）。对代码列表达成共识的过程是重复、迭代的。5.为所有引用上下文分配代码让每个评估者独立地根据新的代码列表重新分配给所有引文上下文，这将有助于随后的评估者之间可靠性检查。如果需要解决其他问题,比如评估被引部分对引文的重要性,可以使用最后开放代码列表，在初始编码阶段或重新编码阶段进行额外的评估。评估人员使用最终确定的初始化代码、它们的定义以及示例，独立地审查初始代码，以总结它们，并创建一个更小的类别集合(也称为摘要代码，如从24个开放代码缩减到8个摘要代码)。6.对编码之间的可靠性进行检查研究人员应该在每个独立的编码步骤后进行可靠性测试，可以使用Cohen’s kappa。当在一个编码步骤中有两个以上评估者进行评估时，Fleiss’s kappa更加合适。7.报告引文上下文分析结果作者在制定结果报告时将面临许多决策，而记录和证明这些决策的正当性是很重要的。这一步的目的在于明确、总结成百上千的引用上下文的广泛分析的意义。研究人员需要决定如何最好地报告分析结果。研究者试图超越机械的描述，并阐明对未来研究的影响，特别是对理论检验和理论发展的影响。五、讨论鉴于文献综述对科学进步的重要性，我们的目标是激励未来的研究人员探索这一领域，并发展新颖的方法。引文上下文分析有助于让研究者用客观的方法来确认重要的思想是如何被证实的，以及它们是如何被准确地应用的，从而“站在巨人的肩膀上”。引文上下文分析有助于改进引用实践。我们提倡作者在他们的知识生产中也更加系统，明确地将实证发现与最先提出假设的文献联系起来，从而允许未来的分析更严格、更完整地聚合和考察相关发现，从而促进理论的测试和改进。在我们对34篇使用引文上下文分析方法做文献综述的已发表文章中（见附录），我们发现杰出的上下文分析文章有四个特征：对所用的样本有明确和详细的标准;包括方法描述，并强调这些方法如何解决研究的目标;样本数量更大。除了上文提到的问题，引文上下文分析还有两个潜在的作用：一个是顾关于某一特定理论或领域的所有引文，另一个是发现和解决持续存在的方法论问题随着计算机技术以及专注于文本字符串处理和分析的新技术发展，引用上下文分析将会更快、更容易。我们相信，通过引文上下文分析，对引文本身进行更完整、更深入、更严谨的分析，这对于理论发展和社会科学家开展工作有者同样的潜在积极影响。附录：我们使用内容分析方法来详细考察以前的工作是如何采用引文上下文分析法对学术文献进行综述。关于Stata，1.Stata16新增功能有哪些? 满满干货拿走不谢，2.Stata资料全分享，快点收藏学习，3.Stata统计功能、数据作图、学习资源，4.Stata学习的书籍和材料大放送, 以火力全开的势头，5.史上最全Stata绘图技巧, 女生的最爱，6.把Stata结果输出到word, excel的干货方案，7.编程语言中的函数什么鬼？Stata所有函数在此集结，8.世界范围内使用最多的500个Stata程序，9.6张图掌握Stata软件的方方面面, 还有谁, 还有谁? 10.LR检验、Wald检验、LM检验什么鬼？怎么在Stata实现，11.Stata15版新功能，你竟然没有想到，一睹为快，12."高级计量经济学及Stata应用"和"Stata十八讲"配套数据，13.数据管理的Stata程序功夫秘籍，14.非线性面板模型中内生性解决方案以及Stata命令，15.把动态面板命令讲清楚了，对Stata的ado详尽解，16.半参数估计思想和Stata操作示例，17.Stata最有用的points都在这里,无可替代的材料，18.PSM倾向匹配Stata操作详细步骤和代码，干货十足，19.随机前沿分析和包络数据分析 SFA,DEA 及Stata操作，20.福利大放送, Stata编程技巧和使用Tips大集成，21.使用Stata进行随机前沿分析的经典操作指南，22.Stata, 不可能后悔的10篇文章, 编程code和注解，23.用Stata学习Econometrics的小tips, 第二发礼炮，24.用Stata学习Econometrics的小tips, 第一发礼炮，25.广义合成控制法gsynth, Stata运行程序release，26.多重中介效应的估计与检验, Stata MP15可下载，27.输出变量的描述性统计的方案，28.2SLS第一阶段输出, 截面或面板数据及统计值都行，29.盈余管理指标的构建及其Stata实现程序, 对应解读和经典文献，30.Python, Stata, R软件史上最全快捷键合辑！，31.用Stata做面板数据分析, 操作代码应有尽有，32.用Stata做面板数据分析, 操作代码应有尽有，33.没有这5个Stata命令, 我真的会活不下去！，34.第一(二)卷.Stata最新且有趣的程序系列汇编，35.第三卷.Stata最新且急需的程序系列汇编，36.第四卷.Stata最新且急需的程序系列汇编，37.干货: UN和WTO推荐的最全且权威的实证研究方法及在Stata实现！必收藏！，38.再中心化影响函数RIF回归和分解的Stata操作程序，39.R和Stata软件meta分析操作详细攻略, 对研究再开展研究的利器！，40.不能安装Stata命令咋弄？这个方法一直都比较靠谱！，41.使用Stata做结构方程模型GSEM的操作指南，42.疫情期计量课程免费开放！面板数据, 因果推断, 时间序列分析与Stata应用，43.一些Stata常见操作代码和注释, 能够让年轻学人更快掌握相关命令！44.Stata语言中的常用函数及其用法解释, 在附上42篇Stata相关学习资料，45.Stata经典操作笔记和学习资源合辑! 都是些博士生导师比较推荐的!关于一些计量方法的合辑，各位学者可以参看如下文章：①“实证研究中用到的200篇文章, 社科学者常备toolkit”、②实证文章写作常用到的50篇名家经验帖, 学者必读系列、③过去10年AER上关于中国主题的Articles专辑、④AEA公布2017-19年度最受关注的十大研究话题, 给你的选题方向，⑤2020年中文Top期刊重点选题方向, 写论文就写这些。后面，咱们又引荐了①使用CFPS, CHFS, CHNS数据实证研究的精选文章专辑！，②这40个微观数据库够你博士毕业了, 反正凭着这些库成了教授，③Python, Stata, R软件史上最全快捷键合辑！，④关于(模糊)断点回归设计的100篇精选Articles专辑！，⑤关于双重差分法DID的32篇精选Articles专辑！，⑥关于合成控制法SCM的33篇精选Articles专辑！⑦最近80篇关于中国国际贸易领域papers合辑！，⑧最近70篇关于中国环境生态的经济学papers合辑！⑨使用CEPS, CHARLS, CGSS, CLHLS数据库实证研究的精选文章专辑！⑩最近50篇使用系统GMM开展实证研究的papers合辑！下面这些短链接文章属于合集，可以收藏起来阅读，不然以后都找不到了。2.5年，计量经济圈近1000篇不重类计量文章，可直接在公众号菜单栏搜索任何计量相关问题,Econometrics Circle数据系列：空间矩阵 | 工企数据 | PM2.5 | 市场化指数 | CO2数据 |  夜间灯光 | 官员方言  | 微观数据 | 内部数据计量系列：匹配方法 | 内生性 | 工具变量 | DID | 面板数据 | 常用TOOL | 中介调节 | 时间序列 | RDD断点 | 合成控制 | 200篇合辑 | 因果识别 | 社会网络 | 空间DID数据处理：Stata | R | Python | 缺失值 | CHIP/ CHNS/CHARLS/CFPS/CGSS等 |干货系列：能源环境 | 效率研究 | 空间计量 | 国际经贸 | 计量软件 | 商科研究 | 机器学习 | SSCI | CSSCI | SSCI查询 | 名家经验计量经济圈组织了一个计量社群，有如下特征：热情互助最多、前沿趋势最多、社科资料最多、社科数据最多、科研牛人最多、海外名校最多。因此，建议积极进取和有强烈研习激情的中青年学者到社群交流探讨，始终坚信优秀是通过感染优秀而互相成就彼此的。