论文导读 |《Management Science》六年回眸:变革与新生的交响乐

编者按

David Simchi-Levi是MIT的教授,同时他的另一个身份是一本对OR、OM来说极其重要期刊的主编——《Management Science》。今年年底,David即将结束任职,11月初推出了他作为主编对期刊在过去六年的回顾以及对未来趋势的展望,内容包括投稿、结构设置、审查等层面的革新与带来的效果,提供了丰富且难以被行业外的我们所知的Insights。本期推文正是希望更多人能聆听到这部谱写了六年的,变革与新生的交响乐。

  • 原文链接:From the Editor: Reflections on the Last Six Years as Editor-in-Chief of Management Science

  • 作者:David Simchi-Levi

  • 发表日期:2023.11.10

革新与举措

在2018年1月刚上任时,David就公布了一系列大胆且在彼时引起争议的举措,旨在确保该期刊更好地服务和促进整个 INFORMS 社区进行的研究,真正成为一本致力于管理科学的期刊,有能力影响实践,并成为新创意、高影响力论文的顶级渠道。这些变化和举措包括以下内容:

结构调整与重定位

一方面是部门结构的改变:

  • 引入三个新部门——数据科学、医疗保健管理、收入管理和市场分析

  • 将三个部门——决策分析、行为经济学、判断与决策——整合为一个,名为行为经济学和决策分析。

一方面是现有部门的重新定位:

  • 金融部门已扩大其囊括的范围,包括金融技术(FinTech)、机器学习以及加密货币相关技术。

  • 信息系统部门也扩大了其涉猎范围,包括开发结合了方法论进步与重要而新颖的管理应用的预测分析。

  • 组织部门扩展了其覆盖范围,包括计算社会科学方法。

  • 会计部门现在强调跨足会计与管理科学其他重要领域的论文,如风险管理、数据科学、战略、运营、财务、创业、医疗保健和营销的交汇点。

更多元的内容

《Management Science》现在专注于计算机科学、运筹学、社会科学和统计学的健康结合,使期刊真正成为跨学科的平台,能够发表关于管理理论和实践的科学研究。更重要的是,“数据科学”现在已经贯穿于几乎每个《Management Science》部门,既通过招聘合适的部门编辑,又通过每个部门覆盖范围的重新定位(正如上一部分所展示的那样)。

严谨但灵活的投稿新政

  1. 《Management Science》实施了新的数据和代码披露政策,旨在确保在期刊中发表的研究所需的材料的可用性,以复现该研究。与此同时,期刊启动了两个大规模的复现项目,其中之一的成果可在一篇今年发布的论文中找到。 A Replication Study of Operations Management Experiments in Management Science https://pubsonline.informs.org/doi/abs/10.1287/mnsc.2023.4866

  2. 推出快速通道提交流程:这是一个旨在吸引具有高质量、原创性和高影响力研究、并且具有广泛兴趣的短篇论文的提交流程。其目的是在保持《Management Science》的出版标准的同时,迅速传播高质量的工作。David称,这些变化和倡议在期刊和管理科学界产生了显著影响。(具体见下)

让数据说话

David主要从以下几个维度来评估这些新政策为《Management Science》带来的变化:

提交量

2023 年新提交的论文数量(包括常规和快速通道)预计约为 4,100篇,这将是连续第三年提交的论文数量超过 4,000 篇,参见下图。

此外还有两个观察结果:

  1. 就提交量而言,最大的部门包括财务、行为经济和决策分析、运营管理和会计。

  2. 快速通道论文的提交量很大。事实上,在 2018 年引入新的提交渠道时,《Management Science》收到了 244 份快速提交申请。今年,快速通道提交量预计将增加近一倍。同时,其他几本 INFORMS 期刊(Operations Research、Manufacturing & Service Operations Management 和 Marketing Science)最近也引入了类似的提交渠道。

审稿周期

《Management Science》依然保持出色的审稿周期管理。事实上,对于提交至审稿人的常规和快速通道论文,首次决策的中位数时间为85天,而最终决策的中位数时间为112天。特别是,最终决策的时间较之前几年的类似统计数据显著缩短。所有常规论文的平均首次决策时间为70天。数据表明,快速通道确实履行了提供更快审查的承诺,大多数作者在不到31天内收到了初步决策。最后,39%的提交论文在未经审稿人评审的情况下被拒绝。这也是重要的,因为它为作者提供了可以在提交给其他期刊时应用的快速反馈。

录用率

今年《Management Science》在所有投稿(常规和快速通道)中的录用率为13.1%,略高于近年来的录用率,请参阅下表。这一录用率在所有部门中并不一致,例如,创业与创新等一些部门具有较低的录用率,而信息系统、收入管理和市场分析等其他部门则具有较高的录用率。此外,快速通道论文的门槛明显更高,其7.8%的录用率明显低于常规论文的录用率。

外界对杂志发表研究的兴趣

近年来,对《Management Science》发表的论文的兴趣大幅增加。例如,下载论文的数量几乎翻了三倍,从2017年(新编辑委员会成立之前)的576,894次下载增至去年的1,575,914次下载。《Management Science》期刊发表的论文影响着最高层次的决策制定。例如,去年《2022年美国总统经济报告》(ERP 2022)中引用了《Management Science》发表的三篇论文(详见Simchi-Levi 2023)。今年,《2023年美国总统经济报告》(ERP 2023)引用了另外四篇《Management Science》的论文:

  • Brynjolfsson E, Hu Y, and Smith M (2003) Consumer surplus in the digital economy: estimating the value of increased product variety at online booksellers. Management Sci. 49(11):1580–1596.

  • Brynjolfsson E, Smith M (2000) Frictionless commerce? A comparison of internet and conventional retailers. Management Sci. 46(4):563–585.

  • Lambrecht A, Tucker C (2019) Algorithmic bias? An empirical study of apparent gender-based discrimination in the display of STEM career ads. Management Sci. 65(7):2966–2981.

  • Farronato C, Fong J, Fradkin A (2023) Dog eat dog: balancing network effects and differentiation in a digital platform merger. Management Sci., ePub ahead of print, February 24, https://doi.org/10.1287/mnsc.2023.4675.

同时《2022年美国总统经济报告》提到了INFORMS会员开发的供应链弹性概念,包括供应链压力测试、恢复时间和生存时间,并引用了David在这个领域的两篇论文,Simchi-Levi (2020) 和 Simchi-Levi and Simchi-Levi (2020)。或许导致对《Management Science》论文兴趣增加的另一个原因是2018年引入的“特色文章”(FA)倡议。该倡议允许主编在特定问题中选择要突出显示的文章。在担任主编期间,David使用了一系列标准来确定FA,包括广泛吸引力、主题的重要性以及对公共和私人组织实践的影响。INFORMS通过允许FA免费下载一段时间,通常是一个月,从而支持这一举措的传播。

排名和影响因子

《Management Science》一直是该领域中最负盛名的期刊之一。David在2023年7月的博客中指出(Simchi-Levi and Dai 2023),Clarivate公司的影响因子计算正处于转变中,使得今年很难解读关于INFORMS期刊的趋势。事实上,在具有至少两年影响因子历史的12个INFORMS期刊中,有10个经历了下降。平均而言,INFORMS期刊的影响因子下降了近12%。在那篇博客中,David对这一下降进行了详细解释。然而,通过查看2023年的谷歌学术度量标准,仍然可以看到进步的迹象。事实上,与去年相比,《Management Science》的h5指数从109上升到今年的114,而h5中位数从165上升到173。这两个度量标准计算了过去五个完整日历年内发表的论文的引用次数。正如下表所示,与UTD全球商学院科研排名百强榜所包括的其他24个期刊相比,《Management Science》在排名上仍然非常靠前。

稿件积压的变化

期刊面临的一个挑战是控制从接受到发表的时间。在2018年1月新编辑委员会成立时,稿件积压达到了27个月(2017年的积压)。通过与INFORMS的密切合作,稿件积压一直在不断减少,目前文章从投递到发表的时间约为九个月。这一点很重要,因为它影响了作者的满意度和引用次数。

部分变革的详细报告

复现项目

期刊的编辑委员会向管理科学界发起了以下挑战:编辑委员会希望发表一篇论文(可能是一篇快速通道论文),验证《Management Science》发表的研究的可复制性。在经济学领域(Camerer等人,2016)和社会科学领域(Camerer等人,2018)已经实现了这一点,因此现在是为《Management Science》的论文做同样的事情的时候了。

最后,一个由八名在行为运营领域具有丰富经验的学者组成的团队共同合作应对这个可复制性挑战。该团队包括来自五个拥有设立实验室的机构的成员,这使团队能够在多个地点进行每个复制实验。参与的教师包括康奈尔大学的Andrew Davis;南卡罗来纳大学的Blair Flicker;德克萨斯大学达拉斯分校的Kyle Hyndman和Elena Katok;密歇根大学的Samantha Keppler和Stephen Leider;以及威斯康星大学的Xiaoyang Long和Jordan Tong。该团队从社区中收集了调查结果,要求参与者为他们想要看到复制的论文投票。这些论文涉及以下五个领域:库存管理、供应链合同、排队、预测和采购。

该团队从每个类别中选择了得票最多的两篇论文,总共10篇。每篇论文在两个不同的地点进行了复制。描述该项目的论文(A Replication Study of Operations Management Experiments in Management Science,已被《Management Science》接受,并在该期刊的2023年9月期中发表。两位熟悉社会科学的行为经济学家,Colin F. Camerer(加州理工学院)和Yan Chen(密歇根大学),被邀请就该论文对社区总体以及行为研究的重要性和影响发表了看法,可以在该期刊的博客页面上找到他们的观点。

数据和代码披露

在2019年,《Management Science》引入了数据和代码披露政策(https://pubsonline.informs.org/page/mnsc/datapolicy),旨在确保可以获取到复制该期刊发表的研究所需的材料。早在2020年初,编辑委员会任命了一位数据编辑,其责任是确保被接受的论文符合《数据和代码披露政策》,并验证期刊发表结果的可复制性。期刊的代码和数据编辑Ben Greiner及其副编辑团队(Miloˇ s Fiˇ sar、Christoph Huber和Ali Ozkes)最近完成了对超过730个复制包的审查。

审查论文的统计数据:

  • 被审查的复制包数量持续增加,仅在过去12个月内就达到了约350个。

  • 2022年,《Management Science》收到了4200篇投稿,接受了430篇论文。

  • 被审查的论文来自所有《Management Science》部门。

  • 约60%的被审查文章基于实证数据,约18%报告实验室、在线、现场实验或调查,22%是理论/模拟论文(通常有代码但无数据)。

  • 对于使用数据集的论文,68%使用Stata,20%使用R。对于仅有代码的论文,Matlab和Python是最受欢迎的软件环境,还有R,详见下图。

  • 然而,在所有复制包中,审稿人遇到了各种统计和计算工具,例如C/C++、C#、Excel、Fortran、Gams、Gauss、Gurobi、Java、Julia、Jupyter、Lingo、Maple、Mathematica、Perl、SPSS、SQL和Stan。

  • 在所有包含数据的论文中,52%的最终复制包包含了进行复制所需的所有数据,而其他则依赖专有数据。在具有专有数据的论文中,47%的数据集是公开可访问的(例如,通过WRDS或Compustat等订阅服务),而33%的论文提供至少样本或合成数据。

  • 代码和数据审查团队能够检查64%的所有复制包中的代码是否无错误。然而,他们不检查方法的合理性或实际结果,这一问题留给了学术界。

审查过程的统计数据:

  • 在过去一年中,提交的复制材料中,可以原样接受而无需进一步修订的百分比从28%增加到43%。

  • 大多数复制包需要一个修订轮次,而在去年约有10%的复制包在获得批准之前需要两轮或更多轮次(而前两年的比例为19%)。

  • 大多数情况下,代码和数据编辑需要更好的文档(变量字典、数据集构建说明、代码文档等)。有时会缺失代码的部分。代码错误并不罕见;约三分之一提交并测试的代码存在问题,详见下图。

  • 在《Management Science》的代码和数据审查过程中,从提交论文到获批,通常需要约30天(中位数16天)。一篇论文在与代码和数据编辑及其团队共度约14天(中位数8天),以及与作者一起修改其复制材料的16天(中位数3天)。在前两年中,处理时间约为24天;然而,由于工作量随时间显著增加,过去一年内增加到36天(与代码和数据编辑一起增加6天,与作者一起增加6天,较前两年增加)。

  • 在审查的论文中,有5%的作者在修订其复制材料时发现需要对论文进行更改的问题。然而,所有这些问题都是次要问题(如四舍五入误差、打字错误等),并且这些更改已由部门编辑批准。这一比例较前一年的6%有轻微改善。

总体而言,《Management Science》的代码和数据审查工作积极而有价值,为《Management Science》社区提供了重要的帮助。重要的是,随着社区逐渐认识到提供具有数据、代码和文档的复制包的重要性,改进是很明显的。实际上,在过去一年左右,作者的反馈是他们现在开始在研究项目开始和整个研究过程中注重准备他们的代码和数据,而不仅仅是在最后。这是一种非常重要的心态变化,因为这能确保在《Management Science》上发表的结果具有广泛的可信度。

新旧对比

David还量化在新的数据和代码披露政策生效之前和之后提交的《Management Science》文章中发表的结果的可复制性,该项目正在有序进行。最初,主编向《Management Science》的审稿人发送电子邮件征求志愿者;有927名研究人员注册并提供了他们的专业领域、软件技能和数据获取方面的信息。自2023年2月初以来,675名志愿审稿人已经对《Management Science》中发表的459篇文章提供了753份可复制性报告。其中,40篇文章的复制包是在2019年政策实施之前被接受的,而419篇文章则是在政策实施后提交并被接受的。团队现在正在撰写一篇描述整个过程、分析和结果的手稿。但已经有一些初步的观察。在实施2019年《代码和数据政策》之后提交并被接受的具有数据/代码的论文中,超过95%的文章在计算上可以被完全或在很大程度上复制。而在2019年政策实施之前被接受的论文中情况并非如此。在那种情况下,作者并不需要提交复制包,而那些这样做的人(40篇论文)是自愿的。尽管这是一个高度偏见的样本,审查团队只能复制出2019年政策实施前的论文的55%。正如David的团队在介绍2019年政策时指出的,“科学方法的一个基本原则是复制:研究结果的有效性要求其他研究人员能够复制它。”上面提供的统计数据强调了新政策确保研究结果可复制性的重要性。

新兴趋势

最后,David还谈及,从担任主编的角度来看,他观察到《Management Science》近年来提交的论文性质发生了巨变,涌现出以下四个趋势:

  • 实际上相关和理论上优雅的研究 数据表明,《Management Science》发表的论文涵盖了各个研究领域,并采用了多样化的方法论。David特别自豪于《Management Science》发表的创新论文,其中许多既具有实际相关性又理论上具备优雅性。其中一个美好的例子是题为“Design of lotteries and wait-lists for affordable housing allocation” (Arnosti and Shi 2020)的论文。该论文的动机是研究在向申请人分配经济适用房时采用彩票或等候名单的方式。作者指出,一些广泛采用的分配系统未能使申请人与合适的住房匹配,随后提出了几种能够实现更好匹配的替代方案。David请教了斯坦福大学的Paul Milgrom教授和西北大学的Martin A. Lariviere教授,让他们就这项研究的重要性和贡献发表看法。您可以在该期刊的博客页面上阅读他们的观点。

  • 数据驱动的研究 在过去的十年里,期刊发表的论文中有相当一部分呈现了以实验室数据、语法数据或真实世界数据为基础的数据驱动研究。许多这类论文运用真实世界数据来制定问题并找到研究机会。这些论文使学术界能够发展出解释、预测和改变行为的新工程和科学方法(Simchi-Levi 2014)。与此同时,数据驱动的研究对学术界提出了重大挑战,正如行为科学领域目前面临的挑战所示,该领域的研究可信度受到威胁,详见Lewis-Kraus(2023)。事实上,在当前行为科学危机出现三年前的2019年4月,《Management Science》设立了一项新的数据和代码披露政策,其简单目标是消除或预防编辑委员会担忧的复制危机。期刊方希望这一政策能够增加作者对在整个研究项目期间记录代码和数据的必要性的认识,而不仅仅是在准备提交论文发表时,也希望该政策能够成为其他INFORMS期刊的蓝图,以确保领域内集体的声誉和研究的可信度。

  • 跨学科研究 正如Hopp和Simchi-Levi(2021)所指出的,《Management Science》传统上更多地是多学科而非跨学科。然而,自从当前编辑委员会利用专题问题作为促进跨学科研究的工具以来,跨学科研究现在已经逐渐增多。事实上,在过去的六年中,该期刊专注于五个特刊,每个特刊都涉及多个《Management Science》部门。例如,本期刊上关于企业与气候变化的特刊涵盖了广泛的管理科学学科。同样,关于人与算法关系的进行中特刊涉及到该期刊的许多部门,并包括代表行为运营、数据科学、金融、信息系统、市场营销、市场设计和运营管理的联合编辑。

  • 快速通道论文 正如Simchi-Levi(2018)和Hopp以及Simchi-Levi(2021)所指出的,这一投稿流程旨在吸引具有高质量、原创性和广泛兴趣的短篇论文。2018年,《Management Science》杂志收到了240篇快速通道的投稿,而今年预计将接收约400篇论文,占所有投稿的10%。这一投稿流程的一个重要目标是鼓励各学科编辑接受那些声称具有重大、颠覆性贡献的高风险、高回报的论文(Hopp和Simchi-Levi 2021)。为了在这一投稿流程中实现这一目标,编辑委员会限制了审稿人的角色,仅限于检查技术的正确性和清晰度,从而将主观判断交由学科编辑处理,使其能够承担适当的风险。这一投稿流程的第二个重要目标是加速审阅和发表具有即时公共影响的论文,特别是与医疗保健相关的出版物。其中一个例子是Birge等人(2022)提出的论文“控制流行病传播:通过有针对性的封锁减少经济损失”,该论文提出了一种空间流行病传播模型,用于研究COVID-19大流行,并提出政策响应以遏制流行病传播。该论文在首次提交后的10个月内被接受,并在被接受之前就受到了包括《纽约时报》和美联社在内的媒体的广泛关注。

总结

综合而言,这些趋势表明当前的研究已经转向解决更相关、跨学科的问题,利用丰富的数据集,并应用各种技术,从计算机科学和统计学到社会科学和运筹学等。这也展示了编辑委员会愿意冒险接受(潜在的)高回报的论文,这些论文对整个管理科学社区都具有吸引力。这些趋势的性质以及《Management Science》作为领域内主导期刊的崛起,离不开本文所描述的重大变革和大胆举措。为了拥抱管理研究的这一复兴,并维护和提升《Management Science》发表的工作的可信度和声誉,David希望并相信在新的编辑委员会领导下,该杂志将继续(i)为整个管理科学社区提供并推动最佳研究,并(ii)加强社区确保研究的可重复性以及数据的透明性和可用性的大胆努力。

  • 23
    点赞
  • 14
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值