Шум. Несовершенство человеческих суждений - Оливье Сибони

шумом. Если люди на разных уровнях организации систематически отмечают разные аспекты, их суждение в отношении одного и того же лица будет системно отличаться, о чем и скажут присваиваемые ими рейтинги.

353 различным исследованиям…: Scullen, Mount, and Goff, “Latent Structure”; C. Viswesvaran, D. S. Ones, and F. L. Schmidt, “Comparative Analysis of the Reliability of Job Performance Ratings”, Journal of Applied Psychology 81 (1996): 557–574. G. J. Greguras and C. Robie, “A New Look at Within-Source Interrater Reliability of 360-Degree Feedback Ratings”, Journal of Applied Psychology 83 (1998): 960–968; G. J. Greguras, C. Robie, D. J. Schleicher, and M. A. Goff, “A Field Study of the Effects of Rating Purpose on the Quality of Multisource Ratings”, Personnel Psychology 56 (2003): 1–21; C. Viswesvaran, F. L. Schmidt, and D. S. Ones, “Is There a General Factor in Ratings of Job Performance? A Meta-Analytic Framework for Disentangling Substantive and Error Influences”, Journal of Applied Psychology 90 (2005): 108–131; and B. Hoffman, C. E. Lance, B. Bynum, and W. A. Gentry, “Rater Source Effects Are Alive and Well After All”, Personnel Psychology 63 (2010): 119–151.

354 Связь между реальной эффективностью профессиональной деятельности…: K. R. Murphy, “Explaining the Weak Relationship Between Job Performance and Ratings of Job Performance”, Industrial and Organizational Psychology 1 (2008): 148–160, especially 151.

355 фактической эффективности аттестуемого работника…: Рассказывая об источниках шума, мы не уделили внимания возможности шумового эффекта «конкретного случая», которому дает начало систематическое искажение оценки определенного работника или категории работников. Ни одно из прочитанных нами исследований в отношении вариативности оценки эффективности не задавалось целью сопоставить оценку с «истинным» показателем, полученным от стороннего оценщика.

356 для поддержания рабочего тонуса сотрудников…: E. D. Pulakos and R. S. O’Leary, “Why Is Performance Management Broken?”, Industrial and Organizational Psychology 4 (2011): 146–164; M. M. Harris, “Rater Motivation in the Performance Appraisal Context: A Theoretical Framework”, Journal of Management 20 (1994): 737–756; and K. R. Murphy and J. N. Cleveland, Understanding Performance Appraisal: Social, Organizational, and Goal-Based Perspectives (Thousand Oaks, CA: Sage, 1995).

357 отзывов сугубо в целях саморазвития…: Greguras et al., “Field Study”.

358 прогнозирующим объективно измеряемую…: P. W. Atkins and R. E. Wood, “Self Versus Others’ Ratings as Predictors of Assessment Center Ratings: Validation Evidence for 360-Degree Feedback Programs”, Personnel Psychology (2002).

359 анкет, перегруженных многочисленными вопросами…: Atkins and Wood, “Self Versus Others’ Ratings”.

360 98 %…: Olson and Davis, цитата приведена у Peter G. Dominick, “Forced Ranking: Pros, Cons and Practices”, а также в Performance Management: Putting Research into Action, ed. James W. Smither and Manuel London (San Francisco: Jossey-Bass, 2009), 411–443.

361 принудительное ранжирование…: Dominick, “Forced Ranking”.

362 прослеживается в оценке деловых качеств работников…: Barry R. Nathan and Ralph A. Alexander, “A Comparison of Criteria for Test Validation: A Meta-Analytic Investigation”, Personnel Psychology 41, no. 3 (1988): 517–535.

363 Рис. 17…: Адаптировано из Richard D. Goffin and James M. Olson, “Is It All Relative? Comparative Judgments and the Possible Improvement of Self-Ratings and Ratings of Others”, Perspectives on Psychological Science 6, no. 1 (2011): 48–60.

364 Deliotte…: M. Buckingham and A. Goodall, “Reinventing Performance Management”, Harvard Business Review, April 1, 2015, 1–16, doi: ISSN: 0017–8012.

365 В ходе одного исследования…: Corporate Leadership Council, процитировано у S. Adler et al., “Getting Rid of Performance Ratings: Genius or Folly? A Debate”, Industrial and Organizational Psychology 9 (2016): 219–252.

366 «Какие бы меры…»: Pulakos, Mueller-Hanson, and Arad, “Evolution of Performance Management”, 250.

367 революции в процессе управления эффективностью…: A. Tavis and P. Cappelli, “The Performance Management Revolution”, Harvard Business Review, October 2016, 1–17.

368 Руководствуясь имеющимся опытом…: Frank J. Landy and James L. Farr, “Performance Rating”, Psychological Bulletin 87, no. 1 (1980): 72–107.

369 набивая руку на присвоении оценок…: D. J. Woehr and A. I. Huffcutt, “Rater Training for Performance Appraisal: A Quantitative Review”, Journal of Occupational and Organizational Psychology 67 (1994): 189–205; S. G. Roch, D. J. Woehr, V. Mishra, and U. Kieszczynska, “Rater Training Revisited: An Updated Meta-Analytic Review of Frame-of-Reference Training”, Journal of Occupational and Organizational Psychology 85 (2012): 370–395; и M. H. Tsai, S. Wee, and B. Koh, “Restructured Frame-of-Reference Training Improves Rating Accuracy”, Journal of Organizational Behavior (2019): 1–18, doi:10.1002/job.2368.

370 Рис. 18…: Левая секция адаптирована из Richard Goffin and James M. Olson, “Is It All Relative? Comparative Judgments and the Possible Improvement of Self-Ratings and Ratings of Others”, Perspectives on Psychological Science 6, no. 1 (2011): 48–60.

371 большинство исследований…: Roch et al., “Rater Training Revisited”.

372 «звезда»…: Ernest O’Boyle and Herman Aguinis, “The Best and the Rest: Revisiting the Norm of Normality of Individual Performance”, Personnel Psychology 65, no. 1 (2012): 79–119; и Herman Aguinis and Ernest O’Boyle, “Star Performers in Twenty-First Century Organizations”, Personnel Psychology 67, no. 2 (2014): 313–350.

Глава 24

373 большая редкость…: A. I. Huffcutt and S. S. Culbertson, “Interviews”, in S. Zedeck, ed., APA Handbook of Industrial and Organizational Psychology (Washington, DC: American Psychological Association, 2010), 185–203.

374 до некоторой степени полагается на интуитивное суждение…: N. R. Kuncel, D. M. Klieger, and D. S. Ones, “In Hiring, Algorithms Beat Instinct”, Harvard Business Review 92, no. 5 (2014): 32.

375 проблема первостепенной важности…: R. E. Ployhart, N. Schmitt, and N. T. Tippins, “Solving the Supreme Problem: 100 Years of Selection and Recruitment at the Journal of Applied Psychology”, Journal of Applied Psychology 102 (2017): 291–304.

376 Некоторые исследования свидетельствуют…: M. McDaniel, D. Whetzel, F. L. Schmidt, and S. Maurer, “Meta Analysis of the Validity of Employment Interviews”, Journal of Applied Psychology 79 (1994): 599–616; A. Huffcutt and W. Arthur, “Hunter and Hunter (1984) Revisited: Interview Validity for Entry-Level Jobs”, Journal of Applied Psychology 79 (1994): 2; F. L. Schmidt and J. E. Hunter, “The Validity and Utility of Selection Methods in Personnel Psychology: Practical and Theoretical Implications of 85 Years of Research Findings”, Psychology Bulletin 124 (1998): 262–274; and F. L. Schmidt and R. D. Zimmerman, “A Counterintuitive Hypothesis About Employment Interview Validity and Some Supporting Evidence”, Journal of Applied Psychology 89 (2004): 553–561. Следует отметить, что достоверность повышается, если рассматривать определенные подразделы исследования, особенно если в нем использовалась специально продуманная рейтинговая система.

377