Надежность рекомендаций низкая, то же самое можно сказать н о валндности. В течение 1980-х годов проводились исследования, показавшие, что прогностическая валндность рекомендации является не вполне достаточной. Оказалось, что средний коэффициент валндности составляет около 0,14. Достаточно редко выявлялась валндность выше 0,2. Различные группы исследователей пришли к выводу, что «из-за низкой надежности, ошибок, вызванных снисходительностью, и частыми отказами дать рекомендации со стороны предыдущих работодателей только малая доля от общего числа кандидатов сможет получить пригодные для интерпретации рекомендации, за исключением тех случаев, когда организуются особые дорогостоящие процедуры». По мнению же других исследователей, валндность и надежность рекомендаций можно повысить за счет обеспечения структурированного формата, в рамках которого запрашивается информация, соответствующая критериальному поведению. Так, например, Джонс и Харрисои (Jones and Harrison, 1982), проводившие исследование на базе кандидатов, поступающих в Военно-морской колледж г. Дартмут {Dartmouth Naval College), попросили директоров школ дать рейтинг кандидатов но семи аспектам. Два из этих аспектов (занятия спортом или внеклассная деятельность, а также прилежание в учебе) коррелировали соответственно с тем, как Военно-морской колледж оценивал лидерские данные и общее поведение принятых кандидатов, и с их оценкой па экзамене. Кроме того, объединенный рейтинг рекомендации но всем семи аспектам достаточно хорошо позволял прогнозировать «итоговый отборочный показатель» кандидатов.
Уильяме н Доб-сон (Williams and Dobson, 1987) провели испытания нового метода обеспечения соответствия рекомендаций критериальному поведению. Рекомендателен с целью обеспечить большее понимание требований к компетентности кандидатов пригласили предварительно ознакомиться с процессом отбора офицеров в армии. Между поданными затем отчетами рекомендателей и результатами кандидатов при прохождении офицерской подготовки была выявлена корреляция 0,26. В большинстве случаев пригласить потенциальных рекомендателей, например директоров школ, ознакомиться с процессом отбора кадров в какой-либо организации было бы дорого и непрактично для обеих участвующих в этом сторон. Тем не менее организации вполне в состоянии при обращении к рекомендателю предоставить ему конкретную информацию, касающуюся должности. Таким способом можно обеспечить по меньшей мере то, что is полученных затем рекомендациях основное внимание будет сосредоточено на конкретных характеристиках, необходимых для определенной должности и важных для организации-работодателя.