In our retrospective scientometric study, we examined and compared 3 169 original articles published in Russian journals («Immunology», «Russian Journal of Immunology») and foreign journals («Journal of Immunology», «Clinical and Vaccine Immunology», «Clinical and Diagnostic Laboratory Immunology», «International Immunology») for the periods of 1980–1991, 1992–1999 and 2000–2007. Our analysis of the quality of describing the statistical methods used in Russian immunology publications points to lack of validity of research results in those publications. This is mainly due to lack of application of statistical methods, choice of incompatible statistical techniques, or interpretative ambiguity of obtained outcomes. In particular: 1. 3–4 % of publications lose vindictive power, essentially becoming articles without the use of statistical techniques (95 out of 539 papers); 2. Descriptive statistics were only used in 636 publications, whilst in 40–75 % cases authors used non-interpretative phrases like «mean something else»; 3. Only statements like 874 publications used « p <...», while 208 of those exploited ambiguity of statements; 4. Hence, the share of Russian immunology publications, where authors applied statistical methods, is represented by 56–59 % of the articles, in which authors resorted exclusively to descriptive statistics and statements like « p <...». This frequency is 22–33 times higher than comparable frequency of similar drawbacks in research papers in foreign journals. Furthermore, aforementioned research structure of local publications has remained static and hasn’t changed in past 27 years – from 1980 to 2007.
Проведено ретроспективное наукометрическое исследование 3 169 оригинальных статей в отечественных и зарубежных журналах за периоды 1980–1991, 1992–1999 и 2000–2007 гг. Анализ качества описаний статистических методов в российских публикациях показал, что за счет их отсутствия, несоответствия фактически проведенной статобработке и, в большей мере, смысловой неопределенности уровень доказательности публикаций существенно снижается. Лишаются доказательности 3–4 % публикаций, переходя в категорию статей, не использующих статистическую обработку. Только описательные статистики использовались в 636 публикациях, при этом в 40--75 % случаев применялись неинтерпретируемые выражения. В 874 статьях использовали только выражения типа « р < ...», из них 208 за счет неопределенности описаний. В результате доля тех отечественных иммунологических публикаций, где использовались методы статистического анализа, на 56–59 % состоит из статей, использующих только описательные статистики и выражения типа « p < ...». Это превышает частоту аналогичных недостатков в международных иммунологических журналах в 22–33 раза. Более того, такая структура отечественных работ является постоянной и не менялась с 1980 по 2007 г.
