Statistical Errors of Articles Published in the Journal of Oriental Rehabilitation Medicine(I)

한방재활의학과학회지의 통계적 오류에 관한 고찰(I)

  • Park, Tae-Yong (Dept. of Hub for Oriental Medicine, Okcheon-Gun Health Center) ;
  • Heo, Tae-Young (Dept. of Data Information, Korea Maritime University) ;
  • Shin, Byung-Cheul (Dept. of Oriental Rehabilitation Medicine, Pu-San National University)
  • 박태용 (충북 옥천군보건소 한방허브실) ;
  • 허태영 (한국해양대학교 데이터정보학과) ;
  • 신병철 (부산대학교 한의학전문대학원 임상의학부 한방재활의학과)
  • Received : 2010.09.19
  • Accepted : 2010.10.03
  • Published : 2010.10.30

Abstract

Objectives : The purpose of this study was to assess the statistical methods errors used in the journal of Oriental Rehabilitation Medicine(JORM) and to identify the types of errors in statistical analysis. Methods : We reviewed quantitative articles that were published in the JORM from January 2005 through October 2009. Those were not used by statistical analysis such as literature studies, case study, review articles were not included in this analysis. A total of 296 articles was reviewed. We evaluated the adequacy and the validity of the statistical techniques with our checklist established be modified Lee's checklist, and three statistical evaluators assessed together to minimize bias. Results : Of the 222 articles, 213 were used in inferential and descriptive statistics. Of those 80% of articles adopting descriptive and inferential statistics were detected having statistical errors. One articles used 1.7 statistical method unit generally. Most frequently employed statistics were student t-test, one way ANOVA. pearson correlation analysis, Mann-whitney U test, paired t-test, and chi-square test in their order. However, most frequent statistics having errors were similar in order. The most common statistic errors were as follow: 1. absence of normality test, 2. misuse between paired test and unpaired test, 3. wrong choice of repeated measures analysis without consideration of time variables, 4, increase of Type I error by using inappropriate multiple test, 5. inappropriate application of discrete or categorical data instead of continuous data in correlation analysis, 6. poor consideration of basic consumption in chi-square test, 7. confusion between frequency comparison and average comparison, 8. mentioning the statistical technique without using it. Conclusions : We found various mistake or misuses in the applications of statistical methodologies in the articles published in the JORM. Careful consideration of statistical use and review from the specialist of statistics are warranted for improving the quality of JORM.

Keywords

References

  1. 이준영. 한눈에 알 수 있는 의학통계학. 제 2판. 서울:E PUBLIC. 2007:3-5, 14-21.
  2. Dawson-Saunders B, Trapp RG, ed. Basic and clinical biostatistics. 2nd ed. Norwalk: Appleton & Lange. 1994:20-248.
  3. White SJ. Statistical errors in papers in the British journal of psychiatry. Br J Psychiatry. 1979:135;336-42. https://doi.org/10.1192/bjp.135.4.336
  4. Gore SM, Jones IG, Rytter EC. Misuse of statistical method: critical assessment of articles in BMJ from January to march 1976. British Medical Journal. 1977;1(6053);85-7. https://doi.org/10.1136/bmj.1.6053.85
  5. 신명희, 손영익, 조양선, 김효열, 하병석, 김선일. 이비인후과 영역에서의 통계적 기법의 활용에 대한 고찰. 대한이비인후과학회지. 1999;42:1364-9.
  6. 김용연, 이은일, 정해륜. 국내 안과학 논문에 사용된 연구방법 및 통계처리 기법. 대한안과학회지. 1994;35(4):460-73.
  7. Lee HJ. Medical research and the use of statistical methods. Seoul:Korea Medical Book Publisher. 2000.
  8. 고흥, 곽일용, 김광우, 함병문, 최익현. 대한마취과학회지에 게재된 논문의 통계적 분석에 관한 고찰(1981년-1990년). 대한마취과학회지. 1993;26(1):22-7.
  9. 황건, 이훈재, 김유진, 이세일. 대한성형외과학회지 게재논문의 통계적 오류현황. 대한성형외과학회지. 2001;28(3):302-9.
  10. 고원중, 이승준, 강민종, 이훈재. 결핵 및 호흡기질환 게재논문의 통계적 기법 활용에 대한 평가. 결핵 및 호흡기질환. 2004;57(2):168-79.
  11. 김동기, 한무영, 한혜리. 의학통계학적 방법의 사용과 오류. 신경정신의학회지. 2004;43(2):141-7.
  12. 이승덕. 대한침구학회지 논문의 통계적 오류에 관한 연구. 대한침구학회지. 2004;21(1):176-88.
  13. 고미미, 강병갑, 강경원, 박세욱, 김보영, 김정철, 최선미. 최근 3년간 발표된 동의생리병리학회지 논문의 방법론 및 통계처리 기법에 관한 보고. 동의생리병리학회지. 2008;22(1):189-93.
  14. 강경원, 김노수, 유종향, 강병갑, 고미미, 최선미. 한국한의학연구원 논문의 통계적 오류에 관한 연구. 한국한의학연구원 논문집. 2008;14(2):87-91.
  15. 장선일, 윤용갑, 최경호. 한의학 연구에 활용된 통계분석 방법에 대한 고찰. 대한한의학방제학회지. 2009;17(1):75-83.
  16. 유봉자, 지제근. 의학논문작성과 문헌검색. 서울:서울대학교 출판부. 1992.
  17. Bailar JC, Frederick M. Guidelines for statistical reporting in articles for medical journals. Ann Intern Med. 1988;108(2):266-73. https://doi.org/10.7326/0003-4819-108-2-266
  18. Lee HK, Huh BY, Ahn YO. An assessment of methodological and statistical validity of medical articles published in korea, from 1980 to 1989. Family physician. 1991;12:46.
  19. 최종후, 이재창. 학술논문과 통계적 기법-국내 과학학술지에 나타난 통계적 기법 활용의 타당성에 관한 연구. 서울:자유아카데미. 1996.
  20. 유태영, 진영호, 정태오, 이재백. 대한응급의학회지에 게재된 논문의 통계기법에 관한 고찰. 대한응급의학회지. 2003;14(5):475-80.
  21. Lee HJ, Kim DH. Research metholodology topics in statistics. Seoul: Korea Medical Book Publisher. 2002.
  22. Publication Committee of Korean Academy of Family Medicine. Statistics for family medicine. Seoul:J Korean Acad Fam Med. 2001.
  23. 한림대학교 의과대학. 의학학술지 게재논문의 통계적 오류와 개선방안. 대한두경부외과연구회 기초의학 심포지움. 2003.
  24. 송현, 박계현, 김웅한, 전태국. 대한흉부외과학회지에 게재된 통계적 분석에 관한 고찰. 대한흉부외과학회지. 1994;27:732-7.
  25. 박지용, 설재욱, 김선종, 최진봉, 신미숙. 양혈 장근건보탕과 녹용약침이 척수손상 유발 흰쥐의 운동기능 회복 및 신경재생에 미치는 영향. 한방재활의학과학회지. 2009;19(2):27-49.
  26. 정문재, 이정한, 염승룡, 이수경, 송용선, 김기병, 권영달. 오약순기산 및 중성어혈 약침이 흰쥐 좌골신경 압좌 손상 후 통증 감소와 신경재생에 미치는 영향. 한방재활의학과학회지. 2009;19(2):51-72.
  27. 이병희, 김성렬, 이종수. CORE 안정성 훈련이 뇌졸중 환자의 자세조절, 균형 및 상지기능에 미치는 효과. 한방재활의학과학회지. 2009;19(3):69-80.