본 논문의 목적은 프로그램 성과 연구에서 결과의 의미 있는 해석을 위해서는 통계적 유의성 이외에 효과강도 값의 활용 필요성을 제안하는 것이다. 이를 위해 최근 2년간(2011-2012년) 한국상담학회와 한국상담심리학회 발행 학술지 20 개권에 게재된 370편의 논문 가운데 프로그램 효과를 살펴본 32편의 논문을 대상으로 결과 제시 방식을 살펴보았다. 대상 논문에서 종속변인과 직결하여 제시한 유의수준은 305개였다. 이 가운데 250(82%)개는 통계적으로 유의했으며, 나머지 55개(18%)는 유의하지 않았다. 효과강도 값을 제시한 논문은 8편이였으며, 이들 가운데 효과크기를 d 값으로 제시한 6편은 .01에서 9.40까지의 효과크기를 나타냈고, R2과 에타제곱(η2)을 제시한 각 논문들의 효과강도는 각각 .96, .72를 나타냈다. 효과강도를 제시하지 않은 24편은 .00에서 .82까지의 효과강도 값을 가지는 것으로 나타났다. 이상의 결과에 기초하여 몇 가지 제언과 함께 통계적 유의성과 효과강도에 기초한 실제적 유의성에 대해서 함께 논의하였다.

The purpose of this study is to suggest the use of measures of association accounted for measures in addition to statistical significance(p value) in order to understand the magnitude of effects in program research. The 32 articles using ANOVA in two refereed journals(Korean Journal of Counseling, Korean Journal of Counseling and Psychotherapy) published in 2011 and 2012 were reviewed to examine the practical use of statistical significance and measure of association. In these articles, the fashion of reporting and interpreting results was also examined. p values given in these articles were 305 in total and 250(82%) of them were statistically significant. In eight articles, effect size(d) were given which range from .01 to 9.40. It was found that 24 articles ranging in the measures of association from .00 to .82. among them still interpreted the results by only the p value. Continued heavy reliance on the p value, the misinterpretation of the p value, and the need of reporting the measures of association in the future studies were discussed.