فهرست مطالب

مطالعات اندازه گیری و ارزشیابی آموزشی - پیاپی 16 (زمستان 1395)

فصلنامه مطالعات اندازه گیری و ارزشیابی آموزشی
پیاپی 16 (زمستان 1395)

  • تاریخ انتشار: 1395/12/03
  • تعداد عناوین: 7
|
  • مجتبی بیرامی*، حمیدرضا حسن آبادی، جواد کاووسیان صفحات 7-42
    هدف پژوهش حاضر شناسایی شیوه ها و موانع ارائه بازخورد معلمان به دانش آموزان در برنامه ارزشیابی توصیفی بود. بدین منظور، 351 نفر از معلمان مقطع ابتدایی استان البرز در سال تحصیلی 93-92 به روش نمونه گیری تصادفی طبقه ای متناسب با حجم (نسبتی) انتخاب شدند. ابزار پژوهش، پرسشنامه محقق ساخته 42 گویه ای بود که روایی محتوایی آن از سوی استادان باتجربه و بر اساس مدل های نظری تایید شد. ضریب اعتبار پرسشنامه نیز با آلفای کرونباخ 80/0 برآورد شد. نتایج پژوهش نشان داد که معلمان در برنامه ارزشیابی توصیفی از شیوه های ناکارآمدی در ارائه بازخورد به دانش آموزان استفاده می کنند. برخی از مهم ترین شیوه های نادرست شناسایی شده در ارائه بازخورد عبارت اند از: رتبه بندی کردن دانش آموزان و بیان رتبه های آنها در جمع کلاسی، ارائه بازخوردهای نامناسب از لحاظ ساختار و محتوا، ارائه بازخوردهای رتبه گرا به جای بازخوردهای فرایندگرا و ارائه نکردن بازخوردهای انگیزشی و راهبردی مناسب در مقاطع پایین. در ارائه چنین بازخوردهایی عوامل و موانعی تاثیرگذار بوده است که در این بین می توان به ناکارآمد بودن دوره های آموزشی برگزار شده، تراکم بالای دانش آموزان، پایین بودن سطح دانش معلمان در مورد بازخورد و در نهایت نگرش مثبت عمده معلمان نسبت به نظام ارزشیابی سنتی اشاره کرد. با توجه به چالش های موجود راهکارهایی برای بهبود ارائه شده است.
    کلیدواژگان: ارزشیابی توصیفی، بازخورد، بازخورد توصیفی، معلمان
  • حمدالله حبیبی* صفحات 43-66
    هدف اصلی این تحقیق آسیب شناسی برگزاری آزمون های الکترونیکی دانشگاه پیام نور است که به روش تحقیق توصیفی-پیمایشی انجام شده است. جامعه آماری این تحقیق، همه کارکنان و دانشجویان دانشگاه پیام نور در سال 1393 بوده است. از میان جامعه آماری مذکور به روش خوشه ایو هدفمند 340 نفر از دانشجویان و 120 نفر از کارکنان مرتبط با برگزاری آزمون های الکترونیکی انتخاب شدند. ابزار گرداوری داده ها، دو پرسشنامه محقق ساخته شامل گویه هایی در مورد جنبه های مختلف آزمون الکترونیکی بود. داده ها با نرم افزار اس پی اس اس و با اعمال روش های آماری تی تک گروهی و فریدمن، تحلیل شدند. نتایج نشان داد که آسیب های اجرای آزمون الکترونیکی از دیدگاه دانشجویان به ترتیب شامل؛ آموزش و راهنمایی دانشجویان، نگرش دانشجویان، محتوای آزمون، پاسخگویی مسئولان برگزاری، بازخورد سریع، دقیق و مفید، فضای فیزیکی اجرای آزمون، مسائل فنی سخت افزاری و نرم افزاری است. همچنین از دیدگاه کارکنان، آسیب ها به ترتیب شامل؛ فضای فیزیکی اجرای آزمون، سواد دیجیتالی دانشجویان، نگرش کارکنان، هزینه های اجرا، هماهنگی و برنامه ریزی در اجرا، مسائل حقوقی، انگیزش کارکنان، مسائل فنی آزمون، بازخورد، آشنایی کارکنان با آزمون، نظارت بر اجرا و مسائل امنیتی بود.
    کلیدواژگان: آزمون، آزمون الکترونیکی، ارزیابی، دانشگاه پیام نور، آسیب شناسی، یادگیری الکترونیکی
  • حسن قلاوندی*، فرشید اشرفی سلیم کندی، کیوان آقازاده صفحات 67-88
    هدف از اجرای پژوهش حاضر، ارزیابی کیفیت خدمات آموزشی دانشگاه ارومیه بر اساس مدل هدپرف از دیدگاه دانشجویان تحصیلات تکمیلی است. این پژوهش از لحاظ هدف کاربردی و از حیث گردآوری داده ها توصیفی - پیمایشی است. جامعه آماری، دانشجویان تحصیلات تکمیلی دانشگاه ارومیه، شامل 2454 نفر بود. حجم نمونه با روش تصادفی طبقه ای نسبتی و با استفاده از جدول مورگان به تعداد 332 نفرتعیین شد. ابزار پژوهش، پرسشنامه کیفیت خدمات هدپرف بوده و روایی آن با روش اعتبار محتوا تایید شده است. پایایی پرسشنامه با استفاده از ضریب آلفای کرونباخ 89/0 محاسبه شد. نتایج مرتبط با فرضیه های پژوهش گویای این بودند که در تمامی ابعاد کیفیت خدمات آموزشی شکاف منفی وجود دارد. بین وضع موجود و مطلوب از دیدگاه دانشجویان تفاوت معنی داری وجود دارد و در اولویت بندی ابعاد کیفیت خدمات آموزشی از نظر دانشجویان، بعد عوامل تحصیلی دارای بالاترین و بعد عوامل غیر تحصیلی دارای پایین ترین درجه اهمیت بودند. بر اساس نتایج به دست آمده پیشنهاد می شود از نظرات سازنده دانشجویان در مراحل مختلف برنامه ریزی، طراحی، ارائه و ارزیابی خدمات آموزشی بیشتر استفاده شود.
    کلیدواژگان: ارزشیابی، کیفیت خدمات آموزشی، مدل هدپرف، رضایت مشتری، دانشگاه ارومیه
  • افضل اکبری بلوطبنگان*، سیدسعید واعظفر، فرحناز کیان ارثی صفحات 89-116
    هدف از پژوهش حاضر رواسازی مقیاس تعاملات همسالان در دانش آموزان شهر سمنان بود. بدین منظور 600 دانش آموز به روش نمونه گیری تصادفی خوشه ایانتخاب شدند و به مقیاس تعاملات همسالان و پرسشنامه انگیزش تحصیلی هارتر پاسخ دادند. تحلیل عاملی اکتشافی و تاییدی، همبستگی سوال- نمره کل و تحلیل اعتبار برای بررسی ویژگی های روان سنجی مقیاس اجرا شد. همچنین از مدل پاسخ مدرج سیم جیما برای برازندگی داده ها و تحلیل استفاده شد. تحلیل های آماری با نرم افزارهای SPSSV22، LISRELV8.80و Multilog انجام شد. نتایج تحلیل عاملی نشان داد این مقیاس از دو عامل اشباع شده و از شاخص های برازش مناسبی برخوردار است. تعاملات همسالان با انگیزه تحصیلی (196/-)، پیشرفت تحصیلی (206/-)، غیبت از مدرسه (121/0) و نمره انضباط (231/-) رابطه معنی داری داشت (01/0p≤). اعتبار مقیاس تعاملات همسالان با استفاده از ضریب آلفای کرونباخ برای کل مقیاس 85/0، قربانی 78/0 و برای خرده مقیاس قلدری 79/0 به دست آمد که همگی رضایت بخش بود. داده های پاسخ سوال ها با مدل سیم جیما برازندگی مناسبی داشت و تابع آگاهی آزمون در دامنه 8/0- تا 1/2+ پیوستار ویژگی بود. یافته های پژوهش بیانگر این است که نسخه فارسی مقیاس تعاملات همسالان در جامعه دانش آموزان مدرسه های ابتدایی از ویژگی های روان سنجی قابل قبولی برخوردار است و می توان از آن به عنوان ابزاری معتبر در پژوهش های روان شناختی استفاده کرد.
    کلیدواژگان: مقیاس تعاملات همسالان، قلدری، قربانی، رواسازی
  • محمد خادمی کله لو*، محبوبه عارفی، غلامرضا شمس مورکانی صفحات 117-142
    پژوهش حاضر باهدف ارزیابی عملکرد دانشگاه آزاد اسلامی واحد اقلید و به روش توصیفی (پیمایشی) انجام شد. جامعه آماری پژوهش، همه اعضای هیئت علمی و کارکنان دانشگاه بودند که با روش تصادفی طبقه ای و بر اساس جدول مورگان 27 نفر از اعضای هیئت علمی و 43 نفر از کارکنان به عنوان نمونه انتخاب شدند. ابزار اندازه گیری، دو پرسشنامه محقق ساخته 64 سوالی ویژه اعضای هیئت علمی و کارکنان بود که بر اساس مدل EFQM نسخه آموزش عالی طراحی شد. روایی پرسشنامه از سوی صاحب نظران تایید و پایایی هر دو پرسشنامه با استفاده از ضریب آلفای کرونباخ به ترتیب 97/. و 98/. برآورد شد. داده های به دست آمده با استفاده از آمار توصیفی (فراوانی، درصد و میانگین)، آمار استنباطی (t تک گروهی، آزمون فریدمن و t گروه های مستقل) و منطق امتیازدهی EFQM تحلیل شد. یافته ها نشان داد که: 1. بین میزان کاربست معیارهای مدل تعالی در این دانشگاه تفاوت معنی داری وجود دارد؛ 2. تفاوت بین دیدگاه اعضای هیئت علمی و کارکنان در رابطه با وضعیت معیارهای توانمندساز معنی دار بود؛ 3. دانشگاه آزاد اسلامی واحد اقلید 302 امتیاز از 500 امتیاز حوزه توانمندسازهای مدل تعالی سازمانی را به دست آورد و ازنظر تعالی در وضعیت متوسط قرار گرفت، لذا ضروری است رهبران دانشگاه بهبود وضعیت معیارهای توانمندساز را ازجمله مهم ترین اولویت های استراتژیک دانشگاه قرار دهند.
    کلیدواژگان: ارزیابی عملکرد، آموزش عالی، مدل تعالی سازمانی، EFQM
  • سمانه غلباش قره بلاغی اینالو، حسین کارشکی*، محمدرضا آهنچیان صفحات 143-186
    هدف پژوهش حاضر، طراحی، رواسازی و اعتباریابی مقیاس همکاری های علمی و بررسی وضعیت موجود همکاری های علمی پژوهشگران دانشگاه فردوسی مشهد بود. روش پژوهش توصیفی بود. جامعه آماری پژوهش شامل؛ جامعه متخصصان حوزه همکاری های علمی و جامعه پژوهشگران دانشگاه فردوسی مشهد اعم از اعضای هیئت علمی و دانشجویان دکتری در سال تحصیلی 94- 93 بود. تعداد 7 نفر به صورت هدفمند از جامعه متخصصان و تعداد 228 نفر به روش نمونه گیری تصادفی طبقه ای از جامعه پژوهشگران به عنوان نمونه پژوهش انتخاب شد. در راستای هدف پژوهش و با مشخص کردن همپوشانی های موجود در منابع و مصاحبه های نیمه ساختاریافته با متخصصان و جمع بندی آنها به استخراج مولفه ها و نشانگرهای همکاری علمی و سپس تدوین مقیاس همکاری های علمی پرداخته شد. روایی محتوایی مقیاس با استفاده از شاخص نسبت روایی محتوایی و روایی سازه با استفاده از تحلیل عاملی تعیین شد. پایایی مقیاس، با استفاده از ضریب آلفای کرونباخ 88/0 محاسبه شد. در نهایت مقیاس در قالب پنج عامل حاصل از ساختار عاملی شامل «سهم مشارکت در خلق دانش مشترک»، «مشارکت در مجامع علمی»، «همکاری در فرایند پژوهش»، « آمادگی های عاطفی- شناختی» و «آمادگی های رفتاری همکاری های علمی» تهیه شد. نتایج حاصل از اجرای مقیاس نشان داد، میزان عملکرد همکاری های علمی پژوهشگران در سطح متوسط و نگرش پژوهشگران به همکاری های علمی مثبت و در سطح بالا قرار دارد. همچنین، بین میزان عملکرد همکاری علمی پژوهشگران بر حسب دانشکده، مرتبه علمی و جنسیت تفاوت معنی داری وجود دارد. با توجه به احراز روایی و پایایی مقیاس همکاری های علمی، می تواند در پژوهش های مربوط به همکاری علمی به کار رود.
    کلیدواژگان: همکاری علمی، مقیاس، ساختار عاملی، ارزیابی، پژوهشگران
  • محمود قاسمی*، حبیب امانی، مهسا ناظمی مقدم صفحات 187-202
    هدف از پژوهش حاضر بررسی پایایی، روایی و تحلیل عاملی مقیاس درگیری تحصیلی بود. به این منظور 450 نفر از دانش آموزان (225 دختر و 225 پسر) شهر کرج به روش نمونه گیری تصادفی خوشه ایچندمرحله ای انتخاب شدند و به پرسشنامه درگیری تحصیلی پاسخ دادند. نتایج تحلیل عاملی اکتشافی با روش مولفه های اصلی، علاوه بر عامل کلی درگیری تحصیلی، سه عامل (درگیری رفتاری، شناختی و عاطفی) را برای پرسشنامه درگیری تحصیلی تایید کرد. ضریب آلفای کرونباخ در زیرمقیاس ها بین 67/0 تا 78/0 به دست آمد که نشان دهنده همسانی درونی قابل قبول پرسشنامه است. نتایج تحلیل عاملی تاییدی نشان داد که ساختار پرسشنامه برازش قابل قبولی با داده ها دارد و همه شاخص های نیکویی برازش، الگو را تایید می کنند. یافته های تحلیل عاملی، مشابه تحقیقات انجام شده در فرهنگ اصلی بوده و ضرایب پایایی و روایی نیز به نتایج پیشین نزدیک است؛ بنابراین با توجه به خصوصیات روان سنجی مطلوب، این پرسشنامه ابزار مناسبی برای تعیین درگیری تحصیلی دانش آموزان است.
    کلیدواژگان: درگیری تحصیلی، پایایی، روان سنجی، تحلیل عاملی
|
  • Mojtaba Beyrami *, Hamid Reza Hasanabadi, Javad Kavossian Pages 7-42
    The purpose of this study was to identify the approaches and obstacles to giving effective feedback to the students in the descriptive-quantitative assessment program. For this purpose, 351 primary school teachers were selected from Alborz province (Iran) using stratified sampling. The data were collected through a researcher-made questionnaire that included 42 items and the content validity of the questionnaire was confirmed by experienced faculty members. The questionnaire reliability of 0. 8 was obtained through Cronbach's alpha. The results of this study showed that the feedbacks provided in the descriptive assessment system faced operational challenges and backgroundobstacles. The operational challenges included ranking of the students and expression ranking in the classroom, providing unsuitable feedback in terms of structure and content, providing feedback ratings rather than process-oriented feedback, lack of offering motivational feedback and strategic feedback to the weaker students. And background obstacles included ineffective educational courses held with the purpose of increasing the capacity of teachers in providing descriptive feedback, the high density of students in classrooms, low levels of teacher's awareness about feedback, the great number of teachers who adhered to their positive attitudes toward the main components of the traditional assessment system. Finally, the researcher presented recommendations for improving the conditions.
    Keywords: descriptive-quantitative assessment, feedback technique, qualitative feedback, teacher
  • Hamdullah Habibi * Pages 43-66
    The main objective of the present research was to conduct a pathological study of electronic tests in Payame Noor University based on the descriptive-survey research method. The population included all Payame Noor University practitioners and students in 2014. Samples were selected by Cluster and purposive sampling of 340 students and 120 employees related to electronic tests. Data collection tools included two researcher-made questionnaires consisting of statements about various aspects of electronic tests. Data were analyzed using SPSS software by one-sample t-test and Friedman test x. Results show that problems from students’ point of view are respectively as follows: "Students Training and guidance", "Students’ Attitude", "Test Content", "Authorities’ Accountability", "Fast, Accurate, and Useful Feedback," "The physical Space of the Test", "Technical Issues of Hardware and Software". And the problems from practitioners’ perspective are: "The Physical Space of the Test", "Digital Literacy of Students", "Staffs’ Attitude", " Running Costs of the Test", "Coordination and Planning in Implementation", "Legal Issues", " Motivating Employees", " Technical Issues", "Feedback'', “ Staffs’ Familiarity with the Test ","Supervising the implementation process", "Security Affairs ".
    Keywords: test, electronic test, evaluation, Payame Noor University, pathology, E-learning
  • Hassan Galavandi *, Farshid Ashrafi Salimkandi, Keyvan Aghazadeh Pages 67-88
    The aim of this study was to assess the quality of educational services based on HEDPERF Model in Urmia University. In terms of purpose, the present study is functional and, in terms of data collection ,descriptive. The population consists of Urmia University graduate students including 2454 people. The sample size was determined using stratified random sampling and a Morgan table including 332 people. The research tool was a HEDPERF service quality questionnaire; its validity was confirmed by content validity and its reliability was calculated to be 0/89 using Cronbach's alpha coefficient. The results showed that there is a negative gap in all aspects of educational services quality. In between, from the students’ point of view, there are significant differences between the status quo and the desirable status and also in prioritizing the dimensions of the quality of educational services; educational factors have the highest priority and non-academic factors have with the lowest degree of importance. Based on the results obtained, it is suggested to use students constructive comments in various stages of planning, design, delivery and evaluation of educational services more.
    Keywords: assessment, quality of educational services, HEDPERF model, customer satisfaction Urmia- University
  • Afzal Akbari Balootbangan *, Seyed Saeed Vaezfar, Farahnaz Kianersi Pages 89-116
    The aim of present study was to validate the peer interactions scale in the students of Semnan city. To this end, 600 students were selected by multistage cluster sampling method and they responded to a peer interactions scale and academic motivation Harter's questionnaire. Exploratory and confirmatory factor analysis, item-total score correlation, and reliability analyses were conducted to examine the psychometric characteristics of the scale. In addition, the Samijima graded response model was used to determine the fitness of data and analysis. The statistical analysis was conducted in SPSSV22, LISRELV8.80, and Multilog software. Factorial analysis results showed that this scale is saturated from two factors and it has good fitness scales. Peer interactions had a significant relationship with academic motivation (-0.196), academic achievement (-0.206), school absenteeism (0.121) and discipline score (-0.231) (P
    Keywords: peer Interactions scale, bullying, victimization, validation
  • Mohammad Khademi Kolahlou *, Mahbubeh Arefi, Gholamreza Shams Morkani Pages 117-142
    This study aimed at evaluating the performance of the Eghlid branch of the Islamic Azad University, applying a descriptive research methodology. The statistical population included all faculty members and University staff. Through stratified random classification, and using Morgan’s table, 27 faculty members and 43 staff members were selected as the sample. The Measuring Tools included two 64-item questionnaires that were filled out by the faculty and staff members, based on the EFQM model version of Higher Education. The validity of the Questionnaires was verified by experts and the reliability of both questionnaires was estimated at 97/0 and 98/0 respectively. The research data were analyzed with descriptive statistics (frequency, percentage, mean), inferential statistics (one sample t test, independent t-test, Friedman test) and the EFQM scoring logic. The results indicate that: 1. there is significant variety in terms of the application of the Excellence model criteria across the university; 2. there were differences between the views of staff and faculty on the situation of enabler’s criteria and 3. Overall, the Islamic Azad University, Eghlid branch was given a score of 302 of the maximum 500 points in terms of the Enablers of the EFQM excellence model. In addition, in terms of organizational excellence, the university’s position was evaluated as average. Therefore, university leaders should pay attention to the improvement of enabling criteria at the Islamic Azad University, Eghlid branch.
    Keywords: evaluation, higher education, EFQM excellence model
  • Samaneh Ghelbash Ghraehbalaghi Inaloo, Hossein Kareshki *, Mohammad Reza Ahanchian Pages 143-186
    The purpose of this research was to develop, validate and make the scientific collaboration scale and evaluation scientific collaboration reliable among researchers affiliated to Ferdowsi university of Mashhad. In this regard, it has applied a descriptive method. The statistical population included experts in the field of scientific collaboration and the researchers’ community of Ferdowsi University including faculty members and PhD students in the 2014-2015 scientific year. 7 people were selected by purposive sampling from the experts’ community and 228 people by random stratified sampling from the researchers’ community. With regards to the research objective and by identifying the overlaps in the resources and semi-structured interviews with experts, the components and indicators of scientific collaboration were extracted and scientific collaboration scale was formulated. Content validity and structure validity were confirmed using content validity ratio and exploratory and confirmatory factor analysis. The reliability was obtained 0/88 using Cronbach's alpha coefficient for the total scale. Finally, the scale was developed with 5 factors including "contribution to the joint scientific production", "Participation in the scientific community", "collaboration in the research process", "emotional and cognitive readiness" and "the readiness of behavioral in scientific collaboration". The results indicated that the level of the researchers’ scientific collaboration was intermediate and researchers’ attitude toward scientific collaboration was positive. Also, there is a significant difference between the performance of scientific collaboration in terms of the faculty, academic level and gender. According to the validity and reliability, the scientific collaborations scale can be used in the studies to be conducted on scientific collaboration.
    Keywords: scientific collaboration, scale, factor structure, evaluating, researchers
  • Mahmoud Ghasemi *, Habib Amani, Mahsa Nazemi Moghadam Pages 187-202
    The purpose of the present study was to examine the factor structure, reliability and validity of students’ engagement scale. Participants were 450 junior (225 boys and 225 girls) high school students in Karaj, who were selected through random cluster sampling. The results of exploratory factor analysis and principal component analysis confirmed three factors (cognitive, emotional and behavioral engagement) in addition to the general factor of students’ engagement. Cronbach's alpha coefficients for its subscale ranged from 0.67 to 0.78. Moreover¡ the results of the confirmatory factor analysis revealed that the structure of the scale had an acceptable fit to the data and all the goodness-of-fit indices confirmed the model. The results of the factor analysis and the reliability and validity coefficients were almost similar to the previous researches conducted in the main culture. Considering its good psychometric properties¡ the scale is a useful tool for determining student's outcome expectancy.
    Keywords: student engagement, reliability, psychometric, factor analysis