Використання системи перевірки автентичності наукових та студентських робіт

16.11.2012 © Шкодзінський О.К.,

Коноваленко І.В.

План доповіді

Актуальність Які можливості системи?Як працювати з системою?Де і як може бути застосована?

Актуальність

Переміщення наукової інформації в Інтернет крім розширення і прискорення доступу до неї має і негативну сторону – несанкціоноване та не добропорядне використання інформації, з метою спрощення вирішення певних проблем.

Актуальність: потрібно знизити потік недобросовісного використання інформації шляхом автоматизованої її перевірки.

Плагіат

Плагіат академічний – навмисне відтворення викладачем, докторантом, аспірантом або студентом у письмовій або електронній формі чужого твору, опублікованого на паперовому або офіційно оприлюдненого на електронному носії, повністю або частково, під своїм іменем без посилання на автора.

Запровадження у ВНЗ України

1. Національний університет біоресурсів і природокористування України

2. Національний авіаційний університет

3. Мукачівський державний університет

4. Хмельницький національний університет

5. Дніпропетровський національний університет імені Олеся Гончара

6. Чернівецький торгово-економічний інститут

7. Харківський національний економічний університет та ін.

Сервіс "Антиплагіат" ТНТУ

Сервіс інтегровано з системою управління навчанням (Learning Management System – LMS) Atutor (http://dl.tntu.edu.ua).

Сервіс можна використовувати двома способами: 1. "Ручне" завантаження файлу, який потрібно перевірити, на сервер, і наступна його перевірка сервісом антиплагіату.

2. Реалізується автоматично при завантаженні студентом виконаної роботи у скриньку для завдань електронного навчального курсу.

Можливості системи

підтримувані формати файлів: txt, doc, docx, odt, pdf;

підтримуються усі мови;для української мови додатково

виконується перевірка автоперекладу російською;

встановлено захист від автозамін символів у тексті.

Принцип роботи

Текст ділиться на шматки і виконується їх пошук в інтернеті.

На основі того, який відсоток цих частин знайдено, вираховується відсоток унікальності документу.

"Ручна" перевіркаhttp://dl.tntu.edu.ua/ap

Порядок використанняhttp://dl.tntu.edu.ua/ap

Колір у тексті вказує, на якому ресурсі були знайдені збіги (поруч з посиланням на відповідний сайт є прямокутник того ж кольору).

Всі кольори вибираються випадково, окрім жовтого: він означає збіг на декількох сайтах одночасно.

Порядок використанняhttp://dl.tntu.edu.ua/ap

Порядок використанняhttp://dl.tntu.edu.ua/ap

Порядок використанняhttp://dl.tntu.edu.ua/ap

Інтеграція в ATutor

Інтеграція в ATutor

Інтеграція в ATutor

Інтеграція в ATutor

Дослідження роботи системи

Повторюваність результату:

розкид типовий 1-5% (макс 9%)

Заміна літер:• 3 літери – приріст до 1% оригінальності• 4-5 літер (і,а,с,о,е) – приріст до 2%

Перестановка абзаців:• приріст 1-2% оригінальності

Типова гістограма розподілу оцінок оригінальності

Вплив різних факторів на визначення оцінки оригінальності

Типова гістограма розподілу оцінок оригінальності

Найбільше розкид отриманих результатів оцінювання оригінальності тексту залежить від проміжку часу, протягом якого проводиться аналіз. Чим більший проміжок часу між різними оцінюваннями одного і того ж документу, тим більший спостерігається розкид результатів. Очевидно, це пов'язано із зміною доступності різних мережевих ресурсів та особливостями роботи пошукової машини, використаної для аналізу матеріалів.

Що ми оцінюємо?

Ступінь

оригінальності?

Рівень

плагіату?

Система “Антиплагіат” - засіб перевірки на ступінь оригінальності електронних документів

Рекомендовані діапазони оцінки оригінальності навчальних робіт

понад 80% - текст вважається оригінальним;

від 60 до 80% - оригінальність задовільна;

від 40 до 60% - матеріал приймається але його слід доопрацювати;

менше за 40% - матеріал до розгляду не приймається.

Результативність

Зросте якість студентських робітПідвищиться культура цитуванняЗменшаться затрати часу на

попереднє оцінювання матеріалів, що винесені на здачу чи захист.

Особливості застосування адаптивних технологій тестування у навчальному процесі

16.11.2012 © Шкодзінський О.К.,

Коноваленко І.В.

Тестування

Тестування знань у навчальному процесі надійно увійшло у світову педагогічну практику.

Засоби тестування перетворились на потужний інструмент в освітній діяльності, ефективність якого у значній мірі визначається не тільки інтелектуальною складовою тестового матеріалу, але й критеріями та алоритмами оцінювання.

Системи тестування

Системи тестування за алгоритмами роботи можна розділити на дві категорії — традиційні (класичні) та адаптивні.

Традиційний тест містить список запитань і різні варіанти відповідей. Кожне запитання оцінюється у певну кількість балів.

Результат традиційного тесту прямо пропорційний кількості запитань, на які було дано правильну відповідь.

Адаптивне тестування

При адаптивному тестуванні усі кандидати розпочинають тестування із запитання низької чи середньої складності. За умови правильної відповіді наступне запитання буде складнішим; якщо відповідь була невірною, рівень складності запитань знижується. Процес триває доти, поки система тестування не визначить за закладеними кретеріями рівень знань кандидата.

Тестування

Перший підхід через простоту реалізації набув поширення, однак в останні роки інтенсивно розробляються теоретичні основи та практичні методи адаптивного тестування.

Адаптивне тестування

В Тернопільському національному технічному університеті ім. Івана Пулюя на базі системи управління навчанням Atutor (http://dl.tntu.edu.ua) реалізовано обидва методи, і тому в процесі їх використання виникла потреба провести порівняльний аналіз двох підходів до тестування для виявлення їх позитивних і негативних сторін та розроблення плану заходів для покращення якісних показників роботи систем.

Адаптивне тестування

Основною умовою використання тестового матеріалу за адаптивним алгоритмом є попереднє встановлення рівня складності кожного запитання у базі запитань. У варіанті, що досліджувався цей рівень з 10-ступеневою градацією встановлюється статистично на основі тестувань за традиційною методикою при самоконтролі та модульних контролях.

Адаптивне тестування

Важливою вимогою до результату цього етапу є досягнення якомога рівномірнішого заповнення шкали рівнів складності тестовими запитаннями у базі, яку можна відслідковувати у розділі статистики.

Особливості адаптивного

1. Мінім. рекомендована к-сть запитань в тесті – 15.

2. Перевищення ліміту часу, виділеного на здачу тесту, анулює результат тестування.

3. Тест може достроково завершитись у випадку: коли відповіли послідовно неправильно/правильно на 8 запитань найнижчої/найвищої складності коли відповіли послідовно на 8 запитань в інтервалі складності 10% (наприклад коливаючись від 90-100%) коли відповіли послідовно на 6 запитань на одному рівні складності (наприклад 60%)

Як ввімкнути

Як ввімкнути

Адаптивне тестування

При адаптивному тестуванні, що розглядається, складність наступного запитання залежить від успішності відповіді на два попередні, особливість вибору якого видно з рисунка.

Адаптивне тестування

Оцінка формується на базі середнього значення складності запитань після першого зламу лінії графіка (відзначено пунктиром).

Адаптивне тестування

Крива регресії оцінок за двома методиками (за 25-бальною шкалою оцінювання) та її довірчий інтервал 95%

Висновки

1. Методика адаптивного тестування у більшій мірі (3÷25 проти 5÷23) охоплює діапазон оцінок у порівнянні з традиційною на тій же базі запитань.

2. На низьких оцінках обидві методики дають приблизно однакові результати а на високих оцінках адаптивна оцінює вищою до 15% оцінкою.

http://dl.tntu.edu.ua/ap

Дякую за увагу!

(0352) 527272

shk@tu.edu.te.ua