[发明专利]用于评价响应的半自动系统和方法

说明书

本发明的实施例提供一种用于评价学生作业产品的半自动系统和方法。该方法可以包括：从多个学生获得多个学生作业产品，识别学生作业产品中存在的基元，形成基元的子集，基于基元子集将作业产品聚类成集群，从教师接收与集群有关的评价并且基于集群评价来提供作业产品的评价。根据本发明的实施例的方法可以减少教师的审查和反馈时间，并提高向学生给出的反馈的一致性和质量。

相关申请

本申请要求于2015年2月6日提交的美国临时申请62/112,665的根据35U.S.C.119(e)的权益，其公开内容通过参考并入在此。

技术领域

本发明的实施例涉及用于评价学术作品的方法和系统。

背景技术

在许多学业和学术环境中，教师(包括讲师、教育家、培训师、助教和教授，以下统称为“教师”)准备作业、报告、项目、家庭作业和测试(统称为“学生作业产品“)，以衡量和促进学生学习。在许多领域，教师使用学生可以用自由文本格式、数学格式、编程代码格式或类似形式进行回答的开放式问题。为了对学生进行审查、评分和提供有价值的反馈，教师花费大量的时间阅读、审查和评论学生的作业或测试的答案，以协助学生的学习过程。在大学、学院、高中、职业学校、企业培训和在线教学环境中，学生作业产品的审查可能特别繁重。

为了节省审查学生答案的时间，教师可以准备能够易于手动或使用计算机检查的多项选择测试。然而，多项选择测试有许多缺点。在许多领域，多项选择格式无法准确地捕捉到学生获得答案的方法。多项选择题的答案对学生来说也更易于从同伴进行复制或抄袭。此外，需要许多多项选择题来适当地评价学生在给定科目中的熟练程度。

发明内容

在向大量学生呈现作业的学业或学术环境中，许多学生的作业产品可能与其他学生的作业产品相似。学生作业产品可以分为多个集群，每个集群包括来自多个学生的学生作业，允许教师相对于每个集群提供反馈，而不需要评价每个学生的工作。

本发明的实施例提供了一种用于评价学生作业产品的半自动化系统和方法。该方法可以包括从多个学生获得多个学生作业产品，识别作业产品中存在的基元，选择作业产品中的基元的子集，将作业产品聚类成集群，从教师接收聚类相关的评价并基于集群评价来提供作业产品的评价。

可以使用计算设备的处理器来执行选择作业产品的子集，以找到以最小的学生作业产品重叠提供学生作业产品的最佳覆盖的基元子集。

可以使用包括非瞬态存储器的计算设备来执行聚类，该计算设备用于执行算法。根据本发明的实施例的方法可以减少教师的审查和反馈时间，并提高对学生的反馈的一致性和质量。

根据本发明的实施例，在使用相对于某个作业产品进行聚类和接收教师评价的系统和/或方法之后，教师可将聚类和评价数据存储在数据库中，并使用聚类和评价数据用于评价来自学生的类似作业产品，从而减少向学生提供反馈所需的时间。例如，如果老师使用上述方法帮助评价给定任务的学生作业产品，并将所得到的聚类和评价数据存储在数据库中，则教师可以使用计算设备基于给予先前任务的聚类、分类和/或评价，对于新接收的作业产品进行分类。这种分类可以帮助教师在类似的课程或后续学期中向不同群组的学生给出相同的任务，并允许对学生回答进行简单快速的审查。

根据本发明的实施例的方法可以节省教师在学生作业产品上提供个性化的学生反馈的时间，而不是单独地审查来自每个学生的每个作业产品。

尽管本发明内容涉及学术作品及其对教师的评价，但是本发明的实施例涉及用于评价对于任何类型的问题的响应的系统和方法。例如，可以执行要求产品的用户描述其用户体验的调查。用户提交的响应可以由审查者分析，并使用在此所述的方法进行聚类。这些方法可以简化审查者执行的分析过程。

提供本发明内容从而以简化的形式介绍概念的选择，这在下面的详细描述中进一步描述。本发明内容不是旨在标识所要求保护的主题的主要特征或基本特征，也不旨在用于限制所要求保护的主题的范围。