北京语言大学语言科学院

题  目：你对AI作文了解多少？

时  间：9月28日（周六）14:00-15:30

地  点：综合楼1211会议室

主讲人：颜端丽 博士

主办单位：语言科学院语言测试和人才测评研究所

主讲专家介绍：

颜端丽博士，美国教育考试服务中心（ETS）研发部门数据分析和计算研究总监，美国新泽西州立大学、罗格斯大学和福特汉姆大学兼职教授。颜端丽博士拥有福特汉姆大学的心理测量学博士学位以及宾夕法尼亚州立大学的统计学和运筹学的双硕士学位。在ETS任职期间，担任EXADEP™测验以及TOEIC®机构项目的统计协调员、创新研究应用开发专员和多项运营项目的心理测量师。颜端丽博士的研究主要集中在教育测量中的分析方法、数据分析与计算领域，负责领导自动评分引擎的升级评估与评分，结合自然语言处理（NLP）和人工智能的创新研究与应用，如写作特质评估及AI生成的作文检测。作为项目协调员和心理测量师，颜端丽博士领导了多个运营项目，涉及评估等值和测试分析，并负责考试开发与客户沟通工作，包括EXADEP™测试和TOEIC®机构项目。作为研发科学家，颜端丽博士还开发了计算机自适应测试（CAT）和多阶段测试（MST）算法、认知评估与建模，以及评估评分能力的创新研究应用。颜端丽博士是《教育评估中的贝叶斯网络》和《使用R的计算机自适应与多阶段测试》书籍的合著者，也是《计算机多阶段测试：理论与应用》及《自动评分手册：理论与实践》的合编者。

讲座内容简介：

近年来，像ChatGPT这样的AI技术在几乎所有自动文本生成领域都引发了巨大热潮。以OpenAI公司的ChatGPT和谷歌公司的Bert为代表的强大语言模型已被证明能够在提供简单提示的情况下生成高质量的作文。这些技术帮助学习者和考试参与者提高了他们在各自学科中的知识和技能，并帮助人们生成文本，包括问题与答案、诗歌、代码，还帮助提高了实际写作的质量。然而，这也为一些人提供了利用这些技术作弊的机会。如何判断一篇作文是AI生成的？你对AI作文了解多少？本次讲座将展示如何使用自然语言处理（NLP）方法（包括e-rater、TextEvaluator和WAVE）来检测AI生成的作文。我们探讨了对大规模写作评估题目所作的写作回应。初步结果显示，许多写作特征模式能够让我们自动区分AI生成的作文和人类撰写的作文。我们的目标是让研究人员更详细地了解AI作文，并思考和开发确保写作评估质量的方法。