社交网络分析:ChatGPT在教育中使用的案例研究

文摘   2025-02-03 00:02   马来西亚  
随着人工智能技术的不断发展,尤其是2022年11月OpenAI发布了ChatGP以后引起了广泛关注,教育领域对其潜在应用充满期待,但同时也对其可能带来的风险和问题存有疑虑。文章《What if the devil is my guardian angel: ChatGPT as a case study of using chatbots in education(ChatGPT作为教育中使用聊天机器人的案例研究)借用ChatGPT这一聊天机器人作为案例,探讨在教育场景中使用此类技术时所面临的机遇与挑战
主要研究问题为:“在教育中使用聊天机器人(具体来说是ChatGPT)存在哪些问题和担忧?

作者通过本研究旨在平衡技术带来的创新机遇与随之而来的伦理、信息准确性、使用安全等方面的挑战。研究采用了三阶段的设计:社交网络分析、访谈内容分析以及用户体验调查。通过定量(如社交媒体数据分析)和定性(如访谈和用户体验)的结合,更全面、立体地反映公众对ChatGPT在教育中应用的看法和实际体验。不同数据来源和分析方法相互补充,有助于验证和确认研究发现的可靠性,降低单一数据来源可能带来的偏差。
一、对 ChatGPT 应用于教育的社交网络分析
社交网络分析(Social Network Analysis, SNA)是一种研究和可视化网络中各个节点(例如个人、组织或其他实体)及其之间互动关系的方法。它通过分析节点之间的联系(如推文的转发、点赞、提及等)来揭示信息传播、关键影响者、群体分布以及网络结构等方面的信息


(一)作者如何进行 SNA 分析?

  • 数据收集:作者从 2022 年 12 月 23 日到 2023 年 1 月 6 日期间,采集了包含“#ChatGPT AND (education OR teaching OR learning)”关键词的 2330 条推文,涉及 1530 个 Twitter 用户。
  • 网络构建与可视化:使用 Harel-Koren Fast Multiscale 算法构建并可视化了一个图形网络。
  • 节点(Nodes):每个节点代表一个 Twitter 用户,节点的大小基于“介数中心性”(betweenness centrality),反映了该用户在信息传递中的重要程度。
  • 边(Edges):节点之间的连线表示用户之间的互动(如转发、提及、点赞等),边的颜色、透明度和宽度则依据互动强度(边的权重)进行调整。
  • 情感分析与词语聚类:通过对推文内容进行情感分析(正面、负面、中性)以及 t-SNE 分析(用于高维数据降维和可视化),揭示了公众对 ChatGPT 在教育应用中的不同态度和讨论主题。

(二)作者得出的结论

网络呈现碎片化结构:虽然存在一些小的聚集群体(sub-clusters)围绕特定观点展开讨论,但整体网络呈现出较为分散和零散的结构。这表明在 ChatGPT 的教育应用问题上,公众讨论还未形成统一、紧密的社区,而是各自寻求信息和讨论的状态

  • 正面情绪:占比约 5%,表现出对 ChatGPT 的技术潜力和应用前景的期待。
  • 负面情绪:占比约 2.5%,反映出对其可能引发的伦理、准确性以及依赖性问题的担忧。
  • 大部分推文(约 92.5%):情感为中性或未明确分类,表明公众对这一新技术既有兴趣,也持保留态度。

总体来说,SNA 分析帮助作者揭示了公众对 ChatGPT 在教育中的应用既存在乐观期待,也伴随着谨慎和批判的观点,同时显示出讨论网络尚未形成紧密、统一的社区结构
二、对 ChatGPT 应用于教育的访谈内容分析
访谈内容分析(Content Analysis of Interviews)是一种对文本数据(例如访谈记录、问卷回答、文件等)进行系统化编码、分类和解释的研究方法。通过这种方法,研究者可以发现文本中反复出现的主题、观点、态度及情感,从而揭示受访者对某一现象或问题的看法和体验

(一)作者如何进行访谈内容分析?

  • 数据采集:作者共采访了19位早期使用ChatGPT的教育相关从业者(包括教师、开发者、学生、AI自由职业者等),以确保多角度、多背景的信息反馈。
  • 选择受访者:为了保证结果的代表性和可靠性,研究者还让受访者对自己对聊天机器人熟悉程度进行评分,确保其具备一定的使用经验。
  • 编码过程:研究者根据预先设计的编码方案,对访谈记录进行阅读和编码。采用双编码者的方法,即由两位研究者独立阅读并标注访谈文本,确保编码的一致性和数据的可靠性。经过反复讨论和修正,形成最终的主题和分类框架。
  • 主题构建:根据编码结果,作者将访谈内容整理为几个主要主题,如“教育转型”、“回答质量”、“个性与情感”、“实用性”以及“伦理问题”,以便系统呈现受访者的观点和担忧。

    (二)作者得出的结论

    • 教育转型:多数受访者认为ChatGPT在提供基础知识和辅助教学设计方面具有革命性潜力,但也有人担心其可能降低学生的创造性思维和批判性能力。
    • 回答质量:受访者普遍认可ChatGPT在大部分情况下回答较为准确和流畅,但也指出由于数据截止等限制,部分回答可能存在错误或信息陈旧的问题。
    • 个性与情感:虽然受访者欣赏ChatGPT类似人类的对话流畅性,但也强调其在情感表达和共情能力上仍存在不足,无法完全取代真实的人际互动。
    • 实用性:受访者普遍认为ChatGPT在多学科知识获取、减轻教师负担和提供即时反馈方面具有较高实用价值,但也提到其在某些专业领域的功能和细节处理上仍有限
    • 伦理问题:受访者对利用ChatGPT可能引发的学术不端(如作弊)、隐私泄露以及对信息准确性过分依赖等伦理风险表示担忧,认为在推广应用前需要更完善的监管和使用规范
    总之,通过访谈内容分析,作者不仅揭示了受访者对ChatGPT在教育中应用的积极预期和实际体验,还明确指出了其在信息准确性、情感共鸣、功能完善性以及伦理风险等方面的挑战,为后续技术改进和政策制定提供了宝贵的第一手意见
    、对 ChatGPT 应用于教育的用户体验调查
    在用户体验调查阶段,研究团队邀请了三位具有丰富教育经验的教师,让他们在为期一周的时间里在不同的教学场景中实际使用 ChatGPT。期间,他们每天召开会议,共同讨论和总结在实际操作中遇到的问题和体验。主要发现包括:
    • 作弊风险:用户发现 ChatGPT 可能会被用于不当辅助作业,导致学生利用其生成的内容进行抄袭或作弊。
    • 回答准确性与可信性:虽然整体表现令人满意,但在某些情况下,ChatGPT 提供的信息可能存在错误或不够准确,从而影响其在教学中的应用。
    • 隐私和伦理问题:调查中也暴露出关于用户隐私以及平台信息处理等方面的担忧,提示在使用过程中可能会出现误导或操控风险。
    总体而言,用户体验调查为研究提供了实地操作数据,帮助揭示了 ChatGPT 在实际教学环境中的优势与局限,为后续改进和安全应用提供了重要依据
    四、未来研究方向

    首先本研究的研究方法非常值得学习,通过社会网络分析、访谈内容分析和用户体验调查,研究全面地探讨了ChatGPT在教育中的应用,提供了多角度的视角。

    文章的“未来研究方向”部分主要探讨了如何进一步研究和利用ChatGPT以及类似的聊天机器人在教育领域的应用,以确保其安全、有效地融入教育实践。具体来说,未来研究方向包括以下几个方面:

    1. 技术整合与教学实践

    • 人机合作:研究如何将ChatGPT与人类教师的合作最大化,以实现教育目标。这包括探索ChatGPT在教学设计、课堂管理、学生评估等方面的具体应用,以及如何与教师的专业知识和经验相结合。

    2. 用户能力发展

    • 关键能力培养:研究用户(特别是学生和教师)需要具备哪些关键能力才能有效使用ChatGPT,例如批判性思维、问题解决能力、数字素养等。
    • 能力发展策略:探讨如何通过教育和培训来培养这些关键能力,包括设计专门的课程和培训项目,以帮助用户更好地利用ChatGPT进行学习和教学。

    3. 教学理念更新

    • 教学方法改革研究如何更新教学理念和方法,以适应ChatGPT等技术带来的教育变革。例如,探讨如何从传统的讲授式教学转向更加互动和学生中心的教学模式。
    4. 长期影响研究
    • 长期效果评估:研究ChatGPT在教育中的长期影响,包括对学生学习习惯、认知发展、社会交往等方面的影响。
    • 政策和法规制定:探讨如何制定相关政策和法规,以规范ChatGPT在教育中的应用,确保其安全、负责任地使用。
    通过这些未来研究方向,研究者和教育实践者可以更好地理解和利用ChatGPT等聊天机器人在教育中的潜力,同时确保其应用符合伦理标准,促进教育公平和质量的提升。

    教育学人AIED
    课程与教学研究与分享,包括但不限于教育概念辨析,教育观念批判。
     最新文章