[논문 리뷰] Transformative Influence of LLM and AI Tools in Student Social Media Engagement: Analyzing Personalization, Communication Efficiency, and Collaborative Learning

Masoud Bashiri, Kamran Kowsari|arXiv (Cornell University)|2024. 06. 15.

Artificial Intelligence in Healthcare and EducationMedicine인용 수 3

한 줄 요약

이 논문은 대규모 언어 모델(Large Language Models, LLMs)과 AI 도구가 UniversityCube와 같은 교육용 소셜미디어 플랫폼에서 학생의 참여도를 어떻게 변화시키는지 조사한다. 이는 개인화, 소통 효율성, 협업 학습을 향상시킨다. 실제 사용자 데이터를 바탕으로 한 통계 분석과 사례 연구를 통해 AI 통합이 학업 성취도, 비판적 사고 능력, 유지를 향상시키는 것으로 나타났으며, 교육 네트워크는 사용 증가 추세(R² = 0.82)와 더불어 엔터테인먼트 네트워크보다 높은 계절적 변동성(CV = 0.51)을 보였다.

ABSTRACT

The advent of Large Language Models (LLMs) and Artificial Intelligence (AI) tools has revolutionized various facets of our lives, particularly in the realm of social media. For students, these advancements have unlocked unprecedented opportunities for learning, collaboration, and personal growth. AI-driven applications are transforming how students interact with social media, offering personalized content and recommendations, and enabling smarter, more efficient communication. Recent studies utilizing data from UniversityCube underscore the profound impact of AI tools on students' academic and social experiences. These studies reveal that students engaging with AI-enhanced social media platforms report higher academic performance, enhanced critical thinking skills, and increased engagement in collaborative projects. Moreover, AI tools assist in filtering out distracting content, allowing students to concentrate more on educational materials and pertinent discussions. The integration of LLMs in social media has further facilitated improved peer-to-peer communication and mentorship opportunities. AI algorithms effectively match students based on shared academic interests and career goals, fostering a supportive and intellectually stimulating online community, thereby contributing to increased student satisfaction and retention rates. In this article, we delve into the data provided by UniversityCube to explore how LLMs and AI tools are specifically transforming social media for students. Through case studies and statistical analyses, we offer a comprehensive understanding of the educational and social benefits these technologies offer. Our exploration highlights the potential of AI-driven tools to create a more enriched, efficient, and supportive educational environment for students in the digital age.

연구 동기 및 목표

• LLMs와 AI 도구가 교육적 맥락에서 학생의 소셜미디어 참여도에 미치는 영향을 분석하는 것.
• UniversityCube와 같은 플랫폼에서 AI 통합이 개인화, 소통 효율성, 협업 학습을 어떻게 향상시키는지 검토하는 것.
• 학생들 사이에서 교육용과 엔터테인먼트용 소셜네트워크의 사용 패턴과 장기적 추세를 특정하는 것.
• 데이터 기반 분석을 통해 AI가 학업 성취도, 비판적 사고 능력, 학생 유지를 향상시키는 데 어떻게 기여하는지 평가하는 것.
• AI 기반 교육 도구를 최적화하기 위한 교사와 플랫폼 개발자에게 실질적인 통찰을 제공하는 것.

제안 방법

• UniversityCube 교육용 소셜미디어 플랫폼의 실제 사용자 데이터를 활용하였다.
• 시간적 추세와 장기적 사용 추세를 탐지하기 위해 시간 시리즈 분석과 같은 통계 기법을 적용하였다.
• 사용자의 계절적 변동성을 정량화하기 위해 변동계수(CV = σ/μ)를 계산하였다.
• 사용량 변화를 평가하기 위해 선형 추세 분석을 수행하였으며, 엔터테인먼트 네트워크(0.75)와 교육 네트워크(0.82)의 R² 값을 보고하였다.
• 사용자 참여도와 기능 간 상관관계를 규명하기 위해 주성분 분석(PCA)을 사용하였다.
• 사례 연구와 실증 데이터를 통합하여 AI 도구 사용과 학업 및 사회적 성과 간의 연관성을 규명하였다.

Figure 1 : Student Usage of Social network in monthly bases

실험 결과

연구 질문

• RQ1 LLMs와 AI 도구는 학생의 소셜미디어 참여도에서 개인화에 어떻게 영향을 미치는가?
• RQ2 AI 도구는 교육용 소셜네트워크에서 소통 효율성과 협업 학습을 어느 정도 향상시키는가?
• RQ3 학생들 사이에서 교육용과 엔터테인먼트용 소셜네트워크의 장기적 및 계절적 사용 추세는 어떠한가?
• RQ4 AI 기반 콘텐츠 필터링은 학생들이 학술 자료에 집중하는 데 어떻게 영향을 미치는가?
• RQ5 AI 강화 플랫폼 기능과 학생의 학업 성취도 및 유지를 어떻게 연결할 수 있는가?

주요 결과

• 교육용 소셜네트워크는 엔터테인먼트 네트워크(CV = 0.34)에 비해 더 높은 계절적 변동성(CV = 0.51)을 보이며, 학생 참여도의 변화가 뚜렷하게 나타남.
• 교육 네트워크는 사용량에 대해 강한 양의 선형 추세를 보이며(R² = 0.82), 엔터테인먼트 네트워크는 감소 추세를 보임(R² = 0.75).
• AI 강화 플랫폼을 사용하는 학생들은 높은 학업 성취도, 향상된 비판적 사고 능력, 협업 프로젝트에 대한 높은 참여도를 보고함.
• AI 도구는 혼란스러운 콘텐츠를 효과적으로 필터링하여 학생들이 교육 자료와 관련된 논의에 더 집중할 수 있도록 함.
• 학술적 관심사와 진로 목표를 기반으로 한 AI 기반 매칭 알고리즘은 더 지원적이고 지적 자극적인 온라인 커뮤니티를 조성하여 학생 만족도와 유지를 높임.
• 소셜미디어 플랫폼에 LLM과 AI 도구를 통합함으로써 개인화된 콘텐츠 추천, 실시간 피드백, AI 기반 시각화 기능이 가능해져 이해도와 학습 효율성이 향상됨.

Figure 2 : Student Usage of Social network in Yearly bases