Kuruma-Gömülü Pedagojik Ajan (IEPA): Bir Özel Sınav-Hazırlık Kurumunda Tek-Operatörlü ve Yerinde (In-Situ) Konuşlandırılan Çok-Modelli Bir Eğitim Yapay Zekâsının Mimarisi ve Saha Deneyimi
Description
ÖZ — Eğitim teknolojisi (EdTech) alanındaki yapay zekâ araçlarının çoğu, kuruma dışarıdan entegre edilen üçüncü-parti hizmetlerdir ve genellikle dışarıdan gözlemlenir. Bu teknik rapor, yapısal olarak farklı bir konuşlandırma modelini belgeler: yazarın sahibi ve tek geliştiricisi olduğu bir özel sınav-hazırlık kurumunun içine gömülü (embedded) olarak inşa edilen ve yerinde (in-situ) çalışan bir pedagojik ajan. Bu modeli "Kuruma-Gömülü Pedagojik Ajan (IEPA — Institutionally-Embedded Pedagogical Agent)" olarak adlandırıyor ve biçimsel bir tanım öneriyoruz. Sistem yaklaşık 125 öğrencinin canlı kullandığı; çok-kanallı (mesajlaşma + web), çok-modelli hibrit bir yönlendirme mimarisi üzerine kuruludur ve retrieval-augmented generation (RAG), çapraz-kodlayıcı yeniden sıralama, Bayesçi bilgi izleme (BKT) ve aralıklı tekrar (FSRS/Ebbinghaus) gibi yerleşik pedagojik yöntemleri operasyonel katmana taşır. Rapor; mimariyi, mühendislik değerlendirmelerini (RAG yeniden sıralamada +10 yüzde puanı hit@1 kazancı; konuşma tanımada 0.024'e karşı 0.190 WER; üretimde sorguların ~%58'inin bulut-dışı modellerce karşılanması), güvenlik/mahremiyet katmanlarını (kriz güvenlik ağı, KVKK savunma-derinliği, otomatik-erişim kısıtı) ve tek-operatörlü in-situ konuşlandırmanın derslerini sunar. Bu bir sistem/saha-deneyimi çalışmasıdır; nedensel bir etkinlik (efficacy) iddiası taşımaz. Tek kurum, kontrol grubunun yokluğu ve geliştirici-sahip özdeşliği kaynaklı sınırlılıklar açıkça tartışılır.
ABSTRACT — Most AI tools in educational technology are third-party services integrated into an institution from the outside and typically studied by external observers. This technical report documents a structurally different deployment model: a pedagogical agent built as an embedded component of, and running in situ within, a private exam-preparation institution owned and solely developed by the author. We name this model the Institutionally-Embedded Pedagogical Agent (IEPA) and propose a formal definition. The system is in live use by roughly 125 students; it is multi-channel (messaging + web) and rests on a multi-model hybrid routing architecture, operationalising established techniques such as retrieval-augmented generation (RAG) with cross-encoder re-ranking, Bayesian Knowledge Tracing (BKT), and spaced repetition (FSRS/Ebbinghaus). We report the architecture, engineering evaluations (a +10 percentage-point hit@1 gain from RAG re-ranking; 0.024 vs. 0.190 word-error rate in speech recognition; ~58% of production queries served by non-cloud models), safety/privacy layers (a crisis safety net, defence-in-depth compliance with Turkish data-protection law, and an automated-outreach guardrail), and lessons from single-operator in-situ deployment. This is a systems/experience report and makes no causal-efficacy claim; single-site, absence of a control group, and developer–owner identity are discussed as explicit limitations.
Files
iepa_teknik_rapor_v1_DOI.pdf
Files
(73.1 kB)
| Name | Size | Download all |
|---|---|---|
|
md5:7e190a9d21598cec0dd0a38f01802404
|
73.1 kB | Preview Download |
Additional details
Identifiers
References
- Corbett, A. T., & Anderson, J. R. (1995). Knowledge Tracing: Modeling the Acquisition of Procedural Knowledge. User Modeling and User-Adapted Interaction, 4(4), 253–278.
- Ebbinghaus, H. (1885). Über das Gedächtnis. Duncker & Humblot.
- Cepeda, N. J., Pashler, H., Vul, E., Wixted, J. T., & Rohrer, D. (2006). Distributed Practice in Verbal Recall Tasks: A Review and Quantitative Synthesis. Psychological Bulletin, 132(3), 354–380.
- Roediger, H. L., & Karpicke, J. D. (2006). Test-Enhanced Learning. Psychological Science, 17(3), 249–255.
- Dunlosky, J., et al. (2013). Improving Students' Learning With Effective Learning Techniques. Psychological Science in the Public Interest, 14(1), 4–58.
- Lord, F. M. (1980). Applications of Item Response Theory to Practical Testing Problems. Lawrence Erlbaum Associates.
- Lewis, P., et al. (2020). Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks. NeurIPS 33. arXiv:2005.11401.
- Nogueira, R., & Cho, K. (2019). Passage Re-ranking with BERT. arXiv:1901.04085.
- Settles, B., & Meeder, B. (2016). A Trainable Spaced Repetition Model for Language Learning. ACL 2016, 1848–1858.
- VanLehn, K. (2011). The Relative Effectiveness of Human Tutoring, ITS, and Other Tutoring Systems. Educational Psychologist, 46(4), 197–221.
- Bloom, B. S. (1984). The 2 Sigma Problem. Educational Researcher, 13(6), 4–16.
- Rohrer, D., & Taylor, K. (2007). The Shuffling of Mathematics Problems Improves Learning. Instructional Science, 35, 481–498.
- Open Spaced Repetition. Free Spaced Repetition Scheduler (FSRS) [software]. https://github.com/open-spaced-repetition