Lihat sumber Keruntuhan model

'''Keruntuhan model''' merupakan suatu proses degeneratif yang terjadi pada sistem model generatif, di mana kualitas dan akurasi model menurun seiring dengan berjalannya beberapa siklus pelatihan. Fenomena ini muncul ketika data yang dihasilkan oleh model generatif digunakan kembali sebagai data pelatihan untuk generasi berikutnya, sehingga menyebabkan terjadinya kontaminasi data. Akibatnya, model yang dilatih dengan data tercemar tersebut mulai kehilangan kemampuan dalam merepresentasikan realitas secara tepat.<ref>Ilia Shumailov. [https://www.nature.com/articles/s41586-024-07566-y AI models collapse when trained on recursively generated data]. ''Nature''. 2024-07. Vol. 631 (8022). hlm. 755–759. doi:10.1038/s41586-024-07566-y.</ref>

Keruntuhan model dapat terjadi dalam dua tahap, yaitu keruntuhan model awal dan keruntuhan model akhir. Pada tahap keruntuhan model awal, sistem mulai kehilangan kemampuan untuk merepresentasikan data dari bagian ekor distribusi. Sementara pada tahap keruntuhan model akhir, model semakin menyimpang dari distribusi aslinya karena berbagai pola data yang sebelumnya terpisah mulai saling bercampur. Akibatnya, model berakhir dengan distribusi baru yang hanya sedikit menyerupai distribusi asal dan cenderung memiliki keragaman atau varian yang sangat rendah.<ref>Ilia Shumailov. [http://arxiv.org/abs/2305.17493 The Curse of Recursion: Training on Generated Data Makes Models Forget]. 2024-04-14. doi:10.48550/arXiv.2305.17493.</ref>

== Mekanisme ==
Memakai data sintetis sebagai data latih dapat berdampak buruk pada kualitas dan keandalan model yang dihasilkan, bahkan berpotensi menyebabkan model tersebut runtuh. Hal ini utamanya disebabkan oleh tiga jenis kesalahan: 

# Aproksimasi fungsi yang keliru
# Pengambilan sampel yang tidak ideal
# Proses pembelajaran yang tidak sempurna.

Yang perlu digarisbawahi, masalah ini bisa muncul pada model sederhana sekalipun. Sementara pada model yang lebih kompleks, tumpang-tindihnya berbagai kesalahan tersebut justru membuat model lebih cepat runtuh.<ref>Ilia Shumailov. [https://pmc.ncbi.nlm.nih.gov/articles/PMC11269175/ AI models collapse when trained on recursively generated data]. ''Nature''. 2024-07. Vol. 631 (8022). hlm. 755–759. doi:10.1038/s41586-024-07566-y.</ref>

== Ketidaksepakatan mengenai Dampak di Dunia Nyata ==
Sebagian peneliti dan pengamat memperingatkan bahwa keruntuhan model dapat menjadi ancaman fundamental bagi masa depan pengembangan AI generatif. Kekhawatiran ini berakar pada siklus yang mungkin terbentuk: karena data yang dihasilkan AI semakin banyak dibagikan di internet, data sintetis tersebut akan secara tidak terhindarkan terkumpul ke dalam dataset pelatihan untuk model generasi berikutnya, yang biasanya dikumpulkan secara otomatis dari web. Jika pelatihan yang bergantung pada data sintetis dalam skala besar ini memang pasti menyebabkan penurunan kualitas, maka komunitas AI mungkin akan menghadapi masalah yang sulit dipecahkan di masa depan.<ref>[https://www.inria.fr/en/collapse-ia-generatives Could we see the collapse of generative AI? Inria]. ''www.inria.fr''. 2025-02-20.</ref><ref>[https://www.theregister.com/2024/01/26/what_is_model_collapse/ What is Model Collapse and how to avoid it].</ref>

Sementara itu, para peneliti lain baru-baru ini menyatakan pendapat yang berbeda. Mereka berargumen bahwa akumulasi data sintetis tidak serta-merta berakibat fatal, asalkan diimbangi dengan terus bertambahnya data asli yang dihasilkan manusia. Pandangan ini menyatakan bahwa akumulasi data dari waktu ke waktu justru memberikan gambaran realitas yang lebih lengkap dan realistis dibandingkan jika data lama terus-menerus dihapus. Oleh karena itu, dampak nyata dari keruntuhan model diperkirakan mungkin tidak separah skenario terburuk yang dikhawatirkan selama ini.<ref>[https://www.datacamp.com/blog/what-is-model-collapse What Is Model Collapse? Causes, Examples, and Fixes]. ''www.datacamp.com''.</ref> <ref>[https://www.tableau.com/data-insights/ai/examples Everyday examples and applications of artificial intelligence (AI)]. ''Tableau''.</ref>

Selain dua pandangan tersebut, muncul pendekatan alternatif yang berusaha mencegah masalah ini dari akarnya. Cabang penelitian ini berfokus pada pengembangan teknologi seperti ''detektor'' berbasis [[Pemelajaran mesin|pembelajaran mesin]] dan ''[[Tanda air|watermark]]'' (tanda air) digital untuk dapat mengidentifikasi konten yang dihasilkan oleh AI. Tujuannya adalah untuk menciptakan alat yang dapat menyaring atau mengklasifikasikan data sintetis tersebut sebelum dimasukkan ke dalam dataset pelatihan, sehingga memutus siklus yang berpotensi merusak model.<ref>zapbot. [https://zapbot.biz/indonesia/perbedaan-dari-mesin-pembelajaran-dan-kecerdasan-buatan/ Perbedaan Dari Mesin Pembelajaran Dan Kecerdasan Buatan]. ''Zapbot''. 2020-05-15.</ref>

== Dampak Pelatihan Iteratif pada Model Bahasa Besar ==
Dalam bidang [[kecerdasan buatan]], keruntuhan model merujuk pada proses degeneratif di mana kualitas dan akurasi model generatif menurun melalui beberapa siklus pelatihan. Pada konteks Model Bahasa Besar (LLM), fenomena ini secara khusus teramati ketika model dilatih secara iteratif menggunakan data sintetis—yaitu teks yang dihasilkan oleh model pendahulu, bukan data asli dari manusia.<ref name=":0">Yanzhu Guo. [http://arxiv.org/abs/2311.09807 The Curious Decline of Linguistic Diversity: Training Language Models on Synthetic Text]. 2024-04-16. doi:10.48550/arXiv.2311.09807.</ref><ref name=":1">[https://debateus.org/a-i-daily/ A.I. Daily]. ''DebateUS''.</ref> 

Penelitian menunjukkan bahwa praktik pelatihan semacam ini menyebabkan degradasi yang konsisten dan dapat diukur pada keluaran model. Degradasi tersebut termanifestasi sebagai penyusutan signifikan dalam keragaman leksikal, [[sintaksis]], dan semantik. Secara leksikal, kosakata model menjadi lebih terbatas dan kurang variatif. Secara sintaksis, variasi struktur kalimatnya berkurang, menyebabkan output yang lebih kaku. Secara semantik, jangkauan konsep dan nuansa makna yang dapat diekspresikan model menjadi semakin sempit. Dampak buruk ini paling kentara pada tugas-tugas yang menuntut kreativitas dan orisinalitas, seperti generasi puisi atau penjelajahan ide, di mana output model menjadi semakin bias, homogen, dan kehilangan kekayaan ekspresi bahasa asli.<ref name=":0" /><ref name=":1" />

== Referensi ==
<references />

== Sumber dan atribusi ==

Konten artikel ini diadaptasi dari [https://id.wikipedia.org/w/index.php?title=Keruntuhan+model&oldid=28946345 Wikipedia bahasa Indonesia], revisi 28946345 (2026-02-09T15:45:39Z), yang tersedia berdasarkan lisensi Creative Commons Atribusi-BerbagiSerupa (CC BY-SA). Mohon gunakan konten ini secara bijak serta sesuai dengan ketentuan lisensi yang berlaku.

<!-- WIKI_UNISSULA_PRESENTATION_V4 -->