Penjelasan Strategi Chunking RAG: Tetap, Tumpang Tindih, Kalimat, Rekursif dan Judul, Terukur
Strategi pengelompokan RAG menentukan bagaimana dokumen dipotong-potong sebelum dimasukkan dan diambil. Kami membagi dokumen kebijakan yang sama menjadi lima cara dan mengukur apa yang dilanggar oleh masing-masing metode: fakta dipotong menjadi dua, judul dipisahkan dari teksnya, dan token tambahan disimpan.
- Strategi penggabungan RAG memperdagangkan kesederhanaan dan menjaga makna tetap utuh. Tidak ada satu metode pun yang menang pada setiap pengukuran dalam pengujian kami.
- Potongan 100 token berukuran tetap memotong salah satu dari delapan fakta utama menjadi dua: “Pengembalian dana dikeluarkan dalam | 5 hari kerja”.
- 20 token yang tumpang tindih menyelamatkan fakta tersebut tetapi menyimpan 545 token, bukan 445, sekitar 22% lebih banyak.
- Pemisahan rekursif menjaga setiap kalimat tetap utuh tetapi menyisakan 4 dari 6 bagian yang diakhiri dengan judul bagian berikutnya.
Retrieval-augmented generation (RAG) bekerja dengan menemukan bagian paling relevan dari dokumen Anda dan menyerahkannya ke model bahasa. Potongan-potongan tersebut adalah potongan, dan cara Anda memotongnya secara diam-diam menentukan apa yang dapat dilihat oleh model. Fakta yang dipecah menjadi dua bagian mungkin tidak akan pernah bisa diambil secara utuh. Judul yang terpotong dari paragrafnya membuat suatu bagian menjadi ambigu. Memilih di antara strategi pengelompokan RAG adalah salah satu cara termurah untuk meningkatkan kualitas jawaban.
Kami menerapkan lima strategi umum di Python 3.13 dan menghitung token dengan tiktoken 0.14.0 OpenAI menggunakan pengkodean o200k_base. Setiap nomor di bawah ini berasal dari proses tersebut. Jika RAG sendiri masih baru bagi Anda, baca apa itu panduan RAG terlebih dahulu.
Apa itu chunking di RAG?
Chunking adalah langkah yang membagi dokumen sumber menjadi bagian-bagian yang lebih kecil sebelum diubah menjadi embeddings dan disimpan dalam database vektor. Pada saat bertanya, sistem menyematkan pertanyaan, menemukan bagian terdekat, dan menempelkannya ke prompt. Setiap potongan diambil, atau diabaikan, sebagai satu unit.
Potongan harus cukup kecil agar spesifik dan dapat memuat beberapa bagian ke dalam jendela konteks model, dan cukup besar untuk memuat pemikiran yang lengkap. Setiap strategi mempunyai jawaban berbeda mengenai arah pemotongan yang harus dilakukan.
Mengapa pengelompokan itu penting
- Ketepatan pengambilan: sebagian yang menggabungkan dua topik cocok dengan pertanyaan tentang keduanya, tetapi tidak menjawab dengan baik.
- Kelengkapan: jika aturan dan pengecualiannya berada di bagian yang berbeda, model mungkin hanya melihat separuh aturan.
- Biaya: tumpang tindih dan potongan besar berarti lebih banyak token untuk disematkan, disimpan, dan dikirim ke model.
- Kutipan: potongan bersih dipetakan dengan rapi ke suatu bagian, yang membuat jawaban lebih mudah diverifikasi.
Pengaturan pengujian kami
Kami menulis kebijakan pelanggan sepanjang 368 kata untuk toko online fiktif, dengan lima bagian Penurunan Harga (Pengembalian, Pengiriman, Garansi, Akun, dan Pembayaran) dan masing-masing dua paragraf. Jumlahnya mencapai 445 token. Kami memilih delapan fakta yang harus dijawab dengan benar oleh bot pendukung, seperti “mengembalikan sebagian besar item dalam 30 hari” dan “hingga 10.000 rupee” untuk pembayaran tunai saat pengiriman.
Setiap strategi menggunakan target 100 token per potongan, cukup kecil untuk memaksa pemotongan dalam dokumen pendek. Untuk setiap hasil yang kami ukur:
- Potongan serta ukuran rata-rata dan maksimum dalam token.
- Token yang disimpan, total di seluruh bagian, yang menunjukkan biaya yang tumpang tindih.
- Potong di tengah kalimat: potongan yang berakhir di tengah kalimat.
- Judul Orphan: potongan yang diakhiri dengan judul yang teksnya ada di potongan berikutnya.
- Fakta utuh: berapa banyak dari delapan fakta yang tampak utuh dalam setidaknya satu bagian.
1. Potongan berukuran tetap
Metode paling sederhana menghitung token dan memotong setiap N token, di mana pun jumlahnya:
def fixed(size, overlap=0):
ids = enc.encode(doc)
step = size - overlap
out = []
for i in range(0, len(ids), step):
out.append(enc.decode(ids[i:i + size]))
if i + size >= len(ids):
break
return out
Ini menghasilkan 5 potongan tanpa token yang terbuang, tetapi 3 di antaranya berakhir di tengah kalimat dan satu berakhir dengan judul yatim piatu. Lebih buruknya, satu fakta terpecah di tengah-tengah:
chunk 1 ends: "... print the prepaid label. Refunds are issued within"
chunk 2 starts: " 5 business days after the warehouse receives and checks the"
Pertanyaan tentang waktu pengembalian dana mungkin mengambil bagian 1, yang tidak berisi nomor sama sekali. Pengelompokan ukuran tetap cepat dan dapat diprediksi, menjadikannya dasar yang bagus, namun mengabaikan bahasa sepenuhnya.
2. Ukuran tetap dengan tumpang tindih
Tumpang tindih mengulangi beberapa token terakhir dari setiap potongan pada awal potongan berikutnya, sehingga teks di dekat potongan muncul di keduanya. Kami menggunakan 20 token, 20% tumpang tindih. Kedelapan fakta sekarang utuh di suatu tempat, dan fakta pengembalian dana telah diselamatkan. Biaya: 6 potongan dan 545 token yang disimpan, bukan 445. Pemotongan masih dilakukan di tengah kalimat, kali ini lima kali, dan teks duplikat dapat membuat dua potongan yang hampir identik menggantikan hasil lainnya. Tumpang tindih adalah penambalan untuk pemotongan sembarangan, bukan obat.
3. Pengepakan kalimat
Metode ini membagi teks menjadi beberapa kalimat, lalu mengemas seluruh kalimat ke dalam setiap bagian hingga bagian berikutnya melebihi batas:
def sentence_pack(size):
sents = [s for p in doc.split("\n\n") for s in sent_split(p) if s]
out, cur = [], ""
for s in sents:
if cur and T(cur + " " + s) > size:
out.append(cur)
cur = s
else:
cur = (cur + " " + s).strip()
return out + [cur]
Ini menghasilkan 5 potongan, tidak ada pemotongan di tengah kalimat dan kedelapan fakta utuh, dengan 440 token disimpan. Dua bagian masih diakhiri dengan judul yatim piatu, karena baris judul tampak seperti kalimat pendek lainnya. Pemisahan kalimat dengan ekspresi reguler juga tersandung pada singkatan seperti “mis.”; perpustakaan seperti spaCy atau NLTK melakukan ini dengan lebih baik.
4. Pemisahan rekursif
Pemisahan rekursif, yang dipopulerkan oleh kerangka kerja seperti LangChain, mencoba pemisah alami terbesar terlebih dahulu (garis kosong antar paragraf), dan hanya kembali ke pemisah yang lebih kecil (jeda baris, kalimat, kata) untuk bagian yang masih terlalu besar. Implementasi kami sendiri mengikuti ide yang sama.
Itu menjaga setiap kalimat tetap utuh dan delapan fakta tetap utuh, dengan rata-rata potongan terkecil (74 token). Tapi itu mengungkapkan kelemahan halus: 4 dari 6 bagiannya diakhiri dengan judul bagian berikutnya. Misalnya, satu bagian diakhiri dengan “…memeriksa paket. ## Pengiriman”, sedangkan aturan pengiriman ada di bagian berikutnya. Judulnya menempel pada teks yang salah, sehingga dapat menyesatkan pengambilan pertanyaan yang menyebutkan “pengiriman”.
Kiat: selalu cetak sampel potongan Anda dan bacalah. Masalah pos yatim piatu kami tidak terlihat di rata-rata dan terlihat jelas setelah membaca enam bagian.
5. Potongan berdasarkan judul
Dokumen terstruktur memiliki batasannya sendiri. Pemisahan judul Markdown menghasilkan satu bagian per bagian: 5 bagian, tidak ada pemotongan di tengah kalimat, tidak ada judul yatim piatu, dan semua fakta utuh. Setiap potongan dimulai dengan judulnya sendiri, yang memberikan konteks berguna pada penyematan.
Tangkapannya adalah kontrol ukuran. Satu bagian mencapai 113 token, melebihi target 100 token kami, dan dokumen nyata memiliki bagian mulai dari satu baris hingga beberapa halaman. Dalam praktiknya, Anda menggabungkan metode: pisahkan berdasarkan judul terlebih dahulu, kemudian terapkan pemisahan rekursif atau kalimat di dalam bagian mana pun yang terlalu besar, dan ulangi judul di bagian atas setiap bagian.
Dibandingkan dengan strategi chunking RAG
| Strategi | Potongan | Token rata-rata/maks | Token yang disimpan | Potong di tengah kalimat | Judul yatim piatu | Fakta utuh |
|---|---|---|---|---|---|---|
| Memperbaiki 100 | 5 | 89 / 100 | 445 | 3 | 1 | 7 dari 8 |
| Memperbaiki 100 + 20 tumpang tindih | 6 | 91 / 100 | 545 | 5 | 0 | 8 dari 8 |
| Pengepakan kalimat | 5 | 88 / 100 | 440 | 0 | 2 | 8 dari 8 |
| Rekursif | 6 | 74 / 84 | 441 | 0 | 4 | 8 dari 8 |
| Dengan menuju | 5 | 89 / 113 | 445 | 0 | 0 | 8 dari 8 |
Ini adalah dokumen singkat, jadi perlakukan tabel ini sebagai ilustrasi mode kegagalan, bukan sebagai patokan. Polanya masih bersifat instruktif: semakin suatu metode menghormati struktur dokumen itu sendiri, semakin sedikit pemotongan yang dilakukan.
Bagaimana dengan pengelompokan semantik?
Pengelompokan semantik menyematkan setiap kalimat dan memulai bagian baru yang maknanya bergeser, diukur dengan penurunan kemiripan antar kalimat yang bertetangga. Tidak memerlukan judul dan dapat mengikuti perubahan topik dalam bentuk prosa biasa. Ini juga memerlukan biaya penyematan panggilan per kalimat, dan perbandingan yang dipublikasikan tidak setuju apakah metode ini mengalahkan metode yang lebih sederhana setelah keseluruhan pipeline RAG diukur. Kami tidak menjalankannya di sini. Cobalah hanya setelah garis dasar yang sadar akan struktur, dan pertahankan hanya jika evaluasi Anda sendiri menunjukkan adanya kemajuan.
Bagaimana memilih ukuran potongan dan tumpang tindih
- Mulai dengan struktur. Pisahkan berdasarkan judul atau bagian dokumen jika ada.
- Batasi ukurannya. Kisaran awal yang umum adalah beberapa ratus token per potongan, sekitar 200 hingga 500, lalu sesuaikan.
- Lebih memilih batas yang bersih daripada tumpang tindih. Tambahkan 10 hingga 20% tumpang tindih hanya jika fakta masih bertentangan.
- Lampirkan metadata. Simpan judul, judul bagian, dan URL sumber dengan setiap potongan untuk pemfilteran dan kutipan.
- Ukur pengambilan. Tulis 20 hingga 50 pertanyaan nyata dengan jawaban yang diketahui dan periksa apakah potongan yang tepat berada di peringkat hasil teratas. Ubah satu pengaturan pada satu waktu.
- Hitung token dengan benar dengan tokenizer yang digunakan model Anda, seperti yang dijelaskan dalam panduan token LLM kami.
Simpan potongan dalam database yang mendukung filter metadata, seperti yang dibahas dalam panduan database vektor kami.
Penutup
Strategi pengelompokan RAG adalah tempat dimana banyak masalah pengambilan dimulai, dan merupakan tempat yang paling murah untuk diperbaiki. Pengujian kami menunjukkan kegagalan khas masing-masing metode: ukuran tetap memotong fakta menjadi dua, tumpang tindih biaya penyimpanan, pengepakan kalimat, dan pemisahan rekursif dapat membuat judul terdampar, dan potongan berdasarkan judul memerlukan batasan ukuran. Mulailah dari struktur dokumen Anda, kembali ke pemisahan berdasarkan kalimat, baca bagian-bagiannya, dan biarkan serangkaian evaluasi kecil memutuskan sisanya.
Pertanyaan yang sering diajukan
Apa strategi chunking terbaik untuk RAG?
Tidak ada yang terbaik secara universal. Untuk dokumen terstruktur, pisahkan berdasarkan judul dan kemudian ukuran batas dengan pemisahan rekursif atau kalimat. Validasi pilihan dengan tes pengambilan Anda sendiri.
Berapa ukuran potongan yang harus saya gunakan untuk RAG?
Beberapa ratus token, seringkali sekitar 200 hingga 500, merupakan titik awal yang umum. Bagian yang lebih kecil lebih tepat, bagian yang lebih besar membawa lebih banyak konteks; selaras dengan pertanyaan nyata.
Apakah potongan yang tumpang tindih membantu?
Hal ini dapat menyelamatkan fakta-fakta yang ada. Dalam pengujian kami, 20 token yang tumpang tindih menjaga kedelapan fakta tetap utuh tetapi menyimpan sekitar 22% lebih banyak token dan tetap memotong kalimat.
Apa itu pemotongan rekursif?
Ini dipecah terlebih dahulu pada pemisah terbesar, seperti baris kosong, dan hanya menggunakan pemisah yang lebih kecil seperti kalimat atau kata untuk potongan yang masih terlalu besar.
Apakah pengelompokan semantik lebih baik daripada pengelompokan ukuran tetap?
Tidak dapat diandalkan. Ini mengikuti perubahan topik tetapi membutuhkan biaya tambahan untuk penyematan panggilan, dan hasil yang dipublikasikan beragam. Bandingkan dengan data dasar yang lebih sederhana pada data Anda sendiri.
Teruslah belajar
Butuh bantuan dengan pengujian, WordPress atau SEO?
Kami membantu tim mengirimkan perangkat lunak yang lebih baik dan mengembangkan situs mereka. Beritahu kami apa yang sedang Anda kerjakan dan kami akan menyarankan langkah selanjutnya yang jelas.
Panduan lebih lanjut tentang pengujian, AI & pengembangan modern
Menikmati artikel ini? Pilih topik dan langsung masuk ke tutorial terbaru kami.
Penjelasan Strategi Chunking RAG: Tetap, Tumpang Tindih, Kalimat, Rekursif dan Judul, Terukur
Strategi pengelompokan RAG dibandingkan pada satu dokumen dengan tiktoken 0.14: ukuran tetap, tumpang tindih, pengepakan kalimat, pemisahan rekursif…
Baca artikel →Pengembangan perangkat lunakPenjelasan Idempotensi API: Kunci Idempotensi dan Percobaan Ulang Aman, Diuji
Idempotensi API dijelaskan dengan server dan klien Python yang kami jalankan: respons yang hilang menyebabkan tagihan ganda tanpa kunci dan satu tag…
Baca artikel →DevOpsPenjelasan Git Stash: Simpan, Terapkan, Pop dan File Tidak Terlacak, Diuji
Git stash dijelaskan dengan perintah yang kami jalankan di Git 2.56: push dengan pesan, file yang tidak terlacak, daftar dan tampilkan, terapkan vs …
Baca artikel →Pengujian perangkat lunakPenjelasan Pengujian Berpasangan: Bagaimana Semua Pasangan Memotong 216 Tes menjadi 13, Diuji
Pengujian berpasangan dijelaskan dengan generator yang kami jalankan di Python 3.13: checkout dengan 216 kombinasi yang tercakup dalam 13 pengujian,…
Baca artikel →Otomatisasi pengujianPenjelasan Tes Ganda: Dummy, Stub, Spy, Mock dan Fake, dengan Kode Python yang Diuji
Tes ganda dijelaskan dengan satu contoh Python yang dijalankan di pytest 9.2: dummy, stub, spy, mock dan fake, kapan menggunakan masing-masing, peme…
Baca artikel →Basis data & SQLPenjelasan SQL COALESCE: Default, NULLIF, IFNULL vs ISNULL dan Traps, Diuji
SQL COALESCE dijelaskan dengan kueri yang kami jalankan di SQLite 3.50: nilai bukan nol pertama, string kosong, NULL dalam matematika, NULLIF untuk …
Baca artikel →Basis data & SQLSQL Self Join Dijelaskan: Karyawan-Manajer, Perbandingan Pasangan dan Baris, Diuji
Gabung mandiri SQL dijelaskan dengan kueri yang kami jalankan di SQLite 3.50: karyawan dan manajer, penghasilan lebih dari manajer, pasangan unik, p…
Baca artikel →Pengembangan perangkat lunakPenjelasan Operator Penyebaran JavaScript: Penyebaran vs Istirahat, Salinan dan Gotcha, Diuji
Operator penyebaran JavaScript menjelaskan dengan kode yang kami jalankan di Node 24: array, objek, salinan dangkal, parameter istirahat, batas Math…
Baca artikel →Pengembangan perangkat lunakPenjelasan Modul Koleksi Python: Counter, defaultdict, deque dan Lainnya, Diuji
Koleksi Python dijelaskan dengan kode yang kami jalankan di Python 3.13: Counter, defaultdict, deque, nametuple, OrderedDict dan ChainMap, ditambah …
Baca artikel →Kecerdasan buatanJendela Konteks LLM Dijelaskan: Token, Batasan, dan Cara Menyesuaikannya Lebih Banyak, Diukur
Jendela konteks LLM dijelaskan dengan jumlah token yang kami ukur menggunakan tiktoken: kata vs token untuk prosa, kode dan bahasa Hindi, anggaran i…
Baca artikel →Pengembangan perangkat lunakPenjelasan Webhook: Cara Kerjanya dan Cara Menerimanya dengan Aman
Webhook menjelaskan dengan penerima dan pengirim yang kami jalankan dengan Python: push vs polling, tanda tangan HMAC-SHA256, menolak permintaan yan…
Baca artikel →DevOpsPenjelasan Git Cherry-Pick: Salin Komit yang Anda Butuhkan, Aman, Teruji
Git cherry-pick dijelaskan dengan perintah yang kami jalankan di Git 2.56: menyalin perbaikan terbaru ke cabang rilis, hash baru dan id patch, -x, -…
Baca artikel →Otomatisasi pengujianPenjelasan Pengujian Snapshot: Cara Kerja, Kapan Membantu, dan Kapan Menyakitkan
Pengujian snapshot dijelaskan dengan demo pytest dan manis yang kami jalankan: membuat snapshot, membaca perbedaan setelah perubahan kode, menutupi …
Baca artikel →Pengujian perangkat lunakPenjelasan Pengujian Mutasi: Mengapa Cakupan 100% Masih Melewatkan Bug Kami
Pengujian mutasi dijelaskan dengan alat mutasi kecil yang kami buat dan jalankan: 14 mutan, rangkaian pengujian dengan cakupan garis 100% yang mempe…
Baca artikel →Kecerdasan buatanPenjelasan Injeksi Cepat: Bagaimana Aplikasi AI Ditipu dan Cara Mempertahankannya
Penjelasan injeksi cepat untuk pembuat: serangan langsung dan tidak langsung, mengapa filter kata kunci gagal (pengujian kami memblokir 1 dari 4), d…
Baca artikel →DevOpsPenjelasan Catatan DNS: A, AAAA, CNAME, MX, TXT dan TTL Dengan Pencarian Nyata
Catatan DNS dijelaskan dengan pencarian yang kami jalankan: cara kerja resolusi, A dan AAAA, aturan CNAME, MX dan null MX, TXT untuk SPF dan verifik…
Baca artikel →DevOpsPenjelasan Bendera Fitur: Rilis Aman, Peluncuran Bertahap, dan Kebersihan Bendera
Tanda fitur dijelaskan dengan simulasi peluncuran yang kami jalankan: jenis tanda, persentase peluncuran dengan hashing stabil, tombol pemutus, daft…
Baca artikel →Otomatisasi pengujianUji Pembuatan Data Dengan Python Faker: Data yang Realistis, Dapat Diulang, dan Aman
Uji pembuatan data dengan Python Faker, jalankan dan ukur: penyemaian data berulang, lokal, nilai unik, catatan berbentuk domain, kasus tepi yang te…
Baca artikel →Pengujian perangkat lunakPenjelasan Pengujian Shift-Kiri: Temukan Bug Lebih Awal Tanpa Memperlambat Tim
Pengujian shift-kiri menjelaskan: apa artinya, mengapa cacat awal lebih murah, praktik mulai dari tinjauan persyaratan hingga pemeriksaan CI, peruba…
Baca artikel →Basis data & SQLPenjelasan Fungsi String SQL: TRIM, SUBSTR, REPLACE, CONCAT dan Pembersihan Data
Fungsi string SQL dijelaskan dengan kueri yang kami jalankan: penggabungan dan NULL, TRIM, UPPER dan LOWER, SUBSTR dan INSTR, REPLACE, padding, panj…
Baca artikel →Basis data & SQLPenjelasan Pemicu SQL: SEBELUM dan SETELAH Pemicu, Log Audit, dan Kesalahan
Pemicu SQL dijelaskan dengan pemicu yang kami jalankan: SEBELUM vs SETELAH, LAMA dan BARU, log audit, validasi, pembaruan stok, kondisi KAPAN, penge…
Baca artikel →Pengembangan perangkat lunakPenjelasan Modul Python JSON: dumps, load, Tipe Kustom, dan Kesalahan Umum
Modul Python JSON dijelaskan dengan kode yang kami jalankan: dumps dan load, file, konversi tipe, tanggal dan desimal, encoder khusus, object_hook, …
Baca artikel →Pengembangan perangkat lunakModul ES vs CommonJS: Cara Kerja Impor JavaScript di Node.js, Diuji
Modul ES vs CommonJS dijelaskan dengan kode yang kami jalankan di Node.js: sintaksis impor dan ekspor, persyaratan, pengikatan langsung, caching, pe…
Baca artikel →Pengembangan perangkat lunakPenjelasan Regex Python: Pola, Grup, Pandangan ke Depan, dan Kesalahan, Diuji
Regex Python dijelaskan dengan pola yang kami jalankan: pencarian vs kecocokan, temukan semua, grup dan grup bernama, serakah vs malas, sub, lihat k…
Baca artikel →Kecerdasan buatanPenjelasan Keluaran Terstruktur LLM: Mendapatkan JSON yang Andal dari Model AI
Output terstruktur LLM dijelaskan dengan validasi yang kami jalankan di Pydantic: mode dan skema JSON, decoding terbatas, cara output model terputus…
Baca artikel →DevOpsPenjelasan Kunci SSH: Cara Kerjanya, ssh-keygen, Ed25519 dan Kebiasaan Aman
Kunci SSH dijelaskan dengan kunci yang kami buat: kunci publik vs pribadi, ssh-keygen, Ed25519 vs RSA, sidik jari, frasa sandi, ssh-agent, Authorize…
Baca artikel →DevOpsPenjelasan Caching HTTP: Kontrol Cache, Respons ETag dan 304, Dengan Tes Langsung
Caching HTTP dijelaskan dengan server kecil yang kami jalankan: arahan Kontrol-Cache, max-age, no-cache vs no-store, validasi ulang ETag dan respons…
Baca artikel →Otomatisasi pengujianPenjelasan Pengujian Kontrak API: Tangkap Perubahan yang Dapat Mengganggu Sebelum Dikirim
Pengujian kontrak API dijelaskan dengan pemeriksaan skema yang kami jalankan: apa itu kontrak, kontrak yang digerakkan oleh konsumen, Pakta, OpenAPI…
Baca artikel →Pengujian perangkat lunakPenjelasan Pengujian Berbasis Risiko: Nilai Risiko, Buat Matriks, dan Uji Hal yang Penting
Pengujian berbasis risiko menjelaskan langkah demi langkah: mengidentifikasi risiko, menilai kemungkinan dan dampak, membangun matriks risiko, memet…
Baca artikel →Basis data & SQLPenjelasan Kendala SQL: BUKAN NULL, UNIK, PERIKSA dan KUNCI ASING, Diuji
Batasan SQL dijelaskan dengan pengujian yang kami jalankan: NOT NULL, UNIQUE, CHECK, DEFAULT, PRIMARY dan FOREIGN KEY, celah NULL, pengaturan kunci …
Baca artikel →Basis data & SQLPenjelasan Fungsi Tanggal SQL: Menambah, Membandingkan dan Mengelompokkan Tanggal Tanpa Bug
Fungsi tanggal SQL dijelaskan dengan kueri yang kami jalankan: penambahan interval, kejutan akhir bulan, perbedaan tanggal, jebakan ANTARA, pengelom…
Baca artikel →Pengembangan perangkat lunakPenjelasan Python asyncio: async, menunggu, mengumpulkan dan TaskGroup Dengan Waktu Nyata
Python asyncio dijelaskan dengan kode yang kami atur waktunya: coroutine, menunggu, mengumpulkan, TaskGroup, penanganan kesalahan, batas waktu, memb…
Baca artikel →Pengembangan perangkat lunakDebounce vs Throttle dalam JavaScript: Cara Kerjanya, Kapan Menggunakannya, Diuji
Debounce vs throttle dalam JavaScript dijelaskan dengan pengaturan waktu yang kami ukur di Node.js: cara kerja masing-masing, implementasi sederhana…
Baca artikel →Pengembangan perangkat lunakPenjelasan Manajer Konteks Python: Pernyataan with, lib konteks, dan Penggunaan Nyata
Manajer konteks Python menjelaskan dengan kode yang kami jalankan: cara kerja, __enter__ dan __exit__, kontekslib.contextmanager, penekan, ExitStack…
Baca artikel →Kecerdasan buatanPenjelasan Suhu dan Top-p LLM: Bagaimana Model AI Memilih Kata Berikutnya
Suhu LLM dan top-p dijelaskan dengan simulasi yang kami jalankan: bagaimana probabilitas dibentuk kembali, apa yang dipertahankan top-p, pengaturan …
Baca artikel →DevOpsPenjelasan YAML: Sintaks, Masalah Norwegia, dan Jebakan Lain yang Kami Uji
YAML menjelaskan dengan tes parser: sintaks dasar, daftar dan peta, masalah Norwegia, versi berubah menjadi float, kode pos oktal, waktu sexagesimal…
Baca artikel →DevOpsPenjelasan Cron Jobs: Sintaks, Jadwal Sebenarnya, dan Kesalahan yang Melanggarnya
Pekerjaan Cron dijelaskan dengan jadwal yang kami verifikasi: lima bidang, operator, contoh nyata, jebakan hari dalam sebulan ATAU hari dalam seming…
Baca artikel →Kecerdasan buatanPenjelasan Halusinasi AI: Mengapa Model Bahasa Memperbaiki Masalah dan Cara Menguranginya
Halusinasi AI menjelaskan: apa itu, mengapa model bahasa memproduksinya, tipe umum, cara menguranginya dengan landasan dan petunjuk, dan pemeriksaan…
Baca artikel →DevOpsPenjelasan Variabel Lingkungan: File .env, Rahasia, dan Konfigurasi Dilakukan dengan Benar
Variabel lingkungan dijelaskan dengan contoh Python yang kami jalankan: membaca dan mengaturnya, mengapa setiap nilai berupa string, file .env, pewa…
Baca artikel →Pengembangan perangkat lunakPenjelasan Pembatasan Kecepatan API: Algoritma, Header, dan Penanganan 429 Kesalahan
Pembatasan laju API dijelaskan dengan simulasi yang kami jalankan: keranjang token, jendela tetap, jendela geser, respons 429, header batas laju, pe…
Baca artikel →Otomatisasi pengujianMengejek dengan Python: unittest.mock, patch dan Kesalahan yang Membuat Tes Berbohong
Mengejek dengan Python dengan unittest.mock, menguji: Mock dan return_value, side_effect, menambal di mana nama digunakan, spesifikasi dan autospec,…
Baca artikel →Pengujian perangkat lunakPenjelasan Cakupan Kode: Cakupan Jalur vs Cabang dan Apa Arti 100% Sebenarnya
Cakupan kode dijelaskan dengan coverage.py yang sebenarnya dijalankan: cakupan garis, cabang dan kondisi, membaca laporan, mengapa cakupan 100% masi…
Baca artikel →Basis data & SQLDELETE vs TRUNCATE vs DROP dalam SQL: Perbedaan, Rollback dan Kapan Menggunakan Masing-Masing
DELETE vs TRUNCATE vs DROP dijelaskan dengan SQL yang diuji: apa yang dihapus, rollback, pemicu, reset identitas, kecepatan, dan perbedaan PostgreSQ…
Baca artikel →Basis data & SQLPenjelasan Tampilan SQL: Membuat, Menggunakan, dan Menghindari Kesalahan, Dengan Contoh
Tampilan SQL dijelaskan dengan kueri yang kami jalankan: membuat tampilan, hasil langsung, menyembunyikan kolom, kinerja, tampilan yang dapat diperb…
Baca artikel →Pengembangan perangkat lunakAntarmuka TypeScript vs Tipe: Perbedaan Nyata, Diuji Dengan Kompiler
Antarmuka TypeScript vs tipe, diperiksa dengan kompiler sebenarnya: apa yang bisa dilakukan keduanya, apa yang hanya bisa dilakukan satu orang, peng…
Baca artikel →Pengembangan perangkat lunakPenjelasan Python *args dan **kwargs: Fungsi Fleksibel Dengan Contoh Jelas
Python *args dan **kwargs dijelaskan dengan kode yang kami jalankan: pengepakan dan pembongkaran, urutan parameter, argumen hanya kata kunci dan pos…
Baca artikel →Pengembangan perangkat lunakFungsi Python Lambda: Sintaks, Kegunaan Sebenarnya, dan Kapan Tidak Digunakan
Fungsi python lambda dijelaskan dengan kode yang kami jalankan: sintaksis, pengurutan dengan kunci, peta dan filter, penutupan, jebakan pengikatan a…
Baca artikel →Kecerdasan buatanApa Itu Agen AI? Cara Kerjanya, Dengan Agent Loop Sederhana yang Dapat Anda Jalankan
Apa itu agen AI? Panduan sederhana tentang loop agen, alat, memori, dan pagar pembatas, dengan loop Python kecil yang kami jalankan, risiko nyata da…
Baca artikel →DevOpsPemantauan vs Observabilitas: Perbedaan Nyata, Dengan Log, Metrik, dan Jejak
Penjelasan pemantauan vs observabilitas: kegagalan yang diketahui dan tidak diketahui, log, metrik dan jejak, penelusuran insiden checkout, sinyal e…
Baca artikel →DevOpsVolume Docker vs Bind Mounts: Pertahankan Data Kontainer dengan Cara yang Benar
Volume Docker vs pengikatan pengikat dijelaskan: mengapa data kontainer menghilang, volume yang diberi nama, pengikatan pengikatan, tmpfs, contoh Tu…
Baca artikel →Otomatisasi pengujianTDD vs BDD: Perbedaan Utama, Satu Fitur Dibangun dengan Dua Cara dan Kapan Menggunakan Masing-masing
TDD vs BDD dijelaskan dengan satu fitur diskon yang dibuat dengan dua cara: refactor merah-hijau dengan kode yang kami jalankan, skenario Mengingat-…
Baca artikel →Pengujian perangkat lunakUser Acceptance Testing (UAT): Proses, Checklist dan Contoh Nyata
Pengujian penerimaan pengguna menjelaskan: siapa yang menjalankannya, perbedaannya dengan QA, proses tujuh langkah, templat kasus uji UAT, daftar pe…
Baca artikel →Basis data & SQLPenjelasan Nilai NULL SQL: IS NULL, COALESCE, NULLIF dan Jebakan yang Harus Dihindari
Nilai SQL NULL dijelaskan dengan kueri yang kami jalankan: logika tiga nilai, IS NULL, COALESCE, NULLIF, cara agregat, penggabungan, dan pengurutan …
Baca artikel →Basis data & SQLPernyataan SQL CASE WHEN: Sintaks, Contoh Nyata dan Kesalahan Umum
SQL CASE KETIKA dijelaskan dengan kueri yang kami jalankan: formulir sederhana dan dicari, urutan kondisi, pivot dengan SUM, trik COUNT, pengurutan …
Baca artikel →Pengembangan perangkat lunakApa itu JWT? Token Web JSON Dijelaskan Dengan Contoh Kerja
Apa itu JWT? JSON Web Tokens menjelaskan: tiga bagian, token yang dibuat dan dirusak dalam kode yang kami jalankan, sesi JWT vs, penyimpanan, token …
Baca artikel →Pengembangan perangkat lunakPenjelasan Loop Acara JavaScript: Call Stack, Microtasks, dan Timer Dengan Contoh
Perulangan peristiwa JavaScript dijelaskan dengan kode yang kami jalankan: tumpukan panggilan, antrian tugas dan tugas mikro, mengapa setTimeout 0 t…
Baca artikel →Pengembangan perangkat lunakGenerator Python dan Penjelasan Hasil: Menghemat Memori Dengan Contoh Nyata
Generator dan hasil Python dijelaskan dengan kode yang kami jalankan: bagaimana mereka menjeda dan melanjutkan, mengukur penghematan memori, saluran…
Baca artikel →Kecerdasan buatanApa itu Embedding? Kesamaan Vektor dan Kosinus Dijelaskan Secara Sederhana
Apa itu embeddings? Panduan bahasa sederhana tentang vektor, kesamaan kosinus, dan penelusuran semantik, dengan contoh kecil yang kami jalankan, pen…
Baca artikel →DevOpsPenerapan Biru-Hijau vs Canary: Perbedaan, Kompromi, dan Cara Memilih
Penjelasan penerapan blue-green vs canary: cara kerja masing-masing, biaya, risiko dan rollback, pengelompokan pengguna stabil yang kami uji, migras…
Baca artikel →Otomatisasi pengujianTes Tidak Stabil: Apa Penyebabnya dan Cara Memperbaikinya untuk Kebaikan
Pengujian yang tidak stabil dijelaskan dengan demo yang kami jalankan: penyebab utama, cara mengonfirmasi dan mendiagnosisnya, perbaikan waktu yang …
Baca artikel →Pengujian perangkat lunakLoad Testing vs Stress Testing: Perbedaan, Metrik dan Contoh k6
Penjelasan pengujian beban vs pengujian stres: apa yang dibuktikan masing-masing, pengujian lonjakan dan rendam, metrik yang penting, mengapa rata-r…
Baca artikel →Pengujian perangkat lunakKasus Uji vs Skenario Uji: Perbedaan Utama, Contoh, dan Kapan Menggunakan Masing-masing
Penjelasan kasus uji vs skenario pengujian: definisi yang jelas, tabel berdampingan, satu fitur pengaturan ulang kata sandi yang diambil dari skenar…
Baca artikel →Basis data & SQLOptimasi Kueri SQL: Baca Rencana Eksekusi dan Perbaiki Kueri Lambat, Dengan Pengaturan Waktu
Pengoptimalan kueri SQL diuji pada sejuta baris: membaca rencana eksekusi, menambahkan indeks yang tepat, memperbaiki filter yang tidak dapat disarg…
Baca artikel →Basis data & SQLSQL UNION vs UNION ALL: Perbedaan, Contoh dan Kinerja Diuji
SQL UNION vs UNION ALL dijelaskan dengan kueri yang kami jalankan: duplikat, aturan yang diikuti keduanya, bug data nyata, kinerja terukur, INTERSEC…
Baca artikel →Pengembangan perangkat lunakTutorial API Pengambilan JavaScript: GET, POST, Penanganan Kesalahan, dan Batas Waktu
Tutorial JavaScript Fetch API diuji pada server lokal: GET dan POST, mengapa 404 tidak muncul, bantuan yang dapat digunakan kembali, string kueri, b…
Baca artikel →Pengembangan perangkat lunakPenanganan File Python: Baca, Tulis, CSV, JSON dan pathlib Dengan Contoh
Penanganan file Python dijelaskan dengan kode yang kami jalankan: mode terbuka, dengan, membaca file besar, CSV, JSON, pathlib, file biner, penulisa…
Baca artikel →Pengembangan perangkat lunakKelas dan Objek Python: Tutorial OOP Dengan Contoh Nyata
Kelas dan objek Python dijelaskan dengan kode yang kami jalankan: __init__, metode, atribut kelas vs instance, warisan, properti, metode dunder, kel…
Baca artikel →Kecerdasan buatanApa Itu Model Bahasa Besar? Bagaimana LLM Bekerja, Dijelaskan Tanpa Hype
Apa yang dimaksud dengan model bahasa besar? LLM dijelaskan dalam bahasa sederhana: token, penyematan, perhatian, pelatihan, jendela suhu dan kontek…
Baca artikel →DevOpsPerintah Linux untuk Pemula: Panduan Terminal Penting Dengan Contoh
Perintah Linux untuk pemula, dikelompokkan berdasarkan tugas: navigasi, file, melihat log, grep, pipa, izin, proses dan arsip, dengan contoh analisi…
Baca artikel →Otomatisasi pengujianSelenium vs Penulis Drama: Perbedaan Utama, Perbandingan Kode, dan Mana yang Harus Dipilih
Selenium vs Playwright dibandingkan: arsitektur, menunggu, dukungan browser dan bahasa, debugging, pengujian yang sama di kedua alat, saran migrasi …
Baca artikel →Pengujian perangkat lunakPartisi Ekivalensi: Teknik Desain Tes Dijelaskan Dengan Contoh yang Dikerjakan
Penjelasan partisi ekivalensi: cara menemukan partisi yang valid dan tidak valid, contoh yang berfungsi untuk usia, kata sandi dan kupon, pengujian …
Baca artikel →Pengujian perangkat lunakSeverity vs Priority dalam Pengujian Perangkat Lunak: Perbedaan, Matriks dan Contoh Nyata
Keparahan vs prioritas dalam pengujian perangkat lunak dijelaskan: definisi yang jelas, matriks empat arah dengan contoh, skala level, siapa yang me…
Baca artikel →Basis data & SQLTutorial Subkueri SQL: Jenis, Subkueri yang Berkorelasi, dan ADA Dengan Contoh
Tutorial subkueri SQL dengan kueri yang kami jalankan: subkueri skalar, IN, FROM dan SELECT, subkueri yang berkorelasi, EXISTS, jebakan NOT IN NULL …
Baca artikel →Basis data & SQLPenjelasan Transaksi SQL dan ACID: COMMIT, ROLLBACK dan Tingkat Isolasi
Transaksi SQL dan ACID dijelaskan dengan transfer bank yang kami jalankan: COMMIT, ROLLBACK, savepoint, kunci, tingkat isolasi, pembacaan kotor, keb…
Baca artikel →Pengembangan perangkat lunakLembar Cheat Perintah Git: Perintah yang Sebenarnya Anda Gunakan, Beserta Contohnya
Lembar contekan perintah Git yang dikelompokkan berdasarkan tugas: pengaturan, pementasan, cabang, remote, simpanan, riwayat, dan pembatalan kesalah…
Baca artikel →Pengembangan perangkat lunakPenjelasan Janji JavaScript: lalu, tangkap, Janji.semua, dan Kesalahan Umum
Janji JavaScript dijelaskan dengan kode yang kami jalankan: status, rantai lalu dan tangkap, penanganan kesalahan, Promise.all, allSettled, race dan…
Baca artikel →Pengembangan perangkat lunakTutorial Kamus Python: Metode, Contoh dan Pola Umum
Tutorial kamus Python dengan kode yang kami jalankan: membuat, membaca dan memperbarui dicts, metode utama, penggabungan, pemahaman, pola penghitung…
Baca artikel →Kecerdasan buatanApa itu RAG? Generasi Retrieval-Augmented Dijelaskan Dengan Contoh Kerja
Apa itu RAG? Generasi yang ditambah pengambilan dijelaskan langkah demi langkah: pengindeksan, pemotongan, penyematan, pengambilan, contoh kecil Pyt…
Baca artikel →DevOpsTutorial Terraform untuk Pemula: Infrastruktur sebagai Kode Dari File Pertama hingga Modul
Tutorial Terraform untuk pemula: mulai tanpa akun cloud, pelajari init, rencanakan dan terapkan, lalu variabel, keluaran, status, modul, dan alur ke…
Baca artikel →DevOpsDocker vs Kubernetes: Perbedaan Utama, Cara Kerja Sama, dan Yang Anda Butuhkan
Docker vs Kubernetes menjelaskan: apa yang dilakukan masing-masing, aplikasi yang sama dijalankan dengan keduanya, Docker Compose dan Swarm dibandin…
Baca artikel →Otomatisasi pengujianTutorial Pytest untuk Pemula: Fixture, Parametrize dan Contoh Nyata
Tutorial pytest untuk pemula dengan pengujian yang kami jalankan di pytest 9.2: pernyataan, perlengkapan, parametrize, conftest, marker, tmp_path, m…
Baca artikel →Pengujian perangkat lunakSiklus Hidup Pengujian Perangkat Lunak (STLC): 6 Fase, Kriteria Masuk dan Keluar, Contoh
Siklus hidup pengujian perangkat lunak menjelaskan: enam fase STLC dengan kriteria masuk dan keluar, hasil, contoh fitur login yang berfungsi, STLC …
Baca artikel →Pengembangan perangkat lunakGit merge vs rebase: perbedaan, contoh, dan kapan memakai masing-masing
Git merge vs rebase dijelaskan dengan keluaran log nyata, tabel perbandingan, aturan emas rebase, dan alur kerja tim yang aman.
Baca artikel →Pengembangan perangkat lunakList Comprehension Python: Sintaks, Contoh, dan Kapan Harus Dihindari
List comprehension Python dijelaskan: sintaks, filter, if-else, perulangan bersarang, waktu yang diukur, dan kapan perulangan for biasa lebih baik.
Baca artikel →Basis data & SQLPenjelasan SQL JOIN dengan Contoh (Inner, Left, Right, Full)
Pahami SQL JOIN langkah demi langkah dengan tabel dan query contoh: INNER, LEFT, RIGHT, FULL, CROSS, dan SELF, plus kesalahan umum dan tips performa.
Baca artikel →