Tugas yang dapat diverifikasi dan pelatihan lanjutan pada lintasan panjang: bagaimana Navalia memperkuat agen LLM kooperatif

18 November 20260 tampilan

Karya ini menjelaskan sebuah kerangka kerja yang, berdasarkan laporan keuangan perusahaan, membangun rantai komputasi dengan bukti yang dapat ditelusuri, memvalidasinya secara independen, lalu menerapkannya untuk SFT dan RL. Dengan Qwen3.6-35B-A3B, pipeline ini menghasilkan peningkatan pada lima benchmark dan, menurut penulis, meningkatkan pengaitan bukti, penggunaan alat, serta penyelesaian tugas jangka panjang, termasuk skenario perkantoran.

Tugas yang dapat diverifikasi dan pelatihan lanjutan pada lintasan panjang: bagaimana Navalia memperkuat agen LLM kooperatif

Tugas yang diselesaikan Navalia

Navalia adalah framework untuk Cowork Agents. Framework ini menggabungkan sintesis tugas yang dapat diverifikasi dengan pascapelatihan pada horizon panjang. Untuk analisis keuangan, framework ini menggunakan laporan keuangan perusahaan.

Navalia memilih bukti pendukung secara semantik dari kumpulan fakta yang lengkap. Kemudian, framework ini menyusun rangkaian komputasi yang dapat dijalankan. Dengan demikian, framework ini membuat tugas analitis dengan bukti yang dapat ditelusuri dan dependensi data faktual antar langkah.

Kriteria praktis: tugas cocok untuk sintesis yang dapat diverifikasi jika memiliki bukti yang dapat ditelusuri dan dependensi antar langkah.

Pemeriksaan bukti dan jawaban

Konsistensi bukti dan kebenaran jawaban diperiksa melalui pemeriksaan LLM independen dan pemeriksaan programatis. Keduanya merupakan dua rangkaian kontrol yang berbeda. Yang pertama mengevaluasi aspek semantik, sedangkan yang kedua memeriksa kebenaran formal.

Kriteria praktis: tugas yang dapat diverifikasi membutuhkan pemeriksaan LLM dan pemeriksaan programatis.

Pascapelatihan pada trajektori panjang

Tugas yang telah diverifikasi menjadi bahan untuk mengumpulkan trajektori. Navalia menerapkan supervised fine-tuning dari titik awal yang dingin dan reinforcement learning. Kedua tahap ini meningkatkan kinerja dalam menyelesaikan tugas pada horizon panjang.

Framework yang diinisialisasi pada Qwen3.6-35B-A3B menunjukkan peningkatan yang konsisten dibandingkan model dasar. Peningkatan terlihat pada kelima benchmark. Para penulis melaporkan bahwa Navalia meningkatkan integrasi bukti, penggunaan alat, dan kinerja dalam menyelesaikan tugas pada horizon panjang.

Kriteria praktis: pascapelatihan bermanfaat jika tugas membutuhkan rangkaian tindakan yang panjang dan penggunaan alat.

Benchmark dan transfer hasil

Evaluasi Navalia dilakukan pada lima benchmark: OfficeQA Pro, FinSearchComp, Finance Agent Benchmark, APEX-Agents-AA, dan Workspace-Bench-Lite. Pada kelima benchmark, framework ini menunjukkan peningkatan yang konsisten dibandingkan model dasar.

Para penulis melaporkan adanya transfer hasil ke skenario Cowork yang lebih luas, termasuk tugas perkantoran umum. Kriteria praktis: perhatikan transfer keterampilan di luar analisis keuangan. Tugas perkantoran umum merupakan tanda penerapan yang lebih luas.

Pertanyaan yang sering ditanyakan

Tugas yang dapat diverifikasi dan pelatihan lanjutan pada lintasan panjang: bagaimana Navalia memperkuat agen LLM kooperatif