Dalam peranan saya menyelaras operasi dan perancangan, saya memastikan pembinaan dan latihan model AI untuk PKS melalui AINNA NeuralOps berjalan selaras dengan jadual, sumber, dan keperluan operasi sebenar. Matlamat kami bukan untuk menghasilkan chatbot umum, tetapi membangunkan lapisan kecerdasan khusus yang faham aliran kerja PKS dan boleh berintegrasi terus dengan sistem perniagaan.
Kami tidak melatih LLM dari sifar. Sebagai pengurus perancangan, saya melihat latihan ini seperti proses penyediaan spesifikasi: bermula dengan model asas sumber terbuka, kemudian diselaraskan menggunakan LoRA/QLoRA dalam notebook GPU, dengan set data yang diperoleh daripada kes penggunaan PKS sebenar seperti laporan pengurusan, kewangan, HR, jualan, inventori, khidmat pelanggan, dan operasi laman web.
Kami turut menggunakan LLM termaju sebagai model guru untuk pemurnian pengetahuan. Model berkeupayaan lebih tinggi ini membantu pasukan saya menjana, memperbaiki, mengkritik, dan menilai contoh latihan, corak penaakulan, kes pinggir, serta respons khusus PKS sebelum pengetahuan berguna dipindahkan ke model khusus yang lebih kecil.
Aliran kerja semasa kami ialah: LLM Guru Termaju → Set Data PKS → Pemurnian → LoRA/QLoRA → Model Khusus PKS → Agent Harness NeuralOps. Matlamatnya adalah menggunakan model berkuasa untuk mengajar, sambil menggunakan model yang lebih kecil untuk bebanan kerja operasi harian.
Model khusus ini kemudiannya digabungkan ke dalam NeuralOps, bersama Smart Routing, ejen khusus, pangkalan data, API, dan Sistem Berasingan. NeuralOps menentukan model, alat, sumber data, atau aliran kerja mana yang patut mengendalikan setiap tugas, berbanding menghantar segalanya ke satu LLM besar.
Bagi tugas mudah dan boleh jangka, kami menggunakan sistem deterministik seperti PHP, Python, SQL, atau peraturan perniagaan. Untuk kecerdasan rutin, NeuralOps boleh menggunakan model khusus PKS. Hanya tugas penaakulan lebih kompleks dinaik taraf ke model lebih besar, supaya kos inferens yang tidak perlu dapat dikurangkan dan pergantungan kepada pembekal AI luar dapat dikawal.
Data perniagaan terkini juga kekal di dalam sistem operasi seperti MySQL, HR, Kewangan, Inventori, CRM, dan platform laporan. Model ini tidak perlu menghafal keseluruhan syarikat. Ia belajar cara memahami operasi PKS, manakala sistem sebenar menyediakan maklumat terkini dan boleh sahkan.
Seni bina yang kami bangunkan secara amnya ialah: Sistem Perniagaan → NeuralOps → Smart Routing → Model Khusus PKS / Alatan / LLM Termaju → Pengesahan → Tindakan. Matlamat saya adalah menjadikan AI lebih praktikal untuk PKS: lebih kecil, lebih khusus, cekap kos, boleh dikawal, dan bersepadu dengan aliran kerja perniagaan sebenar, berbanding hanya wujud sebagai pembantu perbualan.
#AINNA #NeuralOps #AI #AgenticAI #PKS #LLM #KnowledgeDistillation #LoRA #QLoRA #OpenSourceAI #Automasi #PerniagaanIntelligence
Ruang pembaca
Apa pendapat anda?
Komen disemak sebelum diterbitkan. Email diperlukan untuk moderasi dan tidak dipaparkan kepada pembaca.
Bagus ada yang tulis pasal kami tidak melatih LLM dari dengan jelas.
Bahagian kami tidak melatih LLM dari tu yang buat saya fikir lama.
Berbaloi baca sebab kami tidak melatih LLM dari.