tag: Backpropagation

นักวิจัย Sakana AI เปิดตัว PC-ALM ทางเลือกการเรียนรู้แบบ Layer-Local แทน Backpropagation รองรับเครือข่ายลึกถึง 1,000 ชั้น

tag: Backpropagation, JAX, PC-ALM, Predictive Coding, Sakana AI

Sep 15, 2026 · By: NatapolK

Jeffrey Seely และ Julian Gould นักวิจัยจาก Sakana AI เปิดตัว PC-ALM ทางเลือกการเรียนรู้แบบโลคัลแทน Backpropagation โดยการเพิ่ม Lagrange multiplier เข้าไปในข้อจำกัดของแต่ละเลเยอร์ ช่วยให้สามารถดึงค่า Backprop Gradients ที่แม่นยำออกมาได้ และรองรับการฝึกเครือข่ายสูงถึง 1,000 ชั้น โดยมีโค้ด JAX พร้อมใช้งานแล้ว

Sakana AI เปิดตัว Error Diffusion: ฝึก AI ด้วยหลักการชีวภาพโดยไม่ใช้ Backpropagation

tag: Backpropagation, Dale's Principle, Error Diffusion, Reinforcement Learning, Sakana AI

Jul 19, 2026 · By: AttapolK

Sakana AI เปิดตัว Error Diffusion (ED) แนวทางการฝึก AI รูปแบบใหม่ที่ใช้หลักการชีวภาพโดยไม่พึ่งพา Backpropagation เพื่อแก้ปัญหาการขนส่งน้ำหนักและรองรับฮาร์ดแวร์ยุคใหม่ ผลการทดสอบพบว่าสามารถใช้กับโครงข่าย Convolutional ได้เป็นครั้งแรกและทำประสิทธิภาพได้ดีในงานเสริมแรงเรียนรู้