Red Hat เผยรายงาน Pull Request 1 ใน 4 อาจเป็นขยะจาก AI

LF Research หน่วยงานวิจัยของ Linux Foundation ซึ่งก่อตั้งในปี 2021 เพื่อศึกษาแนวทางการสร้างและใช้งานโอเพนซอร์ส ได้เปิดเผยรายงานฉบับล่าสุดในหัวข้อ Navigating Open Source Software Development in the Generative AI Era โดยรวบรวมข้อมูลจากผู้ร่วมสนับสนุน (contributors) และผู้ดูแลโครงการ (maintainers) รวม 234 คน เกี่ยวกับผลกระทบของ Generative AI

ผลการสำรวจระบุว่า ประมาณ 25% ของ pull request ที่ส่งเข้ามานั้นถูกมองว่าเป็น "ขยะจาก AI" (AI slop) ที่มีคุณภาพต่ำ โดยตัวเลขนี้พุ่งสูงขึ้นถึง 31% ในโครงการขนาดใหญ่ รายงานฉบับนี้ได้รับการสนับสนุนหลักจาก Red Hat ร่วมกับหน่วยงานชั้นนำอย่าง OpenSSF, LF AI & Data และ Futurewei

สิ่งที่ค้นพบ

โครงการขนาดใหญ่ที่มีผู้ร่วมสนับสนุนมากกว่า 50 คน คือกลุ่มที่ได้รับผลกระทบจากกระแส AI มากที่สุด โดยผู้ดูแลโครงการถึง 69% รายงานว่ามีการส่งผลงานเข้ามามากขึ้น ขณะที่ 64% ระบุว่ากระบวนการตรวจสอบ (review) ต้องใช้เวลานานขึ้นอย่างมีนัยสำคัญ ส่งผลให้ ภาวะหมดไฟ (Burnout) กลายเป็นความกังวลสูงสุด ที่ 63% ซึ่งสูงกว่าความกังวลด้านคุณภาพของผลงานเล็กน้อยซึ่งอยู่ที่ 60%

อย่างไรก็ตาม นโยบายของแต่ละโครงการยังดูเหมือนจะตามไม่ทันกระแสการใช้ AI ช่วยเขียนโค้ดและการรายงานช่องโหว่ จากกลุ่มตัวอย่างพบว่ามีเพียง 35% เท่านั้นที่มีนโยบายอย่างเป็นทางการในการอนุญาตให้ใช้ AI ขณะที่ 32% ยังไม่มีนโยบายและไม่มีแผนที่จะทำ ส่วน 23% กำลังอยู่ในช่วงร่างนโยบาย และมีเพียง 10% ที่สั่งแบนผลงานจาก AI โดยเด็ดขาด

แม้บางโครงการอย่าง LLVM จะอนุญาตให้ใช้โค้ดจาก AI ภายใต้เงื่อนไขบางประการ แต่ในภาพรวมพบว่า 26% ของโครงการไม่มีวิธีการตรวจสอบผลงานที่ใช้ AI ช่วยเหลือเลย รายงานจึงเรียกร้องให้มีการกำหนดนโยบายที่เป็นลายลักษณ์อักษร การเปิดเผยการใช้ AI รวมถึงการเพิ่มความเข้มงวดในการทดสอบและจัดทำเอกสารคู่มือ

ในด้านประสิทธิภาพพบว่า AI ช่วยประหยัดเวลาการเขียนโค้ด (code authoring) ได้เฉลี่ย 52% แต่สำหรับงานที่มีความซับซ้อนสูง 21% ของนักพัฒนากลับมองว่า AI ทำให้เสียเวลามากกว่าเดิม นอกจากนี้ผู้ดูแลโครงการ 71% มองว่า AI ช่วยให้คนหน้าใหม่เข้ามาเริ่มทำโอเพนซอร์สได้ง่ายขึ้น แต่มีเพียง 13% เท่านั้นที่เชื่อว่ามันจะช่วยเพิ่มความเชื่อมั่นให้กับชุมชนได้

อย่างไรก็ตาม มีข้อควรระวังบางประการ 📝

เนื่องจากผู้ตอบแบบสอบถามส่วนใหญ่มาจากเครือข่ายของ Linux Foundation และ Red Hat รวมถึงตัวเลขขยะจาก AI 25% นั้นเป็นเพียง "การประมาณการ" จากผู้ตอบแบบสอบถาม 111 คน ไม่ใช่สถิติจากการตรวจวัดจริง ข้อมูลนี้จึงขึ้นอยู่กับวิจารณญาณส่วนบุคคลเป็นหลัก และมักมีปัญหาเมื่อผู้ที่ส่ง AI slop มักจะไม่เปิดเผยข้อมูลหรือสนใจทำตามกฎระเบียบ ของโครงการ

ชื่นชอบการอัปเดตนี้ไหม? สนับสนุนการนำเสนอข่าว Linux อิสระได้ที่นี่