Google เปิดตัว Genie 4 สร้างโลกเสมือนโต้ตอบได้แบบเรียลไทม์

· By: NatapolK

เมื่อต้นปีที่ผ่านมา Google ได้แนะนำ Project Genie ซึ่งเป็นต้นแบบงานวิจัยเชิงทดลองที่ช่วยให้คุณสร้างและสำรวจโลกที่ตอบโต้ได้ โดยผู้ทดสอบกลุ่มแรกสะท้อนว่าต้องการการควบคุมที่ลึกซึ้งยิ่งขึ้น รวมถึงวิธีที่ง่ายและสะดวกกว่าในการสร้างและแบ่งปันโลกเหล่านั้น

ในวันนี้ เราจึงเปิดตัว ประสบการณ์ใหม่ของ Project Genie ให้กับสมาชิก Google AI Ultra ที่มีสิทธิ์ ซึ่งช่วยให้โลกเสมือนเหล่านี้ตอบสนอง สร้างสรรค์ และมีความเป็นโซเชียลมากขึ้น การอัปเดตนี้เป็นการเปิดให้เข้าถึง Genie 4 เป็นครั้งแรก พร้อมอัปเกรด Genie 3 ใหม่ รวมถึงมีเอเจนต์ที่ช่วยสร้างวิสัยทัศน์ของผู้ใช้ และแกลเลอรีชุมชนเพื่อค้นหา สำรวจ และรีมิกซ์โลกต่างๆ

Project Genie ผสานรวม world models ที่ก้าวหน้าที่สุดควบคู่ไปกับโมเดล Gemini เพื่อช่วยให้คุณสร้าง ก้าวเข้าไป และกำหนดรูปร่างของโลกเสมือนได้โดยตรงผ่านเบราว์เซอร์ของคุณ

สัมผัสประสบการณ์ Genie 4 ใน Project Genie

ด้วย Genie 4 ซึ่งเป็น world model ที่สมจริงและโต้ตอบได้มากที่สุดในขณะนี้ คุณสามารถใช้ prompt ระหว่างเซสชันเพื่อเปลี่ยนโลกที่สร้างขึ้นได้ทันที เพียงพิมพ์คำสั่งใหม่ในขณะที่นำทาง คุณก็สามารถแก้ไขสภาพแวดล้อมแบบเรียลไทม์ได้ ทั้งการเปลี่ยนสภาพอากาศ วางตัวละคร หรือเปลี่ยนทิศทางการดำเนินเรื่อง

นอกจากนี้ Genie 4 ยังเป็นครั้งแรกที่จับคู่ภาพเข้ากับเสียงดั้งเดิมแบบเรียลไทม์ที่ปรับเปลี่ยนตามฉากที่ดำเนินไป ตั้งแต่เสียงบรรยากาศโดยรอบไปจนถึงบทสนทนาของตัวละคร

ค้นพบขีดความสามารถใหม่ของ Genie 3

ในขณะที่ Genie 4 มอบภาพ ฟิสิกส์ และเสียงที่มีความเที่ยงตรงสูงสุด แต่ Genie 3 ยังเป็นตัวเลือกสำคัญเมื่อต้องการรันเซสชันที่ยาวนานขึ้น หรือสร้างพื้นที่จากภาพพาโนรามา โดยการอัปเดตของ Genie 3 ในวันนี้ประกอบด้วย:

  • การขยายเซสชันและการเชื่อมต่อโลก (World chaining): สำรวจได้นานถึง 3 นาทีต่อการสร้างหนึ่งครั้ง (เพิ่มจาก 60 วินาที) หรือเชื่อมโยงหลายโลกเข้าด้วยกันเพื่อการเดินทางที่ยาวนานขึ้น
  • การใช้ภาพพาโนรามา 360 องศาเป็นฐาน (360-degree panorama image grounding): สร้างโลกใหม่จากภาพพาโนรามา 360 องศา
  • เหตุการณ์ในโลกแบบเรียลไทม์: เปลี่ยนสภาพแวดล้อมอย่างไดนามิกด้วย prompt ภาษาธรรมชาติในขณะสำรวจ

Genie 3 ใช้เหตุการณ์ที่ระบุผ่าน prompt แบบเรียลไทม์เพื่อเชื่อมต่อโลกที่แตกต่างกันเข้าด้วยกันอย่างไร้รอยต่อ เช่น การบินต่อเนื่องผ่านป่าไม้ ซากปรักหักพังใต้น้ำ และทะเลน้ำแข็ง นอกจากนี้การใช้ภาพพาโนรามายังช่วยให้สถานที่อย่างหุบเขา Petra มีความสมจริงสม่ำเสมอเมื่อคุณมองไปรอบๆ และยังสามารถสั่งเรียกมังกรออกมาขี่ได้ตามคำสั่ง

สร้างประสบการณ์การโต้ตอบใหม่ๆ

เอเจนต์ใหม่ของ Project Genie ช่วยให้การสร้างสรรค์ก้าวข้ามแค่ prompt ข้อความหรือรูปภาพ โดยการสร้างจักรวาลที่ตอบโต้ได้นั้นง่ายเหมือนการสนทนา เพียงอธิบายวิสัยทัศน์ด้วยภาษาธรรมชาติ เอเจนต์จะประสานงานชุดโมเดล multimodal ของ Google เพื่อสร้างภาพเริ่มต้นและดนตรีประกอบที่ออกแบบมาให้เหมาะกับอารมณ์นั้นๆ

คุณยังสามารถดึงโมเดล Gemini เข้ามาช่วยในระหว่างการสำรวจได้ โดยมันจะคอยสังเกตสิ่งที่เกิดขึ้นบนหน้าจอ เพื่อแนะนำทางเลือกหรือเปิดใช้งานเหตุการณ์ในโลกโดยอัตโนมัติตามการเดินทางของคุณ เช่น การเปลี่ยน prompt ให้เป็นการเดินในอวกาศ หรือการรีมิกซ์คาเฟ่บนเนินเขาให้กลายเป็นพาวิลเลียนแก้วกลางทะเลทราย

สำรวจแกลเลอรีใหม่

แกลเลอรีใหม่ของ Project Genie รวบรวมคอลเลกชันโลกที่ได้รับการคัดสรรและผลงานจากชุมชน คุณสามารถเปลี่ยนภาพถ่ายส่วนตัวให้เป็นพื้นที่สำรวจได้ใน “Living Memory” หรือท่องไปในโลกยุคก่อนประวัติศาสตร์ใน “Dino Field Guide” และยังมี “Rock Paper Scissors” ที่ให้คุณนำวัตถุมาสู้กันโดยมี Gemini เป็นกรรมการแบบเรียลไทม์

นอกจากนี้ยังมีผลงานความร่วมมือกับนักสร้างสรรค์ระดับบุกเบิก เช่น “Villa Giallo” โดย Will (BLVCKL!GHT) ที่เปลี่ยนคฤหาสน์กอทิกให้กลายเป็นปริศนาห้องต่อห้อง และ “The Life of Ants” โดยผู้กำกับ Anand Gandhi ที่ใช้ความสมจริงของ Genie 4 ให้คุณได้สวมบทบาทเป็นมดในรังที่ซับซ้อน

ผู้ใช้สามารถเริ่มสร้างวิสัยทัศน์ของตัวเอง หรือรีมิกซ์ประสบการณ์เดิมในแกลเลอรีได้โดยการปรับแต่งโครงสร้างโลก เพลงประกอบ หรือกฎเกณฑ์ต่างๆ เมื่อสร้างผลงานที่พิเศษได้แล้ว ก็สามารถเผยแพร่ไปยังแกลเลอรีชุมชนเพื่อให้ผู้อื่นมาสำรวจต่อได้

เรียนรู้วิธีที่เราสร้างสรรค์อย่างมีความรับผิดชอบ

เรามุ่งมั่นพัฒนา interactive world models อย่างมีความรับผิดชอบ โดยวิดีโอและเสียงทั้งหมดที่สร้างใน Project Genie จะมีการฝังลายน้ำ SynthID และข้อมูลทั้งหมดจะผ่านการคัดกรองความปลอดภัย

แม้ Genie 3 และ Genie 4 จะเป็นงานวิจัยระดับแนวหน้า แต่เรายังคงจัดการกับความท้าทายหลักๆ เช่น ความหน่วงของกล้อง การโต้ตอบทางกายภาพที่ซับซ้อน และความคงทนของฉากในระยะยาว สำหรับรายละเอียดเพิ่มเติม สามารถอ่านได้ที่ ภาพรวมงานวิจัยโมเดล Genie 4 ของเรา

ลองใช้งาน Project Genie วันนี้

สมาชิก Google AI Ultra ที่มีสิทธิ์สามารถ ลองสัมผัสประสบการณ์ใหม่ของ Project Genie ได้ตั้งแต่วันนี้ ส่วนสมาชิก Google AI Pro สามารถลงชื่อเข้าร่วมรายการรอได้ในหน้าเว็บไซต์เดียวกัน

Source: Google Blog (Models & research)
ดูแลงานแปลและเรียบเรียงโดย NatapolK
Google เปิดตัว Genie 4 สร้างโลกเสมือนโต้ตอบได้แบบเรียลไทม์

ความคิดเห็น (0)

เข้าสู่ระบบเพื่อร่วมแสดงความเห็น

สมัครสมาชิก

มาเป็นคนแรกที่แสดงความเห็นกันเลยโบร