Waypoint-1.5: โลกเสมือนจริงที่โต้ตอบได้บนการ์ดจอทั่วไป

ในยุคที่เทคโนโลยี AI ก้าวหน้าอย่างรวดเร็ว การสร้างโลกเสมือนจริงที่สมจริงและโต้ตอบได้กลายเป็นเป้าหมายสำคัญของนักพัฒนาหลายกลุ่ม ล่าสุด Overworld ได้เปิดตัว Waypoint-1.5 ซึ่งเป็นโมเดลวิดีโอเรียลไทม์รุ่นใหม่ ที่ถูกพัฒนาขึ้นมาเพื่อนำประสบการณ์โลกเสมือนจริงที่สมจริงยิ่งขึ้นมาสู่ผู้ใช้งานทั่วไป โดยไม่ต้องอาศัยฮาร์ดแวร์ระดับสูงอีกต่อไป

Waypoint-1.5 คืออะไร?

Waypoint-1.5 คือโมเดลวิดีโอเรียลไทม์ใหม่ล่าสุดจาก Overworld ที่ต่อยอดมาจาก Waypoint รุ่นแรก โดยมีเป้าหมายหลักคือการทำให้โลกเสมือนจริงที่สามารถโต้ตอบได้นั้น เข้าถึงได้ง่ายขึ้นสำหรับผู้ใช้งานทั่วไปบนฮาร์ดแวร์ที่มีอยู่แล้ว

รุ่นแรกของ Waypoint ได้พิสูจน์ให้เห็นแล้วว่าโลกเสมือนจริงแบบเรียลไทม์นั้นเป็นไปได้จริง และโมเดลโลกแบบโต้ตอบได้สามารถเป็นมากกว่าแค่การสาธิตวิดีโอแบบพาสซีฟ แต่ยังสามารถเป็นระบบที่ทำงานบนเครื่องของผู้ใช้เอง และเริ่มลดช่องว่างระหว่างการสร้างโลกเสมือนจริงกับการก้าวเข้าไปสำรวจโลกนั้นได้

Waypoint-1.5 ได้พัฒนาต่อยอดจากรากฐานที่แข็งแกร่งนั้น โดยมีการปรับปรุงคุณภาพของภาพให้ดียิ่งขึ้น ขยายขอบเขตของฮาร์ดแวร์ที่สามารถรันโมเดลได้บนเครื่อง และก้าวไปอีกขั้นในการจำลองโลกแบบโต้ตอบได้โดยไม่ต้องใช้พลังประมวลผลระดับดาต้าเซ็นเตอร์

จุดเด่นใหม่ใน Waypoint-1.5

สิ่งที่เปลี่ยนแปลงไปมากที่สุดใน Waypoint-1.5 คือ การเข้าถึงได้ง่ายขึ้น 🚀

ด้วย Waypoint-1 เราได้พิสูจน์ประสบการณ์หลักแล้ว สำหรับ Waypoint-1.5 เราต้องการทำให้ประสบการณ์นั้นพร้อมใช้งานบนเครื่องคอมพิวเตอร์ที่หลากหลายมากขึ้น โดยไม่สูญเสียความสามารถในการโต้ตอบแบบเรียลไทม์ นั่นหมายถึงการสร้างโมเดลสองระดับ: โมเดล 720p สำหรับฮาร์ดแวร์ประสิทธิภาพสูง และโมเดล 360p ที่ปรับให้เหมาะกับการใช้งานบนฮาร์ดแวร์ทั่วไปที่หลากหลาย

นอกจากนี้ เรายังได้ เพิ่มขนาดการฝึกฝนโมเดลอย่างมหาศาล Waypoint-1.5 ได้รับการฝึกฝนด้วยข้อมูลมากกว่า Waypoint-1 ถึงเกือบ 100 เท่า ซึ่งช่วยเพิ่มความสามารถของโมเดลในการสร้างสภาพแวดล้อมที่สอดคล้องกันมากขึ้น และการเคลื่อนไหวที่คงที่สม่ำเสมอตลอดเวลา

ภายใต้สถาปัตยกรรม Waypoint-1.5 ยังได้รวมเอาเทคนิคการสร้างแบบจำลองวิดีโอที่มีประสิทธิภาพมากขึ้น เพื่อลดการประมวลผลที่ซ้ำซ้อนระหว่างเฟรม สิ่งนี้มีความสำคัญอย่างยิ่ง เพราะโมเดลโลกแบบเรียลไทม์ไม่ได้ถูกตัดสินจากความสวยงามของภาพเพียงเฟรมเดียว แต่ถูกตัดสินจากความสามารถในการตอบสนองทันที, ความสอดคล้องเมื่อคุณเคลื่อนที่ผ่านไป, และความเป็นไปได้ในการใช้งานบนฮาร์ดแวร์ของผู้ใช้เอง

ทำไม Waypoint-1.5 ถึงสำคัญสำหรับโมเดลโลก

ความก้าวหน้าล่าสุดในด้านวิดีโอที่สร้างขึ้นด้วย AI และโมเดลโลกส่วนใหญ่มักจะมุ่งเน้นไปที่ความคมชัดของภาพ แม้ว่าผลลัพธ์เหล่านั้นจะมีความสำคัญ แต่ความคมชัดเพียงอย่างเดียวก็ไม่เพียงพอที่จะทำให้โลกเสมือนจริงที่โต้ตอบได้รู้สึกสมจริง

สิ่งที่ผู้คนจดจำได้คือ การตอบสนอง พวกเขาจำได้ว่าสภาพแวดล้อมตอบสนองต่อพวกเขาหรือไม่, การเคลื่อนไหวยังคงสอดคล้องกันหรือไม่, โลกยังคงอยู่ได้หรือไม่เมื่อพวกเขาสำรวจมัน, และประสบการณ์ทั้งหมดรู้สึกฉับไวแทนที่จะล่าช้า

นั่นคือช่องว่างที่เราให้ความสำคัญมากที่สุด: ความแตกต่างระหว่างการเฝ้าดูฉากที่สร้างขึ้น กับการได้เข้าไปอยู่ภายในฉากนั้นจริงๆ

หากโมเดลโลกทำงานได้เฉพาะบนคลัสเตอร์ GPU ขนาดใหญ่ มันก็ยังคงเป็นเพียงการสาธิตที่น่าประทับใจ แต่หากมันทำงานบนฮาร์ดแวร์ของผู้บริโภคทั่วไป มันจะกลายเป็นสิ่งที่ใช้งานได้จริงมากขึ้น: เป็นรากฐานสำหรับความบันเทิงแบบโต้ตอบ, เครื่องมือสร้างสรรค์, การจำลอง, และสภาพแวดล้อมที่ขับเคลื่อนด้วย AI ที่ผู้คนสามารถสำรวจได้จริง

Waypoint-1.5 ถูกออกแบบมาตามแนวคิดนั้น ไม่ใช่แค่การสร้างวิดีโอที่ดีขึ้น แต่เป็นการสร้างโลกที่ตอบสนองได้ดีขึ้น สำรวจได้ง่ายขึ้น และยังคงเข้าถึงได้บนฮาร์ดแวร์ของผู้บริโภค

วิธีสัมผัสประสบการณ์ Waypoint-1.5

มีสองวิธีในการใช้งาน Waypoint-1.5:

  1. การรันบนเครื่องโดยตรงผ่าน Overworld Biome: รุ่นนี้ออกแบบมาให้ทำงานได้บนฮาร์ดแวร์หลากหลายรูปแบบ และรันไทม์ Biome ที่อัปเดตทำให้การตั้งค่าบนเครื่องทำได้ง่ายขึ้นมาก ด้วยขั้นตอนการติดตั้งใหม่ ผู้ใช้สามารถดาวน์โหลดและเริ่มรันโมเดลบนเครื่องได้ภายในไม่กี่นาที
  2. Overworld Stream: ให้คุณทดลองใช้ Waypoint-1.5 ได้ทันทีผ่านเบราว์เซอร์ โดยไม่ต้องตั้งค่าบนเครื่องใดๆ

ไม่ว่าคุณจะต้องการการเข้าถึงทันทีหรือการควบคุมเต็มรูปแบบบนเครื่อง Waypoint-1.5 ก็พร้อมรองรับทั้งสองแบบ

นอกจากนี้ เรายังมี World Engine ซึ่งเป็นไลบรารีการอนุมานหลักที่ยืดหยุ่นและใช้งานง่าย ซึ่งขับเคลื่อนไคลเอนต์อย่างเป็นทางการของเรา รวมถึงไคลเอนต์และไลบรารีจากบุคคลที่สามอีกเกือบหนึ่งโหล

Waypoint เริ่มต้นจากคำถามง่ายๆ ว่า: อะไรคือสิ่งที่จะทำให้โลกเสมือนจริงที่สร้างขึ้นด้วย AI กลายเป็นโลกที่โต้ตอบได้อย่างแท้จริง?

ระบบการสร้าง AI ยุคแรกๆ แสดงให้เห็นว่าโมเดลสามารถสร้างภาพและวิดีโอที่น่าเชื่อถือได้ แต่การสร้างสภาพแวดล้อมที่ผู้คนสามารถสำรวจ ควบคุม และโต้ตอบได้แบบเรียลไทม์นั้นเป็นความท้าทายที่แตกต่างออกไปอย่างสิ้นเชิง

Waypoint-1.5 คืออีกก้าวหนึ่งในทิศทางนั้น โดยปรับปรุงความคมชัดและขยายการเข้าถึงฮาร์ดแวร์ ในขณะเดียวกันก็ยังคงผลักดันการสร้างแบบเรียลไทม์ไปยังเครื่องของผู้ใช้

เราเชื่อว่าอนาคตของโมเดลโลกจะไม่ถูกกำหนดโดยสิ่งที่พวกเขาสามารถเรนเดอร์ได้เท่านั้น แต่จะถูกกำหนดโดยความสามารถที่ผู้คนสามารถเข้าไปอยู่อาศัยและโต้ตอบกับมันได้แบบเรียลไทม์

ดาวน์โหลด Waypoint-1.5, รันบนเครื่องด้วย Biome, หรือเข้าใช้งานได้ทันทีที่ Overworld.stream

และหากคุณสร้างสรรค์สิ่งใดที่สนุก แปลกประหลาด หรือดื่มด่ำอย่างไม่คาดคิดด้วย Waypoint-1.5 เราก็อยากจะเห็นมัน!

#AI #WorldModel #GenerativeAI #InteractiveWorlds

ขอบคุณ แหล่งข้อมูล
https://huggingface.co/blog/waypoint-1-5

Waypoint-1.5: โลกเสมือนจริงที่โต้ตอบได้บนการ์ดจอทั่วไปในยุคที่เทคโนโลยี AI ก้าวหน้าอย่างรวดเร็ว การสร้างโลกเสมือนจริงที่สมจริงและโต้ตอบได้กลายเป็นเป้าหมายสำคัญของนักพัฒนาหลายกลุ่ม ล่าสุด Overworld ได้เปิดตัว Waypoint-1.5 ซึ่งเป็นโมเดลวิดีโอเรียลไทม์รุ่นใหม่ ที่ถูกพัฒนาขึ้นมาเพื่อนำประสบการณ์โลกเสมือนจริงที่สมจริงยิ่งขึ้นมาสู่ผู้ใช้งานทั่วไป โดยไม่ต้องอาศัยฮาร์ดแวร์ระดับสูงอีกต่อไปWaypoint-1.5 คืออะไร?Waypoint-1.5 คือโมเดลวิดีโอเรียลไทม์ใหม่ล่าสุดจาก Overworld ที่ต่อยอดมาจาก Waypoint รุ่นแรก โดยมีเป้าหมายหลักคือการทำให้โลกเสมือนจริงที่สามารถโต้ตอบได้นั้น เข้าถึงได้ง่ายขึ้นสำหรับผู้ใช้งานทั่วไปบนฮาร์ดแวร์ที่มีอยู่แล้วรุ่นแรกของ Waypoint ได้พิสูจน์ให้เห็นแล้วว่าโลกเสมือนจริงแบบเรียลไทม์นั้นเป็นไปได้จริง และโมเดลโลกแบบโต้ตอบได้สามารถเป็นมากกว่าแค่การสาธิตวิดีโอแบบพาสซีฟ แต่ยังสามารถเป็นระบบที่ทำงานบนเครื่องของผู้ใช้เอง และเริ่มลดช่องว่างระหว่างการสร้างโลกเสมือนจริงกับการก้าวเข้าไปสำรวจโลกนั้นได้Waypoint-1.5 ได้พัฒนาต่อยอดจากรากฐานที่แข็งแกร่งนั้น โดยมีการปรับปรุงคุณภาพของภาพให้ดียิ่งขึ้น ขยายขอบเขตของฮาร์ดแวร์ที่สามารถรันโมเดลได้บนเครื่อง และก้าวไปอีกขั้นในการจำลองโลกแบบโต้ตอบได้โดยไม่ต้องใช้พลังประมวลผลระดับดาต้าเซ็นเตอร์จุดเด่นใหม่ใน Waypoint-1.5สิ่งที่เปลี่ยนแปลงไปมากที่สุดใน Waypoint-1.5 คือ การเข้าถึงได้ง่ายขึ้น 🚀ด้วย Waypoint-1 เราได้พิสูจน์ประสบการณ์หลักแล้ว สำหรับ Waypoint-1.5 เราต้องการทำให้ประสบการณ์นั้นพร้อมใช้งานบนเครื่องคอมพิวเตอร์ที่หลากหลายมากขึ้น โดยไม่สูญเสียความสามารถในการโต้ตอบแบบเรียลไทม์ นั่นหมายถึงการสร้างโมเดลสองระดับ: โมเดล 720p สำหรับฮาร์ดแวร์ประสิทธิภาพสูง และโมเดล 360p ที่ปรับให้เหมาะกับการใช้งานบนฮาร์ดแวร์ทั่วไปที่หลากหลายนอกจากนี้ เรายังได้ เพิ่มขนาดการฝึกฝนโมเดลอย่างมหาศาล Waypoint-1.5 ได้รับการฝึกฝนด้วยข้อมูลมากกว่า Waypoint-1 ถึงเกือบ 100 เท่า ซึ่งช่วยเพิ่มความสามารถของโมเดลในการสร้างสภาพแวดล้อมที่สอดคล้องกันมากขึ้น และการเคลื่อนไหวที่คงที่สม่ำเสมอตลอดเวลาภายใต้สถาปัตยกรรม Waypoint-1.5 ยังได้รวมเอาเทคนิคการสร้างแบบจำลองวิดีโอที่มีประสิทธิภาพมากขึ้น เพื่อลดการประมวลผลที่ซ้ำซ้อนระหว่างเฟรม สิ่งนี้มีความสำคัญอย่างยิ่ง เพราะโมเดลโลกแบบเรียลไทม์ไม่ได้ถูกตัดสินจากความสวยงามของภาพเพียงเฟรมเดียว แต่ถูกตัดสินจากความสามารถในการตอบสนองทันที, ความสอดคล้องเมื่อคุณเคลื่อนที่ผ่านไป, และความเป็นไปได้ในการใช้งานบนฮาร์ดแวร์ของผู้ใช้เองทำไม Waypoint-1.5 ถึงสำคัญสำหรับโมเดลโลกความก้าวหน้าล่าสุดในด้านวิดีโอที่สร้างขึ้นด้วย AI และโมเดลโลกส่วนใหญ่มักจะมุ่งเน้นไปที่ความคมชัดของภาพ แม้ว่าผลลัพธ์เหล่านั้นจะมีความสำคัญ แต่ความคมชัดเพียงอย่างเดียวก็ไม่เพียงพอที่จะทำให้โลกเสมือนจริงที่โต้ตอบได้รู้สึกสมจริงสิ่งที่ผู้คนจดจำได้คือ การตอบสนอง พวกเขาจำได้ว่าสภาพแวดล้อมตอบสนองต่อพวกเขาหรือไม่, การเคลื่อนไหวยังคงสอดคล้องกันหรือไม่, โลกยังคงอยู่ได้หรือไม่เมื่อพวกเขาสำรวจมัน, และประสบการณ์ทั้งหมดรู้สึกฉับไวแทนที่จะล่าช้านั่นคือช่องว่างที่เราให้ความสำคัญมากที่สุด: ความแตกต่างระหว่างการเฝ้าดูฉากที่สร้างขึ้น กับการได้เข้าไปอยู่ภายในฉากนั้นจริงๆหากโมเดลโลกทำงานได้เฉพาะบนคลัสเตอร์ GPU ขนาดใหญ่ มันก็ยังคงเป็นเพียงการสาธิตที่น่าประทับใจ แต่หากมันทำงานบนฮาร์ดแวร์ของผู้บริโภคทั่วไป มันจะกลายเป็นสิ่งที่ใช้งานได้จริงมากขึ้น: เป็นรากฐานสำหรับความบันเทิงแบบโต้ตอบ, เครื่องมือสร้างสรรค์, การจำลอง, และสภาพแวดล้อมที่ขับเคลื่อนด้วย AI ที่ผู้คนสามารถสำรวจได้จริงWaypoint-1.5 ถูกออกแบบมาตามแนวคิดนั้น ไม่ใช่แค่การสร้างวิดีโอที่ดีขึ้น แต่เป็นการสร้างโลกที่ตอบสนองได้ดีขึ้น สำรวจได้ง่ายขึ้น และยังคงเข้าถึงได้บนฮาร์ดแวร์ของผู้บริโภควิธีสัมผัสประสบการณ์ Waypoint-1.5มีสองวิธีในการใช้งาน Waypoint-1.5:การรันบนเครื่องโดยตรงผ่าน Overworld Biome: รุ่นนี้ออกแบบมาให้ทำงานได้บนฮาร์ดแวร์หลากหลายรูปแบบ และรันไทม์ Biome ที่อัปเดตทำให้การตั้งค่าบนเครื่องทำได้ง่ายขึ้นมาก ด้วยขั้นตอนการติดตั้งใหม่ ผู้ใช้สามารถดาวน์โหลดและเริ่มรันโมเดลบนเครื่องได้ภายในไม่กี่นาทีOverworld Stream: ให้คุณทดลองใช้ Waypoint-1.5 ได้ทันทีผ่านเบราว์เซอร์ โดยไม่ต้องตั้งค่าบนเครื่องใดๆไม่ว่าคุณจะต้องการการเข้าถึงทันทีหรือการควบคุมเต็มรูปแบบบนเครื่อง Waypoint-1.5 ก็พร้อมรองรับทั้งสองแบบนอกจากนี้ เรายังมี World Engine ซึ่งเป็นไลบรารีการอนุมานหลักที่ยืดหยุ่นและใช้งานง่าย ซึ่งขับเคลื่อนไคลเอนต์อย่างเป็นทางการของเรา รวมถึงไคลเอนต์และไลบรารีจากบุคคลที่สามอีกเกือบหนึ่งโหลWaypoint เริ่มต้นจากคำถามง่ายๆ ว่า: อะไรคือสิ่งที่จะทำให้โลกเสมือนจริงที่สร้างขึ้นด้วย AI กลายเป็นโลกที่โต้ตอบได้อย่างแท้จริง?ระบบการสร้าง AI ยุคแรกๆ แสดงให้เห็นว่าโมเดลสามารถสร้างภาพและวิดีโอที่น่าเชื่อถือได้ แต่การสร้างสภาพแวดล้อมที่ผู้คนสามารถสำรวจ ควบคุม และโต้ตอบได้แบบเรียลไทม์นั้นเป็นความท้าทายที่แตกต่างออกไปอย่างสิ้นเชิงWaypoint-1.5 คืออีกก้าวหนึ่งในทิศทางนั้น โดยปรับปรุงความคมชัดและขยายการเข้าถึงฮาร์ดแวร์ ในขณะเดียวกันก็ยังคงผลักดันการสร้างแบบเรียลไทม์ไปยังเครื่องของผู้ใช้เราเชื่อว่าอนาคตของโมเดลโลกจะไม่ถูกกำหนดโดยสิ่งที่พวกเขาสามารถเรนเดอร์ได้เท่านั้น แต่จะถูกกำหนดโดยความสามารถที่ผู้คนสามารถเข้าไปอยู่อาศัยและโต้ตอบกับมันได้แบบเรียลไทม์ดาวน์โหลด Waypoint-1.5, รันบนเครื่องด้วย Biome, หรือเข้าใช้งานได้ทันทีที่ Overworld.streamและหากคุณสร้างสรรค์สิ่งใดที่สนุก แปลกประหลาด หรือดื่มด่ำอย่างไม่คาดคิดด้วย Waypoint-1.5 เราก็อยากจะเห็นมัน!#AI #WorldModel #GenerativeAI #InteractiveWorldshttps://huggingface.co/blog/waypoint-1-5
Shared content
HUGGINGFACE.CO
Waypoint-1.5: Higher-Fidelity Interactive Worlds for Everyday GPUs
We’re on a journey to advance and democratize artificial intelligence through open source and open science.
5 Комментарии 0 Поделились 729 Просмотры 0 предпросмотр