Project G-Assist, NVIDIA ACE NIMs สำหรับมนุษย์ดิจิทัล และเครื่องมือ Generative AI มอบประสบการณ์ AI ขั้นสูงบน RTX Laptop นอกจากนี้ยังมี RTX-Accelerated API ที่เร่งการประมวลผลด้วยกราฟิก RTX สำหรับโมเดลภาษาขนาดเล็กที่จะมาใน Windows Copilot Runtime

ในงาน COMPUTEX, NVIDIA ได้ประกาศถึงเทคโนโลยี NVIDIA RTX™ ใหม่ เพื่อขับเคลื่อนผู้ช่วย AI และมนุษย์ดิจิทัลที่ทำงานด้วย GeForce RTX™ AI Laptop รุ่นใหม่

NVIDIA เปิดตัว Project G-Assist — การสาธิตเทคโนโลยีผู้ช่วย AI ที่ขับเคลื่อนด้วย RTX ซึ่งให้ความช่วยเหลือแบบ Context-Aware สำหรับเกมบนพีซีและแอปพลิเคชันต่าง ๆ การสาธิตเทคโนโลยี Project G-Assist เปิดตัวด้วยเกม ARK: Survival Ascended จาก Studio Wildcard, NVIDIA ยังได้เปิดตัวไมโครเซอร์วิสการอนุมาน NVIDIA NIM™ บนพีซีตัวแรกสำหรับแพลตฟอร์ม NVIDIA ACE เพื่อสร้างมนุษย์ดิจิทัล 

เทคโนโลยีเหล่านี้เปิดใช้งานโดยชุดเครื่องมือ NVIDIA RTX AI ซึ่งเป็นชุดเครื่องมือและซอฟต์แวร์ใหม่ที่ช่วยนักพัฒนาในการเพิ่มประสิทธิภาพและปรับใช้โมเดล Generative AI ขนาดใหญ่บนพีซีที่ใช้ระบบ Windows พวกเขาเข้าร่วมกับนวัตกรรม RTX AI เต็มรูปแบบของ NVIDIA ซึ่งเร่งความเร็วแอปพลิเคชันและเกมพีซีมากกว่า 500 รายการ และการออกแบบแล็ปท็อป 200 รายการจากผู้ผลิต

นอกจากนี้ RTX AI PC Laptop ที่เพิ่งประกาศใหม่จาก ASUS และ MSI มี GPU GeForce RTX 4070 และ SoC แบบประหยัดพลังงานพร้อมความสามารถของ Windows 11 AI PC, โดย Windows 11 AI PC เหล่านี้จะได้รับการอัปเดตประสบการณ์ Copilot+ PC ฟรี เมื่อพร้อมใช้งาน

“NVIDIA เปิดตัวยุคของ AI PC ในปี 2018 ด้วยการเปิดตัว RTX Tensor Core GPU และ NVIDIA DLSS” Jason Paul รองประธานฝ่าย Consumer AI ของ NVIDIA กล่าว “ขณะนี้ ด้วย Project G-Assist และ NVIDIA ACE เรากำลังปลดล็อกประสบการณ์ที่ขับเคลื่อนด้วย AI รุ่นต่อไปสำหรับผู้ใช้ RTX AI PC มากกว่า 100 ล้านคน”

Project G-Assist, GeForce AI Assistant

AI ได้รับการตั้งค่าให้เปลี่ยนประสบการณ์การเล่นเกมและในแอป ตั้งแต่การนำเสนอกลยุทธ์การเล่นเกมและการวิเคราะห์การเล่นซ้ำแบบผู้เล่นหลายคน ไปจนถึงการช่วยเหลือเวิร์กโฟลว์สร้างสรรค์ที่ซับซ้อน Project G-Assist เป็นเพียงภาพคร่าวๆ ของอนาคตนี้

เกมพีซีนำเสนอจักรวาลอันกว้างใหญ่ให้สำรวจและกลไกที่ซับซ้อนเพื่อให้ดูสมจริง ซึ่งเป็นเกมที่ท้าทายและใช้เวลานาน แม้แต่นักเล่นเกมที่ทุ่มเทที่สุดก็ตาม Project G-Assist มุ่งหวังที่จะนำความรู้เกี่ยวกับเกมมาไว้ที่ปลายนิ้วของผู้เล่นโดยใช้ Generative AI

Project G-Assist รับอินพุตเสียงหรือข้อความจากผู้เล่น พร้อมด้วยข้อมูลบริบทจากหน้าจอเกม และรันข้อมูลผ่านโมเดลการมองเห็นของ AI โมเดลเหล่านี้ปรับปรุงการรับรู้ตามบริบทและความเข้าใจเฉพาะแอปของโมเดลภาษาขนาดใหญ่ (LLM) ที่เชื่อมโยงกับฐานข้อมูลความรู้ของเกม จากนั้นสร้างการตอบสนองที่ได้รับการปรับแต่งโดยจัดส่งเป็นข้อความหรือคำพูด

NVIDIA ร่วมมือกับ Studio Wildcard เพื่อสาธิตเทคโนโลยีด้วย ARK : Survival Ascended, Project G-Assist สามารถช่วยตอบคำถามเกี่ยวกับสิ่งมีชีวิต ไอเท็ม ตำนาน วัตถุประสงค์ บอสที่ยาก และอื่นๆ อีกมากมาย เนื่องจาก Project G-Assist คำนึงถึงบริบท จึงปรับเปลี่ยนการตอบสนองต่อเซสชั่นเกมของผู้เล่นให้เป็นแบบส่วนตัว

นอกจากนี้ Project G-Assist ยังสามารถกำหนดค่าระบบเกมของผู้เล่นเพื่อให้ได้ประสิทธิภาพและประสิทธิผลสูงสุด โดยสามารถให้ข้อมูลเชิงลึกเกี่ยวกับตัวชี้วัดประสิทธิภาพ ปรับการตั้งค่ากราฟิกให้เหมาะสมโดยขึ้นอยู่กับฮาร์ดแวร์ของผู้ใช้ ใช้การโอเวอร์คล็อกที่ปลอดภัย และลดการใช้พลังงานอย่างชาญฉลาดในขณะที่ยังคงรักษาเป้าหมายด้านประสิทธิภาพไว้

การเปิดตัวครั้งแรกของ ACE PC NIM

เทคโนโลยี NVIDIA ACE สำหรับการขับเคลื่อนมนุษย์ดิจิทัล กำลังมาใน RTX AI PC และเวิร์กสเตชันที่มี NVIDIA NIM – ไมโครเซอร์วิสอนุมานที่ช่วยให้นักพัฒนาสามารถลดเวลาการปรับใช้จากสัปดาห์เหลือเพียงนาที ไมโครเซอร์วิส ACE NIM นำเสนอการอนุมานคุณภาพสูงที่ทำงานภายในอุปกรณ์เพื่อการทำความเข้าใจภาษาธรรมชาติ การสังเคราะห์คำพูด แอนิเมชั่นใบหน้า และอื่น ๆ

ที่งาน COMPUTEX การเปิดตัวเกมที่ใช้ NVIDIA ACE NIM บนพีซีจะมีการนำเสนอในการสาธิตเทคโนโลยี Covert Protocol ซึ่งพัฒนาร่วมกับ Inworld AI ซึ่งตอนนี้แสดงการรู้จำเสียงพูดอัตโนมัติ ของ NVIDIA Audio2Face™ และ NVIDIA Riva ที่ทำงานบนอุปกรณ์ต่างๆ

Windows Copilot Runtime เพิ่มการเร่งความเร็วด้วย GPU สำหรับการใช้งาน SLM ภายในเครื่องพีซี

Microsoft และ NVIDIA กำลังร่วมมือกันเพื่อช่วยให้นักพัฒนานำความสามารถ Generative AI ใหม่มาสู่แอปพลิเคชันบน Windows แบบ Native และเว็บแอปของพวกเขา ความร่วมมือนี้จะช่วยให้นักพัฒนาแอปพลิเคชันสามารถเข้าถึง Application Programming Interface (API) ได้อย่างง่ายดายในการเข้าถึงโมเดลภาษาขนาดเล็ก (SLM) ที่เร่งด้วย GPU ซึ่งช่วยให้สามารถดึงข้อมูลรุ่นเสริม (RAG) ที่ทำงานบนอุปกรณ์โดยเป็นส่วนหนึ่งของ Windows Copilot Runtime

SLM มอบความเป็นไปได้อันยิ่งใหญ่สำหรับนักพัฒนา Windows รวมถึงการสรุปเนื้อหา การสร้างเนื้อหา และงานอัตโนมัติ ความสามารถของ RAG ช่วยเพิ่ม SLM โดยให้โมเดล AI เข้าถึงข้อมูลเฉพาะโดเมนที่ไม่ได้แสดงอย่างดีในโมเดลพื้นฐาน RAG API ช่วยให้นักพัฒนาควบคุมแหล่งข้อมูลเฉพาะแอปพลิเคชัน และปรับแต่งพฤติกรรมและความสามารถของ SLM ให้ตรงกับความต้องการของแอปพลิเคชัน

ความสามารถด้าน AI เหล่านี้จะถูกเร่งโดย NVIDIA RTX GPU เช่นเดียวกับตัวเร่ง AI จากผู้จำหน่ายฮาร์ดแวร์รายอื่น ๆ เพื่อให้ผู้ใช้ปลายทางได้รับประสบการณ์ AI ที่รวดเร็วและตอบสนองทั่วทั้งระบบนิเวศของ Windows

API จะเปิดให้ใช้ตัวอย่างสำหรับนักพัฒนาซอฟต์แวร์ในปลายปีนี้

โมเดลที่เร็วขึ้น 4 เท่า และเล็กลง 3 เท่า ด้วย RTX AI Toolkit 

ระบบนิเวศน์ของ AI ได้สร้างโมเดลโอเพ่นซอร์สหลายแสนโมเดลเพื่อให้นักพัฒนาแอปได้ใช้ประโยชน์ แต่โมเดลส่วนใหญ่ได้รับการฝึกอบรมล่วงหน้าสำหรับวัตถุประสงค์ทั่วไป และสร้างขึ้นเพื่อให้ทำงานในศูนย์ข้อมูล

เพื่อช่วยนักพัฒนาสร้างโมเดล AI เฉพาะแอปพลิเคชันที่ทำงานบนพีซี NVIDIA ขอแนะนำ RTX AI Toolkit ซึ่งเป็นชุดเครื่องมือและ SDK สำหรับการปรับแต่งโมเดล การเพิ่มประสิทธิภาพ และการปรับใช้บน RTX AI PC ชุดเครื่องมือ RTX AI จะพร้อมใช้งานในปลายเดือนนี้เพื่อให้นักพัฒนาเข้าถึงได้กว้างขึ้น

นักพัฒนาสามารถปรับแต่งโมเดลที่ได้รับการฝึกล่วงหน้าด้วยเครื่องมือ QLoRa แบบโอเพ่นซอร์ส จากนั้น พวกเขาสามารถใช้ เครื่องมือเพิ่มประสิทธิภาพโมเดล NVIDIA TensorRT™ เพื่อหาปริมาณโมเดลเพื่อใช้ RAM น้อยลงสูงสุด 3 เท่า จากนั้น NVIDIA TensorRT Cloud จะปรับโมเดลให้เหมาะสมเพื่อประสิทธิภาพสูงสุดในกลุ่มผลิตภัณฑ์ RTX GPU ผลลัพธ์คือประสิทธิภาพเร็วขึ้นสูงสุด 4 เท่า เมื่อเทียบกับรุ่นที่ฝึกไว้ล่วงหน้า

NVIDIA AI Inference Manager SDK ใหม่ ซึ่งขณะนี้พร้อมใช้งานในการเข้าถึงก่อน ช่วยลดความยุ่งยากในการปรับใช้ ACE บนพีซี โดยจะกำหนดค่าพีซีล่วงหน้าด้วยโมเดล AI เอ็นจิ้น และการอ้างอิงที่จำเป็น ในขณะเดียวกันก็จัดการการอนุมาน AI ได้อย่างราบรื่นบนพีซีและคลาวด์

พันธมิตรด้านซอฟต์แวร์ เช่น Adobe, Blackmagic Design และ Topaz กำลังรวมส่วนประกอบของ RTX AI Toolkit ไว้ในแอปสร้างสรรค์ยอดนิยมของตน เพื่อเร่งประสิทธิภาพ AI บนพีซี RTX

“Adobe และ NVIDIA ยังคงร่วมมือกันเพื่อมอบประสบการณ์ที่ก้าวล้ำให้กับลูกค้าในทุกเวิร์กโฟลว์ที่สร้างสรรค์ ตั้งแต่วิดีโอไปจนถึงการถ่ายภาพ การออกแบบ 3 มิติ และอื่นๆ” Deepa Subramaniam รองประธานฝ่ายการตลาดผลิตภัณฑ์ Creative Cloud ของ Adobe กล่าว “TensorRT 10.0 บนพีซี RTX มอบประสิทธิภาพที่ไม่เคยมีมาก่อนและความสามารถที่ขับเคลื่อนด้วย AI สำหรับผู้สร้าง นักออกแบบ และนักพัฒนา ปลดล็อคความเป็นไปได้เชิงสร้างสรรค์ใหม่สำหรับการสร้างเนื้อหาในเครื่องมือสร้างสรรค์ชั้นนำของอุตสาหกรรม เช่น Photoshop”

ส่วนประกอบของชุดเครื่องมือ RTX AI เช่น TensorRT-LLM ได้รับการผสานรวมในเฟรมเวิร์กนักพัฒนาและแอปพลิเคชันยอดนิยมสำหรับ generative AI รวมถึง Automatic1111, ComfyUI, Jan.AI, LangChain, LlamaIndex, Oobabooga และ Sanctum.AI

AI สำหรับการสร้างคอนเทนต์

NVIDIA ยังรวมการเร่งความเร็วด้วย RTX AI เข้ากับแอปสำหรับผู้สร้างเนื้อหา มอดเดอร์ และผู้ใช้งานซอฟต์แวร์ตัดต่อวิดีโอขั้นสูง

เมื่อปีที่แล้ว NVIDIA ได้เปิดตัวการเร่งความเร็ว RTX โดยใช้ TensorRT สำหรับเร่งความเร็ว Stable Diffusion ที่ได้รับความนิยมมากที่สุด นั่นคือ Automatic1111 ตั้งแต่สัปดาห์นี้เป็นต้นไป RTX จะเร่งความเร็ว ComfyUI ที่ได้รับความนิยมอย่างสูง โดยให้ประสิทธิภาพที่ดีขึ้นถึง 60% เมื่อเทียบกับเวอร์ชันที่วางจำหน่ายในปัจจุบัน และมีประสิทธิภาพเร็วขึ้น 7 เท่าเมื่อเทียบกับ MacBook Pro M3 Max

NVIDIA RTX Remix เป็นแพลตฟอร์มการม็อดสำหรับการรีมาสเตอร์เกม DirectX 8 และ DirectX 9 แบบคลาสสิกใหม่พร้อม Full Ray Tracing, NVIDIA DLSS 3.5 และวัสดุที่มีความแม่นยำทางกายภาพ RTX Remix มีรันไทม์เรนเดอร์และแอป RTX Remix Toolkit ซึ่งอำนวยความสะดวกในการดัดแปลงเนื้อหาและเนื้อหาของเกม

เมื่อปีที่แล้ว NVIDIA ได้สร้างโอเพ่นซอร์ส RTX Remix Runtime ช่วยให้ม็อดเดอร์ขยายความเข้ากันได้ของเกมและความสามารถในการเรนเดอร์ขั้นสูง

นับตั้งแต่ RTX Remix Toolkit เปิดตัวเมื่อต้นปีนี้ ม็อดเดอร์ 20,000 คนได้ใช้มันเพื่อม็อดเกมคลาสสิกส่งผลให้มีการรีมาสเตอร์ RTX มากกว่า 100 ครั้งในการพัฒนาบน RTX Remix Showcase Discord

ในเดือนนี้ NVIDIA จะสร้างโอเพ่นซอร์ส RTX Remix Toolkit ซึ่งช่วยให้มอดเดอร์ปรับปรุงวิธีการแทนที่เนื้อหาและฉากต่างๆ เพิ่มรูปแบบไฟล์ที่รองรับสำหรับตัวรวบรวมเนื้อหาของ RTX Remix และสนับสนุนเครื่องมือพื้นผิว AI ของ RTX Remix ด้วยโมเดลใหม่

นอกจากนี้ NVIDIA ยังทำให้ความสามารถของ RTX Remix Toolkit เข้าถึงได้ผ่านทาง REST API ซึ่งช่วยให้มอดเดอร์สามารถลิงก์ RTX Remix ไปยังเครื่องมือสร้างเนื้อหาดิจิทัล เช่น Blender เครื่องมือปรับแต่งแก้ไข เช่น Hammer และแอป AI ทั่วไป เช่น ComfyUI นอกจากนี้ NVIDIA ยังจัดเตรียม SDK สำหรับ RTX Remix Runtime เพื่อให้มอดเดอร์สามารถปรับใช้การเรนเดอร์ของ RTX Remix ในแอปพลิเคชันและเกมอื่น ๆ นอกเหนือจาก DirectX 8 และ DirectX 9

ด้วยแพลตฟอร์ม RTX Remix ที่ถูกสร้างเป็นโอเพ่นซอร์สมากขึ้น มอดเดอร์ทั่วโลกจึงสามารถสร้างการรีมาสเตอร์เกมด้วย RTX Remix ที่น่าทึ่งยิ่งกว่าเดิมได้

NVIDIA RTX Video ซึ่งเป็นฟีเจอร์ความละเอียดสูงสุดที่ขับเคลื่อนโดย AI ที่รองรับในเบราว์เซอร์ยอดนิยมอย่าง Google Chrome, Microsoft Edge และ Mozilla Firefox พร้อมใช้งานแล้วในรูปแบบ SDK สำหรับนักพัฒนาทุกคน ช่วยให้นักพัฒนาสามารถผสานรวม AI เข้าด้วยกันได้แบบเนทีฟสำหรับการเพิ่มขนาด เพิ่มความคมชัด การลดสิ่งรบกวนในการบีบอัด และ การแปลงช่วงไดนามิกสูง (HDR)

ซอฟต์แวร์ตัดต่อวิดีโอ Wondershare Filmora และ DaVinci Resolve ของ Blackmagic Design เร็ว ๆ นี้ RTX Video จะช่วยให้นักตัดต่อวิดีโอสามารถขยายขนาดไฟล์วิดีโอคุณภาพต่ำให้เป็นความละเอียด 4K รวมถึงแปลงไฟล์ต้นฉบับช่วงไดนามิกมาตรฐานเป็น HDR รวมถึงแอปพลิเคชันเล่นไฟล์มัลติมีเดียฟรีอย่าง VLC media จะเพิ่ม RTX Video HDR ให้กับความละเอียดสูงสุดที่มีอยู่เร็ว ๆ นี้

เรียนรู้เพิ่มเติมเกี่ยวกับพีซีและเทคโนโลยี RTX AI โดยเข้าร่วม NVIDIA ที่งาน COMPUTEX