Google AI Edge Gallery

AI Edge Gallery คือแหล่งรวมสุดยอดโมเดลภาษาขนาดใหญ่ (LLM) แบบโอเพนซอร์สที่ทรงพลังที่สุดในโลกบนอุปกรณ์มือถือของคุณ สัมผัสประสบการณ์ AI สร้างสรรค์ประสิทธิภาพสูงโดยตรงบนฮาร์ดแวร์ของคุณ—ใช้งานแบบออฟไลน์ได้อย่างสมบูรณ์ เป็นส่วนตัว และรวดเร็วทันใจ

ตอนนี้มาพร้อมกับ: EmbeddingGemma 2

การอัปเดตนี้รองรับโมเดล EmbeddingGemma 2 เวอร์ชันใหม่ล่าสุดอย่างเป็นทางการ ด้วยเวอร์ชันนี้ เรานำเสนอการค้นหาเชิงความหมายแบบหลายโมดอลที่ล้ำสมัย ซึ่งทำงานได้ 100% บนอุปกรณ์ของคุณ ลองใช้ความสามารถใหม่เหล่านี้ในฟีเจอร์ใหม่ของเรา Instant Media Search และ Video Moment Finder

คุณสมบัติหลัก

- ทักษะของเอเจนต์: เปลี่ยน LLM ของคุณจากผู้สนทนาธรรมดาให้เป็นผู้ช่วยเชิงรุก ใช้ไทล์ทักษะของเอเจนต์เพื่อเพิ่มขีดความสามารถของโมเดลด้วยเครื่องมือต่างๆ เช่น Wikipedia สำหรับการอ้างอิงข้อเท็จจริง แผนที่แบบโต้ตอบ และการ์ดสรุปภาพที่ครบครัน คุณยังสามารถโหลดทักษะแบบโมดูลาร์จาก URL หรือเรียกดูผลงานจากชุมชนบน GitHub Discussions ได้อีกด้วย

- - แชท AI พร้อมโหมดคิดวิเคราะห์: มีส่วนร่วมในการสนทนาแบบลื่นไหลหลายรอบ และเปิดใช้งานโหมดคิดวิเคราะห์ใหม่เพื่อดู "เบื้องหลัง" คุณสมบัตินี้ช่วยให้คุณเห็นกระบวนการให้เหตุผลทีละขั้นตอนของโมเดล ซึ่งเหมาะอย่างยิ่งสำหรับการทำความเข้าใจการแก้ปัญหาที่ซับซ้อน หมายเหตุ: ปัจจุบันโหมดคิดวิเคราะห์ใช้งานได้กับโมเดลที่รองรับ โดยเริ่มจากตระกูล Gemma 4

- ค้นหาสื่อแบบทันที: สำรวจคลังภาพของคุณ (หรือสื่อตัวอย่างในตัว) ด้วยการค้นหาด้วยภาษาธรรมชาติที่รวดเร็วขณะพิมพ์ และการจับคู่ความคล้ายคลึงกันระหว่างภาพ โดยไม่ต้องส่งข้อมูลผ่านคลาวด์
- ค้นหาช่วงเวลาสำคัญในวิดีโอ: ระบุช่วงเวลาที่แน่นอนภายในวิดีโอโดยใช้คำอธิบายด้วยภาษาธรรมชาติ ข้ามไปยังช่วงเวลาที่ไฮไลต์บนไทม์ไลน์แบบโต้ตอบ ตัดแต่งคลิป และบันทึกหรือส่งออกช่วงเวลาที่คุณชื่นชอบ

- ถามภาพ: ใช้พลังของมัลติโมดอลเพื่อระบุวัตถุ แก้ปริศนาภาพ หรือรับคำอธิบายโดยละเอียดโดยใช้กล้องหรือแกลเลอรีภาพของอุปกรณ์ของคุณ

- Audio Scribe: ถอดเสียงและแปลบันทึกเสียงเป็นข้อความแบบเรียลไทม์โดยใช้โมเดลภาษาประสิทธิภาพสูงบนอุปกรณ์

Prompt Lab: พื้นที่ทำงานเฉพาะสำหรับการทดสอบพรอมต์ต่างๆ และกรณีการใช้งานแบบเทิร์นเดียว พร้อมการควบคุมพารามิเตอร์ของโมเดลอย่างละเอียด เช่น อุณหภูมิและค่า top-k
- Mobile Actions: ปลดล็อกการควบคุมอุปกรณ์แบบออฟไลน์และงานอัตโนมัติที่ขับเคลื่อนโดยการปรับแต่ง FunctionGemma 270M อย่างละเอียด

Tiny Garden: มินิเกมทดลองสนุกๆ ที่ใช้ภาษาธรรมชาติในการปลูกและเก็บเกี่ยวสวนเสมือนจริงโดยใช้การปรับแต่ง FunctionGemma 270m อย่างละเอียด

- การจัดการโมเดลและการวัดประสิทธิภาพ: แกลเลอรีเป็นแซนด์บ็อกซ์ที่ยืดหยุ่นสำหรับโมเดลโอเพนซอร์สที่หลากหลาย ดาวน์โหลดโมเดลจากรายการหรือโหลดโมเดลที่กำหนดเองของคุณเองได้อย่างง่ายดาย จัดการไลบรารีโมเดลของคุณได้อย่างง่ายดายและเรียกใช้การทดสอบประสิทธิภาพเพื่อทำความเข้าใจว่าแต่ละโมเดลทำงานบนฮาร์ดแวร์เฉพาะของคุณอย่างไร

- ความเป็นส่วนตัวบนอุปกรณ์ 100%: การอนุมานของโมเดลทั้งหมดเกิดขึ้นโดยตรงบนฮาร์ดแวร์ของอุปกรณ์ของคุณ ไม่จำเป็นต้องเชื่อมต่ออินเทอร์เน็ต จึงมั่นใจได้ถึงความเป็นส่วนตัวอย่างสมบูรณ์สำหรับข้อความแจ้งเตือน รูปภาพ และข้อมูลสำคัญของคุณ

สร้างขึ้นเพื่อชุมชน

AI Edge Gallery เป็นโครงการโอเพนซอร์สที่ออกแบบมาสำหรับชุมชนนักพัฒนาและผู้ที่ชื่นชอบ AI โดยเฉพาะ สำรวจคุณสมบัติตัวอย่างของเรา ร่วมแบ่งปันทักษะของคุณ และช่วยกำหนดอนาคตของระบบนิเวศเอเจนต์บนอุปกรณ์

ตรวจสอบซอร์สโค้ดได้ที่ GitHub:
https://github.com/google-ai-edge/gallery

หมายเหตุ: แอปนี้อยู่ระหว่างการพัฒนา ประสิทธิภาพขึ้นอยู่กับฮาร์ดแวร์ของอุปกรณ์ของคุณ (CPU/GPU) สำหรับการสนับสนุนหรือข้อเสนอแนะ โปรดติดต่อเราที่ [email protected]