Shreyas Garimella ผู้พัฒนา Daft ใช้เครื่องมือนี้ค้นหาข้อมูล AI ทางกายภาพจาก Apple EgoDex ได้อย่างแม่นยำ ด้วยการผสมผสานการเข้ารหัสเซมานติก (SigLIP embeddings) และคุณสมบัติเรขาคณิตจากข้อมูลท่าทางมือ แก้ปัญหา 'menu problem' ที่ข้อมูล Robotics แบบดั้งเดิมถูกจำกัดด้วยงานที่กำหนดไว้ล่วงหน้า EgoDex ของ Apple เป็นชุดข้อมูลท่าทางมือและวิดีโอในสภาพแวดล้อมไม่ควบคุมได้ ซึ่งไม่มีการจัดทำเครื่องหมาย ทำให้การค้นหาข้อมูลเฉพาะเจาะจงเป็นเรื่องท้าทาย Daft ใช้การแปลงข้อมูล HDF5 เป็น DataFrame ร่วมกับ SigLIP และการเปรียบเทียบ cosine similarity เพื่อค้นหาข้อมูลเช่น 'คลิปที่มือยกไม้ที่มีลูกบอล' ได้อย่างรวดเร็ว ช่วยให้ผู้ใช้สามารถค้นหาและวิเคราะห์ข้อมูลในชุดข้อมูลขนาดใหญ่ได้แม่นยำมากขึ้น
AIRoboticsข้อมูล AIApple EgoDexDaftการค้นหาเชิงเซมานติก
สรุปด้วย MAF Local AI · เนื้อหาต้นฉบับเป็นของแหล่งข่าว