Natively คืออะไร?

ผู้ช่วยเดสก์ท็อปที่ฟังบทสนทนาที่คุณกำลังอยู่ในนั้น และตอบบนหน้าจอของคุณโดยไม่เข้าร่วมการโทร

ในหน้านี้

Natively เป็นแอปพลิเคชันเดสก์ท็อปสำหรับ macOS และ Windows ทำงานควบคู่กับบทสนทนาสด (การสัมภาษณ์ การโทรกับลูกค้า การบรรยาย การประชุมยืน) ถอดเสียงทั้งสองฝ่าย และแสดงคำตอบบนหน้าจอของคุณเมื่อคุณขอ มันไม่ใช่บอทเข้าร่วมประชุม ไม่มีสิ่งใดเข้าร่วมการโทร และผู้เข้าร่วมคนอื่นจะไม่เห็นผู้เข้าร่วมใหม่ปรากฏในรายชื่อ

สามสิ่งที่มันทำพร้อมกัน

  • ฟัง เสียงระบบและไมโครโฟนของคุณถูกจับเป็นสองแชนแนลแยกกัน แอปจึงรู้ว่าใครพูดอะไร ไปป์ไลน์การจับเสียงเขียนด้วย Rust และส่ง PCM ดิบไปยังชั้นแอปโดยไม่มีการคัดลอก จึงล่าช้าจากห้องจริงไม่ถึงครึ่งวินาที
  • เห็น ปุ่มลัดเดียวจับภาพหน้าจอบริเวณที่มีโจทย์โค้ดหรือสไลด์ รัน OCR บนภาพนั้น และนำข้อความที่ได้เข้าสู่บริบทเดียวกับบทถอดเสียง
  • ตอบ คำตอบแสดงอยู่ในโอเวอร์เลย์ลอยที่ Zoom, Google Meet และ Microsoft Teams ไม่รวมอยู่ในการแชร์หน้าจอ

ข้อมูลของคุณอยู่ที่ไหน

การจับเสียง การบัฟเฟอร์บทถอดเสียง และคลังบทถอดเสียง ทั้งหมดอยู่บนเครื่องของคุณเอง บทถอดเสียงถูกฝังลงในฐานข้อมูล SQLite ภายในเครื่องด้วย sqlite-vec ซึ่งทำให้คุณสามารถถามว่า VP พูดอะไรเกี่ยวกับการย้ายระบบเมื่อสามสัปดาห์ก่อน แล้วได้รับส่วนที่ตรงกลับมา ฐานข้อมูลนั้นเป็นไฟล์บนดิสก์ของคุณ ไม่ถูกซิงค์ไปที่ไหนเลย

เก้าโหมด ไม่ใช่เก้าพรอมต์

โหมดที่คุณเลือกจะเขียนชุดคำสั่งเบื้องหลังคำขอใหม่ทั้งหมด แทนที่จะแค่เติมคำแนะนำไว้ข้างหน้า โหมดสัมภาษณ์เชิงเทคนิคบีบให้ทุกคำตอบเป็นไปตามโครงสร้าง: การตั้งปัญหา แนวทาง กรณีขอบ ความซับซ้อน และคำถามต่อเนื่อง โหมดการขายติดตามข้อโต้แย้งและการค้นหาความต้องการ โหมดบรรยายจัดรูปแบบสูตร ความแตกต่างนี้สำคัญในทางปฏิบัติ คำตอบที่ถูกหล่อหลอมโดยโหมดสามารถอ่านออกเสียงได้ ส่วนคำตอบที่ถูกหล่อหลอมโดยคำแนะนำมักทำไม่ได้

สิ่งที่มันไม่ใช่

  • มันไม่ใช่บอทจดบันทึก ไม่มีอะไรปรากฏในรายชื่อผู้เข้าร่วม และไม่มีการแจ้งเตือนการบันทึกที่ต้องปิด
  • มันไม่ใช่หน้าต่างแชทที่คุณต้อง Alt-Tab สลับไปมา การสลับหน้าต่างมองเห็นได้ แต่โอเวอร์เลย์มองไม่เห็น
  • มันไม่ใช่การันตีว่าจะผ่านทุกระบบคุมสอบ (proctoring) โหมดล่องหนครอบคลุมการจับภาพหน้าจอที่แชร์และชื่อโปรเซส แต่ไม่ครอบคลุมผู้คุมสอบที่จับตาดูคุณผ่านเว็บแคม หรือเบราว์เซอร์ที่ถูกล็อกบนเครื่องที่สองที่คุณไม่ได้ควบคุม

ถัดไป

ยังติดอยู่ไหม? บอกเราทาง GitHub

เปิด issue