BlogMeetings & Calls

ผู้ช่วย AI สำหรับการประชุม Zoom

How to add an AI assistant to Zoom for live transcription, real-time answers, and notes, with or without a bot. A practical setup guide.

1 min read

มีสองวิธีในการเพิ่มผู้ช่วย AI เข้าไปในการประชุม Zoom คุณสามารถเชื่อมต่อบอทบนคลาวด์ที่เข้าร่วมสายในฐานะผู้เข้าร่วมที่มองเห็นได้ หรือรันผู้ช่วยแบบเดสก์ท็อปที่บันทึกเสียงระบบของคอมพิวเตอร์คุณและไม่ปรากฏในรายชื่อผู้เข้าร่วมเลย วิธีใช้บอทนั้นง่ายกว่าสำหรับการบันทึกที่แชร์กันในทีม ส่วนวิธีเดสก์ท็อปเหมาะกว่าเมื่อการสนทนาเป็นเรื่องส่วนตัวและคุณไม่อยากประกาศให้ทุกคนในห้องรู้ว่ามีการบันทึกเสียงอยู่

ผมเป็นผู้ก่อตั้ง Natively ซึ่งเป็นผู้ช่วย AI แบบเดสก์ท็อปโอเพนซอร์ส (AGPL-3.0) สำหรับการประชุมและการสัมภาษณ์ นี่คือการตั้งค่าที่ผมใช้จริงบน Zoom ทุกวัน รวมถึงข้อดีข้อเสียที่ตรงไปตรงมาของแต่ละแนวทาง และวิธีขอความช่วยเหลือในขณะที่การสนทนากำลังดำเนินอยู่ แทนที่จะได้แค่สรุปหลังจบการประชุม

บอทในสาย เทียบกับ การบันทึกจากเดสก์ท็อป

Zoom มี AI Companion ในตัวของตัวเอง และบอทจากบุคคลที่สามจำนวนมากจะเข้าร่วมการประชุมของคุณเพื่อบันทึกและสรุปเนื้อหา โดยทำงานด้วยการเข้าสู่สายในฐานะผู้เข้าร่วม ซึ่งหมายความว่าทุกคนจะเห็นผู้เข้าร่วมใหม่ปรากฏขึ้น มักมีป้ายกำกับว่า "notetaker" หรือชื่อผลิตภัณฑ์

ผู้ช่วยแบบเดสก์ท็อปทำงานแตกต่างกัน มันบันทึกเสียงที่คอมพิวเตอร์ของคุณเล่นและส่งออกไปอยู่แล้ว ในระดับระบบปฏิบัติการ จึงไม่มีอะไรต้องเข้าร่วมในสายเลย Natively ใช้การบันทึกเสียงระบบที่สร้างด้วย Rust ซึ่งทำงานได้กับแอปเดสก์ท็อปทุกตัว รวมถึง Zoom, Teams, Meet, Slack และ Discord คนที่คุณคุยด้วยจะเห็นรายชื่อผู้เข้าร่วมเหมือนกับที่พวกเขาจะเห็นหากไม่มีเครื่องมือใดทำงานอยู่เลย

คำถามบอทบนคลาวด์การบันทึกจากเดสก์ท็อป (Natively)
ปรากฏในรายชื่อผู้เข้าร่วมหรือไม่?ใช่ ในฐานะผู้เข้าร่วมที่มองเห็นได้ไม่มีผู้เข้าร่วมเพิ่มเติม
เสียงถูกประมวลผลที่ไหนอัปโหลดไปยังเซิร์ฟเวอร์บนคลาวด์ในเครื่อง ใช้คีย์ของคุณเอง หรือแบบจัดการให้ เลือกได้ตามใจ
ช่วยในระหว่างการสนทนาหรือไม่?มักเป็นสรุปหลังจบคำตอบแบบสดบนหน้าจอ
มองเห็นได้เมื่อแชร์หน้าจอหรือไม่?ไม่เกี่ยวข้องไม่ ส่วนที่ซ้อนทับจะยังคงถูกซ่อนอยู่

การตั้งค่า Natively บน Zoom ตั้งแต่ต้นจนจบ

ประเด็นสำคัญคือแทบไม่ต้องตั้งค่าอะไรภายใน Zoom เองเลย คุณไม่ต้องติดตั้งแอป Zoom หรือให้สิทธิ์บอทเข้าถึงบัญชีของคุณ คุณแค่รันโปรแกรมเดสก์ท็อปควบคู่กับ Zoom และมันจะฟังสิ่งที่เครื่องของคุณกำลังทำอยู่แล้ว

เปิด Natively ก่อนที่การประชุมจะเริ่ม ให้สิทธิ์ไมโครโฟนและเสียงระบบแบบครั้งเดียวที่ระบบปฏิบัติการของคุณขอ เข้าร่วมสาย Zoom ของคุณตามปกติ นั่นคือการตั้งค่าทั้งหมด ผู้ช่วยจะเริ่มถอดความทันทีที่คนเริ่มพูด และหน้าต่างของมันจะอยู่บนหน้าจอของคุณ ที่คุณอ่านได้แต่การแชร์หน้าจอมองไม่เห็น

โดยเฉพาะบน Zoom มีรายละเอียดหนึ่งที่สำคัญ: การบันทึกเสียงระบบจะจับเสียงของผู้เข้าร่วมคนอื่นได้ เพราะเสียงของพวกเขามาผ่านลำโพงหรือหูฟังของคุณ ส่วนเสียงของคุณเองมาผ่านไมโครโฟน Natively จัดการทั้งสองอย่าง ดังนั้นบทถอดความจึงมีทั้งสองฝั่งของการสนทนา ไม่ว่าคุณจะใช้ลำโพงหรือหูฟังบลูทูธ

ฟีเจอร์ AI ของ Zoom ที่สำคัญจริงๆ

การตลาด AI ส่วนใหญ่ของ Zoom เน้นไปที่การสรุปเนื้อหา การสรุปกลายเป็นมาตรฐานพื้นฐานไปแล้ว ฟีเจอร์ที่เปลี่ยนความรู้สึกของการสนทนาคือความช่วยเหลือที่มาถึงในขณะที่คุณยังอยู่ในการสนทนานั้น

ช่วงห่างระหว่างการได้ยินคำถามยากๆ ในสาย Zoom กับการเริ่มตอบคำตอบที่ดี มักจะเป็นความเงียบไม่กี่วินาทีที่คุณอยากหลีกเลี่ยง นั่นคือช่วงเวลาที่ผู้ช่วยแบบเรียลไทม์ถูกสร้างขึ้นมาเพื่อรองรับ Natively แสดงคำตอบที่เกี่ยวข้องหรือคำถามถัดไปบนหน้าจอในเวลาไม่ถึง 500 มิลลิวินาทีบนฮาร์ดแวร์ของผม ซึ่งเร็วพอที่จะใช้ได้ก่อนที่ความเงียบจะกลายเป็นความอึดอัด การถอดความแบบสดยังหมายความว่าคุณสามารถเลื่อนกลับไปสามประโยคได้เมื่อมีคนพูดถึงตัวเลขที่คุณได้ยินเพียงครึ่งเดียว โดยไม่ต้องขอให้พวกเขาพูดซ้ำ

สำหรับช่วงครึ่งหลังของการประชุม บันทึกย่อมีความสำคัญมากกว่าบทถอดความดิบ กำแพงข้อความไม่ใช่สิ่งที่ส่งมอบได้จริง การตัดสินใจ ผู้รับผิดชอบ และรายการสิ่งที่ต้องทำต่างหากที่สำคัญ หากคุณต้องการเข้าใจเหตุผลเบื้องหลังเรื่องนี้ คู่มือฉบับสมบูรณ์เกี่ยวกับผู้ช่วย AI สำหรับการประชุม อธิบายวิธีแยกแยะฟีเจอร์บันทึกย่อที่แท้จริงจากบทถอดความที่แค่แปะสรุปไว้ด้านบน

แล้ว AI Companion ของ Zoom เองล่ะ?

ตอนนี้ Zoom มี AI Companion ของตัวเองแล้ว และสำหรับหลายคนมันคือตัวเลือกแรกที่ชัดเจนในการลองใช้ มันสรุปการประชุม ร่างข้อความติดตามผล และตอบคำถามเกี่ยวกับสิ่งที่พูดไป ทั้งหมดนี้อยู่ภายใน Zoom โดยไม่ต้องติดตั้งอะไรเพิ่ม ถ้าทีมของคุณทั้งหมดใช้ Zoom อยู่แล้วและผู้ดูแลระบบเปิดใช้งานมันไว้ นั่นก็เป็นตัวเลือกเริ่มต้นที่สมเหตุสมผล และผมจะไม่ชักจูงให้คุณเลิกใช้มัน

แต่มีสองอย่างที่ทำให้ผมยังหันไปใช้ผู้ช่วยแยกต่างหากอยู่ดี อย่างแรกคือข้อมูลไปที่ไหน AI Companion ประมวลผลบนคลาวด์ของ Zoom ภายใต้การควบคุมบัญชี Zoom ซึ่งใช้ได้ดีสำหรับการซิงค์งานภายใน แต่อธิบายได้ยากกว่าสำหรับการเจรจาที่เป็นความลับหรือการสัมภาษณ์ผู้สมัครงาน ผู้ช่วยแบบเดสก์ท็อปที่สามารถรันในเครื่องหรือด้วยคีย์ของคุณเองได้ จะทำให้บทสนทนานั้นไม่ต้องผ่านคลาวด์ที่ใช้ร่วมกันเลย

อย่างที่สองคือ AI Companion ถูกสร้างขึ้นโดยเน้นที่การสรุปย้อนหลัง ไม่ใช่ช่วงเวลาสดๆ มันเก่งในการบอกคุณว่าเกิดอะไรขึ้น แต่มันไม่ได้อยู่บนหน้าจอของคุณเพื่อป้อนคำตอบในขณะที่อีกฝ่ายยังพูดไม่จบประโยค หากคุณค่าที่คุณต้องการคือความช่วยเหลือในระหว่างการสนทนา ไม่ใช่สรุปที่เรียบร้อยหลังจบ นั่นคือเครื่องมือคนละตัว และทั้งสองอย่างอยู่ร่วมกันได้ ผมเคยใช้ทั้งสองอย่างในการสนทนาเดียวกัน: สรุปของ Zoom สำหรับบันทึกที่แชร์ร่วมกัน ส่วนผู้ช่วยส่วนตัวสำหรับความช่วยเหลือแบบเรียลไทม์ที่มีเพียงผมคนเดียวที่เห็น

เมื่อการบันทึกเสียงผิดพลาด และวิธีแก้ไข

การบันทึกเสียงระบบนั้นเชื่อถือได้ แต่มีการตั้งค่าสองอย่างที่มักทำให้คนสับสนบน Zoom และทั้งสองอย่างมีวิธีแก้ไขเร็วๆ ที่ควรรู้ไว้ก่อนการสนทนาที่สำคัญ

อย่างแรกคือเสียงอีกฝั่งที่หายไป ถ้าบทถอดความแสดงเฉพาะคำพูดของคุณเองและไม่มีคำพูดของผู้เข้าร่วมคนอื่น ผู้ช่วยกำลังรับไมโครโฟนของคุณแต่ไม่ได้รับเสียงระบบที่เล่นผ่านลำโพงของคุณ บน macOS มักเป็นเพราะสิทธิ์หน้าจอและเสียงแบบครั้งเดียวที่ยังไม่ได้ให้ไว้ ให้อนุมัติสิทธิ์นี้ในการตั้งค่าระบบ แล้วรีสตาร์ทผู้ช่วย ทั้งสองฝั่งก็จะปรากฏขึ้น ทำสิ่งนี้เพียงครั้งเดียว ก่อนการสนทนาล่วงหน้าพอสมควร ไม่ใช่ขณะที่ลูกค้ากำลังรออยู่

อย่างที่สองคือหูฟังบลูทูธที่เปลี่ยนโหมดเสียง เมื่อหูฟังไร้สายบางรุ่นเปิดไมโครโฟน มันจะลดระดับลงไปเป็นโปรไฟล์การโทรคุณภาพต่ำ ซึ่งก็ลดทอนคุณภาพเสียงที่ระบบสามารถบันทึกได้ด้วย หากความแม่นยำลดลงในจังหวะที่คุณเชื่อมต่อหูฟัง หูฟังแบบมีสายหรือลำโพงแล็ปท็อปของคุณมักจะถอดความได้สะอาดกว่า นี่เป็นความแปลกของฮาร์ดแวร์ ไม่ใช่ซอฟต์แวร์ และมันส่งผลกระทบต่อเครื่องมือที่อิงกับการบันทึกเสียงทุกตัวในแบบเดียวกัน

ความยินยอมบน Zoom ไม่ใช่เรื่องเลือกได้

การไม่ปรากฏให้ผู้เข้าร่วมคนอื่นเห็นเป็นฟีเจอร์ความเป็นส่วนตัวสำหรับคุณ มันไม่เปลี่ยนแปลงหน้าที่ของคุณที่มีต่อพวกเขา กฎหมายเรื่องความยินยอมในการบันทึกเสียงและถอดความแตกต่างกันไปตามสถานที่และตามว่าการสนทนานั้นเป็นเรื่องภายในหรือภายนอก และผู้ช่วยที่ไม่มีใครมองเห็นก็ไม่ได้ทำให้คุณพ้นจากหน้าที่เหล่านั้น

กฎทั่วไปของผมคือ ถ้าผมรู้สึกไม่สบายใจที่จะให้ใครรู้ว่าผมเก็บบทถอดความไว้ ผมจะถามก่อนเสมอ สำหรับการสนทนาภายในมักไม่ใช่ปัญหา สำหรับการสนทนาภายนอก การสัมภาษณ์ และเรื่องใดก็ตามที่อยู่ภายใต้กฎระเบียบ ให้ปฏิบัติตามนโยบายของบริษัทคุณและกฎหมายที่เกี่ยวข้อง คู่มือความเป็นส่วนตัวสำหรับเครื่องมือจดบันทึก อธิบายเจาะลึกว่าบทถอดความถูกเก็บไว้ที่ไหนและจะรักษาการควบคุมเหนือมันได้อย่างไร

คำถามที่พบบ่อย

ผมสามารถใช้ผู้ช่วย AI บน Zoom ได้โดยไม่ต้องมีบอทเข้าร่วมหรือไม่?

ได้ ผู้ช่วยแบบเดสก์ท็อปอย่าง Natively บันทึกเสียงของ Zoom ในระดับระบบ จึงไม่มีบอทปรากฏในรายชื่อผู้เข้าร่วม คนอื่นในสายจะไม่เห็นผู้เข้าร่วมเพิ่มเติมเลย

ผู้ช่วย AI ทำงานกับ Zoom ได้ทั้งบน Mac และ Windows หรือไม่?

Natively ทำงานบน macOS 12 และรุ่นใหม่กว่า รวมถึง Windows 10 และ 11 มันบันทึกเสียงระบบด้วยวิธีเดียวกันบนทั้งสองระบบ ดังนั้น Zoom จึงทำงานเหมือนกัน Linux ยังไม่ได้รับการสนับสนุน

ผู้ช่วยจะปรากฏขึ้นหรือไม่ถ้าผมแชร์หน้าจอบน Zoom?

ไม่ ส่วนที่ซ้อนทับของ Natively ถูกออกแบบมาให้ซ่อนอยู่เมื่อแชร์หน้าจอ ดังนั้นคุณสามารถนำเสนอใน Zoom พร้อมกับอ่านบทถอดความและคำตอบด้วยตัวเองต่อไปได้ มีเพียงคุณเท่านั้นที่เห็นมัน

การใช้ผู้ช่วย AI บน Zoom ฟรีหรือไม่?

Natively ใช้งานได้ฟรีหากคุณนำคีย์ API ของคุณเองมาใช้ หรือรันโมเดลในเครื่องผ่าน Ollama โดยจ่ายเฉพาะโทเค็นที่คุณใช้ หรือไม่จ่ายอะไรเลยเมื่อรันในเครื่อง นอกจากนี้ยังมีการซื้อ Pro แบบครั้งเดียวและแพ็กเกจ API แบบจัดการให้สำหรับคนที่ไม่ต้องการตั้งค่าอะไรเลย

ลองใช้ในการสนทนา Zoom ครั้งต่อไปของคุณ

เริ่มต้นด้วยการสนทนาหนึ่งครั้งที่มีความเสี่ยงจริง เช่น การประชุมกับลูกค้าหรือการสัมภาษณ์งาน แล้วดูว่าความช่วยเหลือแบบสดเปลี่ยนความรู้สึกพร้อมของคุณหรือไม่ นั่นเป็นการทดสอบที่ดีกว่าการประชุมประจำวันที่บันทึกย่อแทบไม่มีความสำคัญ

หากคุณต้องการบทถอดความแบบสดและคำตอบบน Zoom โดยไม่มีบอทอยู่ในห้อง Natively ให้ลองใช้ได้ฟรี ใช้ Google Meet แทนอยู่หรือเปล่า? คู่มือ Google Meet ครอบคลุมการตั้งค่าเดียวกันสำหรับแพลตฟอร์มนั้น

Posted about Natively? A post with 5,000 views earns you a month of Ultra, free.

Keep reading