Zoom 회의용 AI 어시스턴트

Zoom 회의에 AI 어시스턴트를 추가하는 방법은 두 가지입니다. 참가자로 통화에 들어오는 클라우드 봇을 연결할 수도 있고, 컴퓨터의 시스템 오디오를 캡처하면서 참석자 목록에는 전혀 나타나지 않는 데스크톱 어시스턴트를 실행할 수도 있습니다. 봇 방식은 팀 전체가 공유하는 녹음에는 더 간단합니다. 데스크톱 방식은 통화가 비공개이고 방 안에 녹음 중임을 알리고 싶지 않을 때 더 낫습니다.

저는 회의와 인터뷰를 위한 오픈소스(AGPL-3.0) 데스크톱 AI 어시스턴트인 Natively의 창립자입니다. 이것은 제가 실제로 매일 Zoom에서 사용하는 설정이며, 각 방식의 솔직한 장단점과 사후 요약이 아니라 통화가 진행되는 동안 도움을 받는 방법까지 함께 다룹니다.

통화 중 봇 대 데스크톱 캡처

Zoom에는 자체 내장 AI Companion이 있고, 수많은 서드파티 봇들이 회의에 참여해 녹음하고 요약해 줍니다. 이들은 참가자로서 통화에 들어오는 방식으로 작동하므로, 모두가 "notetaker"나 제품명이 적힌 새로운 참석자가 나타나는 것을 보게 됩니다.

데스크톱 어시스턴트는 다르게 작동합니다. 운영체제 수준에서 컴퓨터가 이미 재생하고 전송하고 있는 오디오를 캡처하므로, 통화에 참여시킬 대상이 아예 없습니다. Natively는 Rust 기반 시스템 오디오 캡처를 사용하여 Zoom, Teams, Meet, Slack, Discord를 포함한 모든 데스크톱 앱에서 작동합니다. 상대방은 어떤 도구도 실행되지 않을 때와 동일한 참가자 목록을 보게 됩니다.

Zoom에서 Natively 설정하기, 처음부터 끝까지

핵심은 Zoom 자체에서는 설정할 것이 거의 없다는 점입니다. Zoom 앱을 설치하거나 봇에 계정 접근 권한을 부여할 필요가 없습니다. Zoom과 함께 데스크톱 프로그램을 실행하면, 컴퓨터가 이미 하고 있는 작업을 그대로 듣습니다.

회의가 시작되기 전에 Natively를 엽니다. 운영체제가 요청하는 마이크 및 시스템 오디오 권한을 한 번만 허용하세요. 평소처럼 Zoom 통화에 참여하세요. 그게 설정의 전부입니다. 사람들이 말을 시작하는 즉시 어시스턴트가 전사를 시작하고, 창은 화면 위에 떠서 당신은 읽을 수 있지만 화면 공유에는 나타나지 않습니다.

Zoom에서 특히 중요한 세부 사항이 하나 있습니다. 시스템 오디오 캡처는 다른 참가자의 목소리가 스피커나 헤드폰을 통해 나오기 때문에 이를 포착합니다. 자신의 목소리는 마이크를 통해 들어옵니다. Natively는 둘 다 처리하므로, 스피커를 쓰든 블루투스 헤드셋을 쓰든 전사에는 대화의 양쪽이 모두 담깁니다.

실제로 중요한 Zoom AI 기능

Zoom의 AI 마케팅 대부분은 요약에 관한 것입니다. 요약은 이제 기본 요건일 뿐입니다. 통화의 느낌을 바꾸는 기능은 아직 통화 중일 때 도착하는 도움입니다.

Zoom 통화에서 어려운 질문을 듣는 것과 좋은 답변을 시작하는 것 사이의 간극은 보통 없었으면 하는 몇 초의 침묵입니다. 바로 그 틈을 위해 실시간 어시스턴트가 만들어졌습니다. Natively는 제 하드웨어에서 500밀리초 미만으로 관련 답변이나 다음 질문을 화면에 표시하며, 이는 침묵이 어색해지기 전에 사용할 수 있을 만큼 충분히 빠릅니다. 실시간 전사는 또한 누군가 절반만 들린 숫자를 언급했을 때 다시 말해달라고 부탁하지 않고 세 문장 뒤로 스크롤할 수 있다는 의미이기도 합니다.

통화 후반부에는 날것의 전사보다 노트가 더 중요합니다. 글자로 가득한 벽은 결과물이 아닙니다. 결정, 담당자, 할 일이야말로 결과물입니다. 그 이유가 궁금하다면, AI 회의 어시스턴트 완벽 가이드에서 진짜 노트 기능과 요약만 덧붙인 전사를 구분하는 방법을 다룹니다.

Zoom 자체의 AI Companion은 어떨까?

Zoom은 이제 자체 AI Companion을 제공하며, 많은 사람에게 이것이 가장 먼저 시도해볼 명백한 선택입니다. 회의를 요약하고, 후속 조치를 작성하고, 무엇이 논의되었는지에 대한 질문에 답하며, 이 모든 것이 추가 설치 없이 Zoom 안에서 이루어집니다. 팀 전체가 이미 Zoom을 쓰고 있고 관리자가 이를 활성화했다면 합리적인 기본값이며, 저도 굳이 말리지 않을 것입니다.

그래도 제가 별도의 어시스턴트를 찾는 이유는 두 가지입니다. 첫째는 데이터가 어디로 가는지입니다. AI Companion은 Zoom 계정 제어 하에 Zoom의 클라우드에서 처리되는데, 이는 내부 동기화에는 괜찮지만 기밀 협상이나 후보자 면접에는 설득력이 떨어집니다. 로컬에서 또는 자신의 키로 실행할 수 있는 데스크톱 어시스턴트는 그 대화를 공유 클라우드에서 완전히 벗어나게 합니다.

둘째는 AI Companion이 실시간 순간이 아니라 요약을 중심으로 만들어졌다는 점입니다. 무슨 일이 있었는지 알려주는 데는 능합니다. 상대방이 말을 끝내지 않았을 때 화면에 답을 띄워주지는 않습니다. 원하는 가치가 사후의 정돈된 요약이 아니라 통화 중의 도움이라면, 그것은 다른 도구이며 둘은 공존할 수 있습니다. 저는 같은 통화에서 둘 다 사용한 적이 있습니다. 공유 기록에는 Zoom의 요약, 저만 보는 실시간 도움에는 비공개 어시스턴트를 썼습니다.

캡처가 잘못될 때, 그리고 고치는 방법

시스템 오디오 캡처는 안정적이지만, Zoom에서 사람들을 혼란스럽게 하는 설정이 두 가지 있으며, 둘 다 중요한 통화 전에 알아두면 좋은 빠른 해결책이 있습니다.

첫 번째는 상대방 음성이 빠지는 경우입니다. 전사에 자신의 말만 나오고 다른 참가자의 말이 나오지 않는다면, 어시스턴트가 마이크는 받고 있지만 스피커로 나오는 시스템 오디오는 받지 못하고 있는 것입니다. macOS에서는 거의 항상 아직 허용되지 않은 일회성 화면 및 오디오 권한이 원인입니다. 시스템 설정에서 승인하고 어시스턴트를 재시작하면 양쪽 모두 나타납니다. 이는 통화 전에 미리 한 번 해두어야 하며, 고객이 기다리는 중에 할 일이 아닙니다.

두 번째는 블루투스 헤드셋이 오디오 모드를 전환하는 경우입니다. 일부 무선 헤드셋은 마이크를 활성화하면 시스템이 캡처할 수 있는 오디오까지 줄어드는 저품질 통화 프로필로 전환됩니다. 헤드셋을 연결하는 순간 정확도가 떨어진다면, 유선 헤드폰이나 노트북 스피커가 보통 더 깨끗하게 전사됩니다. 이것은 하드웨어의 특성이며 소프트웨어의 문제가 아니고, 캡처 기반의 모든 도구에 동일하게 영향을 미칩니다.

Zoom에서의 동의는 선택이 아니다

다른 참가자에게 보이지 않는 것은 당신을 위한 프라이버시 기능입니다. 그것이 그들에 대한 당신의 의무를 바꾸지는 않습니다. 녹음 및 전사에 대한 동의 법규는 지역과 통화가 내부용인지 외부용인지에 따라 다르며, 아무도 볼 수 없는 어시스턴트라고 해서 그 의무가 면제되지는 않습니다.

제 원칙은 이렇습니다. 누군가가 제가 전사를 보관했다는 사실을 안다면 불편할 것 같다면, 먼저 물어봅니다. 내부 통화에서는 보통 문제가 되지 않습니다. 외부 통화, 면접, 규제가 있는 모든 경우에는 회사 정책과 해당 법률을 따르세요. 노트테이커 프라이버시 가이드에서 전사가 어디에 저장되고 어떻게 통제권을 유지할 수 있는지 더 깊이 다룹니다.

자주 묻는 질문

봇이 참여하지 않고도 Zoom에서 AI 어시스턴트를 사용할 수 있나요?

네. Natively 같은 데스크톱 어시스턴트는 시스템 수준에서 Zoom의 오디오를 캡처하므로 참가자 목록에 봇이 나타나지 않습니다. 통화 중인 다른 사람들에게는 추가 참석자가 보이지 않습니다.

AI 어시스턴트는 Mac과 Windows 모두에서 Zoom과 작동하나요?

Natively는 macOS 12 이상과 Windows 10 및 11에서 실행됩니다. 두 플랫폼에서 동일한 방식으로 시스템 오디오를 캡처하므로 Zoom은 동일하게 작동합니다. Linux는 아직 지원되지 않습니다.

Zoom에서 화면을 공유하면 어시스턴트가 보이나요?

아니요. Natively의 오버레이는 화면 공유 시 숨겨지도록 설계되어 있어, Zoom에서 발표하면서도 본인만 전사와 답변을 계속 읽을 수 있습니다. 당신만 볼 수 있습니다.

Zoom에서 AI 어시스턴트를 사용하는 것이 무료인가요?

자신의 API 키를 가져오거나 Ollama를 통해 로컬 모델을 실행하면 Natively는 무료이며, 사용한 토큰만큼만 비용이 들거나 로컬에서는 전혀 들지 않습니다. 설정을 전혀 원하지 않는 사람들을 위한 일회성 Pro 구매와 관리형 API 요금제도 있습니다.

다음 Zoom 통화에서 사용해보세요

위험 부담이 실제로 있는 통화, 즉 고객 미팅이나 면접에서 시작해 실시간 도움이 준비된 느낌을 얼마나 바꾸는지 확인해보세요. 노트가 거의 중요하지 않은 스탠드업보다 더 나은 테스트입니다.

방 안에 봇 없이 Zoom에서 실시간 전사와 답변을 원한다면, Natively는 무료로 사용해볼 수 있습니다. 대신 Google Meet을 쓰시나요? Google Meet 가이드에서 해당 플랫폼에 대한 동일한 설정을 다룹니다.