프롬프트 하나로 30분 만에 데스크톱 앱 완성 — Manus AI ‘My Computer’ 실연 리포트
📺 원본 영상: 프롬프트 하나 쳤을 뿐인데 30분 만에 데스크톱 앱이 완성됩니다 (feat. 마누스 AI) 🎙️ 채널: 빌더 조쉬 Builder Josh 📅 정리 일자: 2026-04-20 ⚠️ Note: 본 리포트는 영상의 음성을 텍스트로 변환(STT)하여 정리한 것입니다. 화면에 표시된 자료(앱 UI, 코드, 실행 결과 화면 등)는 포함되지 않을 수 있으며, 불명확한 STT 출력은 문맥 기반으로 교정하였습니다.
개요
이 영상은 Manus AI가 새롭게 출시한 ‘My Computer’ 기능을 활용하여 단 하나의 프롬프트만으로 세 가지 macOS 데스크톱 앱을 실시간으로 제작하는 전 과정을 실연한다. 실시간 다국어 회의 통역 앱, AI 요약 기능이 탑재된 회의록 STT 앱, 그리고 카카오톡 메시지 자동화 앱까지 각 앱은 약 30분 내외의 시간 안에 완성되었다. 강연자인 빌더 조쉬는 이 실연을 통해 “바이브 코딩(Vibe Coding)의 다음 단계는 웹사이트 제작이 아닌, 나에게 맞는 유틸리티 데스크톱 앱을 직접 만드는 것”이라는 주장을 구체적인 사례로 뒷받침한다.
Manus AI ‘My Computer’ 기능이란?
Manus AI는 그동안 웹 크롤링, 프레젠테이션 생성 등 다양한 자동화 작업으로 알려진 AI 에이전트 플랫폼이다. 그런데 최근 추가된 ‘My Computer’ 기능은 기존 Manus의 웹 기반 작업 범위를 훨씬 넘어선다. 강연자에 따르면, 이 기능은 OpenAI의 Computer Use나 Claude의 로컬 컴퓨터 제어 기능과 유사하게 AI가 사용자의 컴퓨터 내부 파일에 직접 접근하고 다양한 작업을 자동으로 수행한다. 강연자는 기능적으로 Claude Code와 가장 유사하다는 점을 특히 강조했다.
My Computer 기능을 사용하려면 Manus 공식 홈페이지(manus.im)에서 데스크톱 앱을 별도로 다운로드해야 한다. 설치 후 앱을 실행하면 ‘Local Folder 추가’ 옵션을 통해 원하는 로컬 디렉토리를 지정할 수 있고, 이후부터 Manus AI가 해당 폴더 및 터미널에 직접 접근하여 파일 생성, 코드 작성, 빌드, 디버깅, 패키징에 이르는 전체 개발 사이클을 자동으로 수행할 수 있다. 강연자는 슬라이드 제작이나 웹사이트 구축 같은 기존 용도보다 데스크톱 앱 개발 자동화에 훨씬 더 큰 잠재력이 있다는 점을 오늘 영상의 핵심 주제로 삼았다.
💡 [영상 참조] 강연자는 Manus 홈페이지와 데스크톱 앱 설치 과정, My Computer 기능에서 로컬 폴더를 연결하는 UI를 화면으로 시연합니다. 📺 원본 영상에서 확인하세요.
첫 번째 앱 — 실시간 다국어 회의 통역 앱
프롬프트 설계: ‘완결형 명령’의 위력
강연자가 첫 번째 앱을 위해 Manus에 입력한 프롬프트는 다음과 같다. “Swift 언어를 사용해서 실시간 회의 통역 앱을 개발해주세요. 터미널과 폴더에만 접근할 수 있다는 점을 고려해서, 터미널을 통해서 애플리케이션 개발, 디버깅, 패키징 작업 전체를 완료해주세요.” 핵심 요구사항인 ‘실시간 통역’과 함께, Manus가 사용 가능한 환경 제약(터미널과 폴더에만 접근 가능)을 명시하고, 중간 확인 없이 완결된 결과물을 요구한 것이 이 프롬프트의 특징이다. 강연자는 이를 “중간 과정을 싹 없애서 완성된 앱을 받아내는 프롬프트”라고 설명하며, 이런 완결형 명령 방식이 Manus에서 특히 잘 작동한다고 언급했다.
Manus의 자동화된 개발 계획 수립
프롬프트를 받은 Manus는 즉시 계획 수립 단계에 들어간다. 개발 환경 및 프로젝트 설계, Swift Package Manager 설정, 핵심 기능 구현, 빌드 및 디버깅 과정을 체크리스트 형태로 자동 계획하고 순서대로 실행에 옮겼다. macOS 네이티브 앱을 Swift로 빌드하려면 Xcode가 사전에 설치되어 있어야 하는데, 강연자는 이미 Xcode를 준비해 두었기 때문에 이 과정이 원활하게 진행될 수 있었다. Manus My Computer를 이용해 macOS 앱 개발을 시도하려는 사용자라면, Manus 데스크톱 앱 설치 외에 Xcode를 별도로 설치해 두는 것이 선행 조건이라고 강연자는 명확히 밝혔다.
04:45 - Manus가 Swift 앱 개발 계획을 자동으로 수립하는 화면 — 개발 환경 설계, Swift Package Manager, 핵심 기능 구현, 빌드/디버깅 단계가 체크리스트로 표시됨
💡 [영상 참조] 강연자는 Manus가 자동으로 수립한 개발 계획 체크리스트 화면을 보여주며 각 단계를 설명합니다. 📺 원본 영상에서 확인하세요.
30분 후: 실제로 작동하는 통역 앱 등장
명령 전송 약 30분 후, Manus는 Swift 실시간 회의 통역 앱 개발 완료를 보고하며 앱 실행 방법과 터미널 명령어를 함께 제공했다. 강연자가 해당 명령어를 터미널에 붙여 넣자 앱이 곧바로 실행되었고, macOS 네이티브 스타일의 UI도 별도의 디자인 작업 없이 완성도 있게 출력되었다. 다만 음성 실시간 번역을 위해 OpenAI API가 필요했기 때문에, 강연자는 OpenAI 플랫폼에서 임시 API 키를 발급받아 앱에 등록했다. 이 API 키는 녹화 목적으로만 사용하고 영상 종료 즉시 폐기했다고 강연자는 명시했다.
05:20 - 실시간 통역 앱 개발 완료 보고 화면 — Manus가 앱 실행 방법과 터미널 명령어를 함께 제공하는 결과 화면
API 키 등록 후 실제 테스트에서는 한국어 발화가 실시간으로 영어, 일본어, 중국어로 번역되는 기능이 정상 작동했다. 일부 언어에서 인식 오류가 발생하기는 했으나, 프롬프트 하나로 약 30분 만에 만들어진 결과물 치고는 놀라운 완성도라고 강연자는 평가했다. 상용 번역 앱을 구매하거나 구독하지 않아도 이 정도 수준의 실시간 통역 도구를 자신의 워크플로에 맞게 직접 제작할 수 있다는 점이 이 실연의 핵심이었다.
06:54 - 완성된 실시간 통역 앱에서 한국어 음성이 번역되어 앱 UI에 실시간으로 출력되는 화면
💡 [영상 참조] 강연자는 직접 마이크에 한국어, 일본어, 중국어로 말하면서 앱 화면에 실시간으로 번역 결과가 출력되는 장면을 시연합니다. 📺 원본 영상에서 확인하세요.
두 번째 앱 — AI 요약 기능을 갖춘 실시간 회의록 STT 앱
유료 서비스를 대체하는 나만의 회의록 앱
두 번째 앱은 현업에서 실질적으로 쓸 수 있는 도구를 목표로 한다. 강연자는 시중에 이미 여러 유료 회의록 및 음성 녹취 앱이 서비스되고 있다는 점을 언급하며, 이와 유사한 기능을 Manus를 통해 직접 제작해 보고자 했다. 프롬프트에는 “Swift 언어를 활용해서 실시간 회의록 STT(Speech-to-Text) 앱을 개발해달라. 음성 녹음이 좋은 품질로 녹음되어야 하며, 실시간으로 음성을 잘 기록할 수 있는 형태로 제작해 달라”고 요구했고, 역시 터미널 기반의 완결형 개발을 명시했다.
Manus가 생성한 앱에서 특히 주목할 점은 STT 기능 자체를 외부 유료 API가 아닌 Apple의 내장 음성 인식 라이브러리로 구현했다는 것이다. 별도의 API 비용 없이도 높은 수준의 실시간 음성-텍스트 변환이 가능하다는 의미이며, 실제 테스트에서 강연자의 음성이 실시간으로 텍스트화되는 것이 정상적으로 확인되었다. 성능도 기대 이상이었다고 강연자는 평가하며, 간단한 회의 녹음 용도라면 굳이 유료 앱을 구독하지 않아도 이런 방식으로 충분히 대응 가능하다고 언급했다.
09:09 - 두 번째 앱(회의록 STT)에서 실시간으로 음성이 텍스트로 변환되어 기록되는 앱 화면
Gemini API로 AI 요약 기능 추가 — 추가 비용 없이
단순 STT에 그치지 않고, 강연자는 회의 내용을 AI가 자동으로 요약해 주는 기능을 추가하고자 했다. 이를 위해 Google AI Studio에서 Gemini API 키를 발급받았는데, Google AI Studio는 일정 사용량까지 무료 API 키를 제공하기 때문에 추가 비용 없이 AI 요약 기능을 붙일 수 있었다. Manus에 “요약 기능은 Gemini API를 활용해서 구현해줘, API 키 줄게”라고 지시하자, Manus는 이를 반영하여 앱을 수정하고 재빌드를 완료했다. 강연자는 이 API 키 역시 즉시 폐기할 것임을 명시했다.
완성된 앱에서 녹음된 회의 내용을 바탕으로 AI 요약 기능을 실행하자, 회의 주제, 결정사항, 향후 계획 등의 카테고리로 구조화된 요약 결과가 출력되었다. 강연자는 이 결과를 통해 STT는 Apple의 무료 내장 라이브러리로, AI 요약은 Google의 무료 Gemini API로 처리함으로써 비용 부담 없이 실용적인 회의록 앱을 구현할 수 있다는 것을 직접 실증했다. 두 가지 외부 리소스를 조합하는 방식 자체가, 복잡한 앱을 AI와 함께 설계하는 하나의 패턴으로 활용될 수 있다는 점도 시사하는 바가 크다.
10:52 - Gemini AI 요약 기능이 실행되어 회의 내용이 결정사항, 향후 계획 등 카테고리로 구조화된 요약 결과가 출력된 화면
💡 [영상 참조] 강연자는 앱에서 실시간 STT 결과가 텍스트로 쌓이는 화면과, AI 요약 기능 실행 후 결정사항 및 향후 계획으로 구조화된 요약 결과가 출력되는 화면을 보여줍니다. 📺 원본 영상에서 확인하세요.
세 번째 앱 — 카카오톡 메시지 자동화 앱
메시지 자동화의 가능성을 열다
세 번째 앱은 기술적으로 가장 도전적인 사례다. 카카오톡처럼 제3자 앱을 자동으로 제어하는 것은 일반적인 AI 코딩 도구로는 쉽지 않은 작업이기 때문이다. 강연자는 “macOS AppleScript를 활용해서 카카오톡에 자동으로 메시지를 보낼 수 있는 앱을 만들어 주세요. 현재 대화창을 그대로 가져와서 그곳에 보낼 수 있는 macOS Swift 앱으로 만들어 주시고, 완료되면 보고하세요”라는 프롬프트를 입력했다. AppleScript는 macOS에 내장된 자동화 스크립팅 언어로, 이를 Swift와 결합하면 카카오톡 같은 서드파티 앱의 UI 요소까지 제어하는 것이 원리적으로 가능하다.
버그 수정 한 번으로 완성된 자동화
첫 번째 빌드에서는 문제가 발생했다. 앱이 ‘1회 전송 완료’라고 알렸지만 실제 카카오톡 창에는 메시지가 전달되지 않은 것이다. 강연자가 오류 상황을 설명하며 수정을 요청하자, Manus는 근본 원인을 파악하고 앱을 재설계·재빌드했다. 강연자는 복잡한 제어 로직을 포함하는 앱일수록 첫 빌드에서 완벽하게 작동하지 않을 수 있다는 점을 솔직히 인정했지만, 오류 보고에서 재빌드까지 걸리는 시간 자체가 매우 짧기 때문에 전통적인 개발 방식과 비교하면 여전히 압도적인 속도라는 점을 강조했다.
재빌드 이후 테스트에서는 카카오톡의 특정 대화창이 열린 상태에서 자동화 앱을 통해 메시지를 입력하면 카카오톡 입력창에 자동으로 삽입되는 것이 확인되었다. 반복 전송 횟수 설정 기능도 정상 작동했다. 강연자는 이 기능이 고객 응대(CS), 템플릿 메시지 전송, 업무 자동화 등의 영역에 충분히 활용될 수 있다고 언급하며, 지금의 결과물을 ‘초안’으로 보고 더 정교하게 발전시킬 여지가 충분하다고 평가했다.
14:09 - 재빌드 후 카카오톡 자동화 앱에서 메시지 전송 버튼 클릭 시 카카오톡 입력창에 메시지가 자동 삽입되는 성공 화면
💡 [영상 참조] 강연자는 카카오톡 앱이 열린 상태에서 자동화 앱을 통해 메시지가 자동 입력되고, 반복 전송이 이루어지는 장면을 시연합니다. 📺 원본 영상에서 확인하세요.
바이브 코딩의 다음 단계 — 개인화된 유틸리티 앱의 시대
”웹사이트를 만드는 시대는 종료되었다”
영상 후반부에서 강연자는 현재 AI 개발 도구의 흐름에 대한 자신의 시각을 제시한다. 바이브 코딩 도구로 웹사이트나 랜딩 페이지를 만드는 것은 이미 일반화된 접근 방식이 되었으며, 이제 진정한 가치는 “나에게 맞는 자동화된 유틸리티 앱을 스스로 만들어 빠르게 테스트하는 것”에 있다고 강연자는 주장한다. 유료 앱을 구매하거나 구독하는 대신, 자신의 워크플로에 딱 맞춘 도구를 AI와 함께 직접 제작할 수 있는 시대가 열리고 있다는 메시지다.
이 관점에서 Manus My Computer 기능이 갖는 의미는 단순한 기능 추가 이상이다. 웹 브라우저 안에서만 작동하던 AI 에이전트가 로컬 운영체제와 터미널, 설치된 네이티브 앱과 직접 상호작용할 수 있게 되면서 자동화 가능한 시나리오의 범위가 기하급수적으로 넓어졌기 때문이다. 강연자는 다음 단계로 Manus를 24시간 원격으로 운영되는 자율 AI 에이전트 형태로 활용하는 시나리오를 탐색해 볼 계획이라고 밝혔다.
마무리 / 핵심 정리
이번 영상은 Manus AI의 My Computer 기능이 단순한 파일 관리 도구를 넘어 실질적인 데스크톱 앱 개발 플랫폼으로 기능할 수 있음을 세 가지 구체적인 사례로 증명해 보였다. 프롬프트 하나로 실시간 다국어 통역 앱, AI 회의록 요약 앱, 카카오톡 자동화 앱을 각각 30분 내외에 제작했다는 사실은, 기술 비전공자도 자신만의 업무 자동화 도구를 만들 수 있는 시대가 현실로 다가왔음을 시사한다.
물론 명확한 전제 조건이 있다. macOS 네이티브 앱 개발을 위해서는 Xcode가 사전에 설치되어 있어야 하며, 실시간 번역이나 AI 요약처럼 고급 AI 기능을 활용하려면 OpenAI 또는 Gemini 등의 외부 API 키가 필요하다. 복잡한 제어 로직을 요구하는 앱의 경우 첫 빌드에서 완벽히 동작하지 않아 수정 이터레이션이 필요할 수 있다. 그러나 이 모든 한계를 감안하더라도, 강연자의 말처럼 “지금 이 도구들이 가져오는 변화는 단순한 생산성 향상이 아닌 시대의 변화 수준”이라는 평가는 과장이 아니다. 한 줄의 프롬프트로 자신만의 도구를 만들어 내는 경험이, 이제 누구에게나 열려 있다.
📚 출처 및 참고
| 구분 | 내용 |
|---|---|
| 원본 영상 | 프롬프트 하나 쳤을 뿐인데 30분 만에 데스크톱 앱이 완성됩니다 (feat. 마누스 AI) |
| 채널 | 빌더 조쉬 Builder Josh |
| 리포트 작성 | 2026-04-20 |
| 작성 방식 | YouTube 영상 STT 변환 후 에디팅 |
💬 본 리포트는 영상 내용을 바탕으로 재구성되었습니다. 정확한 내용은 원본 영상을 참조해 주세요.