2026년 7월 20일 빌더 조쉬 영상의 Record and Replay 흐름을 바탕으로, 화면에서 반복하던 업무를 관찰 가능한 스킬 초안으로 바꾸고 사람이 승인해 운영하는 방법을 초보자 눈높이로 정리합니다.
Chat, Work, Codex를 먼저 구분해야 합니다
Record and Replay를 이해하려면 먼저 어디에서 무슨 일을 하는지 나눠야 합니다. Chat은 질문하고 답을 받는 대화 공간입니다. 아이디어 정리, 문장 초안, 간단한 설명에는 좋지만 화면을 직접 따라 하며 업무 절차를 익히는 곳은 아닙니다.
Work는 문서, 표, 자료, 업무 흐름을 펼쳐 놓고 AI와 함께 일하는 공간입니다. 반복되는 자료 정리, 보고서 초안, 업무 절차 설계에 맞습니다. Codex는 파일, 코드, 명령어, 테스트를 다루는 실행형 작업 공간입니다. 웹사이트나 자동화 스크립트처럼 실제 파일을 고치고 검증해야 할 때 씁니다.
Record and Replay는 이 구분 위에서 이해해야 합니다. 대화로 설명만 하는 기능이 아니라, 사람이 화면에서 반복하는 절차를 AI가 관찰하고 재사용 가능한 스킬 초안으로 바꾸는 흐름입니다. 다만 화면을 봤다고 모든 일을 완전히 자동화한다는 뜻은 아닙니다.
TIP: 초보자는 '대화로 묻는 일은 Chat, 자료를 함께 정리하는 일은 Work, 파일과 실행 검증이 필요한 일은 Codex'로 먼저 나누면 됩니다.
Record and Replay는 화면작업을 스킬 초안으로 바꾸는 흐름입니다
Record and Replay의 핵심은 사람이 하던 화면 작업을 한 번 보여 주고, 그 과정을 AI가 절차로 정리하게 하는 것입니다. 예를 들어 매번 같은 사이트에 들어가 자료를 내려받고, 파일명을 바꾸고, 표에 붙여 넣고, 확인 표시를 남기는 업무가 있다고 합시다. 이때 말로만 설명하면 빠뜨리는 단계가 생기기 쉽습니다. 화면 녹화는 클릭 순서, 메뉴 위치, 판단 기준, 반복 패턴을 더 구체적으로 남깁니다.
AI는 그 녹화 내용을 바탕으로 '이 업무를 다시 할 때 필요한 단계'를 스킬 초안으로 만듭니다. 스킬은 사람이 매번 길게 설명하지 않아도 같은 절차를 다시 불러 쓰게 해 주는 업무 설명서에 가깝습니다. 좋은 스킬 초안에는 시작 조건, 필요한 자료, 클릭 또는 확인 순서, 멈춰야 할 조건, 결과물 형식, 사람 승인 지점이 들어갑니다.
중요한 점은 Record and Replay가 완성품을 바로 보장하지 않는다는 것입니다. 화면이 바뀌거나 로그인이 풀리거나 팝업이 뜨면 그대로 실패할 수 있습니다. 그래서 첫 결과는 자동화 완성본이 아니라 검토할 스킬 초안으로 봐야 합니다.
TIP: 녹화는 AI에게 '내가 어떻게 일하는지'를 보여 주는 자료입니다. 결과물은 바로 운영하지 말고 초안으로 검토하세요.
비개발자용 5단계 운영법
비개발자는 복잡한 자동화 용어보다 다섯 단계로 운영하면 됩니다.
1. 업무선정: 자주 반복하지만 실패해도 피해가 작고, 판단보다 절차가 많은 일을 고릅니다. 외부 발송, 삭제, 결제, 권한 변경처럼 되돌리기 어려운 일은 첫 대상에서 제외합니다.
2. 녹화: 실제 업무 화면을 천천히 진행하며 녹화합니다. 중간중간 왜 이 버튼을 누르는지, 무엇을 확인하는지 말로 설명하면 스킬 초안 품질이 좋아집니다.
3. 스킬초안: AI가 녹화 내용을 단계별 절차, 입력값, 결과물, 금지사항, 사람 승인선으로 정리하게 합니다.
4. 시험실행: 가짜 자료나 샌드박스 환경에서 다시 실행해 봅니다. 화면 변경, 로그인, 팝업, 권한 문제, 누락된 판단 기준이 있는지 확인합니다.
5. 승인/운영: 사람이 원문과 결과를 대조하고, 허용 범위와 금지 범위를 확정한 뒤 낮은 위험 업무부터 운영합니다.
이 5단계의 목적은 사람을 빼는 것이 아니라, 반복 설명을 줄이고 검토 가능한 절차를 만드는 것입니다. '100% 자동화'라는 표현으로 기대치를 키우면 오히려 위험합니다.
스킬 초안 요청문
아래 화면 녹화 내용을 바탕으로 반복 업무용 스킬 초안을 만들어 주세요.
포함할 항목:
- 이 스킬을 써도 되는 업무 범위
- 시작 전에 필요한 자료와 권한
- 단계별 화면 작업 순서
- 사람이 확인해야 할 판단 기준
- 실패하거나 멈춰야 하는 조건
- 결과물 형식
- 외부 발송·게시·삭제·결제·권한변경 전에 필요한 승인선
금지:
- 100% 자동화라고 표현하지 말 것
- 개인정보를 새로 추측해 채우지 말 것
- 승인 없이 외부 작업까지 이어가지 말 것
노무사 업무에서는 낮은 위험의 반복 작업부터 시작합니다
노무사 업무에 적용할 때는 공개자료 수집처럼 위험이 낮은 일부터 시작하는 것이 좋습니다. 예를 들어 고용노동부 공개 자료 페이지에서 최신 보도자료 제목, 게시일, 링크를 확인해 표로 정리하는 흐름은 첫 실습에 적합합니다. 공개자료만 다루고, 결과도 검토용 표에서 멈추면 실패 비용이 낮습니다.
교육자료 반복 가공도 좋은 예입니다. 이미 공개 가능한 강의 원고나 안내문을 정해진 형식의 요약, 체크리스트, 퀴즈 초안으로 바꾸는 작업은 화면 절차와 결과 형식이 비교적 분명합니다. 다만 교육자료에 실제 고객사 사례, 개인 이름, 사건 세부내용이 섞여 있으면 먼저 비식별해야 합니다.
로그인 관리화면의 읽기 점검은 더 조심스럽게 다뤄야 합니다. 예를 들어 교육 플랫폼 관리자 화면에서 수강 신청 수, 결제 상태, 게시 여부를 읽어 체크하는 정도는 가능할 수 있습니다. 그러나 계정 권한 변경, 게시 전환, 결제 처리, 수강생 정보 다운로드, 외부 발송은 사람이 승인하기 전까지 금지해야 합니다.
TIP: 노무사 업무의 첫 기준은 '공개자료, 비식별 자료, 읽기 중심, 검토용 결과'입니다.
실패 조건을 먼저 적어 두어야 운영할 수 있습니다
Record and Replay는 화면이 안정적일수록 잘 작동합니다. 반대로 화면 구성이 바뀌거나 버튼 이름이 달라지거나 목록 순서가 바뀌면 실패할 수 있습니다. 로그인 만료, 2단계 인증, 권한 부족, 갑자기 뜨는 팝업, 다운로드 제한, 느린 페이지 로딩도 흔한 실패 조건입니다.
개인정보도 중요한 실패 조건입니다. 화면에 이름, 연락처, 주민등록번호, 외국인등록번호, 주소, 계좌번호, 사건 세부내용이 보이면 녹화와 재사용 자체가 위험해질 수 있습니다. 이런 자료는 비식별 샘플로 바꾸거나, AI가 보지 않아도 되는 화면은 녹화에서 제외해야 합니다.
좋은 스킬에는 '잘 되는 조건'보다 '멈춰야 하는 조건'이 더 선명해야 합니다. 화면이 다르면 멈춘다, 로그인이나 권한 화면이 나오면 멈춘다, 팝업이 뜨면 사람에게 묻는다, 개인정보가 보이면 기록하지 않는다처럼 실패 기준을 문장으로 넣어야 합니다.
멈춤 조건 예시
- 화면 구성, 버튼명, 메뉴 위치가 녹화와 다르면 멈춘다.
- 로그인, 2단계 인증, 권한 요청 화면이 나오면 멈춘다.
- 예상하지 못한 팝업이나 결제 안내가 뜨면 멈춘다.
- 개인정보 또는 민감 사건 정보가 보이면 기록하지 않고 멈춘다.
- 삭제, 게시, 발송, 결제, 권한 변경 버튼은 누르지 않는다.
- 결과가 원문과 맞는지 사람이 확인하기 전에는 완료로 표시하지 않는다.
자동화보다 승인선이 먼저입니다
Record and Replay를 소개할 때 가장 위험한 말은 '이제 다 자동으로 됩니다'입니다. 실무에서는 그렇게 설명하면 안 됩니다. 화면 자동화는 반복 입력과 확인을 줄여 줄 수 있지만, 외부 효과가 생기는 행위는 사람 승인으로 닫아야 합니다.
특히 외부 발송, 게시, 파일 삭제, 결제, 계정 권한 변경, 개인정보 다운로드, 고객·근로자에게 보내는 안내문 발송은 사람이 최종 확인해야 합니다. AI가 버튼을 찾고 초안을 만들 수는 있어도, 그 버튼을 눌러도 되는지와 그 문서를 내보내도 되는지는 업무 책임자가 판단합니다.
따라서 좋은 운영 문구는 '100% 자동화'가 아니라 '반복 절차를 스킬 초안으로 만들고, 낮은 위험 단계부터 사람이 승인해 운영한다'입니다. 이 표현이 초보자에게도 정확하고, 노무사 업무의 책임 구조에도 맞습니다.
TIP: AI에게 맡기는 범위는 넓힐 수 있지만, 책임과 승인선은 흐리면 안 됩니다.