연구하고 실험하며, 배운 것을 공개합니다.
헤일메리는 작은 팀이 AI 에이전트와 함께 실제로 무엇을 만들고 운영할 수 있는지 직접 실험합니다. 반복되는 실수를 줄이는 되먹임 루프, 사람의 말투를 재현하는 파이프라인, 공간을 3D로 재구성하는 캡처 기술을 서로 다른 완성도로 진행하고 있으며, 운영 중인 것과 실험 중인 것, 멈춰 있는 것을 구분해 그대로 공개합니다.
소개 기준: 2026-09-27. 최신 진행 상황은 각 항목의 안내 페이지에서 확인할 수 있습니다.
실패분석 시스템
멈춤 · 2026-09-09 이후 미실행 · 누적 규칙 35개
질문: 사용자의 교정을 에이전트가 스스로 기록해, 같은 실수를 반복하지 않게 만들 수 있을까요?
방법: 2~3일 간격으로 상호작용 로그에서 사용자의 교정과 그 직전의 에이전트 행동을 짝(교정쌍)으로 자동 마이닝합니다. 찾아낸 교정쌍은 규칙으로 정리해 축적하고, 이후 판단에 참고하도록 되먹임 루프에 연결합니다.
관찰: 2026-07-05부터 2026-09-09까지 30회 돌아 규칙 35개가 쌓였습니다. 같은 실수가 다시 나오면 새 규칙을 적는 대신 기존 규칙에 재발 표시를 하고 번호를 올립니다 — 그래서 규칙 수는 작업량이 아니라 아직 안 고쳐진 약점의 수에 가깝습니다. 마이닝과 규칙 축적 과정에서 개인정보(PII)나 민감정보는 산출물에 기록하지 않습니다. 수치의 출처는 공장 내부 — 검토에 적어 두었습니다.
한계: 표현이 뚜렷한 교정쌍 위주로 걸러지기 때문에 모든 실수가 자동으로 잡히지는 않습니다. 그리고 이 루프는 2026-09-09 이후 멈춰 있습니다. 현재 정기 작업으로 걸려 있는 것은 기록 위생 점검 하나뿐이고, 재가동은 예정 항목입니다. 돌지 않는 것을 돈다고 적지 않으려고 상태를 그대로 남깁니다.
페르소나 랩
실험 · 공개 파이프라인
질문: 실제 발화 로그로부터 한 사람의 말투를 재현할 수 있을까요? 그리고 무엇을 공개하고 무엇을 비공개로 남겨야 할까요?
방법: 발화 로그를 스타일 지표(스타일 벡터)로 변환하고, 이를 바탕으로 인물의 말투를 재현하는 파이프라인을 실험합니다. 파이프라인의 구조와 사용법은 별도 안내 페이지로 공개합니다.
관찰: 공개 파이프라인 안내 페이지를 운영 중입니다(persona-lab.whatuup.uk). 실제 실험에 쓰인 비공개 데이터와 결과 원장은 외부에 노출하지 않습니다.
범위: 현재는 실험 단계로, 재현 품질이나 정확도를 수치로 공개하지 않습니다.
3D 공간 재구성
홀딩 · 파이프라인 준비완료
질문: 촬영만으로 실제 공간을 걸어 다닐 수 있는 3D 모델로 재구성할 수 있을까요?
방법: 가우시안 스플랫(Gaussian Splatting) 방식으로 공간을 캡처하고 재구성하는 파이프라인을 준비했습니다. 촬영 영상과 처리에 필요한 GPU 자원이 확보되면 곧바로 재구성을 진행할 수 있는 상태입니다.
관찰: 캡처 파이프라인 자체는 준비를 마쳤지만, 촬영 영상과 GPU 자원 확보가 남아 있어 실제 재구성 작업은 아직 진행하지 못했습니다.
범위: 현재 상태는 홀딩이며, 완성된 3D 결과물은 아직 없습니다. 자원이 확보되는 대로 재개할 계획입니다.
다음 실험으로
이 실험들은 각각 다른 완성도로 진행 중입니다. 운영 중인 시스템은 계속 다듬고, 실험 중인 파이프라인은 공개 범위를 조금씩 넓히고, 홀딩 중인 프로젝트는 자원이 준비되는 대로 다시 움직입니다. 진행 상황은 이 페이지에서 계속 갱신합니다.