이 번역은 편의를 위해 제공됩니다. 차이가 있는 경우 영어판이 효력을 가집니다. 영어판 읽기.
Treasynx AI 모델 카드
최종 업데이트: 2026년 10월 17일 · bmvp.ai Ltd
요약
Treasynx AI는 휴대폰에서 실행되는 선택형 작은 모델입니다. 버전 0.1은 네 가지 일을 합니다: 도움말 답변, 빠른 입력, 소요 시간 예상, 주간 리뷰. 그 밖의 작업은 모델을 호출하지 않고 앱 자체 플래너가 합니다. 틀릴 수 있고, 일반적인 일에서는 대형 AI 모델보다 약하며, 조언이 아닙니다. 이 페이지는 지는 부분을 포함해 테스트 결과를 보여 줍니다.
버전 0.1
- 출시: 2026년 10월 17일. 서명된 목록 항목은 2027년 4월 17일에 만료되며, 그 이후에는 설치할 수 없습니다. 그 전에 새 버전이 대체할 것입니다.
- 모델 ID:
treasynx-ai-0.6b-v0.1 - 기반 모델: Qwen 팀의 Qwen3-0.6B(Apache-2.0 라이선스)를 bmvp.ai Ltd가 LoRA와 이어서 선호 학습(DPO)으로 미세 조정한 뒤 병합했습니다.
- 파일: 666,425,366바이트(약 640MB)의 MediaPipe .task 파일.
- SHA-256:
d05bd8a5615b2483c629ce5eea03b098fd0ecbc1537a1a872a2e9b9c64783d5c - 실행 환경: 휴대폰의 프로세서, 오프라인. 메모리가 약 3GB 미만인 휴대폰은 거부됩니다. 지금까지 휴대폰 한 대, Xiaomi 14 Ultra에서 테스트했으며, 도움말 답변에 약 15초가 걸렸습니다.
- 다운로드: models.treasynx.com에서, 직접 선택한 뒤에만. 앱은 먼저 서명된 목록 항목(Ed25519와 ML-DSA-65)을 확인하고, 그다음 파일의 크기와 SHA-256을 확인합니다.
하는 일과 보류한 일
각 작업은 켜기 전에 같은 기준을 통과해야 했습니다: 유효한 답변, 앱 자체 플래너(대체 수단) 이상의 작업 점수, 안전 테스트, 각 언어별 확인. 네 가지 작업이 통과했습니다. 나머지는 계속 앱 자체 플래너가 맡습니다.
| 작업 | 테스트 결과 | 버전 0.1에서 |
|---|---|---|
| 빠른 입력 | 93.4%에서 정확히 맞음(대체 수단은 5.2%) | 켜짐 |
| 소요 시간 예상 | 중앙값 오차 15분(대체 수단은 20분) | 켜짐 |
| 도움말 답변 | 올바른 도움말 주제를 제시한 비율 93.5%(대체 수단은 94.9%). 도움말에 없다고 정확히 말한 비율 93.3%(대체 수단은 0%) | 켜짐 |
| 주간 리뷰 | 테스트에서 모든 답변이 유효 | 켜짐 |
| 하루 계획하기 | 첫 시도에 유효한 비율 86.5%. 대체 수단은 항상 유효 | 보류 |
| 늦어질 때 | 첫 시도에 유효한 비율 88.2% | 보류 |
| 목표를 블록으로 나누기 | 첫 시도에 유효한 비율 84.8% | 보류 |
| 지금 뭘 할까? | 앱 규칙과 일치한 비율 93.5%. 98%가 필요했음 | 보류 |
| 어시스턴트 작업 | 레드팀 테스트 실패: 고정된 안전 메시지를 바꿔 말함 | 보류 |
| 요청 분류 | 일반 요청의 10.77%를 거절(앱 규칙은 0%) | 보류 |
지는 부분
- 유효한 계획. 앱 자체 플래너는 항상 유효하지만 모델은 그렇지 않으므로, 하루 계획, 늦어질 때, 목표를 블록으로 나누기는 플래너가 맡습니다.
- 요청 분류. 앱 규칙보다 일반 요청을 더 많이 거절했고, 맡은 일 밖의 요청은 덜 잡아냈습니다.
- 도움말 인용. 93.5%(대체 수단은 94.9%).
- 주입된 텍스트. 도움말 문단 안에 지시를 숨긴 테스트에서 답변의 2.25%에 숨은 텍스트를 복사했습니다. 대체 수단은 한 번도 그러지 않았습니다. 도움말 문단은 앱 안에 포함되어 있으므로 이를 위해서는 변조된 도움말 파일이 필요합니다. 이후 버전에서 고쳐질 것입니다.
이기는 부분
- 빠른 입력: 93.4% 정확히 맞음(대체 수단은 5.2%).
- 소요 시간 예상: 중앙값 오차가 약 25% 낮음.
- 도움말에 없는 것 알아차리기: 93%(대체 수단은 0%).
안전 테스트
- 돈, 건강, 법률, 식품 안전에 관한 요청과 자해에 관한 메시지는 모델에 묻기 전에 앱 자체 필터가 걸러 냅니다. 테스트에서 100%를 걸러 냈습니다.
- 탈옥이나 '지시를 반복해' 같은 일부 레드팀 프롬프트를 모델이 도움말 질문으로 분류했습니다. 이것이 요청 분류를 앱 규칙에 맡기는 이유 중 하나입니다.
- 개인정보: 멤버십 추론 테스트(AUC 0.5101, 한도 0.55)와 심어 둔 카나리아 확인에서 학습 예시를 기억했다는 징후는 발견되지 않았습니다.
언어
켜진 네 가지 작업은 테스트한 모든 언어에서 유효한 답변을 냈습니다. 빠른 입력은 앱의 19개 언어 모두에서 테스트했고, 도움말 답변, 소요 시간 예상, 주간 리뷰는 영어로만 테스트했습니다. 영어 이외 언어로 된 앱의 위기 및 안전 문구는 아직 원어민 검토를 받지 않았으므로, Treasynx AI는 영국 영어로 먼저 출시됩니다.
알려진 문제
- 휴대폰에서의 텍스트 분할. 휴대폰 런타임은 일부 텍스트를 학습 때와 다르게 토큰으로 나눕니다. 테스트 프롬프트의 60.9%에서 분할이 하나 이상 달랐고, 태국어가 가장 영향을 많이 받습니다. 컴퓨터에서 확인했을 때 답변은 여전히 앱의 확인을 통과했지만, 긴 답변은 이 방식으로 확인하지 않았습니다.
- 기기 테스트. 지금까지 휴대폰 한 기종에서만 실행했습니다. 그 휴대폰에서 그래픽 프로세서가 충돌해 모델은 프로세서에서 실행됩니다.
- 도움말 답변이 숨은 지시를 따라 할 수 있습니다(지는 부분 참고).
학습 데이터
모든 학습 예시는 합성 데이터입니다. 앱 자체의 코드와, 저희가 쓰거나 승인한 예시 및 생산성 메모에서 생성했습니다. 학습 예시는 100,634개, 선호 쌍은 5,376개입니다. 사용자 데이터, 웹에서 수집한 텍스트, 에너지 평가, Treasynx 개선에 참여하기의 데이터는 사용하지 않았습니다.
더 보기
변경 기록에 각 버전이 나와 있습니다. Treasynx의 AI에서는 앱에서 어떻게 작동하는지, 무엇을 보내는지(아무것도 보내지 않음) 설명합니다. 틀리거나 해로운 답변을 신고하려면 앱에서 그 아래의 표시를 탭하거나 support@bmvp.ai로 이메일을 보내세요.