Nghiệm thu Giai đoạn 3

Virtual Try-On: tracking ổn định và chính xác hơn, beauty filter làm mịn da, kim cương DiamondHQ đẹp và nhanh hơn.

Thứ Năm, 29/10/2026 · 13:30

Nhẫn halo kim cương render bằng shader DiamondHQ, cận cảnh viên chủ và vòng đá quanh

Phạm vi

Ba hạng mục nghiệm thu

Tracking

Lưới 468 điểm, khung vai, cẳng tay. Dây chuyền, bông tai, nhẫn, vòng tay bám chuẩn hơn.

Beauty filter

Làm mịn da nhẹ nhàng, bật mặc định ở mức 0,3.

Kim cương

Shader DiamondHQ: lấp lánh hơn, FPS cao hơn, trang tải nhẹ hơn.

Bản đang chạy: vtoframe.doji.vn · Bản nghiệm thu: vto-demo.brewmonster.vn

Tracking

Từ bám theo khuôn mặt sang bám theo cả khuôn mặt lẫn cơ thể.

Vì sao nâng cấp

Giới hạn của tracker thế hệ 1

Dây chuyền gắn vào đầu

Quay hoặc nghiêng đầu là dây xoay theo, dù người đứng yên.

Một khuôn mặt mẫu chung

Vị trí và kích thước không khớp với từng khuôn mặt, từng chiếc cổ.

Há miệng, đầu “nhảy”

Tư thế đầu giải từ 8 điểm, có điểm ở môi và cằm: há miệng làm độ sâu lệch 5,8 cm.

Chỉ có dữ liệu khuôn mặt

Không biết cổ, vai, cẳng tay ở đâu: khó nâng cấp dây chuyền, nhẫn, vòng tay.

Nâng cấp dữ liệu đầu vào

128 điểm → 468 điểm + khung vai

128 điểm đường viền vẽ trên khuôn mặt: viền mặt, mắt, lông mày, môi

TRƯỚC · 128 ĐIỂM

Lưới 468 điểm phủ kín khuôn mặt, mống mắt, đường bề ngang hàm, hai vai và trục cổ

SAU · 468 ĐIỂM + VAI

Viền mặt, mắt, lông mày, môi. Tư thế đầu chỉ dùng 8 điểm.

Toàn bộ 468 điểm, 10 điểm mống mắt, hai vai và trục cổ.

Cách tracker mới hoạt động

Mỗi nhóm điểm một nhiệm vụ

Lưới khuôn mặt với 29 điểm cứng của hộp sọ tô vàng và đường bề ngang hàm tô xanh

29 điểm cứng của hộp sọ → tư thế đầu

Bỏ miệng và hàm: há miệng, nói chuyện không làm lệch bông tai.

Bề ngang hàm → bề rộng cổ

Đo riêng từng người, ổn định trong khoảng ±4%: dây vừa cổ.

Hai vai → khung thân và độ sâu

Dây chuyền nằm trên ngực, nghiêng theo thân, tự khớp kích thước.

Trước / sau · dây chuyền

Dây chuyền nằm cân trên ngực

Bản đang chạy

Dây lệch theo hướng đầu, mặt dây lệch khỏi giữa ngực.

Bản nghiệm thu

Dây bám theo vai: nằm cân trên ngực, mặt dây ở giữa.

Chụp cùng lúc trên trang so sánh hai bản, cùng một camera · sản phẩm BFC7003940A1XX0.

Trước / sau · bông tai

Bông tai nằm sát dái tai

Bản đang chạy

Bông tai to, dạt ra ngoài dái tai.

Bản nghiệm thu

Sát dái tai, đúng kích thước.

Chụp cùng lúc trên trang so sánh hai bản, cùng một camera · sản phẩm BLE0004200A1CZ1.

Trước / sau · nhẫn

Nhẫn tự căn theo ngón tay

Bản đang chạy

Cỡ nhẫn suy từ chiều dài bàn tay.

Bản nghiệm thu

Đo bề rộng ngón, lòng nhẫn vừa đúng ngón.

Chụp cùng lúc trên trang so sánh hai bản, cùng một camera · nhẫn AFRB100030F2HA1.

Trước / sau · vòng tay

Vòng tay theo đúng cẳng tay

Bản đang chạy

Gập cổ tay: vòng nghiêng theo bàn tay, chéo lên cẳng tay.

Bản nghiệm thu

Vòng nằm ngang quanh cổ tay, theo trục cẳng tay.

Chụp cùng lúc trên trang so sánh hai bản, cùng một camera · vòng tay AFBM200542D2CZ1.

Nhẫn và vòng tay

Vừa ngón tay, theo đúng cẳng tay

Nhẫn tự căn kích thước

Đo bề rộng ngón đeo nhẫn ngay trên hình camera.
Nhẫn được co giãn để lòng nhẫn vừa đúng ngón: không lỏng, không cắt vào ngón.
Lấy trung vị theo từng người: vài khung hình xấu không làm đổi cỡ.

Vòng tay theo cẳng tay

Theo dõi hai mép cẳng tay để lấy trục tay.
Gập cổ tay: vòng vẫn nằm dọc cẳng tay, không nghiêng theo bàn tay.
Vướng tay áo hay ra khỏi khung: vòng về vị trí theo bàn tay một cách mượt.

Kiểm thử tự động: bề rộng ngón sai dưới 8%, góc cẳng tay sai dưới 6°, trên nhiều màu da, nền và tay áo.

Nhẫn: trước đây cỡ nhẫn chỉ suy từ chiều dài bàn tay, nên nhẫn trông lỏng trên ngón thon và cắt vào ngón to. Giờ trang web đo bề rộng ngón đeo nhẫn trên ảnh camera, Unity đưa số đo đó về đúng độ sâu của ngón, đọc đường kính lòng nhẫn từ model một lần, rồi co giãn nhẫn cho khớp. Phần nhẫn phía sau ngón được che theo đúng ngón tay. Thanh trượt căn chỉnh vẫn còn để tinh chỉnh. Vòng tay: mô hình bàn tay chỉ dừng ở cổ tay, nên trước đây vòng đi theo lòng bàn tay và nghiêng khỏi tay khi gập cổ tay. Giờ trang web dò hai mép cẳng tay theo từng hàng điểm ảnh, lấy hướng cẳng tay và gửi cho Unity; vòng xoay quanh cổ tay về trục cẳng tay, vẫn giữ góc lăn của bàn tay. Chạy được cả khi chỉ thấy một đoạn cẳng tay ở mép khung. Số kiểm thử ở chân slide là của bộ test tự động trên ảnh mô phỏng (nhiều màu da, nền, ngón chạm nhau, tay áo, đồng hồ); số đo nào vượt ngưỡng thì bị loại chứ không dùng.

Số đo độ chính xác

Đo trên 11 ảnh chụp thật, đánh dấu tay

−61%

Độ lệch lớn nhất của dây so với hõm cổ

3,1 cm → 1,2 cm

−37%

Độ lệch trung bình của dây so với hõm cổ

1,2 cm → 0,75 cm

0,6 cm

Đầu dịch chuyển khi há miệng

Bản trước: 5,8 cm

Đầu không còn “nhảy” khi há miệng hay cúi đầu, nên bông tai giữ sát dái tai.

Quy đổi sang cm theo bề rộng mặt chuẩn 15,3 cm (canonical face của MediaPipe).

Nguồn: bộ test offline tools/tracking-bench, chạy trên 11 snapshot thật (ảnh + landmark MediaPipe) có điểm hõm cổ và dái tai đánh dấu tay. Dây chuyền: độ lệch so với hõm cổ sau khi căn ở khung đầu tiên, đơn vị bề rộng mặt. Gắn vào đầu (cách cũ): trung bình 0,078, lớn nhất 0,202. Bám theo thân (cách mới): trung bình 0,049, lớn nhất 0,079. Nhân 15,3 cm ra số trên slide. Há miệng: hai ảnh cách nhau 2 giây, một ảnh ngậm miệng, một ảnh há miệng. Độ sâu đầu theo 8 điểm (bản trước): 77,3 → 71,5 cm. Theo 29 điểm cứng (bản mới): 77,0 → 77,6 cm. Bông tai: khi ngồi yên, vị trí dái tai của hai bản tương đương (khoảng 0,5 cm). Khác biệt nằm ở lúc nói, cười, há miệng, cúi đầu: bản mới không còn đẩy bông tai ra ngoài (xem slide bông tai).

Độ ổn định

Ổn định trong tình huống thực tế

Mất tracking

Dây giữ nguyên chỗ 1 giây, không còn bay ra xa rồi trôi chậm về.

Vai ra khỏi khung

Độ sâu thân suy từ đầu, có giới hạn; các bước nhảy bất thường bị bỏ qua.

Tự căn liên tục

Mỗi khung hình tốt kéo dần vị trí và kích thước dây về đúng.

Che cổ mềm

Phần dây sau gáy mờ dần theo mép cổ, không bị cắt cứng.

Chiều cao dây

Tính theo tỉ lệ cằm → vai, không phụ thuộc khoảng cách tới camera.

Căn chỉnh bằng tay

Thanh trượt kích thước ±35% và nút “Căn lại” để đo lại cổ.

Các xử lý cho tình huống thực tế trên điện thoại: - Mất vai/mất tracking: trước đây Unity chuyển dây sang mốc gắn trên đầu ngay lập tức, độ sâu chỉ cập nhật 20% mỗi lần nên dây bay ra xa rồi mất khoảng 1 giây mới về. Giờ giữ dây ở chỗ cũ thêm 1 giây. - Vai tràn khỏi khung (selfie dọc, đứng gần): chỉ học bề rộng vai khi cả hai vai nằm trọn trong khung; khi một vai tràn ra, độ sâu thân = độ sâu đầu + độ lệch thân–đầu đã ghi nhớ, giới hạn trong [−20 cm, +30 cm]; bước nhảy >25% bị bỏ qua trừ khi kéo dài 3 lần cập nhật. - Tự căn liên tục: khi mặt lệch <15° và thấy vai, vị trí và kích thước được kéo về với hằng số thời gian 2 giây; mẫu lệch >4 cm bị bỏ qua. - Che cổ mềm: shader SoftNeckOccluder vẽ lại video lên phần dây sau cổ, độ đục giảm dần về mép. - Chiều cao dây theo tỉ lệ cằm → đường vai thay cho số cm cố định.

Beauty filter

Làm mịn da nhẹ nhàng, như camera làm đẹp người dùng đã quen.

Beauty filter

Bật mặc định ở mức nhẹ 0,3

Tắt · 0

Mặc định · 0,3

Tối đa · 1,0

Chỉ làm mịn vùng da; giữ nét mắt, môi, tóc.

Ảnh chụp màn hình cũng có hiệu ứng.

Tracker đọc ảnh gốc: không ảnh hưởng độ chính xác.

Kim cương

Đẹp hơn và nhanh hơn trên cùng một chiếc điện thoại.

Trước / sau · 3D view

Cùng một nhẫn halo, hai shader

Nhẫn halo render bằng shader cũ: viên chủ và vòng đá xám, tối

TRƯỚC · THẾ HỆ 1

Cùng nhẫn render bằng DiamondHQ: đá sáng, có ánh màu cầu vồng

SAU · DIAMONDHQ

Tông màu trầm, ít ánh màu.

Khúc xạ vật lý, phản xạ toàn phần, tán sắc màu cầu vồng.

Sản phẩm AFRB100030F2HA1, chụp ở 3D view, cùng bản build; ảnh trái dùng shader thế hệ 1.

Hiệu năng

Đẹp hơn mà vẫn nhanh hơn

+46%

FPS trên nhẫn halo nhiều đá, chạm mức 60 fps tối đa của màn hình

4,6×

ít phép thử hơn cho mỗi lần tia sáng nảy trong viên đá

0,1%

điểm ảnh khác so với tính đủ mọi mặt: chất lượng giữ nguyên

DiamondHQ tách riêng từng viên đá và dùng bảng tra hướng tia sáng thoát ra, nên tính ít hơn mà vẫn đúng hình học từng viên. Các viên cùng kiểu cắt dùng chung hình và bảng tra.

Đo trên cùng một máy, cùng độ phân giải, nhẫn AFRB100030F2HA1 ở 3D view: 41 → 60 fps.

Ba con số: 1) +46% FPS: đo ngày 28/10 trên MacBook (Apple Silicon), Chrome, khung 390×780 ở DPR 3, cùng nhẫn halo AFRB100030F2HA1 phóng to, chạy lần lượt từng bản, mỗi bản 2 lần (41,1 / 41,2 so với 60,0 / 60,1 fps). 60 fps là trần của màn hình, nên DiamondHQ có thể còn dư. 2) 4,6×: bảng tra octahedral 256×256 lưu 4 mặt ứng viên cho mỗi hướng, lặp 4 lần, nên mỗi lần nảy tia thử 16 mặt thay vì khoảng 73 mặt của một viên. 3) 0,1%: so với cách duyệt đủ mọi mặt, bảng tra chỉ khác ở khoảng 0,1% điểm ảnh, mắt thường không thấy. Thông điệp: shader mới vừa đẹp hơn vừa nhẹ hơn, nên còn dư hiệu năng cho điện thoại tầm trung và cho các loại đá khác.

Tốc độ tải

Gói tải nhẹ thêm 16%

Thành phần	Trước tối ưu	Sau tối ưu	Giảm
Unity wasm	9,9 MB	8,7 MB	12%
Unity data	7,1 MB	5,7 MB	21%
Tailwind CSS	407 KB	15 KB	96%
Bộ icon	bộ đầy đủ	4,8 KB	chỉ 12 icon
Unity wasm + data	17,0 MB	14,4 MB	16%

Cả hai cột là bản build nén Brotli, cùng nhánh code, trước và sau đợt tối ưu.

Nghiệm thu

Biên bản nghiệm thu

#	Hạng mục	Tiêu chí kiểm tra
1	Dây chuyền	Quay đầu, thân đứng yên: dây đứng yên
2	Dây chuyền	Nghiêng người: dây nghiêng theo ngực
3	Dây chuyền	Dây ôm cổ, không hở, không cắt vào cổ
4	Mất tracking	Bắt lại: dây không bay xa rồi trôi về
5	Bông tai	Sát dái tai khi cúi đầu, há miệng, cười nói
6	Nhẫn	Cỡ nhẫn vừa ngón: không lỏng, không cắt vào ngón
7	Vòng tay	Gập cổ tay: vòng vẫn nằm dọc cẳng tay
8	Beauty filter	Da mịn nhẹ, không loang, giữ nét mắt môi
9	Kim cương	Sáng, lấp lánh, có ánh màu hơn bản trước
10	Hiệu năng	Mượt trên iPhone và Android tầm trung

Kiểm tra trực tiếp

Demo trực tiếp

SO SÁNH SONG SONG

Mở trang so sánh hai bản

vto-container.brewmonster.vn/compare.html

BẢN ĐANG CHẠY

vtoframe.doji.vn

BẢN NGHIỆM THU

vto-demo.brewmonster.vn

1. Dây chuyền: quay đầu trái, phải; nghiêng người.

2. Che camera 2 giây rồi bỏ ra: dây không bay ra xa.

3. Bông tai: cúi đầu, há miệng, cười nói.

4. Nhẫn, vòng tay: đưa tay vào khung, gập cổ tay.

5. 3D view nhẫn halo: so độ lấp lánh.

6. Beauty filter: so với khi thêm ?beauty=0.

Sau nghiệm thu

Nghiệm thu Giai đoạn 3

Ba hạng mục nghiệm thu

Tracking

Beauty filter

Kim cương

Tracking

Giới hạn của tracker thế hệ 1

Dây chuyền gắn vào đầu

Một khuôn mặt mẫu chung

Há miệng, đầu “nhảy”

Chỉ có dữ liệu khuôn mặt

128 điểm → 468 điểm + khung vai

Mỗi nhóm điểm một nhiệm vụ

Dây chuyền nằm cân trên ngực

Bông tai nằm sát dái tai

Nhẫn tự căn theo ngón tay

Vòng tay theo đúng cẳng tay

Vừa ngón tay, theo đúng cẳng tay

Nhẫn tự căn kích thước

Vòng tay theo cẳng tay

Đo trên 11 ảnh chụp thật, đánh dấu tay

Ổn định trong tình huống thực tế

Beauty filter

Bật mặc định ở mức nhẹ 0,3

Kim cương

Cùng một nhẫn halo, hai shader

Đẹp hơn mà vẫn nhanh hơn

Gói tải nhẹ thêm 16%

Biên bản nghiệm thu

Demo trực tiếp

Bước tiếp theo

DOJI nghiệm thu

Deploy bản mới lên production