Tính năng AI của kính thông minh: được đo trên bản dựng, không phải trên một thiết bị
Một tính năng AI được đánh giá qua tốc độ, độ trễ và độ chính xác, và không khía cạnh nào có thể được đánh giá chỉ bằng cách xem một buổi trình diễn. Buổi trình diễn luôn là trường hợp tốt nhất: một câu nói được chuẩn bị, một căn phòng yên tĩnh, một mạng đã biết hoạt động ổn định và một thiết bị đã được cấu hình cho dịp đó. Tính năng AI của kính thông minh smart glasses how to measure nhằm biến một năng lực thành một bộ chỉ số để người mua có thể đưa vào thông số kỹ thuật và để người mua khác có thể tái tạo kết quả. Cần thực hiện đúng cách vì các tuyên bố về AI dễ bị thổi phóng nhất và cũng khó bảo vệ nhất; những tính năng thất bại thường sẽ thất bại ngay trước công chúng.
Câu trả lời ngắn: một tính năng AI gồm tám phép đo, và hai trong số đó hoàn toàn không phải là phép đo hiệu năng — hành vi khi ngoại tuyến và luồng dữ liệu. Cả hai cùng quyết định điều bạn được phép nói trong danh sách bán hàng và nội dung mà tuyên bố quyền riêng tư của bạn phải mô tả. Hãy xác định ngưỡng chấp nhận của riêng bạn trước khi bắt đầu, chạy mọi phép đo trên nhiều thiết bị và nhiều người nói, đồng thời ghi lại số hiệu bản dựng phần mềm cùng mỗi kết quả. Điều này là cần thiết vì một tính năng AI có thể thay đổi giữa các bản dựng, và một phép đo không có số hiệu bản dựng thì không thể tái tạo.
Người mua quyết định liệu một trợ lý có thuộc về sản phẩm hay không
Người mua ở đây thường đang quyết định liệu một trợ lý giọng nói AI có phù hợp với sản phẩm hay không, hoặc nên sử dụng cách triển khai của nhà cung cấp nào trong hai nhà cung cấp. Họ sẽ cân nhắc các mẫu, danh sách tính năng và nhóm người dùng mục tiêu — nhà sáng tạo nội dung, nhân viên hiện trường hoặc người dùng trợ lý hằng ngày. Điều họ không có là dữ liệu hiệu năng, bởi trong nhóm sản phẩm này, dữ liệu do nhà cung cấp mô hình và hệ thống trợ lý tạo ra chứ không phải do nhà sản xuất tạo ra; dữ liệu cũng thay đổi theo bản dựng chứ không theo phần cứng.
Điểm cuối cùng này thay đổi cách người mua nên nhìn nhận quyết định. Một tính năng AI không phải là thuộc tính cố hữu của sản phẩm mà bạn chỉ mua một lần; đó là mối quan hệ giữa sản phẩm, nhà cung cấp mô hình, mạng và khu vực triển khai. Câu hỏi thực sự của người mua không phải là “tính năng này có tốt không” mà là “tôi có thể đo được nó, có thể buộc nó đáp ứng một ngưỡng nhất định, và điều gì sẽ xảy ra khi nhà cung cấp thay đổi một thứ gì đó”.
Có ba yếu tố cần được quản lý đồng thời và chúng kéo theo những hướng khác nhau. Yếu tố thứ nhất là tuyên bố: một câu trên trang sản phẩm phải vẫn đúng sau khi khách hàng thử tính năng trong một cuộc họp, và câu còn đúng sau đó thường có phạm vi hẹp hơn câu mà đội tiếp thị mong muốn. Yếu tố thứ hai là phụ thuộc: bên vận hành mô hình có thể là một bên thứ ba mà thương hiệu không có hợp đồng, tạo nên rủi ro mua sắm chứ không phải rủi ro kỹ thuật. Yếu tố thứ ba là sự trôi chuyển: một trợ lý thay đổi hành vi ở khách hàng giữa hai lần giao hàng sẽ trở thành vấn đề hỗ trợ xuất hiện mà không có lỗi sản phẩm, và do đó không có lý do để trả lại.
Người mua cũng thường là người phải trả lời khiếu nại về tính năng này vài tháng sau, tại một thị trường mà khiếu nại sẽ được gửi bằng ngôn ngữ mà đội ngũ hỗ trợ không thể sử dụng. Đó là lý do bảng chỉ số phải được viết theo cách có thể duy trì sau khi nhân sự thay đổi: một ngưỡng, một mẫu số, một số bản dựng và một ngày, thay vì mô tả cảm nhận.

Chi phí duy trì một tính năng AI và bên thực sự kiểm soát tính năng đó
Chi phí của một tính năng AI không phải là chi phí phần cứng. Đó là một phụ thuộc vận hành liên tục, và những phần xuất hiện trên đơn mua chỉ là phần nhỏ nhất.
Suy luận diễn ra hoặc trên thiết bị, hoặc ngoài thiết bị, và hai phương án này có đặc điểm thương mại hoàn toàn khác nhau. Suy luận trên thiết bị bị giới hạn bởi phần cứng bạn đã mua, do đó ổn định và riêng tư theo mặc định, đồng thời bị giới hạn ở những gì con chip có thể thực hiện. Suy luận ngoài thiết bị không bị giới hạn bởi bất kỳ tài sản nào bạn sở hữu, và đây chính là điều tạo nên khả năng có một trợ lý thực sự mạnh mẽ — nhưng nó cũng tạo ra sự phụ thuộc vào mạng, độ trễ, vấn đề khu vực triển khai và một bên mà bạn không kiểm soát.
Bên vận hành môi trường chạy là thông tin thương mại quan trọng nhất trên bảng chỉ số. Khi một nhà cung cấp nói rằng mô hình được cung cấấp bởi một đối tác, điều đó cho biết một bên thứ ba có thể thay đổi hành vi sản phẩm của bạn tại thị trường của bạn mà không cần sửa đổi đơn mua. Đây là loại rủi ro khác với việc thay thế linh kiện, bởi việc thay thế linh kiện có thể được ghi vào điều khoản quản lý thay đổi, còn việc thay đổi mô hình thì không thể.
Con đường cập nhật là một câu hỏi về mua sắm, không phải về kỹ thuật. Một tính năng được thay đổi thông qua cập nhật không dây sẽ thay đổi mà không cần đơn hàng mới, không cần mẫu mới và không phát sinh nghĩa vụ thông báo, trừ khi có quy định bằng văn bản. Đối với một thương hiệu đã dành ngân sách tiếp thị cho khả năng này, một thay đổi không được thông báo không phải là sự kiện kỹ thuật mà là sự kiện thương mại. Vì vậy, khả năng của nhà cung cấp trong việc nêu rõ số phiên bản build và cơ chế cập nhật là điều cần xác lập trước tiên, bởi một nhà cung cấp không thể nêu rõ build cũng không thể cho biết chính xác bạn đang đo đạc điều gì.
Con đường dữ liệu là một câu hỏi về tuân thủ với khung quy định cố định. Kể từ ngày 1 tháng 8 năm 2025, các yêu cầu về an ninh mạng trong Chỉ thị Thiết bị Vô tuyến đã trở thành một phần bắt buộc của dấu CE, được mô tả trong chuỗi tiêu chuẩn hài hòa EN 18031, bao gồm truyền thông an toàn, mã hóa, lưu trữ an toàn, sự đồng ý của người dùng và quy trình xử lý các lỗ hổng đã được xác định. Tính năng giọng nói nằm hoàn toàn trong phạm vi này, và bằng chứng mà thương hiệu cuối cùng sẽ được yêu cầu không phải là độ chính xác của tính năng mà là con đường dữ liệu phía sau nó.
Không điều nào trong số đó tốn tiền trên hóa đơn, và chính vì vậy chúng thường bị bỏ qua. Đàm phán nằm ở cấu trúc cam kết chứ không phải ở mức giá: nghĩa vụ thông báo khi có thay đổi firmware, định nghĩa trạng thái suy giảm khi mất mạng, quyền yêu cầu sửa đổi bản sao, thời hian mà build đã đo là build được giao, và số lượng thiết bị trong lô đánh giá.

Tám phép đo, ngưỡng và quy tắc mẫu số
Hãy yêu cầu các hàng dưới đây bằng văn bản trước khi kiểm thử mẫu. Cột bên phải phân biệt nhà cung cấp đã đo build được giao với nhà cung cấp chỉ mô tả một khả năng.
Tỷ lệ đánh thức, kèm điều kiện kiểm thử. Một tỷ lệ phần trăm trên số lần thử đã nêu, trong một môi trường đã nêu. “Phản hồi rất nhanh nhạy” là câu trả lời mơ hồ, và đây cũng là câu trả lời thường được đưa ra nhất.
Tỷ lệ kích hoạt sai. Một tỷ lệ phần trăm trên số lần thử đã nêu, trong một môi trường đã nêu. Đây là phép đo quyết định tính năng có sử dụng được ở nơi công cộng hay không, và cũng là phép đo hầu như không bao giờ được báo cáo. Một thiết bị cắt ngang cuộc trò chuyện sẽ khiến người dùng tháo ra khỏi mặt, bất kể tính năng hoạt động tốt đến đâu khi thực sự được kích hoạt.
Tỷ lệ thành công thực hiện lệnh, trên một danh sách cố định. Một tỷ lệ phần trăm so với danh sách do bên mua cung cấp. “Hiểu giọng nói tự nhiên” là câu trả lời mơ hồ, và danh sách câu lệnh phải là danh sách khách hàng của bạn sử dụng, không phải danh sách trong bản trình diễn.
Độ trễ, kèm trạng thái mạng. Một con số với ngưỡng cố định và điều kiện mạng được nêu rõ. “Rất nhanh” là câu trả lời mơ hồ. Độ trễ là khoảng cách giữa một tính năng tạo cảm giác phản hồi nhanh và một tính năng tạo cảm giác bị lỗi, và độ trễ thay đổi theo điều kiện mạng. Vì vậy, trạng thái mạng phải là một phần của phép đo.
Độ chính xác nhận dạng theo từng điều kiện. Một con số cho phòng yên tĩnh và cho môi trường thực tế. “Độ chính xác cao” là câu trả lời mơ hồ. Giọng địa phương, tiếng ồn nền, từ vựng không phổ biến và giọng nói nhỏ đều làm thay đổi kết quả, và điều kiện quan trọng là điều kiện mà khách hàng của bạn thường gặp.
Độ chính xác dịch, do người bản ngữ đánh giá. Đánh giá về các câu mà khách hàng cần dịch. “Dịch chính xác” là câu trả lời mơ hồ, và một bản dịch xử lý được lời chào nhưng thất bại với mô tả sản phẩm vẫn là thất bại đối với bên mua.
Hành vi khi mất mạng. Một tuyên bố bằng văn bản về những gì xảy ra khi ngắt kết nối mạng. Việc im lặng về vấn đề này là câu trả lời thường được đưa ra nhất, và nó giải quyết tranh chấp phổ biến nhất trong nhóm sản phẩm này: liệu sản phẩm có hoạt động đúng như tài liệu mô tả hay không khi không có mạng.
Con đường dữ liệu và cơ chế đồng ý. Mô tả những dữ liệu rời khỏi thiết bị và cách thức xử lý sự đồng ý. “Dữ liệu được xử lý an toàn” là câu trả lời mơ hồ và không mang ý nghĩa.
Build firmware và cơ chế cập nhật. Mã định danh build và cách thức cập nhật một thiết bị đã được giao. “Cập nhật qua ứng dụng” là câu trả lời mơ hồ.
Model designation. Một model designation
Một tỷ lệ không có số lần thử không phải là một tỷ lệ. Mọi tỷ lệ phần trăm trong danh sách này đều cần một mẫu số, danh sách các lần thử và một môi trường. “Tỷ lệ đánh thức 98%” được đo qua 10 lần thử trong một văn phòng yên tĩnh là con số kém hơn “Tỷ lệ đánh thức 85%” được đo qua 300 lần thử ngoài đường, và chỉ một trong hai con số này dự báo được điều gì. Đây là lỗi phổ biến nhất trong nhóm sản phẩm này và không thể nhận ra nếu thiếu mẫu số.
Tỷ lệ kích hoạt sai là tiêu chí khả dụng, không phải chú thích kỹ thuật. Ngưỡng mà người mua đặt ra cho tỷ lệ này là quyết định sản phẩm về nơi sản phẩm có thể được bán — phòng họp và đường phố là hai thị trường khác nhau đối với cùng một thiết bị.
Số hiệu bản dựng là cột thông tin khiến kết quả đáng để lưu giữ. Một tính năng AI có thể thay đổi giữa các bản dựng, và một phép đo không có số hiệu bản dựng thì không thể tái lập hoặc bảo vệ. Nếu nhà cung cấp không nêu được bản dựng, họ không thể cho biết bạn đã đo được điều gì.
Một cảnh báo áp dụng cho mọi hàng: các con số này không thể so sánh trực tiếp giữa các nhà cung cấp. Hai cách triển khai sẽ sử dụng những danh sách cụm từ, mạng, số lần thử và định nghĩa về kích hoạt thành công khác nhau. Trước khi xây dựng bảng, hãy xác định cột nào là phép đo của bạn và cột nào là số liệu do nhà cung cấp cung cấp; tuyệt đối không trộn lẫn hai loại dữ liệu trong cùng một hàng nếu không có chú thích.

Chạy bảng đo hai lần, trên nhiều thiết bị, trong hai môi trường
1. Xây dựng bảng đo trước lần thử đầu tiên. Năm cột và không hơn: phép thử, điều kiện, số lần thử, kết quả và ngày kèm số hiệu bản dựng phần mềm. Một bảng có nhiều cột hơn sẽ không được điền đầy đủ, và một bảng không được điền đầy đủ chỉ tạo ra một buổi trình diễn.
2. Thử hai hoặc ba thiết bị thuộc cùng một bản dựng khi tính năng đóng vai trò then chốt. Một tính năng hoạt động trên mẫu này nhưng lỗi trên mẫu khác là vấn đề tỷ lệ sản phẩm đạt, và vấn đề này không thể nhận thấy trong phép thử chỉ dùng một thiết bị.
3. Thử một thiết bị nguyên trạng với một chiếc điện thoại mới, không dùng thiết bị trình diễn. Thiết bị trình diễn đã liên kết tài khoản, đặt ngôn ngữ, cấu hình khu vực và có mạng được biết là hoạt động tốt. Thiết bị nguyên trạng là sản phẩm mà khách hàng nhận được, và chênh lệch giữa hai thiết bị là nguyên nhân phổ biến nhất khiến tính năng hoạt động trong phòng họp nhưng không hoạt động trong bếp của khách hàng.
4. Thử trong hai môi trường và báo cáo cả hai. Mọi tỷ lệ đều có một giá trị trong phòng yên tĩnh và một giá trị ngoài đường, nhưng chỉ giá trị thứ hai mới dự báo được trải nghiệm của khách hàng. Chỉ báo cáo một trong hai giá trị mà bỏ qua giá trị còn lại chính là lựa chọn xem bạn đang bán sản phẩm cho nhóm khách hàng nào.
5. Sử dụng các cụm từ mà khách hàng sẽ dùng, không dùng các cụm từ mà bạn dùng. Thay đổi kịch bản giữa các lần chạy khiến hai lượt không thể so sánh, và đây là dạng sai sót phổ biến nhất. Hãy lưu giữ danh sách cụm từ cùng với kết quả.
6. Chạy toàn bộ bảng hai lần, vào hai ngày khác nhau. Hãy xem chênh lệch lớn giữa hai lượt chạy là một phát hiện, không phải nhiễu. Một tính năng có tỷ lệ thành công thay đổi hai mươi điểm giữa các lượt chạy là không ổn định, và sản phẩm dựa trên tính năng đó sẽ khiến trải nghiệm khách hàng trở thành một trò xổ số.
7. Xác minh đường truyền dữ liệu thay vì chỉ đo nó. Quan sát hoạt động của mạng, so sánh với những gì tài liệu tuyên bố và ghi lại kết quả so sánh. Nội dung này thuộc hồ sơ thẩm định chứ không thuộc phòng thí nghiệm, bởi đây là so sánh với tài liệu chứ không phải với một con số.
8. Lặp lại bảng đo trên bản dựng thực sự sẽ được xuất bán. Phép đo quan trọng về mặt thương mại là phép đo được thực hiện trên bản dựng mà khách hàng cầm trong tay; nếu bản dựng đó đến sau mẫu của bạn thì bảng đo phải được chạy lại trên bản dựng ấy.
Bốn cách một chương trình tính năng AI thất bại và những điều khoản cần điều chỉnh
Tính năng được quảng bá trong trang giới thiệu nhưng lại lỗi trong cuộc họp của khách hàng. Nguyên nhân gốc: chưa từng đo tỷ lệ kích hoạt sai, chỉ đo tỷ lệ đánh thức. Phòng ngừa: hãy đo cả hai và đặt ngưỡng kích hoạt sai trước khi viết trang sản phẩm.
Khách hàng báo rằng trợ lý ngừng hoạt động sau một bản cập nhật. Nguyên nhân gốc: phép đo được gắn với một bản dựng, nhưng bản dựng đã thay đổi mà không thử lại. Phòng ngừa: ghi số hiệu bản dựng cùng mọi kết quả và chạy lại bảng đo trên bản dựng thực sự sẽ được xuất bán.
Một tuyên bố bản dịch được đưa ra nhưng người đánh giá viết bằng ngôn ngữ đích lại bác bỏ. Nguyên nhân gốc: độ chính xác được đánh giá bởi người không phải là người bản ngữ của ngôn ngữ đích, trên các lời chào thay vì các cụm từ sử dụng thực tế. Phòng ngừa: nhờ một người bản ngữ của ngôn ngữ đích chấm điểm các cụm từ mà khách hàng cần và ghi lại danh sách cụm từ.
Sản phẩm hoạt động tại quốc gia trình diễn nhưng lại lỗi tại thị trường ra mắt. Nguyên nhân gốc: phép đo được thực hiện tại một khu vực trên một mạng. Phòng ngừa: hãy chạy bảng đo tại thị trường ra mắt, trên các mạng mà khách hàng sẽ sử dụng, và báo cáo cả hai bộ kết quả.
Một chương trình tính năng AI dành tỷ lệ chi tiêu cho các thiết bị đánh giá cao hơn một chương trình phần cứng, vì tính năng chính là sản phẩm và số lượng mẫu chính là khoảng tin cậy. Những điều khoản đáng để dành thời gian đàm phán gồm:
- Số lượng đặt hàng tối thiểu và số lượng đơn vị đánh giá, phải lớn hơn trong nhóm phần cứng vì số lượng mẫu chính là khoảng tin cậy.
- Thiết kế bao bì và phụ kiện bên trong, bao gồm nhãn thị trường, ngôn ngữ của bộ tài liệu và cách diễn đạt sự đồng ý, vốn là một tài liệu chứng nhận tuân thủ chứ không phải phụ kiện bên trong trong nhóm này.
- Chia lô hàng theo mốc duyệt mẫu, thường dễ được chấp thuận hơn so với việc nhượng giá.
- Các mốc thanh toán: đặt cọc khi ký, số dư phải trả khi kiểm tra được ký xác nhận và khoản giữ lại đối với bộ hồ sơ tài liệu.
- Thời hạn bảo hành kèm thời gian phản hồi quy định và chính sách đổi trả, phải tính đến một tính năng có thể thay đổi mà không cần thông báo.
Hai chi phí trong một chương trình tính năng được báo giá nhưng không thương lượng. Chi phí chứng nhận và thời gian chứng nhận phụ thuộc vào quy trình và cơ quan kiểm nghiệm chứ không phụ thuộc vào quy mô đơn hàng của bạn; đối với sản phẩm kết nối, chúng còn bao gồm các yêu cầu an ninh mạng theo Chỉ thị Thiết bị Vô tuyến. Chi phí làm khuôn thường được phân bổ trong đơn hàng đầu tiên. Có hai điều cần lưu ý: khối lượng mà khoản phí được phân bổ và vị trí lưu giữ khuôn nếu chương trình bị ngừng. Bên dưới cả hai là lộ trình cập nhật: một nhà cung cấp không thể nêu số hiệu bản dựng và cơ chế cập nhật đang cho bạn biết tính năng có thể thay đổi mà không có thông báo hợp đồng dành cho bạn, và đó là mức rủi ro thương mại lớn hơn giá bán đơn vị.
Hồ sơ cần yêu cầu trước khi đặt cọc gồm: mã định danh bản dựng phần mềm và cơ chế cập nhật; số hiệu chứng chỉ kèm cơ quan cấp và ngày hiệu lực; bản tuyên bố chứng nhận phù hợp cho đúng tên mô hình; mô tả bằng văn bản về đường đi của dữ liệu và cơ chế đồng ý; và tên mô hình được ghi trên báo giá.
Các điều khoản hợp đồng bảo vệ tuyên bố về tính năng AI bao gồm: tên mô hình được liệt kê thành một mục riêng kèm số hiệu chứng chỉ; tiêu chí nghiệm thu mẫu, tham chiếu đến bảng đo và các ngưỡng cố định; điều khoản yêu cầu thông báo trước khi thay đổi phần mềm có ảnh hưởng đến hành vi của trợ lý, để người mua có thể kiểm tra lại, và một khoảng thời gian xác định trong đó bản dựng đã đo là bản dựng được giao; cùng điều khoản quy định ai sẽ gánh chịu chi phí khi mẫu không đáp ứng tiêu chí nghiệm thu.
Trợ lý hiện trường được đo và giới hạn của những gì chúng tôi có thể công bố
Hãy xem xét một kịch bản giả định thay vì một dự án khách hàng thực tế. Giả sử người mua phía thương hiệu bổ sung trợ lý vào một dòng sản phẩm camera hiện có cho kênh dịch vụ hiện trường, nơi người dùng cuối làm việc trong môi trường ồn, có thể đeo găng tay và sẽ sử dụng sản phẩm cùng một đối tác đang nói chuyện.
Bước một: yêu cầu. Trợ lý được mong muốn để ghi âm ghi chú bằng giọng nói trong lúc đi khảo sát hiện trường, tại một nơi ồn và có một đối tác nói chuyện gần đó. Câu nói đó đặt ra các ngưỡng: tỷ lệ kích hoạt sai phải đủ thấp để cuộc trò chuyện của đối tác không kích hoạt thiết bị, tỷ lệ đánh thức phải được đo với danh sách cụm từ mà nhân viên hiện trường thực sự sử dụng, và độ chính xác nhận dạng phải được báo cáo trong điều kiện ồn chứ không phải trong điều kiện yên tĩnh.
Bước hai: bảng đo. Người mua xây dựng bảng đo với năm cột, cố định các ngưỡng trước khi mẫu đến và yêu cầu nhà cung cấp số hiệu bản dựng cùng cơ chế cập nhật trong cùng một tin nhắn. Nhà cung cấp trả lời với tỷ lệ đánh thức không có mẫu số và không có thông tin bản dựng, kèm mô tả “rất nhạy” về hành vi kích hoạt sai. Cả hai câu trả lời đều được đưa vào hồ sơ như những phát hiện chứ không phải kết quả.
Bước ba: các đơn vị. Ba đơn vị cùng bản dựng được kiểm tra, trên một thiết bị nguyên hộp dùng với điện thoại mới, trong một phòng yên tĩnh và trên đường. Tỷ lệ đánh thức thấp hơn đáng kể ngoài đường so với con số của nhà cung cấp vốn được đo trong phòng yên tĩnh, và một trong ba đơn vị tạo ra hiện tượng kích hoạt sai mà hai đơn vị còn lại không gặp. Chênh lệch giữa các đơn vị là phát hiện quan trọng hơn, bởi đây là vấn đề về tỷ lệ sản xuất chứ không phải vấn đề về sản phẩm, và nó thay đổi câu hỏi từ “sản phẩm này có tốt không” thành “mức độ nhất quán có đủ để đưa lên trang sản phẩm không”.
Bước bốn: lặp lại. Toàn bộ bảng đo được thực hiện lại hai ngày sau trên cùng các đơn vị, và tỷ lệ đánh thức thay đổi với biên độ lớn. Đây là phát hiện chấm dứt cuộc thảo luận về việc công bố tỷ lệ đánh thức nói chung, đồng thời đưa người mua hướng đến một tuyên bố mà sản phẩm thực sự có thể duy trì: trợ lý tồn tại, phản hồi với danh sách cụm từ và được đo trên một bản dựng được nêu rõ.
Bước năm: cấu trúc thương mại. Người mua đưa nghĩa vụ thông báo về các thay đổi phần mềm cứng ảnh hưởng đến trợ lý vào đơn đặt hàng, xác định trạng thái suy giảm khi mất kết nối là hành vi được chấp nhận chứ không phải lỗi, liên kết bản sao với bản phát hành sẽ được giao, và tách lô hàng đầu tiên thành phần giao hàng sau mốc duyệt mẫu. Kết quả là một tính năng được công bố ở mức độ mà bằng chứng hỗ trợ, thay vì được công bố ở mức độ mà một buổi trình diễn gợi ý rồi lại thất bại trước công chúng.
Lập trường của chúng tôi là công bố các khả năng AI mà tài liệu hỗ trợ và đánh dấu những khả năng còn lại là chưa hoàn thiện. Chúng tôi cũng muốn người mua tự thực hiện các phép đo này thay vì tin vào một mô tả về chúng. Danh mục của chúng tôi liệt kê trợ lý giọng nói AI là một trong các công nghệ trọng tâm của dòng kính camera AI, còn trang độc lập của chúng tôi mô tả tính năng dịch AI trên K01, một mẫu thiết bị hỗ trợ Âm thanh, nên chúng tôi xem đây là một quan sát từ tài liệu tiếp thị của chính mình chứ không phải là thông số kỹ thuật. Chúng tôi không công bố tỷ lệ đánh thức, tỷ lệ kích hoạt sai, tỷ lệ thành công khi thực hiện lệnh, độ trễ, độ chính xác nhận diện, độ chính xác dịch hoặc hành vi khi mất kết nối của bất kỳ mẫu nào, và chúng tôi sẽ không ước tính bất kỳ chỉ số nào trong số đó. Chúng tôi cũng sẽ không đưa một con số vào danh sách sản phẩm nếu con số đó được đo trên một thiết bị trình diễn, bởi một con số không thể tái lập chính là một tuyên bố không thể bảo vệ khi khách hàng đang đứng trước mặt bạn.
Điều chúng tôi sẽ làm là cung cấp các thiết bị có bản phần mềm cứng xác định rõ ràng và cùng bạn thực hiện bảng đo lường thay vì gửi một buổi trình diễn. Quy trình kiểm thử được đề cập trong bài kiểm thử tính năng AI trước khi đặt hàng, các câu hỏi dành cho nhà cung cấp nằm trong bài xác minh nhà cung cấp AI, những sai lầm tuyên bố cần tránh được nêu trong bài những sai lầm thường gặp về AI, và phần nền tảng nằm trong bài tính năng AI.
Bước tiếp theo cần làm. Liệt kê các tính năng bạn dự định công bố, môi trường sử dụng và những cụm từ mà khách hàng sẽ thực sự nói. Xác định các ngưỡng trước khi mẫu hàng đến. Chạy bảng đo lường trên ba thiết bị nguyên trạng, trong hai môi trường, mỗi lần hai lần, và ghi lại số phiên bản phần mềm cứng cùng mỗi kết quả. Sau đó, khi đã có số liệu trước mặt, hãy quyết định tính năng nào xứng đáng đưa lên trang và tính năng nào không.
Bài đọc liên quan
- Quy trình kiểm thử mẫu — kiểm thử tính năng AI trước khi đặt hàng
- Những câu hỏi cần hỏi nhà cung cấp trước tiên — xác minh nhà cung cấp AI
- Những sai lầm tuyên bố cần tránh — những sai lầm thường gặp về AI
Hãy cho chúng tôi biết các tính năng bạn dự định công bố và môi trường sử dụng, chúng tôi sẽ cùng bạn xây dựng bảng đo lường.



