11月2日,世界互联网大会“互联网之光”博览会在乌镇开幕。主办方公布,展会有来自54个国家和地区的671家企业与机构参加,展示1000余项技术与产品,涉及卫星互联网、量子通信、6G、智能体和具身智能等领域。展项越多,越需要一套能复现的评测方法。
把现场演示变成可比较的实验
第一,记录输入与环境:任务提示、测试数据、网络条件、设备和模型版本都应留档。第二,报告质量与延迟分布,而不只公布最快的一次响应。第三,把失败样例纳入演示记录,说明系统何时会拒答、转交人工或要求额外确认。
对于具身智能和智能硬件,评测还要纳入安全边界:机器人活动空间、急停机制、传感器盲区以及网络断开时的安全状态。对面向公众的交互系统,也应说明摄像头、麦克风或位置数据是否被保存,保存多久,用户如何退出。
可复现比“看起来聪明”更重要
展会不是完整实验室,不能要求每家厂商公开所有商业机密。但至少可以让第三方理解演示条件、评价指标和已知限制。否则,不同产品在不同场景下的片段无法横向比较,观众只能凭直觉判断。
行业媒体和采购方可以把“是否有重复测试”“是否展示失败边界”“是否能解释数据处理方式”作为观察表。这样做并不削弱创新,反而有助于把可靠的技术从展台带进真实流程。
资料来源:中国网信网:“互联网之光”博览会开幕信息