本发明公开了人工智能语音算法自动化测试方法。现有测试方法需要多次搭建测试环境，测试场地的需求大，测试周期比较长。本发明首先录制在各种场景下带有唤醒词的音频文件作为该待测试项目的测试用例，存储在服务器，对所有的测试用例，创建测试项目配置。提交待测试项目时，首先在服务器上下载对应的测试项目配置，将待测试项目的软件和测试项目配置提交给服务器，测试主机实时查询服务器，如果有新待测试项目，则将服务器存储的测试项目的软件和测试项目配置下载到本地，进行测试，实时生成测试报告并上传至服务器，算法开发人员访问服务器得到测试报告。本发明场地需求小、测试周期短，算法开发人员可以自主共享目录提交测试，查看测试报告。