1.本技术涉及智能驾驶技术领域，具体涉及一种数据回注方法、系统、电子设备及可读存储介质。
背景技术：2.随着“软件定义汽车”时代来临，汽车整车产品与智能驾驶功能迭代周期越来越短，智能驾驶集成的功能也愈发增多，如何提升智能驾驶功能开发验证效率、如何尽可能覆盖实际道路交通场景降低长尾效应、缩短开发周期成为智能驾驶汽车开发过程中亟须解决的难题。
3.虽然，目前有现有文献通过对场景数据进行多次使用，并利用相同数据对adas(advanced driving assistance system，高级驾驶辅助系统，简称adas)算法进行多轮迭代测试，提升了数据的使用效率和仿真价值。但是，这些现有文献未涉及控制器在环、台架集群、远程在线任务管理、远程在线设备管理、用户权限管理、数据中台等机制，对于后续多人多测试任务远程在线处理以及效率提升支撑作用小。
技术实现要素：4.鉴于以上所述现有技术的缺点，本技术提供一种数据回注方法、系统、电子设备及可读存储介质，以解决上述技术问题。
5.本技术提供一种数据回注方法，包括有以下步骤：
6.获取待处理智能驾驶数据，所述待处理智能驾驶数据包括预先检测或实时检测到的智能驾驶数据；
7.响应于目标操作指令，并基于响应结果生成数据回注测试任务；所述目标操作指令包括外部输入的操作指令；
8.根据所述数据回注任务调用所述待处理智能驾驶数据，并将所述数据回注任务以及所述待处理智能驾驶数据回注给智能驾驶软件；
9.控制所述智能驾驶软件按照所述数据回注任务对所述待处理智能驾驶数据进行仿真测试验证，并输出仿真测试验证结果。
10.于本技术的一实施例中，控制所述智能驾驶软件按照所述数据回注任务对所述待处理智能驾驶数据进行仿真测试验证后，所述方法还包括：
11.对所述智能驾驶软件进行更新，调整所述智能驾驶软件的软件名称、软件版本、软件版本上传日期和/或软件更新说明；
12.并利用调整后的智能驾驶软件对所述待处理智能驾驶数据进行仿真测试验证。
13.于本技术的一实施例中，在获取预先检测或实时检测到的智能驾驶数据后，所述方法还包括：
14.对预先检测或实时检测到的智能驾驶数据进行预处理，生成所述待处理智能驾驶数据；
15.其中，所述预处理包括以下至少之一：数据清洗、数据分类存储、数据索引、数据分发。
16.于本技术的一实施例中，在响应于目标操作指令前，所述方法还包括：
17.接收目标对象在客户端上执行的目标操作，并基于所述客户端生成与所述目标操作对应的目标操作指令；
18.其中，所述目标操作包括以下至少之一：软件下载操作、软件上传刷写操作、软件删除操作、软件查看操作、数据筛选操作、数据集创建操作、数据集删除操作、数据集查看操作、更新智能驾驶软件版本操作、发起数据回注测试任务操作、取消数据回注测试任务操作、监控数据回注状态操作、获取数据回注结果操作。
19.本技术还提供一种数据回注系统，所述系统包括有：
20.数据中台，用于存储待处理智能驾驶数据，所述待处理智能驾驶数据包括预先检测或实时检测到的智能驾驶数据；
21.客户端，用于响应于目标操作指令，并基于响应结果生成数据回注测试任务；所述目标操作指令包括外部输入的操作指令；
22.服务器，用于根据所述数据回注任务调用所述待处理智能驾驶数据，并将所述数据回注任务以及所述待处理智能驾驶数据回注给台架；
23.台架，用于提供智能驾驶软件，并控制所述智能驾驶软件按照所述数据回注任务对所述待处理智能驾驶数据进行仿真测试验证，以及将仿真测试验证结果反馈至所述服务器或所述客户端。
24.于本技术的一实施例中，所述服务器包括有：
25.设备管理单元，用于对客户端进行管理和监控，以及使用超文本传输协议或超文本传输类似协议接收目标对象在所述客户端上执行的目标操作，以及通过远程桌面连接方式与所述台架进行远程连接控制；
26.文件管理单元，用于对所述智能驾驶软件进行更新，调整所述智能驾驶软件的软件名称、软件版本、软件版本上传日期和/或软件更新说明；
27.测试用例管理单元，用于根据所述数据回注测试任务对应的场景，调用所述待处理智能驾驶数据，并将调用的待处理智能驾驶数据传输给所述台架；
28.任务管理单元，用于对所述数据回注测试任务进行优先级配置，并将完成优先级配置后的数据回注测试任务传输给所述台架；
29.统计分析单元，用于根据所述仿真测试验证结果统计所述数据回注测试任务执行状态。
30.于本技术的一实施例中，所述服务器还包括有：
31.权限管理单元，用于根据预设项目需求对目标对象、项目户组进行权限管理；
32.网络服务单元，用于提供远程页面访问页面，以使外部终端设备远程访问所述服务器。
33.于本技术的一实施例中，所述客户端在响应于目标操作指令前，还包括：
34.接收目标对象输入的需要执行的目标操作，并生成与所述目标操作对应的目标操作指令；
35.其中，所述目标操作包括以下至少之一：软件下载操作、软件上传刷写操作、软件
删除操作、软件查看操作、数据筛选操作、数据集创建操作、数据集删除操作、数据集查看操作、更新智能驾驶软件版本操作、发起数据回注测试任务操作、取消数据回注测试任务操作、监控数据回注状态操作、获取数据回注结果操作。
36.本技术还提供一种电子设备，所述电子设备包括：
37.一个或多个处理器；
38.存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述电子设备实现如上述中任一项所述的数据回注方法。
39.本技术还提供一种计算机可读存储介质，其上存储有计算机程序，当所述计算机程序被计算机的处理器执行时，使计算机执行如上述中任一项所述的数据回注方法。
40.如上所述，本技术提供一种数据回注方法、系统、电子设备及可读存储介质，具有以下有益效果：
41.本技术首先获取待处理智能驾驶数据，然后响应于目标操作指令，并基于响应结果生成数据回注测试任务；再根据数据回注任务调用待处理智能驾驶数据，并将数据回注任务以及待处理智能驾驶数据回注给智能驾驶软件；最后控制智能驾驶软件按照数据回注任务对待处理智能驾驶数据进行仿真测试验证，并输出仿真测试验证结果。由此可知，本技术通过对智能驾驶数据进行利用，将其回注至智能驾驶软件，不仅可以测试对客户端设备任务结果的远程在线管理，而且可以提升数据的使用效率、软件测试验证效率与安全可靠性，极大地提升了智能驾驶软件开发测试验证效率，能够缩短开发周期，提升智能驾驶软件升级迭代频率。相当于本技术通过预先检测或实时检测到的智能驾驶数据建立交通道路实测数据库，可以快速验证智能驾驶软件中每次算法的迭代更新对于场景的适应性与可靠性；从而快速验证升级后的智能驾驶软件对于问题场景和失效场景的解决效果；降低利用实际车辆测试的危险性以及车辆使用成本，同时还可以节约开发人员的时间。所以，本技术不仅能提升自动驾驶性能的稳定性与可靠性，逐步扩大自动驾驶场景边界，而且还能实现超越人力驾驶员的无人驾驶功能体验。
42.应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本技术。
附图说明
43.此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本技术的实施例，并与说明书一起用于解释本技术的原理。显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域普通技术者来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
44.图1为应用本技术中一个或多个实施例中技术方案的示例性系统架构的示意图；
45.图2为本技术中一实施例提供的数据回注方法的流程示意图；
46.图3为本技术中一实施例提供的adas软件管理示意图；
47.图4为本技术中一实施例提供的测试用例管理示意图；
48.图5为本技术中一实施例提供的回注台架客户端管理系统的功能示意图；
49.图6为本技术中一实施例提供的数据回注系统的框架示意图；
50.图7为本技术中一实施例提供的服务器的框架示意图；
51.图8为适用于实现本技术中一个或多个实施例的电子设备的硬件结构示意图。
具体实施方式
52.以下将参照附图和优选实施例来说明本发明的实施方式，本领域技术人员可由本说明书中所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本发明的精神下进行各种修饰或改变。应当理解，优选实施例仅为了说明本发明，而不是为了限制本发明的保护范围。
53.需要说明的是，以下实施例中所提供的图示仅以示意方式说明本发明的基本构想，遂图式中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制，其实际实施时各组件的型态、数量及比例可为一种随意的改变，且其组件布局型态也可能更为复杂。
54.在下文描述中，探讨了大量细节，以提供对本发明实施例的更透彻的解释，然而，对本领域技术人员来说，可以在没有这些具体细节的情况下实施本发明的实施例是显而易见的，在其他实施例中，以方框图的形式而不是以细节的形式来示出公知的结构和设备，以避免使本发明的实施例难以理解。
55.台架：就是测试台，不同设备的测试台需要不同的技术支持系统。
56.图1示出了一种可以应用本技术中一个或多个实施例中技术方案的示例性系统架构的示意图。如图1所示，系统架构100可以包括终端设备110、网络120和服务器130。终端设备110可以包括智能手机、平板电脑、笔记本电脑、台式电脑等各种电子设备。服务器130可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云计算服务的云服务器。网络120可以是能够在终端设备110和服务器130之间提供通信链路的各种连接类型的通信介质，例如可以是有线通信链路或者无线通信链路。
57.根据实现需要，本技术实施例中的系统架构可以具有任意数目的终端设备、网络和服务器。例如，服务器130可以是由多个服务器设备组成的服务器群组。另外，本技术实施例提供的技术方案可以应用于终端设备110，也可以应用于服务器130，或者可以由终端设备110和服务器130共同实施，本技术对此不做特殊限定。
58.在本技术的一个实施例中，本技术的终端设备110或服务器130可以首先获取待处理智能驾驶数据，然后响应于目标操作指令，并基于响应结果生成数据回注测试任务；再根据数据回注任务调用待处理智能驾驶数据，并将数据回注任务以及待处理智能驾驶数据回注给智能驾驶软件；最后控制智能驾驶软件按照数据回注任务对待处理智能驾驶数据进行仿真测试验证，并输出仿真测试验证结果。利用终端设备110或服务器130执行数据回注方法，可以通过对智能驾驶数据进行利用，将其回注至智能驾驶软件，不仅可以测试对客户端设备任务结果的远程在线管理，而且可以提升数据的使用效率、软件测试验证效率与安全可靠性，极大地提升了智能驾驶软件开发测试验证效率，能够缩短开发周期，提升智能驾驶软件升级迭代频率。相当于通过预先检测或实时检测到的智能驾驶数据建立交通道路实测数据库，可以快速验证智能驾驶软件中每次算法的迭代更新对于场景的适应性与可靠性；从而快速验证升级后的智能驾驶软件对于问题场景和失效场景的解决效果；降低利用实际车辆测试的危险性以及车辆使用成本，同时还可以节约开发人员的时间。所以，利用终端设
备110或服务器130执行数据回注方法，不仅能提升自动驾驶性能的稳定性与可靠性，逐步扩大自动驾驶场景边界，而且还能实现超越人力驾驶员的无人驾驶功能体验。
59.以上部分介绍了应用本技术技术方案的示例性系统架构的内容，接下来继续介绍本技术的数据回注方法。
60.图2示出了本技术一实施例提供的数据回注方法流程示意图。具体地，在一示例性实施例中，如图2所示，本实施例提供一种数据回注方法，该方法包括以下步骤：
61.s210，获取待处理智能驾驶数据，所述待处理智能驾驶数据包括预先检测或实时检测到的智能驾驶数据；
62.s220，响应于目标操作指令，并基于响应结果生成数据回注测试任务；所述目标操作指令包括外部输入的操作指令；
63.s230，根据所述数据回注任务调用所述待处理智能驾驶数据，并将所述数据回注任务以及所述待处理智能驾驶数据回注给智能驾驶软件；
64.s240，控制所述智能驾驶软件按照所述数据回注任务对所述待处理智能驾驶数据进行仿真测试验证，并输出仿真测试验证结果。
65.由此可知，本实施例通过对智能驾驶数据进行利用，将其回注至智能驾驶软件，不仅可以测试对客户端设备任务结果的远程在线管理，而且可以提升数据的使用效率、软件测试验证效率与安全可靠性，极大地提升了智能驾驶软件开发测试验证效率，能够缩短开发周期，提升智能驾驶软件升级迭代频率。相当于本实施例通过预先检测或实时检测到的智能驾驶数据建立交通道路实测数据库，可以快速验证智能驾驶软件中每次算法的迭代更新对于场景的适应性与可靠性；从而快速验证升级后的智能驾驶软件对于问题场景和失效场景的解决效果；降低利用实际车辆测试的危险性以及车辆使用成本，同时还可以节约开发人员的时间。所以，本实施例不仅能提升自动驾驶性能的稳定性与可靠性，逐步扩大自动驾驶场景边界，而且还能实现超越人力驾驶员的无人驾驶功能体验。
66.根据上述记载，在一示例性实施例中，控制所述智能驾驶软件按照所述数据回注任务对所述待处理智能驾驶数据进行仿真测试验证后，该方法还可以包括：对所述智能驾驶软件进行更新，调整所述智能驾驶软件的软件名称、软件版本、软件版本上传日期和/或软件更新说明；并利用调整后的智能驾驶软件对所述待处理智能驾驶数据进行仿真测试验证。由此可知，本实施例可以对智能驾驶软件进行更新，然后再将待处理智能驾驶数据回注给更新后的智能驾驶软件，从而可以对更新后的智能驾驶软件进行仿真测试验证，以缩短智能驾驶软件的开发周期，提升智能驾驶软件升级迭代频率。同时，可以快速验证智能驾驶软件中每次算法的迭代更新对于场景的适应性与可靠性；从而快速验证升级后的智能驾驶软件对于问题场景和失效场景的解决效果；降低利用实际车辆测试的危险性以及车辆使用成本，节约开发人员的时间。
67.根据上述记载，在一示例性实施例中，在获取预先检测或实时检测到的智能驾驶数据后，该方法还可以包括：对预先检测或实时检测到的智能驾驶数据进行预处理，生成所述待处理智能驾驶数据；其中，所述预处理包括以下至少之一：数据清洗、数据分类存储、数据索引、数据分发。本实施例通过对预先检测或实时检测到的智能驾驶数据进行预处理，可以对智能驾驶数据进行初步筛选，去除一些不需要的数据，从而降低对内存资源和计算资源的占用。同时，完成预处理后的智能驾驶数据也方便服务器进行直接调用，从而提升智能
驾驶数据的使用效率。
68.根据上述记载，在一示例性实施例中，在响应于目标操作指令前，该方法还可以包括：接收目标对象在客户端上执行的目标操作，并基于所述客户端生成与所述目标操作对应的目标操作指令；其中，所述目标操作包括以下至少之一：软件下载操作、软件上传刷写操作、软件删除操作、软件查看操作、数据筛选操作、数据集创建操作、数据集删除操作、数据集查看操作、更新智能驾驶软件版本操作、发起数据回注测试任务操作、取消数据回注测试任务操作、监控数据回注状态操作、获取数据回注结果操作。
69.其中，目标对象在客户端上执行目标操作时，目标对象还可以同时在客户端上输入操作信息，然后客户端会根据目标对象所执行的目标操作和输入的操作信息，生成对应的目标操作指令，同时在目标操作指令被响应后，客户端上还会输出显示对应的结果，从而方便目标对象查看。具体地，目标对象在客户端上执行adas软件的管理动作如图3所示，在图3中，目标对象可以在客户端上执行软件下载动作，同时可以输入软件下载路径、软件名称、软件版本、软件版本上传日期、软件更新说明等操作信息，客户端会根据目标对象所执行的目标操作和输入的操作信息，生成对应的目标操作指令，同时在目标操作指令被响应后，客户端会输出显示软件下载状态和软件版本表等信息，同时还会显示包含更新软件版本表的说明。同理，目标对象可以在客户端上执行软件上传刷写操作、软件删除操作和软件查看操作，同时也可以输入相关操作信息，其具体实施过程参见图3和上述内容记载，此处不再进行赘述。在本方法中，目标对象可以是用户，也可以是智能驾驶软件的开发测试人员，还可以是其他有权限进行操作的人员。
70.目标对象在客户端上执行测试用例管理动作如图4所示，在图4中，目标对象可以在客户端上执行数据集创建动作，同时可以输入数据集名称、创建时间、数据集说明和数据集标签等操作信息，客户端会根据目标对象所执行的目标操作和输入的操作信息，生成对应的目标操作指令，同时在目标操作指令被响应后，客户端会输出显示数据集相关信息、数据集创建状态(成功、失败、状态码)等信息，以及在新创建的数据集名称与已有数据集名称重叠时，会输出提示，提示是否需要替换或重命名；同时还会显示包括更新数据集表的说明。同理，目标对象可以在客户端上执行数据筛选操作、数据集删除操作、数据集查看操作，同时也可以输入相关操作信息，其具体实施过程参见图4和上述内容记载，此处不再进行赘述。
71.目标对象在客户端上执行客户端管理动作如图5所示，在图5中，目标对象可以在客户端上执行更新系统软件版本操作，同时可以输入台架pc(personal computer，个人计算机，简称pc)端回注工具软件或adas软件等操作信息，客户端会根据目标对象所执行的目标操作和输入的操作信息，生成对应的目标操作指令，同时在目标操作指令被响应后，客户端会显示软件刷写状态(成功、失败、状态码)。同理，目标对象可以在客户端上执行获取服务器任务操作、发起数据回注测试任务操作、取消数据回注测试任务操作、监控数据回注状态操作、获取数据回注结果操作，同时还可以输入相关操作信息，其具体实施过程参见图5和上述内容记载，此处不再进行赘述。
72.综上所述，本技术提供一种数据回注方法，可以首先获取待处理智能驾驶数据，然后响应于目标操作指令，并基于响应结果生成数据回注测试任务；再根据数据回注任务调用待处理智能驾驶数据，并将数据回注任务以及待处理智能驾驶数据回注给智能驾驶软
件；最后控制智能驾驶软件按照数据回注任务对待处理智能驾驶数据进行仿真测试验证，并输出仿真测试验证结果。由此可知，本方法通过对智能驾驶数据进行利用，将其回注至智能驾驶软件，不仅可以测试对客户端设备任务结果的远程在线管理，而且可以提升数据的使用效率、软件测试验证效率与安全可靠性，极大地提升了智能驾驶软件开发测试验证效率，能够缩短开发周期，提升智能驾驶软件升级迭代频率。相当于本方法通过预先检测或实时检测到的智能驾驶数据建立交通道路实测数据库，可以快速验证智能驾驶软件中每次算法的迭代更新对于场景的适应性与可靠性；从而快速验证升级后的智能驾驶软件对于问题场景和失效场景的解决效果；降低利用实际车辆测试的危险性以及车辆使用成本，同时还可以节约开发人员的时间。所以，本方法不仅能提升自动驾驶性能的稳定性与可靠性，逐步扩大自动驾驶场景边界，而且还能实现超越人力驾驶员的无人驾驶功能体验。
73.在另一实施例中，本技术还提供一种数据回注系统，该系统包括有：
74.数据中台，用于存储待处理智能驾驶数据，所述待处理智能驾驶数据包括预先检测或实时检测到的智能驾驶数据；
75.客户端，用于响应于目标操作指令，并基于响应结果生成数据回注测试任务；所述目标操作指令包括外部输入的操作指令；
76.服务器，用于根据所述数据回注任务调用所述待处理智能驾驶数据，并将所述数据回注任务以及所述待处理智能驾驶数据回注给台架；
77.台架，用于提供智能驾驶软件，并控制所述智能驾驶软件按照所述数据回注任务对所述待处理智能驾驶数据进行仿真测试验证，以及将仿真测试验证结果反馈至所述服务器或所述客户端。
78.具体地，服务器包括有：设备管理单元、文件管理单元、测试用例管理单元、任务管理单元、统计分析单元、权限管理单元和网络服务单元。其中，
79.设备管理单元用于对客户端进行管理和监控，以及使用超文本传输协议或超文本传输类似协议接收目标对象在所述客户端上执行的目标操作，以及通过远程桌面连接方式与所述台架进行远程连接控制。
80.文件管理单元用于对所述智能驾驶软件进行更新，调整所述智能驾驶软件的软件名称、软件版本、软件版本上传日期和/或软件更新说明。
81.测试用例管理单元用于根据所述数据回注测试任务对应的场景，调用所述待处理智能驾驶数据，并将调用的待处理智能驾驶数据传输给所述台架。
82.任务管理单元用于对所述数据回注测试任务进行优先级配置，并将完成优先级配置后的数据回注测试任务传输给所述台架。
83.统计分析单元用于根据所述仿真测试验证结果统计所述数据回注测试任务执行状态。
84.权限管理单元用于根据预设项目需求对目标对象、项目户组进行权限管理。
85.网络服务单元，用于提供远程页面访问页面，以使外部终端设备远程访问所述服务器。
86.根据上述记载，在一示例性实施例中，数据中台在获取预先检测或实时检测到的智能驾驶数据后，还包括：对预先检测或实时检测到的智能驾驶数据进行预处理，生成所述待处理智能驾驶数据；其中，所述预处理包括以下至少之一：数据清洗、数据分类存储、数据
索引、数据分发。本实施例通过对预先检测或实时检测到的智能驾驶数据进行预处理，可以对智能驾驶数据进行初步筛选，去除一些不需要的数据，从而降低对内存资源和计算资源的占用。同时，完成预处理后的智能驾驶数据也方便服务器进行直接调用，从而提升智能驾驶数据的使用效率。
87.根据上述记载，在一示例性实施例中，客户端在响应于目标操作指令前，还包括：接收目标对象输入的需要执行的目标操作，并生成与所述目标操作对应的目标操作指令；其中，所述目标操作包括以下至少之一：软件下载操作、软件上传刷写操作、软件删除操作、软件查看操作、数据筛选操作、数据集创建操作、数据集删除操作、数据集查看操作、更新智能驾驶软件版本操作、发起数据回注测试任务操作、取消数据回注测试任务操作、监控数据回注状态操作、获取数据回注结果操作。
88.其中，目标对象在客户端上执行目标操作时，目标对象还可以同时在客户端上输入操作信息，然后客户端会根据目标对象所执行的目标操作和输入的操作信息，生成对应的目标操作指令，同时在目标操作指令被响应后，客户端上还会输出显示对应的结果，从而方便目标对象查看。具体地，目标对象在客户端上执行adas软件的管理动作如图3所示，在图3中，目标对象可以在客户端上执行软件下载动作，同时可以输入软件下载路径、软件名称、软件版本、软件版本上传日期、软件更新说明等操作信息，客户端会根据目标对象所执行的目标操作和输入的操作信息，生成对应的目标操作指令，同时在目标操作指令被响应后，客户端会输出显示软件下载状态和软件版本表等信息，同时还会显示包含更新软件版本表的说明。同理，目标对象可以在客户端上执行软件上传刷写操作、软件删除操作和软件查看操作，同时也可以输入相关操作信息，其具体实施过程参见图3和上述内容记载，此处不再进行赘述。在本方法中，目标对象可以是用户，也可以是智能驾驶软件的开发测试人员，还可以是其他有权限进行操作的人员。
89.目标对象在客户端上执行测试用例管理动作如图4所示，在图4中，目标对象可以在客户端上执行数据集创建动作，同时可以输入数据集名称、创建时间、数据集说明和数据集标签等操作信息，客户端会根据目标对象所执行的目标操作和输入的操作信息，生成对应的目标操作指令，同时在目标操作指令被响应后，客户端会输出显示数据集相关信息、数据集创建状态(成功、失败、状态码)等信息，以及在新创建的数据集名称与已有数据集名称重叠时，会输出提示，提示是否需要替换或重命名；同时还会显示包括更新数据集表的说明。同理，目标对象可以在客户端上执行数据筛选操作、数据集删除操作、数据集查看操作，同时也可以输入相关操作信息，其具体实施过程参见图4和上述内容记载，此处不再进行赘述。
90.目标对象在客户端上执行客户端管理动作如图5所示，在图5中，目标对象可以在客户端上执行更新系统软件版本操作，同时可以输入台架pc(personal computer，个人计算机，简称pc)端回注工具软件或adas软件等操作信息，客户端会根据目标对象所执行的目标操作和输入的操作信息，生成对应的目标操作指令，同时在目标操作指令被响应后，客户端会显示软件刷写状态(成功、失败、状态码)。同理，目标对象可以在客户端上执行获取服务器任务操作、发起数据回注测试任务操作、取消数据回注测试任务操作、监控数据回注状态操作、获取数据回注结果操作，同时还可以输入相关操作信息，其具体实施过程参见图5和上述内容记载，此处不再进行赘述。
91.如图6所示，在一示例性实施例中，该实施例提供一种数据回注系统，包括有：数据中台s10、服务器(或台架集群管理系统)s20、台架s30和回注台架客户端管理系统(或客户端设备)s40。其中，数据中台s10用于采集车、试验车、量产车、第三方平台自动驾驶相关采集数据的清洗、数据分类存储、数据索引、数据分发等；服务器s20用于数据中台数据集接入与数据转发到回注台架工具，以及用于客户端设备的增减删改查；以及用于回注台架工具软件上传下载、查看、部署、更新、版本管理；以及用于测试用例管理；以及用于测试任务的增减删改查、任务涉及的场景配置、台架配置、软件配置；以及用于客户端的远程网页操作；以及用于测试结果的分析汇总；以及用于系统权限角色管理。台架s30用于数据中台数据集的解析与格式转换、实测总线数据模拟分发、自动驾驶软件模拟执行、算法模块回注结果数据分布式存储、以及数据回传至服务器。回注台架客户端管理系统s40用于任务获取、数据获取、软件获取、测试用例获取、控制器端软件刷写、测试用例结果获取与评价、任务与客户端设备状态回传、测试结果回传、台架软件工具的管理。
92.具体地，如图7所示，服务器s20包括有：客户端设备管理单元、adas文件管理单元、测试用例管理单元、任务管理单元、统计分析单元、系统管理单元和web(world wide web，全球广域网，也称为万维网，简称web)服务单元。其中，
93.客户端设备管理单元：部署一个系统服务，用于对客户端设备进行管理与监控。可以使用http或类似协议进行新增、修改、删除、查看等操作，并可通过远程桌面连接的方式实现台架端的pc的远程连接与控制。客户端设备表，需包含但不限于客户端设备id、客户端设备ip地址、客户端设备名称、客户端设备软件版本号、客户端设备硬件版本号、客户端设备添加时间、客户端设备状态(比如离线、忙碌、可用、已删除等)。
94.adas文件管理单元：主要对自动驾驶软件版本进行管理，如图3所示，软件版本表，需包含但不限于软件名称、软件版本、软件版本上传日期、软件更新说明。
95.测试用例管理单元：主要针对测试的问题与场景，对需要用到的数据集进行抓取，如图4所示。数据集表，需包含但不限于数据集名称、创建时间、数据集说明、数据集标签、数据集包含的数据文件名称、数据文件存放路径。
96.任务管理单元：部署一个系统服务，用于发起与管理任务。该服务维护一个任务发送队列，与一个结果接收进程池。可根据需求使用优先队列配置优先级。客户端设备表，需包含但不限于客户端设备id、客户端设备ip地址、客户端设备名称、客户端设备软件版本号、客户端设备硬件版本号、客户端设备添加时间、客户端设备状态(比如离线、忙碌、可用、已删除等)。需包含但不限于任务id、任务名称、数据集名称、任务对应的客户端设备id、发起时间、完成时间、任务优先级、任务状态(排队、进行中、执行进度、已完成、已取消、失败等)、任务日志文件路径、任务配置、台架输出的回灌结果路径。
97.统计分析单元：客户端设备使用状态情况汇总统计与呈现、任务执行情况汇总统计与呈现、根据adas软件版本汇总统计回灌测试结果。
98.系统管理单元：系统管理员可以根据项目需要对用户及户组权限进行管理。
99.web服务单元：实现个人工作电脑可远程网页访问操作服务器端。
100.如图5所示，回注台架客户端管理系统部署到每个开发人员电脑上，通过rpc(remote procedure call，远程过程调用，简称rpc)或类似协议提供控制接口。接口的内容根据回灌的流程提供，需包含获取服务器任务、更新软件版本、发起回灌任务、取消任务、监
控回灌状态、获取回灌结果等功能。
101.根据上述记载，在本实施例中，由服务器端管理系统、客户端管理系统、数据回注台架、服务器、数据中台等组成的在线智能驾驶算法回注系统采用模块化结构，模块之间的通信可以按标准接口进行，从而保障任何一层的任何一个模块的维护和更新以及新模块的追加都不影响其他模块，实现测试任务的远程在线提交与监控、测试任务的任意删减、客户端设备的任意删减、测试台架的任意删减、测试结果的在线汇总查看等，极大提升智能驾驶软件开发测试验证效率，大幅提升数据利用率。不断提升自动驾驶性能的稳定性与可靠性，逐步扩大自动驾驶场景边界，最终实现超越人力驾驶员的无人驾驶功能体验。
102.综上所述，本技术提供一种数据回注系统，可以首先获取待处理智能驾驶数据，然后响应于目标操作指令，并基于响应结果生成数据回注测试任务；再根据数据回注任务调用待处理智能驾驶数据，并将数据回注任务以及待处理智能驾驶数据回注给智能驾驶软件；最后控制智能驾驶软件按照数据回注任务对待处理智能驾驶数据进行仿真测试验证，并输出仿真测试验证结果。由此可知，本系统通过对智能驾驶数据进行利用，将其回注至智能驾驶软件，不仅可以测试对客户端设备任务结果的远程在线管理，而且可以提升数据的使用效率、软件测试验证效率与安全可靠性，极大地提升了智能驾驶软件开发测试验证效率，能够缩短开发周期，提升智能驾驶软件升级迭代频率。相当于本系统通过预先检测或实时检测到的智能驾驶数据建立交通道路实测数据库，可以快速验证智能驾驶软件中每次算法的迭代更新对于场景的适应性与可靠性；从而快速验证升级后的智能驾驶软件对于问题场景和失效场景的解决效果；降低利用实际车辆测试的危险性以及车辆使用成本，同时还可以节约开发人员的时间。所以，本系统不仅能提升自动驾驶性能的稳定性与可靠性，逐步扩大自动驾驶场景边界，而且还能实现超越人力驾驶员的无人驾驶功能体验。
103.需要说明的是，上述实施例所提供数据回注系统与上述实施例所提供的数据回注方法属于同一构思，其中各个模块和单元执行操作的具体方式已经在方法实施例中进行了详细描述，此处不再赘述。上述实施例所提供的数据回注系统在实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将系统的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能，本处也不对此进行限制。
104.本技术的实施例还提供了一种电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述电子设备实现上述各个实施例中提供的数据回注方法。
105.图8示出了适于用来实现本技术实施例的电子设备的计算机系统的结构示意图。需要说明的是，图8示出的电子设备的计算机系统1000仅是一个示例，不应对本技术实施例的功能和使用范围带来任何限制。
106.如图8所示，计算机系统1000包括中央处理单元(central processing unit，cpu)1001，其可以根据存储在只读存储器(read-only memory，rom)1002中的程序或者从储存部分1008加载到随机访问存储器(random access memory，ram)1003中的程序而执行各种适当的动作和处理，例如执行上述实施例中所述的方法。在ram 1003中，还存储有系统操作所需的各种程序和数据。cpu 1001、rom 1002以及ram 1003通过总线1004彼此相连。输入/输出(input/output，i/o)接口1005也连接至总线1004。
107.以下部件连接至i/o接口1005：包括键盘、鼠标等的输入部分1006；包括诸如阴极
射线管(cathode ray tube，crt)、液晶显示器(liquid crystal display，lcd)等以及扬声器等的输出部分1007；包括硬盘等的储存部分1008；以及包括诸如lan(local area network，局域网)卡、调制解调器等的网络接口卡的通信部分1009。通信部分1009经由诸如因特网的网络执行通信处理。驱动器1010也根据需要连接至i/o接口1005。可拆卸介质1011，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器1010上，以便于从其上读出的计算机程序根据需要被安装入储存部分1008。
108.特别地，根据本技术的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本技术的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的计算机程序。在这样的实施例中，该计算机程序可以通过通信部分1009从网络上被下载和安装，和/或从可拆卸介质1011被安装。在该计算机程序被中央处理单元(cpu)1001执行时，执行本技术的系统中限定的各种功能。
109.需要说明的是，本技术实施例所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(erasable programmable read only memory，eprom)、闪存、光纤、便携式紧凑磁盘只读存储器(compact disc read-only memory，cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本技术中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的计算机程序。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的计算机程序可以用任何适当的介质传输，包括但不限于：无线、有线等等，或者上述的任意合适的组合。
110.附图中的流程图和框图，图示了按照本技术各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。其中，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
111.描述于本技术实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现，所描述的单元也可以设置在处理器中。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定。
112.本技术的另一方面还提供了一种计算机可读存储介质，其上存储有计算机程序，
该计算机程序被计算机的处理器执行时，使计算机执行如前所述的数据回注方法。该计算机可读存储介质可以是上述实施例中描述的电子设备中所包含的，也可以是单独存在，而未装配入该电子设备中。
113.本技术的另一方面还提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述各个实施例中提供的数据回注方法。
114.上述实施例仅示例性说明本发明的原理及其功效，而非用于限制本发明。任何熟悉此技术的人士皆可在不违背本发明的精神及范畴下，对上述实施例进行修饰或改变。因此，但凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术思想下所完成的一切等效修饰或改变，仍应由本发明的权利要求所涵盖。
技术特征：1.一种数据回注方法，其特征在于，所述方法包括有以下步骤：获取待处理智能驾驶数据，所述待处理智能驾驶数据包括预先检测或实时检测到的智能驾驶数据；响应于目标操作指令，并基于响应结果生成数据回注测试任务；所述目标操作指令包括外部输入的操作指令；根据所述数据回注任务调用所述待处理智能驾驶数据，并将所述数据回注任务以及所述待处理智能驾驶数据回注给智能驾驶软件；控制所述智能驾驶软件按照所述数据回注任务对所述待处理智能驾驶数据进行仿真测试验证，并输出仿真测试验证结果。2.根据权利要求1所述的数据回注方法，其特征在于，控制所述智能驾驶软件按照所述数据回注任务对所述待处理智能驾驶数据进行仿真测试验证后，所述方法还包括：对所述智能驾驶软件进行更新，调整所述智能驾驶软件的软件名称、软件版本、软件版本上传日期和/或软件更新说明；并利用调整后的智能驾驶软件对所述待处理智能驾驶数据进行仿真测试验证。3.根据权利要求1或2所述的数据回注方法，其特征在于，在获取预先检测或实时检测到的智能驾驶数据后，所述方法还包括：对预先检测或实时检测到的智能驾驶数据进行预处理，生成所述待处理智能驾驶数据；其中，所述预处理包括以下至少之一：数据清洗、数据分类存储、数据索引、数据分发。4.根据权利要求1或2所述的数据回注方法，其特征在于，在响应于目标操作指令前，所述方法还包括：接收目标对象在客户端上执行的目标操作，并基于所述客户端生成与所述目标操作对应的目标操作指令；其中，所述目标操作包括以下至少之一：软件下载操作、软件上传刷写操作、软件删除操作、软件查看操作、数据筛选操作、数据集创建操作、数据集删除操作、数据集查看操作、更新智能驾驶软件版本操作、发起数据回注测试任务操作、取消数据回注测试任务操作、监控数据回注状态操作、获取数据回注结果操作。5.一种数据回注系统，其特征在于，所述系统包括有：数据中台，用于存储待处理智能驾驶数据，所述待处理智能驾驶数据包括预先检测或实时检测到的智能驾驶数据；客户端，用于响应于目标操作指令，并基于响应结果生成数据回注测试任务；所述目标操作指令包括外部输入的操作指令；服务器，用于根据所述数据回注任务调用所述待处理智能驾驶数据，并将所述数据回注任务以及所述待处理智能驾驶数据回注给台架；台架，用于提供智能驾驶软件，并控制所述智能驾驶软件按照所述数据回注任务对所述待处理智能驾驶数据进行仿真测试验证，以及将仿真测试验证结果反馈至所述服务器或所述客户端。6.根据权利要求5所述的数据回注系统，其特征在于，所述服务器包括有：设备管理单元，用于对客户端进行管理和监控，以及使用超文本传输协议或超文本传
输类似协议接收目标对象在所述客户端上执行的目标操作，以及通过远程桌面连接方式与所述台架进行远程连接控制；文件管理单元，用于对所述智能驾驶软件进行更新，调整所述智能驾驶软件的软件名称、软件版本、软件版本上传日期和/或软件更新说明；测试用例管理单元，用于根据所述数据回注测试任务对应的场景，调用所述待处理智能驾驶数据，并将调用的待处理智能驾驶数据传输给所述台架；任务管理单元，用于对所述数据回注测试任务进行优先级配置，并将完成优先级配置后的数据回注测试任务传输给所述台架；统计分析单元，用于根据所述仿真测试验证结果统计所述数据回注测试任务执行状态。7.根据权利要求5或6所述的数据回注系统，其特征在于，所述服务器还包括有：权限管理单元，用于根据预设项目需求对目标对象、项目户组进行权限管理；网络服务单元，用于提供远程页面访问页面，以使外部终端设备远程访问所述服务器。8.根据权利要求5或6所述的数据回注系统，其特征在于，所述客户端在响应于目标操作指令前，还包括：接收目标对象输入的需要执行的目标操作，并生成与所述目标操作对应的目标操作指令；其中，所述目标操作包括以下至少之一：软件下载操作、软件上传刷写操作、软件删除操作、软件查看操作、数据筛选操作、数据集创建操作、数据集删除操作、数据集查看操作、更新智能驾驶软件版本操作、发起数据回注测试任务操作、取消数据回注测试任务操作、监控数据回注状态操作、获取数据回注结果操作。9.一种电子设备，其特征在于，所述电子设备包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述电子设备实现如权利要求1至4中任一项所述的数据回注方法。10.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，当所述计算机程序被计算机的处理器执行时，使计算机执行如权利要求1至4中任一项所述的数据回注方法。
技术总结本发明提供一种数据回注方法、系统、电子设备及可读存储介质，首先获取待处理智能驾驶数据，然后响应于目标操作指令，并基于响应结果生成数据回注测试任务；再根据数据回注任务调用待处理智能驾驶数据，并将数据回注任务以及待处理智能驾驶数据回注给智能驾驶软件；最后控制智能驾驶软件按照数据回注任务对待处理智能驾驶数据进行仿真测试验证，并输出仿真测试验证结果。本申请通过对智能驾驶数据进行利用，将其回注至智能驾驶软件，不仅可以测试对客户端设备任务结果的远程在线管理，而且可以提升数据的使用效率、软件测试验证效率与安全可靠性，极大地提升了智能驾驶软件开发测试验证效率，能够缩短开发周期，提升智能驾驶软件升级迭代频率。件升级迭代频率。件升级迭代频率。
技术研发人员：陆波 丛伟伦 任凡
受保护的技术使用者：重庆长安汽车股份有限公司
技术研发日：2022.07.08
技术公布日：2022/11/1
