技术就绪度（成熟度）评价实施经验分享

淡笑

​一、什么是技术就绪度（成熟度）

技术就绪度也称技术成熟度（TRL），什么是技术就绪度（成熟度）呢？根据GB/T 22900-2009《科学技术研究项目评价通则》中对“技术就绪水平”的定义：工作分解单元技术成熟程度 ；根据GJB 7688-2012《装备技术成熟度等级划分及定义》中对“技术成熟度”的定义：技术满足预期装备应用目标的程度。结合以上两个标准，可以把技术就绪度（成熟度）理解如下：是一种衡量技术发展成熟水平的指标。
14.5以来，在国家重点研发计划中，技术就绪度（后续统称技术就绪度）得到更大重视和推广。为了指导项目团队在申报阶段了解技术就绪度提出相关任务和方案以提高项目申报成功率、在项目实施阶段正确理技术就绪度开展相关工作以提高项目通过率。更重要的是，帮助项目研发团队提高研发成果的技术成熟度水平，提升研发成果物可靠性水平、加快工程化和产业化、促进成果转化和市场转化发挥作用。由此可见，技术就绪度应作为一个科研管理方法和工具，在整个研发过程中应用。
12.5国家重大科学仪器设备开发重大专项和13.5国家重大科学仪器设备开发重点研发计划均给出了“技术就绪度评价方法指南”。13.5指南中对各技术就绪度的定义及内涵详细说明，如下表1。



二、评价组织机构及责任分工

开展技术就绪度评价工作，项目组必需明确由哪些机构参与评价工作，各机构的职责分工是怎样的。
重点研发计划技术就绪度评价组织机构由组织机构、TRL评价组、被评单位组成。各组织机构的责任分工具体如下：
组织机构：主要负责仪器专项技术就绪度评价的管理。
TRL评价组：TRL评价组负责专项技术就绪度评价的具体实施工作，包括：
a) 审查被评单位自定义技术就绪度评价标准细则；
b) 审查被评单位技术就绪度自评估报告；
c) 给出最终核定的技术就绪度等级评价结果。
说明：当项目评价组不具备技术就绪度评价能力时，可聘请专业机构做支撑单位。
被评单位：被评单位是技术就绪度评价的主体和实施单位，主要负责：
a) 确定技术就绪度评价标准细则，必要时自定义标准细则并提交审查；
b) 提交技术就绪度等级自评估报告；
c) 配合组织机构、评价组及支撑单位完成技术就绪度评价工作。

三、怎样开展技术就绪度评价工作

对于怎样开展项目的技术就绪度评价工作，国家重大科学仪器设备开发重点研发计划提供了“技术就绪度评价方法指南”，明确了评价流程，并对每一步骤进行了详细的说明。本文主要从以下几个方面进行说明。
3.1 明确评价对象
开展技术就绪度评价，首先必需明确评价的对象。
从前面的定义可知，技术就绪度的评价对象是指“某一技术”。在13.5国家重大科学仪器设备开发重点研发计划中，我们可以将评价对象确定为项目本身。技术就绪度评价是对整个项目的技术发展成熟水平的评价。
3.2 评价流程
技术就绪度评价的一般流程如下图1所示：


图1 仪器专项技术就绪度评价流程

3.3 成立自评价组和评价组
自评价组：自评价组由牵头单位组织成立，联同各课题单位的专家组成即可，成员一般不少于7位。
评价组：评价组由牵头单位组织成立，评价组专家成员由“两组一委”及行业内的专家组成，数量一般不少于7位。
3.4 确定技术就绪度评价细则
项目牵头单位应组织制度技术就绪度评价细则。一般情况下，参照“国家重大科学仪器设备开发重点研发计划技术就绪度评价方法指南”中“附录1 TRL评价细则”开展评价工作即可，除非项目的特殊性，指南中的评价细则不适用才建议自行制定。自定义的评价细则需提交评价组评审通过后实施。
3.5 开展自评价及编制自评估报告
自评价工作由项目牵头单位组织自评价组专家实施，完成自评价后由牵头单位编制技术就绪度自评估报告。
注：为保证技术就绪度自评估报告的可信度，在提交评价组审查之前，项目牵头单位可组织行业内的第三方专业机构进行评估支撑。
3.6 评价组评价
自评价工作完成后，项目牵头单位组织评价组专家对自评估报告进行评审。评价组完成评价后给出最终核定的技术就绪度等级评价结果。
注：项目组一般在召开课题绩效评价之前完成技术就绪度的评价工作。

四、技术就绪度评价过程中难点问题

1、技术就绪度工作由谁主导开展？谁来编制技术就绪度自评估报告？
技术就绪度的评估工作，由项目牵头单位主导开展，各课题单位参与，配合提供相关部分的素材。自评估工作完成后，由项目牵头单位负责编制技术就绪度自评估报告。各课题单位可不单独成文出具技术就绪度自评估报告（除非课题指标表中自行承诺了单独出具）。
2、自评估工作组和评价组怎样由哪些专家组成？分别负责什么工作？
自评估工作组由项目牵头单位和各课题专家组成，成员一般不少于7位，负责对项目的进行技术就绪度的自评估工作，准备相应的评估支撑材料，自评估工作完成后由项目牵头单位负责编制技术就绪度自评估报告。评价组由“两组一委”专家和行业专家组成，成员一般不少于7位。负责审查技术就绪度评价准则、技术就绪度自评估报告、给出项目技术就绪度等级评价结果。
注：两组一委是12.5以来仪器专项中推出的专家组、总体组、用户委员会，目标是项目实施过程中发挥专家组指导监督把关作用、总体组的项目实施保障作用，同时，结合用户的实际需求和经验，对研发的成果物提出合适使用要求和指导，保障研发成果物将能得到用户（市场）认可。
3、识别出来的关键技术元素（关键部件）是否需要单独进行评级？
12.5重大科学仪器设备开发重大专项给出的技术就绪度评价指南，TRL等级定义的关注点在项目、制造和技术状态的程度，关注点不在研发对象层级对应的工作，每个关键技术元素都应该按照技术就绪度各个等级要求的状态程度进行评价分析。
13.5重大科学仪器重点研发计划给出的技术就绪度评价指南，TRL等级定义的关注点在研发对象各个层级及其对应的工作，由于受层级定义约束，关键技术元素可能因为层级低没有后续高等级工作要求。因此可以理解为技术就绪度的评价对象是整个项目，因此只需对项目本身进行整体评价。但在报告中仍应准确识别关键技术元素，进行管控并确保完成该关键元素的相关要点工作，保障整个项目的技术就绪度最终达到目标级别的要求。
4、是否可直接按目标级别进行评价？
正确的评价方式应该是逐级评价，在实施过程中逐级完成各项工作，储备相关证据材料，保障项目工程化、产业化及测试验证工作的充分性，以确保项目研发成果物技术就绪度达到目标级别。
如果直接按目标级别进行评价，跨级部分的各项工作可能并未开展，工程化、产业化及测试验证工作不充分，在评价时也缺乏支撑证据。
严格规范执行各个等级的工作要求，是保障技术就绪度工作开展到位的重要支撑。直接用最终级要求（跨级）评价，在专家评审确认环节，不应得到最高等级的评审意见和结论。
5、技术就绪度评价从哪些方面考虑？
技术就绪度评价主要从项目规划、（研发）技术状态、制造工艺状态、可靠性设计分析、第三方测试验证等5个维度进行考虑。
——1）项目规划：技术就绪度作为一个管理工具，受到项目管理水平等其它因素的影响，如用户对项目的关注情况、项目成本与预算分析程度、项目工作和文档的充足程度、风险管理、可靠性管理等内容。
——2）研发技术状态：研发技术状态是度量技术就绪度的主要维度，是特定技术自身性能或能力的验证结果。技术状态主要包含理论形式、实物形式、知识形式，从技术角度包括硬件设计、软件设计、结构设计等；主要要完成成果物论证、方案设计、研发，形成成套研发材料，包括硬件的研发任务书（技术规格书）、设计方案、设计图纸、评审文件、安装使用说明书；软件的需求分析、设计文件、代码文件、安装使用说明书等。
——3）制造工艺状态：制造工艺状态是从技术的可制造性、工艺合理性、经济可行性角度来度量项目技术就绪程度，包括对生产制造工艺、原料、生产成本、人员、管理等方面的衡量，包含了技术和工业基础、设计、材料、工艺能力与控制、质量管理、生产人员素质、生产制造管理等方面。形成成套制造材料，包括制造需求分析报告、工艺文件、生产评估报告、工艺验证报告等。
——4）可靠性设计分析：产品研发过程中的可靠性设计分析工作是必不可少的一项工作。可靠性设计分析主要包括：可靠性指标论证及分配、可靠性建模与指标预计、可靠性设计准则及符合性核查、故障模式影响危害分析（FMECA）、故障树建模与分析（FTA）、建模与仿真分析、寿命分析计算等。利用可靠性设计分析工具方法，确保研发成果物的固有可靠性得以实现。
注：可靠性设计分析是一项专业性极强工作，为确保可靠性设计工作的充分合理性，项目牵头单位可组织行业内的第三方专业机构进行支撑。
——5）第三方测试验证：产品技术就绪度是否能达到目标级别，第三方的测试验证是重要的检验。从测试的对象来看，分为核心部件、原理样机、工程样机和产品等；从测试环境等级来看，分为简易模拟环境、实验室可控环境、用户现场实际运行环境；从试验验证类型来看，分为软件质量测评、安全性测试、电磁兼容性测试、环境适应性试验、可靠性强化试验、可靠性指标（MTBF/可靠度/成功率）验证、维修性（MTTR）评价、寿命验证等。
注：TRL4级应提供核心部件的功能性能测试报告和可靠性分析（如建模预计）报告；TRL5级要提供分系统功能性能测试、可靠性分析（如FMECA、可靠性仿真）、可靠性验证（如强化试验）相关报告，薄弱环节得到改进；TRL6就是系统原理样机要完成功能性能测试、环境适应性验证、可靠性摸底试验报告；TRL7级就是工程样机要完成环境适应性、电磁兼容性、可靠性验证；TRL8级就是鉴定级产品应完成功能性能测试、环境适应性验证、可靠性指标验证、软件质量测评等报告，另外，还可能需要完成研发单位自身提出的安全测试、电磁兼容测试、维修性评价等第三方报告；TRL9级就是应用级产品应有销售和使用凭证，可提供出厂测试报告和月度产线质量统计报告。
6、技术就绪度是否项目快结束再开展？
研发团队应在项目立项时即围绕着TRL等级要求设置相关任务内容、考核指标、成果输出和经费预算，以便后续能顺利地开展技术就绪度评价。
在项目实施过程中，应将技术就绪度当做一个良好的工具应用到项目管理中，保障关键技术突破、避免进度拖延和经费超标，及时产出各级技术就绪度所需证据材料，提升研发成果物的技术成熟度水平，同时，为最终评价技术就绪度提供支撑。
研发团队应避免项目快结束时再考虑技术就绪度评价，可能造成大量所需成果材料和技术就绪度证据材料确实，给评价工作带来困难，或临时补材料走过场，难以得到想要的技术就绪度等级结论，也未用该项技术对项目起到管理推进作用。
7、各等级评价支撑材料应该准备什么？
各等级评价支撑材料的准备是一个难点，很多项目组都搞不清晰应该提供什么支撑材料。科鉴检测根据以往的项目经验，针对各等级应该怎样提供材料汇总见后续附表1所示。
点击查看：附表1 技术就绪度评价要求对应证据文件梳理

午夜的天空

高手云集 果断围观

雄明

报告！别开枪，我就是路过来看看的。。。

啊毛

我是个凑数的。。。