[R&D랩 컬럼] 평가기관 연구원 교육: 사업목적과 평가항목을 일관되게 해석하기

핵심 답변. 평가기관 연구원이 사업목적과 평가항목을 일관되게 해석하려면 점수를 같게 맞추는 교육보다 사업목적 → 평가항목 → 판단질문 → 확인근거 → 평가의견의 연결을 공동으로 정리해야 한다. 같은 자료를 보고도 점수가 달라질 수 있지만, 무엇을 근거로 판단했고 어떤 조건에서 결론을 내렸는지는 추적 가능해야 한다.

평가항목은 독립된 체크리스트가 아니다

“기술성이 우수한가”, “사업화 가능성이 높은가”처럼 평가항목만 떼어 읽으면 평가자의 경험에 따라 질문의 범위가 달라진다. 기술성이라는 단어가 어떤 사업에서는 원천기술의 창의성을 뜻할 수 있고, 다른 사업에서는 현장 적용에 필요한 성능과 검증계획을 뜻할 수 있다. 사업목적을 먼저 읽지 않으면 같은 항목이라도 서로 다른 대상을 평가하게 된다.

평가에서 일관성이 필요하다는 말은 모든 위원이 같은 점수를 줘야 한다는 뜻이 아니다. 평가자의 전문적 판단은 유지하되, 판단의 출발점과 근거 범위를 맞추자는 의미다. 차이가 생겼을 때 “누가 맞는가”보다 “어떤 사업목적·평가문구·제출근거를 다르게 읽었는가”를 확인할 수 있어야 한다.

공식 기준과 사업별 평가표를 먼저 구분한다

공식 사실. 현행 국가연구개발혁신법 제10조는 선정평가 사항으로 연구개발과제의 창의성과 수행계획의 충실성, 연구자·기관의 연구개발 역량, 파급효과와 성과 활용 가능성, 해당 사업의 근거 법령·추진계획과의 부합성 등을 제시한다. 또한 사업의 목적과 성격에 따라 일부 사항을 평가하지 않을 수 있도록 한다.

같은 법 시행령은 공고에 사업 목적·지원내용·기간과 선정평가 기준·절차를 포함하도록 하고, 선정평가에서는 다른 국가연구개발과제와의 차별성, 시설·장비 구축계획의 타당성, 국내외 연계·협력 가능성 등을 추가로 다룬다. 실제 배점과 세부항목은 사업별 공고와 평가계획을 확인해야 한다.

예를 들어 2026년 IRIS의 한 기술통합플랫폼 고도화 사업은 수행기관 역량, 추진계획의 타당성, 활용 가능성 및 파급효과를 평가항목으로 두고 서로 다른 비중을 적용했다. 이는 해당 공고의 사례이며 모든 R&D 사업의 공통 평가표가 아니다.

해석표는 여덟 칸으로 만든다

실무 도구. 평가 전 교육이나 평가위원 사전회의에서는 아래 여덟 칸을 한 장에 연결한다.

1. 사업목적 원문: 공고의 목적 문장을 임의로 요약하지 않고 그대로 적는다.
2. 정책이 기대하는 변화: 누구의 어떤 문제를 어떤 방식으로 바꾸려는 사업인지 풀어 쓴다.
3. 평가항목과 비중: 실제 공고와 평가계획의 항목·세부지표·비중을 옮긴다.
4. 판단질문: 항목을 “제출자료에서 무엇을 확인할 것인가”라는 질문으로 바꾼다.
5. 인정 가능한 근거: 계획서, 첨부자료, 발표와 질의응답 등 평가절차에서 허용된 자료의 범위를 적는다.
6. 근거의 조건과 한계: 수치의 기준시점, 시험조건, 확정·가정 여부를 확인한다.
7. 판단 기준점: 우수·보통·미흡 판단을 가르는 관찰 가능한 차이를 적는다.
8. 평가의견 기록: 확인한 근거, 판단, 보완 필요사항을 연결해 작성한다.

이 표의 핵심은 평가항목을 쉬운 말로 바꾸는 데 있지 않다. 사업목적과 근거 사이에 빠진 판단질문을 드러내는 데 있다.

사업목적을 세 개의 판단질문으로 바꾼다

사업목적을 읽을 때는 다음 세 질문을 먼저 만든다.

• 대상: 이 사업이 변화시키려는 기업·산업·기술·지역 또는 연구현장은 누구인가
• 변화: 지원 전과 후에 무엇이 달라져야 하는가
• 수단: 그 변화를 만들기 위해 사업이 허용하거나 요구한 연구개발 활동은 무엇인가

그다음 각 평가항목을 세 질문에 연결한다. 수행기관 역량은 단순 경력의 많고 적음이 아니라 사업이 요구한 변화를 수행할 수 있는 경험·인력·자원의 근거를 묻는다. 추진계획의 타당성은 일정이 상세한지만 보는 것이 아니라 사업목적의 변화를 만드는 과업과 산출물이 연결되는지 묻는다. 활용 가능성은 막연한 기대효과가 아니라 성과를 사용할 주체·조건·후속 의사결정이 구체적인지 확인한다.

가상 사례로 해석 차이를 드러낸다

다음은 교육용 가상 사례다. 사업목적이 “지역기업의 공공기술 사업화 촉진”이고 평가항목이 “활용 가능성”이라고 가정하자. 한 위원은 예상 매출액을 중심으로 보고, 다른 위원은 기술이전 계약과 실증 파트너를 중심으로 볼 수 있다.

해석표를 사용하면 판단질문을 “이 과제가 공공기술을 실제 제품·서비스와 고객 검증으로 연결할 사용주체, 적용환경, 도입조건을 제시했는가”로 맞출 수 있다. 인정 근거는 기술이전 범위, 개발 이후 실증계획, 수요기업의 역할, 생산·판매 가정 등으로 정리한다. 예상 매출은 참고 근거가 될 수 있지만 산식과 전제조건이 없으면 단독으로 높은 평가를 뒷받침하기 어렵다고 판단할 수 있다.

이 과정은 특정 점수를 미리 정하는 일이 아니다. 같은 평가항목에서 어떤 자료를 왜 중요하게 보는지 설명할 수 있도록 기준을 정렬하는 일이다.

점수 차이는 세 단계로 조정한다

1. 개별 판단: 먼저 각자가 독립적으로 평가하고 근거 위치와 판단질문을 기록한다.
2. 차이 진단: 점수 차이가 큰 항목에서 사업목적, 항목 의미, 확인근거 중 무엇을 다르게 읽었는지 찾는다.
3. 근거 토론: 사람의 권위나 평균점수보다 공고 원문과 제출자료를 중심으로 판단을 다시 검토한다.

교육에서는 점수의 평균을 빨리 내는 것보다 차이가 생긴 원인을 기록하는 편이 중요하다. 같은 근거를 다르게 해석한 것인지, 서로 다른 근거를 본 것인지, 허용되지 않은 외부정보를 판단에 섞었는지를 구분해야 한다.

평가 일관성을 흔드는 다섯 가지 오류

• 사업목적 생략: 평가항목 명칭만 보고 일반적인 우수성을 판단한다.
• 항목 간 중복: 같은 약점을 기술성·사업성·역량에서 반복 감점한다.
• 근거와 추정 혼합: 제출자료에서 확인된 사실과 평가자의 경험상 추정을 구분하지 않는다.
• 규모 편향: 기관 규모나 인지도 때문에 과제의 구체적 근거를 다르게 본다.
• 평가 범위 이탈: 평가절차에서 허용되지 않은 외부정보나 새로운 기준을 적용한다.

이 오류를 줄이려면 평가의견에 항목명만 적지 않고 “어떤 판단질문에 대해 어떤 근거가 충분하거나 부족했는가”를 남겨야 한다. 이후 평가의견 작성은 평가의견을 수정 과제로 바꾸는 방법과 연결할 수 있고, 계획서 전체 논리는 한 페이지 요약 구조, 발표 중 확인 질문은 질의응답 근거카드와 대조할 수 있다.

교육은 실제 공고와 모의과제로 진행한다

평가기관 연구원 대상 2~4시간 실무 특강에서는 혁신법의 공통 평가사항, 사업목적 해석, 평가항목을 판단질문으로 바꾸는 방법과 주요 오류를 다룬다. 8~16시간 실습 워크숍에서는 실제 공고·평가표와 비식별 모의계획서를 사용해 개인평가, 점수 차이 진단, 근거 토론, 평가의견 작성까지 수행한다. 교육은 특정 결론이나 점수의 통일을 강요하지 않으며 평가기준의 추적 가능성과 설명력을 높이는 데 목적이 있다.

자주 묻는 질문

평가의 일관성은 모든 위원이 같은 점수를 주는 것인가?

아니다. 전문 분야와 근거 해석에 따라 점수 차이는 생길 수 있다. 일관성은 사업목적과 평가항목을 같은 판단질문으로 바꾸고, 허용된 자료에서 어떤 근거를 확인했는지 추적할 수 있는 상태를 뜻한다. 점수 차이가 크면 평균을 내기 전에 해석 경로와 근거 범위를 점검해야 한다.

법률의 공통 평가사항만으로 실제 과제를 평가할 수 있는가?

충분하지 않다. 국가연구개발혁신법은 공통 평가사항을 제시하지만 실제 세부항목·비중·절차는 사업의 목적과 성격에 따라 달라질 수 있다. 평가자는 해당 사업의 공고문, RFP, 평가계획과 제공된 평가자료를 우선 확인해야 한다.

평가위원의 현장 경험을 판단에 사용하면 안 되는가?

현장 경험은 질문을 만들고 위험을 발견하는 데 도움이 된다. 다만 경험에서 나온 추정을 제출자료로 확인된 사실처럼 사용하면 안 된다. 평가의견에는 확인된 근거, 해석, 추가로 확인하지 못한 사항을 구분해 기록해야 한다.

참고 자료

• 국가연구개발혁신법 제10조 연구개발과제 및 수행 연구개발기관의 선정
• 국가연구개발혁신법 시행령 제9조 공모 절차 및 제12조 선정평가
• IRIS 2026년 기술통합플랫폼 고도화 지원 공고의 사업목적·평가항목·평가방법
• KISTEP 2026년도 7월 국가연구개발혁신법 매뉴얼 개정 안내

---

R&D 교육·강의·워크숍 상담

중소기업·스타트업 실무자와 평가기관 연구원을 대상으로 평가항목 해석 교육 2~4시간 실무 특강을 진행한다.
교육 목적과 참여자의 경험 수준에 맞춰 사례와 실습을 구성한다.

맞춤 강의·워크숍 상담 신청
상담 시 교육 대상·참여 인원·희망 주제·희망 일정을 전달하면 과정 구성을 협의할 수 있다.

전화 상담: 010-3338-7110
대표 전화: 02-2168-3071
이메일: misiceo@naver.com

#평가기관교육 #R&D평가 #평가항목 #사업목적 #선정평가 #평가위원교육 #연구개발혁신법 #공공R&D #평가기준 #R&D워크숍