악성코드 탐지&모바일 악성앱 탐지 채점 방식 안내
작성자
hcrcisc
작성일
2017-11-27 18:48
조회
2296
악성코드 탐지, 모바일 악성앱 탐지 분야 참가자의 결과파일(csv) 탐지결과 건수는 각 부문별 문제 수와(각각 7,500개, 2,000개) 동일하게 제출되어야 합니다.
참가자 결과파일의 탐지결과 건수와 부문별 문제수가 다르거나, 중복된 탐지결과가 포함되어 있을 시 다음과 같이 채점됨을 알려드립니다.
1. 참가자 결과파일에 같은 문제를 중복 탐지(동일한 해쉬값을 가지는 탐지결과가 2개 이상일 경우)한 결과가 포함되어 있을 경우
→ 악성/정상여부를 동일하게 탐지했을 경우, 동일한 탐지점수 한 건으로 처리
→ 악성/정상여부를 다르게 탐지할 경우, 오탐으로 처리
2. 결과파일의 탐지결과 건수가 정답지 문제 수보다 적을 경우
→ 탐지 정확도*가중치(결과파일 탐지 수/정답지 수)로 최종점수 산출
(예. A참가자가 악성코드 탐지 부문에 4,500건의 탐지 결과파일을 제출하고 악성/정상여부를 모두 맞췄다고 가정할 경우, 가중치 0.6을 부여하여, A참가자는 최종점수는 60.00점으로 반영
3. 결과파일의 탐지결과 건수가 정답지 문제 수보다 많을 경우
→ 참가자 결과파일에 같은 문제를 중복 탐지한 결과가 포함되어 있을 경우 1번과 동일하게 처리
→ 참가자 결과파일에 문제와 다른 탐지 결과가 포함되어 있을 경우(참가자 결과파일 해쉬값과 문제의 해쉬값이 다를 경우) 해당 탐지 결과는 채점에서 제외
참가자 결과파일의 탐지결과 건수와 부문별 문제수가 다르거나, 중복된 탐지결과가 포함되어 있을 시 다음과 같이 채점됨을 알려드립니다.
1. 참가자 결과파일에 같은 문제를 중복 탐지(동일한 해쉬값을 가지는 탐지결과가 2개 이상일 경우)한 결과가 포함되어 있을 경우
→ 악성/정상여부를 동일하게 탐지했을 경우, 동일한 탐지점수 한 건으로 처리
→ 악성/정상여부를 다르게 탐지할 경우, 오탐으로 처리
2. 결과파일의 탐지결과 건수가 정답지 문제 수보다 적을 경우
→ 탐지 정확도*가중치(결과파일 탐지 수/정답지 수)로 최종점수 산출
(예. A참가자가 악성코드 탐지 부문에 4,500건의 탐지 결과파일을 제출하고 악성/정상여부를 모두 맞췄다고 가정할 경우, 가중치 0.6을 부여하여, A참가자는 최종점수는 60.00점으로 반영
3. 결과파일의 탐지결과 건수가 정답지 문제 수보다 많을 경우
→ 참가자 결과파일에 같은 문제를 중복 탐지한 결과가 포함되어 있을 경우 1번과 동일하게 처리
→ 참가자 결과파일에 문제와 다른 탐지 결과가 포함되어 있을 경우(참가자 결과파일 해쉬값과 문제의 해쉬값이 다를 경우) 해당 탐지 결과는 채점에서 제외