AI, Grade 8 과학 시험지 풀어내다
상태바
AI, Grade 8 과학 시험지 풀어내다
  • 윤광제 기자
  • 승인 2019.09.09 14:00
  • 댓글 0
이 기사를 공유합니다

 

(AI타임스=윤광제 기자) 2015년 10월부터 2016년 2월까지 Al2 (Allen Institute for Artificial Intelligence: 앨런 인공지능 연구소, 이하 앨런 연구소)와 온라인 데이터 분석 플랫폼 업체인 캐글에서 인공지능 경진대회가 개최됐다. 700명의 학생, 연구원이 참가한 이 경진대회는, AI를 통해 Grade 8 과학 시험 문제를 푸는 경기였다

경진대회는 1등 5만 불, 2등 2만 불, 3등 1만 불로 총 상금 8만 불이 걸려있었으나, 이 컨테스트에 성공한 CS 과학자는 단 한 사람도 없었으며 심지어 60점 이상을 넘는 AI도 없었다.

(출처 : Moving Beyond the Turing Test with the Allen AI Science Challenge,2016)
(출처 : Moving Beyond the Turing Test with the Allen AI Science Challenge, 2016)

당시 AI는 고등학교 입학 때 갖춰야 할 언어와 논리 능력에 필적할 수 없었다고 볼 수 있다.

이로부터 4년 뒤, 시애틀의 앨런 연구소 (Al2)에서는 당시 실패했던 과학시험을 아주 여유롭게 통과하는 AI를 공개했다. 공개된 AI의 명칭은 Aristo이며, Aristo는 Grade 8 과학시험에는 90% 이상의 점수를 보였으며, Grade 12 과학시험에는 80% 이상의 득점을 기록했다.

Aristo가 치룬 테스트는 객관식 문제로만 진행됐고 뉴욕에 거주 중인 Grade 8의 평균 시험난이도였다. 시험 전 알렌 연구소에서는 문제의 모든 이미지와 도표를 삭제했으며, Aristo는 단지 문장 조합으로 인한 이해력으로 문제를 치뤘다.

Grade 8의 과학 시험 문제 수준 및 형태는 아래와 같았다.

Case 1> 문제에 제시된 단어보다 조금 더 많은 정보가 있어야만 풀 수 있는 질문이다.
Q: 조직 (Tissues)이 모여서 구성된 것을 무엇이라고 하나? (A group of tissues that work together to perform a specific function is called:)
(1) 기관 (an organ)
(2) 유기체 (an organism)
(3) 시스템 (a system)
(4) 세포 (a cell)

Case 2> 그리고 논리성이 필요한 문항도 있었다.

Q: 그 지역에 살고있는 다람쥐 숫자를 감소시키는 가장 큰 요인 무엇인가? (Which change would most likely cause a decrease in the number of squirrels living in an area?)
(1) 포식자 수 감소 (a decrease in the number of predators)
(2) 다람쥐 간의 경쟁 감소 (a decrease in competition between the squirrels)
(3) 이용 가능한 음식의 증가 (an increase in available food)
(4) 산불 수 증가 (an increase in the number of forest fires)

Al2외, 세계 정상의 AI 연구소에서는 AI 기계 언어 학습 개선이 활발히 이뤄지고 있어 AI 기계들의 문서 분석 능력, 정보 찾기 능력, 궁금한 사항에 대한 답변, 심지어는 그들만의 언어를 만들어 내기도 한다.

Al2에서 개발한 AI 프로젝트, Aristo는 언어를 이해하고 인간의 논리와 의사 결정을 흉내 낼 수 있는 AI에 상당한 진전이 있었음을 보여준다.

Al2의 프로젝트에는 Grade 8 과학 테스트를 통과한 Aristo 외,
▲AllenNLP, ▲Mosaic (기계 학습/추론, 자연어 이해, 컴퓨터 비전, 크라우드 소싱 기술 통합), ▲PRIOR(AI시스템 컴퓨터 비젼 리서치), ▲Semantic Scholar(과학 논문 검색), ▲Incubator(AI 스타트업 업체와 AI 선두 업체들과 연결)이 있다.

한편, Al2는 2013년 시애틀의 한 억만장자와 마이크로 소프트 공동 창업자 Paul Allen에 의해 설립되었으며, 그 후 "디지털 아리스토텔레스"를 만들자는 취지로 "Aristo" 개발에 착수했다.


댓글삭제
삭제한 댓글은 다시 복구할 수 없습니다.
그래도 삭제하시겠습니까?
댓글 0
댓글쓰기
계정을 선택하시면 로그인·계정인증을 통해
댓글을 남기실 수 있습니다.
주요기사
이슈포토
  • ‘에너지 전환 정책’, 2019 국감서 공방 예상
  • KERI, 재폐로 차단기 관련 무료교육 실시
  • 빅데이터 플랫폼 및 센터 구축 사업, 22개소 센터 선정
  • 현대차그룹 신재생에너지 시장 진출
  • IoT와 빅데이터 주제 '사물 인터넷 컨퍼런스' 중국에서 열려
  • 산업부, 제16차 ASEAN+3 에너지장관회의 및 제13차 동아시아 에너지장관회의 참석