[논문 리뷰] Science Bots: A Model for the Future of Scientific Computation?

Tobias Kuhn|VU Research Portal|2015. 01. 01.

Peer-to-Peer Network Technologies참고 문헌 14인용 수 12

한 줄 요약

이 논문은 과학 데이터를 자동으로 처리하고 나노공개물(nanopublications)을 생성하며 실시간으로 결과를 게재하는 자율 소프트웨어 에이전트인 '사이언스봇(Science Bots)'을 제안한다. 인간과 봇이 동료 평가에 기반해 신뢰도를 획득하는 분산형 명성 체계에 봇을 통합함으로써, 중앙 집중적 감시 없이도 개방적이고 확장 가능하며 신뢰할 수 있는 과학 계산을 가능하게 한다.

ABSTRACT

As a response to the trends of the increasing importance of computational approaches and the accelerating pace in science, I propose in this position paper to establish the concept of "science bots" that autonomously perform programmed tasks on input data they encounter and immediately publish the results. We can let such bots participate in a reputation system together with human users, meaning that bots and humans get positive or negative feedback by other participants. Positive reputation given to these bots would also shine on their owners, motivating them to contribute to this system, while negative reputation will allow us to filter out low-quality data, which is inevitable in an open and decentralized system.

연구 동기 및 목표

• 과학 소프트웨어, 데이터, 게재 간 점점 커지는 격차를 해소하기 위해 자동화되고 실시간인 데이터 처리 및 배포를 가능하게 하기 위해.
• 과학 소프트웨어와 데이터셋을 증명 가능하고 검증 가능한 기록을 가진 첫 번째 연구 결과로 간주하는 프레임워크를 구축하기 위해.
• 봇과 인간이 명성 기반 신뢰 모델에서 공존하는 분산형이고 개방적인 시스템을 만들기 위해, 품질과 신뢰성을 보장하기 위해.
• 과학자들이 봇의 명성과 자신의 명성 기반 신뢰도를 연결함으로써 고품질 소프트웨어 기여를 유도하기 위해.

제안 방법

• 사이언스봇은 데이터를 수신하고 과학적 알고리즘을 적용하며, RDF 형식으로 원자적 데이터 스니펫을 나노공개물로 게재하는 자율 에이전트로 설계된다.
• 나노공개물은 기록과 메타데이터를 포함하여 암호학적 해시 기반 식별자를 사용해 검증 가능하고 불변이며 분산된 게재를 가능하게 한다.
• 명성 체계는 인간 과학자와 봇을 모두 첫 번째 기여자로 간주하며, 네트워크 중심성 측정법(예: 고유벡터 중심성)을 사용해 긍정적 평가로 명성 순위를 매긴다.
• 기여자 간 관계는 '소유자이다'(creatorship)와 '긍정적 평가를 제공한다'(peer validation)라는 두 가지 간선 유형을 가진 그래프로 모델링된다.
• 명성은 고유벡터 중심성을 사용해 계산되며, 이는 직접적 및 간접적 추천을 기반으로 하므로 조작에 강건하다.
• 검색 엔진과 피어 투 피어 네트워크에서 기존에 알려진 알고리즘을 활용함으로써, 개방형 시스템에서의 확장성이 확보되며, 이는 강건성과 효율성을 보장한다.

실험 결과

연구 질문

• RQ1 과학 소프트웨어는 어떻게 학술 커뮤니케이션 과정에서 첫 번째 연구 결과로 통합될 수 있는가?
• RQ2 봇이 자율적으로 결과를 게재하는 분산형 개방형 시스템에서 품질과 신뢰를 보장할 수 있는 메커니즘은 무엇인가?
• RQ3 과학자와 그들의 자율 봇에 대해 명성을 어떻게 부여할 수 있으며, 고품질 기여를 유도할 수 있는가?
• RQ4 동료 평가 기반의 분산형 명성 체계가 과학 계산에서 중앙 집중적 감시를 대체할 수 있는가?
• RQ5 나노공개물을 어떻게 사용하여 소프트웨어 출력물과 입력 및 기록을 검증 가능하고 불변적인 방식으로 유기적으로 연결할 수 있는가?

주요 결과

• 사이언스봇은 실시간으로 자율적으로 나노공개물을 생성하고 게재할 수 있어, 인간 간섭 없이도 결과를 즉시 배포할 수 있다.
• 동료 평가 기반의 분산형 명성 체계는 봇과 인간 모두가 명성을 획득할 수 있도록 하며, 네트워크 효과로 인해 간접적 추천이 많은 높은 명성과 연결된다.
• 고유벡터 중심성을 명성 평가에 사용함으로써, 단순히 추천 수가 아니라 추천자들의 질에 따라 명성이 결정되어 조작이 어렵다는 점이 보장된다.
• 과학자들은 봇의 명성으로부터 이점을 얻으며, 자신의 봇에 대한 긍정적 평가가 과학자 자신의 학술적 신뢰도를 향상시켜 고품질 소프트웨어 개발을 유도한다.
• 중앙 기관이 필요 없이도 시스템은 개방성과 분산성을 유지하면서 자동화된 명성 메커니즘을 통해 저품질 기여를 걸러내며, 중앙 집중적 감시의 필요성을 피한다.
• 기존 기술인 나노공개물 서버, 암호학적 해싱, 확장 가능한 네트워크 분석 알고리즘을 기반으로 하여, 이 모델이 실현 가능함을 입증한다.