[논문 리뷰] (Un)conscious Bias in the Astronomical Profession: Universal Recommendations to improve Fairness, Inclusiveness, and Representation

Alessandra Aloisi, Neill Reid|arXiv (Cornell University)|2020. 06. 15.

Diversity and Career in Medicine참고 문헌 3인용 수 5

한 줄 요약

이 논문은 천문학 분야에서 무의식적 편향을 줄이기 위한 보편적이고 근거 기반의 권고안을 제안한다. 이는 익명 심사 절차, 구조화된 평가 기준, 의무적인 편향 교육을 포함한다. STScI에서 双중 익명 제안 심사 절차를 도입한 후, 여성의 허블 망원경 제안 성공률이 18년 만에 남성의 성공률을 처음으로 초월하게 되었으며, 이는 공정성과 대표성을 증진하는 데서 이 방법의 효과성을 입증한다.

ABSTRACT

(Un)conscious bias affects every aspect of the astronomical profession, from scientific activities (e.g., invitations to join collaborations, proposal selections, grant allocations, publication review processes, and invitations to attend and speak at conferences) to activities more strictly related to career advancement (e.g., reference letters, fellowships, hiring, promotion, and tenure). For many, (un)conscious bias is still the main hurdle to achieving excellence, as the most diverse talents encounter bigger challenges and difficulties to reach the same milestones than their more privileged colleagues. Over the past few years, the Space Telescope Science Institute (STScI) has constructed tools to raise awareness of (un)conscious bias and has designed guidelines and goals to increase diversity representation and outcome in its scientific activities, including career-related matters and STScI sponsored fellowships, conferences, workshops, and colloquia. STScI has also addressed (un)conscious bias in the peer-review process by anonymizing submission and evaluation of Hubble Space Telescope (and soon to be James Webb Space Telescope) observing proposals. In this white paper we present a plan to standardize these methods with the expectation that these universal recommendations will truly increase diversity, inclusiveness and fairness in Astronomy if applied consistently throughout all the scientific activities of the Astronomical community.

연구 동기 및 목표

• 과학적 및 경력 발전 기회에서 소수자 집단이 불리하게 대우받는 천문학 분야의 체계적 무의식적 편향을 해결하기 위해.
• 표준화되고 투명한 평가 절차가 제안 성공률, 채용, 연구비 배분의 격차를 줄일 수 있음을 입증하기 위해.
• 공정성, 포용성, 대표성을 향상시키기 위해 천문학 공동체 전반에 보편적으로 도입 가능한 실행 가능한 근거 기반 권고안을 제공하기 위해.
• 과학 평가 문화를 암묵적이고 주관적인 판단에서 명시적이고 객관적인 기준으로 전환하여 편향을 최소화하기 위해.
• 책무성과 측정 가능한 진전을 확보하기 위해 기관 차원에서 대표성과 결과를 추적하도록 유도하기 위해.

제안 방법

• 선택위원회 전원이 편향 교육을 수강하도록 의무화하여 암묵적 및 명시적 편향에 대한 인식을 높이기 위해.
• 의사결정의 일관성과 공정성을 확보하기 위해 심의 이전에 명시적이고 객관적인 평가 기준을 수립하기 위해.
• 이름, 성별, 소속 기관과 같은 식별자를 제거하기 위해 제안, 연구비, 펠로우십 평가에 대해 이중 익명 동료 심사 절차를 도입하기 위해.
• 토론과 평가에서 중립적 언어를 사용하여 후보자나 제안서를 신분이 아닌 역할이나 기능으로 기술하기 위해.
• 채용 과정에서 모든 후보자에게 동일한 질문을 사용하는 구조화된 인터뷰를 도입하여 주관적 판단의 영향을 줄이기 위해.
• 기준을 설정하고 진전을 모니터링하기 위해 선정위원회와 결과물의 인구 통계적 대표성을 추적하기 위해.

실험 결과

연구 질문

• RQ1 2018년 허블 우주 망원경 제안에 대해 이중 익명 동료 심사 절차를 도입한 후 성별 격차는 어떻게 변화했는가?
• RQ2 구조화된 평가 기준과 편향 교육이 과학적 선별 절차에서 무의식적 편향을 얼마나 줄일 수 있는가?
• RQ3 어떤 기관 차원의 관행이 천문학 분야의 채용, 승진, 연구비 배분에서 대표성과 공정성을 효과적으로 높일 수 있는가?
• RQ4 암묵적 편향은 과학적 동료 심사, 위원회 임명, 경력 발전 결정에 어떻게 영향을 미치는가?
• RQ5 공정한 기준의 이상을 진정으로 공정한 현실로 전환하기 위해 필요한 체계적 변화는 무엇인가?

주요 결과

• 2018년 허블 우주 망원경 제안에 대해 이중 익명 심사 절차를 도입한 후, 여성의 성공률(8.7%)이 18년 만에 남성의 성공률(8.0%)을 처음으로 초월하게 되었다.
• 이중 익명 절차는 성별 편향을 명백히 감소시켰으며, 나사(NASA)는 이제 모든 시설에 이 모델을 도입하고 있다.
• 편향 교육과 구조화된 기준은 위원회 심의 과정에서 공정성을 크게 향상시키고 암묵적 편향의 영향을 줄였다.
• 중립적 언어와 익명 자료의 사용은 심사자가 과학적 우수성에만 집중할 수 있도록 도왔다.
• 위원회와 결과물의 대표성 추적은 기관이 진전을 모니터링하고 책임성을 확보하는 데 기여했다.
• 이중 익명 심사의 초보적 결과에 따르면, 심사자들은 이 절차가 '해방감'을 주어 과학에만 집중할 수 있도록 해주었다고 평가했다.