[논문 리뷰] An Analysis of Chinese Search Engine Filtering

Tao Zhu, Chris Bronk외 1명|arXiv (Cornell University)|2011. 07. 19.

Internet Traffic Analysis and Secure E-voting참고 문헌 25인용 수 4

한 줄 요약

이 논문은 중국의 검색 엔진 필터링을 분석하기 위해 바이두, 구글(서비스 종료 이전), 야후!, 빙 등에서 검색어를 테스트하여, 성적, 정치적, 운동가 관련 용어에 대해 키워드 기반의 강력한 검열이 이루어지고 있음을 밝혀냈다. 동적이고 변화하는 필터링 정책—주로 블랙리스트와 정부가 통제하는 화이트리스트를 포함—를 규명하여 중국에서 검색 엔진이 국가가 정한 콘텐츠 제한을 어떻게 시행하는지 보여준다.

ABSTRACT

The imposition of government mandates upon Internet search engine operation is a growing area of interest for both computer science and public policy. Users of these search engines often observe evidence of censorship, but the government policies that impose this censorship are not generally public. To better understand these policies, we conducted a set of experiments on major search engines employed by Internet users in China, issuing queries against a variety of different words: some neutral, some with names of important people, some political, and some pornographic. We conducted these queries, in Chinese, against Baidu, Google (including google.cn, before it was terminated), Yahoo!, and Bing. We found remarkably aggressive filtering of pornographic terms, in some cases causing non-pornographic terms which use common characters to also be filtered. We also found that names of prominent activists and organizers as well as top political and military leaders, were also filtered in whole or in part. In some cases, we found search terms which we believe to be "blacklisted". In these cases, the only results that appeared, for any of them, came from a short "whitelist" of sites owned or controlled directly by the Chinese government. By repeating observations over a long observation period, we also found that the keyword blocking policies of the Great Firewall of China vary over time. While our results don't offer any fundamental insight into how to defeat or work around Chinese internet censorship, they are still helpful to understand the structure of how censorship duties are shared between the Great Firewall and Chinese search engines.

연구 동기 및 목표

• 국가의 지시에 따라 중국 검색 엔진에서 콘텐츠 필터링의 범위와 메커니즘을 조사하기 위해.
• 특히 정치적, 운동가 관련, 또는 성적 용어와 같은 특정 유형의 검색어가 체계적으로 차단되는지 규명하기 위해.
• 검색 엔진이 대규모 방화벽의 검열 정책을 시행하는 데서 수행하는 역할을 분석하기 위해.
• 시간에 따라 필터링 행동의 변화를 기록하기 위해.
• 대규모 방화벽과 검색 엔진 운영자 간의 콘텐츠 억압에서의 역할 분담을 명확히 하기 위해.

제안 방법

• 중립적, 정치적, 유명 인물의 이름, 성적 용어를 포함한 다양한 키워드를 사용해 중국어로 제어된 검색어를 수행함.
• 네 가지 주요 검색 엔진을 테스트: 바이두, 구글(퇴출 이전), 야후!, 빙.
• 시간이 지남에 따라 필터링 행동의 변화를 감지하기 위해 장기간 관찰 기간 동안 검색어를 반복 실행함.
• 결과를 분석하여, 결과가 전혀 없거나 정부 승인된 사이트만 나타나는 등의 억압 패턴을 식별함.
• 일관된 특정 용어에 대한 필터링을 관찰함으로써 잠재적 블랙리스트를 규명함.
• 일반적인 단어에서 공통 문자를 사용하는 광범위한 문자 기반 필터링과 목표 지정된 키워드 차단을 구분함.

실험 결과

연구 질문

• RQ1 어느 범주에 속하는 검색어가 중국 검색 엔진에서 가장 자주 필터링되는가?
• RQ2 검색 엔진이 블랙리스트와 화이트리스트를 통해 얼마나 강력하게 검열을 시행하는가?
• RQ3 필터링 정책은 시간에 따라 어떻게 변화하며, 이러한 변화를 이끄는 요인은 무엇인가?
• RQ4 차단된 용어와 공통 문자를 공유하는 비성적 용어도 필터링되는가?
• RQ5 검색 엔진은 대규모 방화벽 자체보다 국가 수준의 인터넷 검열을 구현하는 데서 어떤 역할을 하는가?

주요 결과

• 성적 용어는 강력하게 필터링되었으며, 일부 비성적 용어조차도 공통 문자를 공유해 차단된 바 있었다.
• 유명 정치인, 군사 지도자, 운동가의 이름은 체계적으로 필터링되거나 억압되었다.
• 일부 블랙리스트에 포함된 용어에 대해서는 결과에 정부 소유 또는 통제하는 웹사이트의 짧은 목록만 나타났다.
• 필터링 정책은 시간에 따라 변화를 보여, 동적이고 변화하는 시행 전략임을 시사했다.
• 이 연구는 중국의 검색 엔진이 국가가 정한 검열에 적극적으로 참여하고 있으며, 대개 대규모 방화벽과 최종 사용자 사이의 중개자 역할을 한다고 확인했다.
• 결과는 필터링이 순수 기술적 조치가 아니라 의도적인 정책 선택을 반영하며, 명시적으로 불법이 아닌 용어조차도 차단된다는 것을 시사한다.