[논문 리뷰] On When and How to use SAT to Mine Frequent Itemsets

Rui Henriques, Inês Lynce외 1명|arXiv (Cornell University)|2012. 07. 26.

Data Mining Algorithms and Applications참고 문헌 36인용 수 12

한 줄 요약

이 논문은 빈도 있는 항목집합 탐색(FIM)에 SAT 솔버를 언제, 어떻게 사용할 것인지 조사하며, 다양한 SAT 인코딩과 맞춤형 탐색 및 순회 전략을 제안한다. 결과적으로, 다양한 빈도 범위에서 최신 CP 솔버와 경쟁 가능한 성능을 보이며, 특히 복잡한 제약 조건이 존재하는 상황에서 전통적인 CP 방법이 확장성 문제를 겪는 경우에 유망한 대안을 제공한다.

ABSTRACT

A new stream of research was born in the last decade with the goal of mining itemsets of interest using Constraint Programming (CP). This has promoted a natural way to combine complex constraints in a highly flexible manner. Although CP state-of-the-art solutions formulate the task using Boolean variables, the few attempts to adopt propositional Satisfiability (SAT) provided an unsatisfactory performance. This work deepens the study on when and how to use SAT for the frequent itemset mining (FIM) problem by defining different encodings with multiple task-driven enumeration options and search strategies. Although for the majority of the scenarios SAT-based solutions appear to be non-competitive with CP peers, results show a variety of interesting cases where SAT encodings are the best option.

연구 동기 및 목표

• 패턴 탐색의 핵심 과제인 빈도 있는 항목집합 탐색(FIM)에 대해 SAT 솔버의 타당성을 평가하는 것.
• 전통적인 CP 기반 접근법보다 SAT 기반 FIM이 성능을 발휘하는 조건을 규명하는 것.
• FIM에 특화된 작업 기반 순회 및 탐색 전략을 갖춘 SAT 인코딩을 설계하고 구현하는 것.
• FIM 워크로드에서 SAT 솔버를 선택하고 튜닝하기 위한 실용적 지침을 제공하는 것.
• 복잡한 사용자 정의 패턴 탐색 과제를 위한 SAT와 제약 프로그래밍의 통합을 탐색하는 것.

제안 방법

• 항목집합과 지원 제약 조건을 부울 공식으로 매핑하는 FIM 문제의 다수의 SAT 인코딩을 제안한다.
• FIM 환경에서 효율적인 해를 향해 SAT 솔버를 이끄는 작업 특화 순회 및 탐색 전략을 도입한다.
• 빈도 제약 조건을 부울 만족 가능성 문제로 표현하기 위해 FREQSAT 구성법을 사용한다.
• 단조성 및 부분 빈도 추론 규칙을 포함한 SAT 해결과 제약 추론을 융합한 하이브리드 접근법을 사용한다.
• 탐색 전략, 변수 순서, 순회 제어 간의 트레이드오프를 탐색하기 위해 가변 매개변수 설정을 활용한다.
• 실제 및 합성 데이터셋을 사용하여 다양한 빈도 임계값과 제약 조건 복잡도에서 접근법을 검증한다.

실험 결과

연구 질문

• RQ1 SAT 기반 접근법이 빈도 있는 항목집합 탐색에서 최신 CP 솔버와 경쟁 가능한가?
• RQ2 다양한 SAT 인코딩 전략과 탐색 히우리스틱이 FIM에서 성능에 어떤 영향을 미치는가?
• RQ3 빈도 임계값과 제약 조건 복잡도는 SAT 성능에 어떤 역할을 하는가?
• RQ4 SAT 솔버는 기본적인 지원 수세기 초과의 복잡한 사용자 정의 제약 조건을 효과적으로 처리할 수 있는가?
• RQ5 FIM 워크로드에서 CP 솔버 대비 SAT 솔버를 선택하기 위한 지침은 무엇인가?

주요 결과

• SAT 기반 FIM 솔루션은 빈도 임계값의 광범위한 범위에서 최신 CP 솔버와 경쟁 가능하며, 특히 연관 규칙 탐색에서 흔히 사용되는 0.5에서 0.75 범위에서 특히 그렇다.
• 높은 빈도에서는 SAT 성능이 저하되는데, 이는 충돌하는 제약 조건 하에서 순회적 추론에 대한 내재적 지원이 부족하기 때문이며, 이는 SAT 솔버 설계의 본질적 한계이다.
• 맞춤형 탐색 및 순회 전략을 갖춘 제안된 SAT 인코딩은 특히 제약 조건이 복잡하거나 비단조화일 경우 성능 향상에 크게 기여한다.
• CP 솔버가 광범위한 수세기 연산으로 인해 확장성 문제를 겪는 상황에서는 SAT가 CP 솔버를 능가한다.
• FREQSAT 문제 구성법은 빈도 제약 조건을 부울 공식으로 모델링할 수 있게 하여 확률적 및 조건부 빈도 표현에 대한 SAT 기반 추론을 가능하게 한다.
• FIM에서 CP 솔버 대비 SAT 솔버를 선택하기 위한 지침을 수립하였다: 제약 조건이 복잡하고, 빈도 임계값이 중간 수준이며, CP 솔버의 성능이 제한될 경우에 적합하다.