분류 구성을 갖는 이미지들의 효율적인 의미상의(semantic) 유사성 검색에 대한 시스템 및 방법이 제공된다. 이 시스템 및 방법은 복수의 이미지들에 대한 의미상의 분류-검색 트리를 구축(202)하는 것으로서, 이 분류 트리는 적어도 2개의 이미지 카테고리를 포함하며, 이미지들의 각 카테고리는 복수의 이미지들의 서브셋(subset)을 나타내는 분류-검색 트리를 구축(202)하는 것과, 질의 이미지를 수신(204)하는 것, 적어도 2개의 이미지 카테고리 중 하나의 카테고리를 선택하기 위하여 질의 이미지를 분류(208) 하는 것, 질의 이미지를 사용하는 관심 이미지를 적어도 2개의 이미지 카테고리 중 선택된 하나의 카테고리로 검색을 제한(210)하는 것을 제공한다.