육안 검색엔진
Visual search engine |
시각적 검색 엔진은 검색 결과의 시각적 디스플레이가 있는 이미지나 검색 엔진의 입력을 통해 월드 와이드 웹의 정보를 검색하도록 설계된 검색 엔진이다. 정보는 웹 페이지, 위치, 기타 이미지 및 기타 유형의 문서로 구성될 수 있다. 이러한 유형의 검색 엔진은 대부분 알 수 없는 개체(알 수 없는 검색 쿼리)의 이미지를 통해 모바일 인터넷에서 검색하는 데 사용된다. 예를 들면 외국 도시에 있는 건물들이다. 이러한 검색 엔진은 종종 컨텐츠 기반 이미지 검색 기술을 사용한다.
시각적 검색 엔진은 인지할 수 있는 알고리즘을 기반으로 패턴을 검색하고 선택적 또는 적용 패턴 일치 기법에 따라 상대적 정보를 제공한다.
분류
검색 엔진의 특성에 따라 시각적 정보를 찾는 것을 목표로 하는 그룹과 결과를 시각적으로 표시하는 그룹, 두 개의 주요 그룹이 있다.
시각 정보 검색기
이미지 검색
이미지 검색 엔진은 이미지를 찾도록 고안된 검색 엔진이다. 검색은 사진에 대한 키워드, 그림 또는 웹 링크를 기반으로 할 수 있다. 결과는 메타데이터, 색상, 모양 등의 분포, 브라우저가 사용하는 검색 기법 등 검색 기준에 따라 달라진다.
이미지 검색 기법
현재 이미지 검색에 사용되는 두 가지 기술:
메타데이터별 검색: 이미지 검색은 키워드, 텍스트 등으로 이미지와 관련된 메타데이터의 비교를 기반으로 한다. 관련성별로 정렬된 이미지 세트를 획득한다. 각 이미지와 관련된 메타데이터는 이미지, 포맷, 컬러 등의 제목을 참조할 수 있다. 수동으로 또는 자동으로 생성될 수 있다. 이 메타데이터 생성 프로세스를 시청각 인덱싱이라고 한다.
예시별 검색: 역 이미지 검색이라고도 하는 이 기법에서는 콘텐츠 기반의 이미지 검색 컴퓨터 비전 기법을 이용한 이미지 비교를 통해 검색 결과를 얻는다. 검색 중에는 이미지에서 추출할 수 있는 색상, 모양, 텍스처 또는 시각적 정보와 같은 이미지의 내용을 검사한다. 이 시스템은 높은 계산 복잡성을 요구하지만 메타데이터에 의한 검색보다 효율적이고 신뢰성이 높다.
첫 번째 검색은 텍스트를 입력하여 이루어지며, 그 다음 획득한 이미지에서 검색 매개 변수로 사용하여 검색을 세분화할 수 있기 때문에 두 가지 검색 기술을 결합한 이미지 검색기가 있다.
비디오 검색
비디오 검색 엔진은 인터넷에서 비디오를 검색하도록 고안된 검색 엔진이다. 일부 비디오 검색자들은 인터넷에서 직접 검색을 처리하는 반면, 다른 사람들은 검색이 완료된 비디오를 숨긴다. 일부 검색자는 또한 비디오의 형식이나 길이를 검색 매개변수로 사용할 수 있다. 보통 결과는 비디오의 미니어처 캡처와 함께 나온다.
비디오 검색 기술
현재 거의 모든 비디오 검색기는 검색을 수행하기 위해 키워드(메타데이터별 검색)를 기반으로 하고 있다. 이러한 키워드는 동영상의 제목이나 동영상에 첨부된 텍스트에서 찾을 수 있거나 작성자가 정의할 수 있다. 이런 유형의 검색의 한 예가 유튜브다.
일부 검색자는 수동으로 키워드를 생성하는 반면, 다른 검색자는 알고리즘을 사용하여 동영상의 시청각 콘텐츠를 분석하고 라벨을 생성한다. 이 두 프로세스의 조합은 검색의 신뢰성을 향상시킨다.
3D 모델 검색기
3D 모델의 검색자는 데이터베이스나 네트워크에서 3D 모델링 객체의 파일을 찾는 것을 목표로 한다. 얼핏 보면 이런 유형의 검색자의 구현은 불필요해 보일 수 있지만, 인터넷의 지속적인 기록적 인플레이션으로 인해 매일 그것은 더욱 필요한 지수화 정보가 된다.
3D 모델 검색 기술
이들은 기존의 텍스트 기반 검색기(키워드/태그)와 함께 사용되어 왔으며, 여기서 색인된 자료의 작성자 또는 인터넷 사용자가 이러한 태그 또는 키워드를 제공하였다. 항상 효과가 있는 것은 아니기 때문에 최근 2D 도면, 3D 도면, 3D 모델과 비교했을 때 텍스트를 이용한 검색을 검색과 결합한 검색엔진 구현에서 조사되고 있다.
프린스턴대는 이 모든 파라미터를 결합해 검색을 수행하는 검색엔진을 개발해 검색의 효율성을 높였다.[1] 또한 3DfindIT.com 포털은 스케치, 도면, 텍스트 등을 기반으로 한 3D 모델 검색엔진을 제공한다. https://www.3dfindit.com/
모바일 비주얼 검색
모바일 이미지 검색기는 휴대 전화 전용 검색 엔진으로, 휴대 전화로 만든 이미지나 특정 단어(키워드)를 이용해 인터넷에서 어떤 정보라도 찾을 수 있는 형태다. 모바일 비주얼 검색 솔루션을 통해 브랜드 모바일 애플리케이션에 이미지 인식 소프트웨어 기능을 통합할 수 있다. MVS(Mobile Visual Search)는 온라인과 오프라인 미디어의 격차를 해소하여 고객들을 디지털 컨텐츠에 연결할 수 있도록 해준다.
소개
휴대전화는 고해상도 카메라, 컬러 디스플레이, 하드웨어 가속 그래픽을 탑재한 강력한 영상 및 영상 처리 장치로 진화했다. 그들은 또한 점점 더 글로벌 위치 확인 시스템을 갖추고 있으며 광대역 무선 네트워크에 연결되어 있다. 이 모든 것을 통해 카메라폰을 사용하는 새로운 종류의 어플리케이션이 시각적으로 가까운 물체에 대한 검색 질의를 시작할 수 있다(그림 1). 이러한 애플리케이션은 예를 들어 제품 식별, 비교 쇼핑, 영화 정보 찾기, CD(컴팩트 디스크), 부동산, 인쇄 매체 또는 예술작품 등에 사용할 수 있다.
과정
일반적으로 이 유형의 검색 엔진은 예시별 쿼리 또는 예시별 이미지 쿼리 기법을 사용하여 이미지의 내용, 모양, 질감 및 색상을 사용하여 데이터베이스에서 비교한 다음 쿼리로부터 대략적인 결과를 전달한다.
휴대전화에서 이러한 검색에 사용되는 과정은 다음과 같다.
먼저 서버 응용프로그램으로 이미지가 전송된다. 이미 서버에는 각각 이미지를 구성하는 분야별로 특화돼 있어 각기 다른 분석팀이 이미지를 분석하게 된다. 이어 제출된 이미지에 특기 분야가 포함됐는지 각 구단이 결정한다.
이 모든 절차가 끝나면 중앙컴퓨터가 데이터를 분석해 각 팀의 효율성에 따라 정리한 결과 페이지를 만들어 결국 휴대전화로 전송된다.
참조
- ^ Funkhouser, Thomas; Min, Patrick; Kazhdan, Michael; Chen, Joyce; Halderman, Alex; Dobkin, David; Jacobs, David (2002). "A Search Engine for 3D Models" (PDF). ACM Transactions on Graphics. 22 (1): 83–105. doi:10.1145/588272.588279.
