반전 이미지 검색

Reverse image search
Google 이미지를 사용하여 이미지 검색을 역방향으로 합니다.

리버스 이미지 검색은 CB를 제공하는 Content-Based Image Retrieval(CBIR; 콘텐츠 기반 이미지 검색) 쿼리 기법입니다.검색의 기반이 되는 샘플 이미지가 있는 IR 시스템은 정보 검색 측면에서 샘플 이미지가 매우 유용합니다.특히 역영상 검색은 검색어가 부족한 것이 특징이다.따라서 사용자가 올바른 결과를 반환할 수도 있고 반환하지 않을 수도 있는 키워드 또는 용어를 추측할 필요가 없어집니다.또한 역이미지 검색을 통해 사용자는 특정 샘플이미지와 [1]관련된 콘텐츠, 이미지의 인기, 조작된 버전 및 파생작품을 [2]발견할 수 있습니다.

사용하다

리버스 이미지 검색은 [3]다음 용도로 사용할 수 있습니다.

  • 이미지의 소스를 찾습니다.
  • 고해상도 버전을 찾습니다.
  • 이미지가 표시되는 웹 페이지를 검색합니다.
  • 콘텐츠 작성자를 찾습니다.
  • 이미지에 대한 정보를 가져옵니다.

알고리즘

일반적으로 사용되는 리버스 이미지 검색 알고리즘은 다음과 같습니다.[4]

인기 있는 검색 시스템에 응용 프로그램

얀덱스

Yandex Images는 글로벌 리버스 이미지 및 사진 검색을 제공합니다.이 사이트는 다른 많은 사이트에서 사용되는 표준 CBIR(Content Based Image Retrieval) 기술을 사용하지만 인공지능 기반 기술을 사용하여 [6]쿼리를 기반으로 추가 결과를 찾습니다.사용자는 사이트의 툴바에 이미지를 드래그 앤 드롭하여 인터넷에서 유사한 이미지의 검색을 완료할 수 있습니다.Yandex 이미지는 컨텐츠 소유자에게 이미지 또는 사진의 지적 재산 표절을 추적하는 수단을 제공하는 보다 일반적인 사이트 외에 일부 불분명한 소셜 미디어 사이트를 검색합니다.

구글 이미지

구글의 이미지별 검색은 이미지나 이미지 URL을 업로드하는 것만으로 관련 이미지를 검색할 수 있는 역방향 이미지 검색 기능으로, 구글은 제출된 이미지를 분석하고 고도의 알고리즘을 이용해 수학적 모델을 구축해 이를 실현한다.그런 다음 일치하는 유사한 결과를 반환하기 전에 구글 데이터베이스에 있는 수십억 개의 다른 이미지와 비교됩니다.사용 가능한 경우 Google은 설명과 같은 이미지에 대한 메타데이터도 사용합니다.

틴아이

TinEye는 리버스 이미지 검색에 특화된 검색 엔진입니다.이미지를 전송하면 TinEye는 해당 이미지의 "독특하고 콤팩트한 디지털 서명 또는 지문"을 생성하여 다른 [7]인덱스 이미지와 대조합니다.이 절차에서는 전송된 이미지의 매우 편집된 버전이라도 일치시킬 수 있지만 일반적으로 [8]결과에는 유사한 이미지가 반환되지 않습니다.

픽시

Pixsy 역이미지 검색 테크놀로지는 Pixsy [10]플랫폼에 업로드된 이미지의 퍼블릭인터넷 상에서의 이미지[9] 일치를 검출합니다.새로운 일치가 자동적으로 검출되어 사용자에게 경고가 송신됩니다.Pixsy는 무단으로 사용할 경우 이미지 소유자 작업을 상업적으로 사용할 수 있는 보상 복구[11][12] 서비스를 제공합니다.Pixsy는 전 세계 25개 이상의 로펌 및 변호사와 협력하여 저작권 침해에 대한 해결책을 제시합니다.Pixsy는 Flickr 플랫폼과 사용자를 [13]위한 전략적인 이미지 모니터링 서비스입니다.

이베이

eBay ShopBot은 역이미지 검색을 사용하여 사용자가 업로드한 사진으로 제품을 찾습니다.eBay는 카테고리 인식을 위해 ResNet-50 네트워크를 사용하고, 이미지 해시는 Google Bigtable에 저장되며, Apache Spark 작업은 이미지 해시 추출을 위해 Google Cloud Dataproc에 의해 운영되며, 이미지 랭킹 서비스는 Kubernetes에 [14]의해 배포됩니다.

SK플래닛

SK플래닛은 전자상거래 웹사이트에서 관련 패션 아이템을 찾기 위해 역이미지 검색을 사용한다.TensorFlow inception-v3에 기반한 비전 인코더 네트워크를 개발했으며, 생산 용도에 대한 수렴 및 일반화 속도를 가지고 있다.다종류 분류에는 순환신경망을 이용하며, 패션제품 관심지역 검출은 Faster R-CNN을 기반으로 하며, SK플래닛의 역영상 검색 시스템은 100개월 [15]이내에 구축됩니다.

알리바바

Alibaba는 2014년에 Pailitao 애플리케이션을 출시했다.Pailitao(중국어: 立 literally literally, 문자 그대로 카메라를 통한 쇼핑이라는 뜻)는 사용자가 조회 대상을 촬영하여 알리바바의 전자상거래 플랫폼에서 아이템을 검색할 수 있도록 한다.Pailitao 애플리케이션은 관절 검출 및 특징 학습을 위해 분기가 있는 심층 CNN 모델을 사용하여 백그라운드 방해 없이 검출 마스크와 정확한 차별적 특징을 발견한다.GoogLeNet V1은 카테고리 예측 및 기능 [16][17]학습을 위한 기본 모델로 채택되었습니다.

핀터레스트

Pinterest는 2014년에 스타트업 회사 VisualGraph를 인수하여 플랫폼에 [18]비주얼 검색을 도입했습니다.2015년 Pinterest는 ACM Conference on Knowledge Discovery and Data Mining에서 논문을 발표하고 시스템 아키텍처를 발표했습니다.이 파이프라인은 오픈 소스 Caffe 컨볼루션 뉴럴 네트워크 프레임워크인 Apache Hadoop, 배치 처리를 위한 Cascading, 메시징을 위한 PinLater, 스토리지를 위한 Apache HBase를 사용합니다.유저 업 로드로부터, 로컬 피쳐, 딥 피쳐, 돌출 색 시그니처, 돌출 화소를 포함한 화상 특성을 추출한다.이 시스템은 Amazon EC2에 의해 운영되며 Pinterest에 매일 이미지를 업로드하는 데 필요한 GPU 인스턴스는 5개뿐입니다.역이미지 검색을 사용하여 Pinterest는 패션 오브젝트(예: 신발, 드레스, 안경, 가방, 시계, 바지, 반바지, 비키니, 귀걸이)에서 시각적 특징을 추출할 수 있으며 비슷한 [19][20]모양의 제품을 추천할 수 있습니다.

LykDat

LykDat는 역이미지 검색을 사용하여 [21]웹상의 다양한 온라인 스토어에서 패션 제품을 찾습니다.또한 LykDat는 사용자가 트위터 [22]내에서 발견한 사진을 역이미지 검색할 수 있도록 지원하는 트위터 봇도 제공합니다.

JD.com

JD.com는 Middleware '18 컨퍼런스에서 실시간 비주얼 검색 시스템의 설계와 구현을 공개했습니다.피어 리뷰 페이퍼는 JD의 분산 계층형 이미지 기능 추출, 인덱싱 및 검색 시스템에서 사용되는 알고리즘에 초점을 맞추고 있습니다.이 시스템은 매일 3억 명의 활성 사용자를 보유하고 있습니다.이 시스템은 2018년 [23]실전 배치 당시 시간당 8000만 건의 데이터베이스 업데이트를 유지할 수 있었습니다.

빙

Microsoft Bing은 KDD'18 컨퍼런스에서 시스템의 리버스 이미지 검색 아키텍처를 발표했습니다.이 논문은 사용자가 제출한 쿼리 이미지의 다양한 특징이 심층 신경 네트워크 인코더, 범주 인식 기능, 얼굴 인식 기능, 색상 특징 및 중복 감지 [24]기능을 포함하여 내용을 설명하는 데 사용된다고 밝히고 있다.

이미지 반전 검색

리버스 이미지 검색 리버스 이미지 검색은 CB를 사용하여 이미지를 반전시키는 CBI(접촉 기반 이미지) 기술입니다.IR 시스템을 사용하여 구글에서 유사한 사진을 검색합니다.얼굴 인식 기능, 중복 감지 기능.[25]

조사 시스템

Microsoft Research Asia의 북경연구소는 Arista-SS(Similar Search) 및 Arista-DS(Duplicate Search) 시스템에 관한 IEEE 의사록에 논문을 게재했습니다.Arista-DS는 컴퓨팅 비용과 메모리 비용을 절감하기 위해 글로벌 이미지 기능에 대한 주성분 분석과 같은 중복 검색 알고리즘만 수행합니다.Arista-DS는 10대의 서버를 사용하여 20억 개의 이미지에 대해 중복 검색을 수행할 수 있지만,[26] 중복에 가까운 이미지는 검출할 수 없습니다.

오픈 소스 구현

2007년에 퍼즐 라이브러리는 ISC 라이선스로 출시되었습니다.Puzzle은 이미지의 크기 조정, 재압축, 기억 및/또는 [27]약간 변경된 후에도 시각적으로 유사한 이미지를 역방향으로 검색하도록 설계되었습니다.

이미지 매치 오픈소스 프로젝트는 2016년에 출시되었습니다.Apache License에 따라 라이센스가 부여된 이 프로젝트는 [28]Python으로 작성된 역이미지 검색 엔진을 구현합니다.

퍼즐 라이브러리와 이미지 일치 프로젝트 모두 IEEE ICIP [29]회의에서 공개된 알고리즘을 사용합니다.

프로덕션 리버스 이미지 검색 시스템

다음 항목도 참조하십시오.CBIR 엔진 목록

「 」를 참조해 주세요.

레퍼런스

  1. ^ "How to search by image". Retrieved 2 November 2013.
  2. ^ "Video searching with Frompo". Frompo.com. Retrieved 2 November 2013.
  3. ^ "FAQ - TinEye - Why use TinEye?". TinEye.
  4. ^ 대규모 부분 중복 Web 이미지 검색 Microsoft 번들 기능
  5. ^ SIFT 알고리즘을 사용한 새로운 웹 이미지 검색 엔진 computer.org
  6. ^ Raj, Abhishek, ed. (February 27, 2022). "How Does Yandex Reverse Image Search Work? Detailed Guide". www.buddinggeek.com. Budding Geek. Retrieved May 5, 2022.
  7. ^ "FAQ - TinEye - How does TinEye work?". TinEye.
  8. ^ "FAQ - TinEye - Can TinEye find similar images??". TinEye.
  9. ^ "Find stolen images - Pixsy". Pixsy. Retrieved 2017-10-20.
  10. ^ "Pixsy.com review: Find & Fight Image Theft - Online Marketing for Artists -". Online Marketing for Artists. 2015-07-02. Retrieved 2017-10-20.
  11. ^ "Pixsy: Find and Get Paid for Image Theft". artlawjournal.com. 2014-10-18. Retrieved 2017-10-20.
  12. ^ "Resolve image theft - Pixsy". Pixsy. Retrieved 2017-10-20.
  13. ^ "Flickr Teams Up with Pixsy to Get You Paid When Photos Are Stolen". petapixel.com. Retrieved 2019-12-12.
  14. ^ "Visual Search at eBay". acm.org.
  15. ^ SK Planet에서의 비주얼 패션 제품 검색
  16. ^ "Visual Search at Alibaba". acm.org.
  17. ^ "Shopping With Your Camera: Visual Image Search Meets E-Commerce at Alibaba". Alibaba Tech.
  18. ^ Josh Constine. "Pinterest Acquires Image Recognition And Visual Search Startup VisualGraph". TechCrunch. AOL.
  19. ^ "Visual Search at Pinterest". acm.org.
  20. ^ "Building a scalable machine vision pipeline". Pinterest Engineering. Archived from the original on 2015-09-06.
  21. ^ "Fashion Image Search - LykDat". LykDat. Retrieved 2020-09-30.
  22. ^ "LykDat bot - Twitter". Retrieved 2020-09-30.
  23. ^ "The Design and Implementation of a Real Time Visual Search System on JD E-commerce Platform". acm.org.
  24. ^ "Web-Scale Responsive Visual Search at Bing". acm.org.
  25. ^ "Search Similar Images through reverse image search". https://reverseimage.net/. {{cite web}}:외부 링크 work=(도움말)
  26. ^ Web-Scale Data Microsoft를 사용한 검색 기반 이미지 주석 복제.
  27. ^ 퍼즐 라이브러리
  28. ^ Provenance Labs / 이미지 일치
  29. ^ 모든 종류의 이미지에 대한 이미지 서명
  30. ^ 전화기로 이미지 반전 검색을 하는 방법