Marqo

Marqo는 사용자가 150개 이상의 임베딩 모델을 빠르게 프로토타입하고, 반복 속도를 높이며, 원활하게 배포할 수 있도록 도와주는 혁신적인 플랫폼입니다. 이 플랫폼은 강력한 검색 애플리케이션을 구축하고, 검색 스택을 변환하는 데 필요한 모든 도구를 제공합니다. Marqo는 도메인 특화 데이터에 대한 미세 조정 없이는 전통적인 BM25 검색보다 성능이 떨어질 수 있는 임베딩 모델의 문제를 해결합니다. 또한, 수집 및 검색을 위한 임베딩을 생성하기 위한 확장 가능하고 효율적인 파이프라인 구축에 필요한 전용 인프라를 제공합니다. Marqo는 재순위화, 하이브리드 검색 및 필터링과 같은 다른 기술과 함께 임베딩 검색을 보완할 수 있는 기능을 제공합니다. 이는 생산성에서 결과를 개선하고 반복 속도를 높이기 위해 검색 성능의 포괄적이고 일관된 평가가 필요합니다. Marqo는 수백 개의 오픈 소스 임베딩 모델을 훈련시키거나, 사용자 정의 모델을 가져오거나, Marqo의 일반화된 대조 학습을 통해 훈련할 수 있는 기능을 제공합니다. 또한, Marqo는 이미지 수집, 추론 및 검색을 위한 매우 빠른 임베딩 추론 엔진을 제공하며, 수백 개의 임베딩 모델과 사용자 정의 가중치를 지원합니다. Marqo는 메타데이터 처리, 재순위화, 필터링, 점수 수정 및 하이브리드 검색을 통한 수평적으로 확장 가능한 벡터 및 어휘 검색을 제공합니다. 이 플랫폼은 정밀도, 순위, 일관성 및 평균 관련성에 대한 등급으로 검색 시스템을 평가하며, 표준화된 쿼리 세트에 대해 반환된 각 결과의 관련성을 분석하기 위해 다중 모드 LLM을 사용합니다. Marqo는 고급 의미론적 검색을 사용하여 관련성을 개선하고 비즈니스 결과를 최적화하는 데 도움을 줍니다. 또한, 최첨단 임베딩, 미세 조정 및 다중 모드 기능을 통해 생성 AI 애플리케이션의 성능을 향상시킵니다. Marqo는 고객의 검색, 탐색 및 기타 활동과 특성을 기반으로 최고의 제품을 추천하여 더 많은 구매를 유도합니다. 또한, 텍스트나 이미지와 유사한 엔티티를 찾아 제품 카탈로그, 소셜 피드 등을 정리하고, 이미지 기반 의미론적 검색을 통해 NSFW 콘텐츠를 제거할 수 있습니다. Marqo는 Vespa, OpenSearch 및 Pinecone과 같은 다른 플랫폼과 비교했을 때 기능적으로 가장 진보된 것으로 평가받고 있습니다. Marqo는 훈련, 추론, 저장에 이르기까지 모든 것을 제공하며, 사용자가 직접 벡터를 계산할 필요 없이 원하는 모델을 선택하고 텍스트 및/또는 이미지 URL을 API에 직접 전달할 수 있도록 합니다. Marqo는 CLIP과 같은 다중 모드 모델을 구성하여 이미지 및 기타 데이터 유형에서 의미론적 의미를 추출할 수 있도록 도와줍니다. 또한, 100개 이상의 언어로 검색할 수 있으며, 최첨단 다국어 모델에 액세스할 수 있습니다. Marqo는 랩톱의 도커 이미지에서 실행하거나 클라우드의 수십 개의 GPU 추론 노드로 확장할 수 있습니다. Marqo는 다중 테라바이트 인덱스에 대한 낮은 지연 시간 검색을 제공하도록 확장할 수 있습니다.