Perplexity의 AI 검색 엔진: 정확성과 신뢰성을 통한 기술적 우위 분석

1. 요약

• 이 리포트는 Perplexity의 AI 검색 엔진이 왜 빠르고 정확한 답변을 제공하는지에 대해 분석합니다. Perplexity의 기술적 기반으로는 대규모 언어 모델(LLM)과 구조화된 검색 엔진, 자연어 처리 기술이 포함되며, 이들을 통해 신뢰할 수 있는 검색 결과를 제공합니다. SK텔레콤과의 협력을 통해 Perplexity는 한국어 검색 성능을 향상시키고 있으며, 글로벌 AI 스타트업 시장에서의 위치도 강화하고 있습니다. Perplexity의 AI 검색 엔진은 정확한 출처 정보를 제공하고 환각 현상을 방지하며, 다양한 검색 결과를 제공합니다. 또한, Mixtral, Llama 3 등 다른 주요 LLM 모듈과의 비교를 통해 Perplexity의 기술적 우위를 확인할 수 있습니다.

2. Perplexity의 기술적 기반

• 2-1. 대규모 언어 모델 (LLM)

• Perplexity는 거대 언어 모델(LLM)을 기반으로 한 대화형 AI 검색 서비스를 제공하는 미국의 스타트업입니다. 이 회사는 구글의 대항마로 주목받으며 엔비디아와 아마존도 투자한 유니콘 기업입니다. 전 세계적으로 월 2.3억 개의 검색 요청을 처리했으며, 2024년 5월 월스트리트 저널에서 발표한 챗봇 사용성 평가에서 1위를 차지한 바 있습니다.

• 2-2. 구조화된 검색 엔진

• Perplexity의 생성형 AI 검색엔진은 지연 시간이 짧고 사용자에게 정확한 출처의 정보를 제공하는 것이 특징입니다. 키워드 검색과 달리 사람과 소통하듯이 검색이 가능하며, 답변에 관련된 인용문, 이미지, 그래프 등 다양한 검색 결과가 제공됩니다. 이는 사용자에게 필요한 모든 정보를 요약하여 제공함으로써 검색 효율성을 높입니다.

• 2-3. 자연어 처리 기술

• Perplexity는 자연어 처리(NLP) 기술을 활용하여 사용자와 상호 작용을 최적화합니다. 이는 뉴스 기사, 유튜브 동영상, 블로그 게시글 등 다양한 출처의 정보를 제공하며, 환각 현상(잘못된 정보를 제공하는 문제)을 방지합니다. 또한 속성 정보와 함께 연관 정보도 제공하여 더 깊이 있는 탐색을 도와줍니다.

3. Perplexity와 SK텔레콤의 협력

• 3-1. 협력의 목적

• SK텔레콤은 생성형 AI 검색엔진 기술을 확보하고 AI 개인비서 서비스의 성능을 강화하기 위해 미국 스타트업 Perplexity와 협력하고 있습니다. Perplexity는 대규모 언어 모델을 기반으로 한 대화형 AI 검색 서비스를 제공하며, SK텔레콤의 글로벌 AI 플랫폼 코퍼레이션(GAP Co)과 함께 AI 검색 서비스를 공동 개발할 예정입니다. 이 협력을 통해 SK텔레콤은 구글의 대항마로 떠오르는 Perplexity에 1000만 달러를 투자하고, Perplexity는 SK텔레콤의 글로벌 AI 서비스 개발 주체인 GAP Co에 투자하기로 합의했습니다.

• 3-2. 투자와 기술 협력

• SK텔레콤은 Perplexity에 1000만 달러(약 137억 원)를 투자하고, 상호 투자를 통한 AI 사업 협력을 강화하고 있습니다. 이는 Perplexity가 SK텔레콤의 글로벌 AI 플랫폼 코퍼레이션에 투자하기로 합의한 것과도 일치합니다. Perplexity는 전 세계적으로 월 2억 3천만 개가 넘는 검색 요청을 처리하며, 미국에서 생성형 AI 검색 업계의 대표 주자로 자리매김하고 있습니다. 이번 협력으로 Perplexity의 생성형 AI 검색엔진 기술을 통해 SK텔레콤의 에이닷 및 기타 AI 개인비서 서비스의 성능을 크게 향상시킬 수 있을 것으로 기대됩니다.

• 3-3. 한국어 검색 성능 향상

• Perplexity와 SK텔레콤은 한국어 검색 성능 개선을 위해 대규모 언어 모델(LLM)의 파인튜닝 및 검색 솔루션 고도화를 공동으로 진행하기로 합의했습니다. SK텔레콤은 한국어 데이터와 문화 콘텐츠 정보를 Perplexity에 제공하며, 이를 바탕으로 한국어 검색 성능을 향상시키고자 합니다. 이를 통해 Perplexity의 생성형 AI 검색엔진은 대화형 질문과 검색 결과 요약, 연관 검색어 제안, 번역 및 요약 등 광범위한 기능을 수행할 수 있을 것으로 기대됩니다.

4. AI 검색 엔진의 정확도

• 4-1. 정확한 출처 정보 제공

• Perplexity의 AI 검색 엔진은 사용자가 질문한 내용을 정확히 분석하고 이에 적합한 검색 결과를 빠르고 명확하게 제시합니다. 드미트리 셰벨렌코 CBO는 매일경제와의 인터뷰에서 AI가 복잡하고 장황한 질문에도 1~3초 내로 주요 정보 출처와 함께 답변을 제시한다고 언급했습니다. 이는 Perplexity의 AI가 신뢰할 수 있는 정보를 걸러내는 기술력을 보유하고 있기 때문입니다. 또한, 검색 결과에 대한 신뢰성을 높이기 위해, AI가 생성한 답변의 근거가 되는 정보 출처도 함께 제시하는 방식으로 사용자가 필요한 정보를 빠르게 얻을 수 있도록 돕고 있습니다.

• 4-2. 환각(hallucination) 현상 방지

• Perplexity의 AI 검색 엔진은 AI의 환각 현상을 줄이기 위한 다양한 기술적 접근을 시도하고 있습니다. 환각 현상은 AI가 생성한 정보가 실제로 존재하지 않거나 잘못된 사실을 포함하는 경우를 의미합니다. 셰벨렌코 CBO는 Perplexity가 이러한 환각 현상을 방지하기 위해 '검색 증강 생성'(RAG)이라는 AI 검색 솔루션을 활용한다고 밝혔습니다. 이를 통해 LLM(대규모 언어 모델)이 정확한 정보를 제공할 수 있도록 도와 환각 현상을 최소화하고 있습니다.

• 4-3. 다양한 검색 결과 제공

• Perplexity의 AI 검색 엔진은 사용자가 놓칠 수 있는 다양한 조건들을 제시하여 보다 양질의 정보를 제공합니다. 특정 정보에 대한 검색 결과를 제시한 후, 사용자에게 추가로 설정할 수 있는 조건들을 제공함으로써 사용자 맞춤형 검색 결과를 얻을 수 있게 합니다. 또한, 다양한 출처의 정보를 통합하여 제공함으로써 사용자에게 다각도로 검토할 수 있는 기회를 제공합니다. 이는 사용자가 특정 정보에 대해 포괄적으로 이해하고 적절한 결정을 내릴 수 있도록 돕습니다.

5. LLM의 다양한 모듈과 비교

• 5-1. Mistral AI의 Mixtral

• Mistral AI는 Mixtral이라는 독특한 언어 모델을 개발하였습니다. Mixtral은 높은 수준의 언어 이해 능력을 자랑하며, 다양한 데이터 소스를 이용하여 정확한 정보를 제공합니다. 이 모델은 특히 복잡한 문맥 속에서도 일관된 응답을 생성하는 데 강점을 갖고 있습니다.

• 5-2. Llama 3

• Llama 3는 최신 버전의 고급 언어 모델로, 다양한 언어와 문화를 정확히 이해할 수 있는 능력을 가지고 있습니다. Llama 3는 이전 버전들에 비해 더욱 향상된 텍스트 생성 및 분석 기능을 제공하며, 사용자의 요구에 맞춘 맞춤형 답변을 생성할 수 있습니다.

• 5-3. 다중 모달 LLM

• 다중 모달 LLM은 텍스트, 이미지, 오디오 등 여러 형태의 데이터를 동시에 처리할 수 있는 능력을 갖추고 있습니다. 이러한 다중 모달 접근 방식은 데이터 간의 상호작용을 통해 보다 풍부하고 정확한 결과를 도출하는 데 도움을 줍니다. 예를 들어, 다중 모달 LLM은 이미지와 텍스트를 결합하여 더욱 정확하고 맥락에 맞는 답변을 제공합니다.

6. 글로벌 AI 스타트업 시장에서 Perplexity의 위치

• 6-1. AI 스타트업의 역할

• Perplexity는 생성형 AI 기반 검색 엔진 기술을 개발하는 스타트업으로, 현재 구글의 대항마로 불리고 있습니다. 이는 사용자의 질문에 대해 간결하고 직접적인 답변을 제공하는 능력 덕분입니다. Perplexity는 오픈AI 출신의 아라빈드 스리니바스 CEO와 4명의 AI 엔지니어들이 2022년 8월에 설립한 스타트업입니다. 설립 1년 반 만에 유니콘 기업으로 성장하며 기업 가치는 약 1조 3905억 원으로 평가되고 있습니다.

• 6-2. 글로벌 협력과 투자

• Perplexity는 SK텔레콤과 파트너십을 맺고 한국 시장에 진출했습니다. SK텔레콤은 Perplexity에 1000만 달러(약 139억 원)를 투자했으며, 이를 통해 '에이닷' 같은 AI 개인 비서 서비스에 Perplexity의 검색 엔진을 탑재했습니다. 또한 제프 베이조스 아마존 창업자 등으로부터 투자를 유치하였으며, 현재 기업 가치는 약 3조 4762억 원에서 4조 1715억 원 규모로 평가되고 있습니다.

• 6-3. 미래 성장 가능성

• Perplexity는 전세계적으로 월 2억 3000개 이상의 검색 요청을 처리하고 있으며, 올해 월스트리트 저널에서 발표한 챗봇 사용성 평가에서 종합 1위를 차지했습니다. Perplexity는 연간 매출 1000만 달러(약 139억 원) 미만이지만, 향후 성장 잠재력이 큰 것으로 평가됩니다.

7. 결론

• Perplexity의 AI 검색 엔진은 LLM을 기반으로 사용자에게 신뢰할 수 있는 빠르고 정확한 검색 결과를 제공합니다. Perplexity와 SK텔레콤의 협력은 한국어 검색 기능을 강화하여 현지화된 서비스를 가능하게 하였습니다. Mixtral, Llama 3 같은 다양한 LLM 모듈과의 비교 분석에서도 Perplexity의 기술적 우위가 드러났습니다. 리포트는 Perplexity가 글로벌 AI 스타트업 시장에서 독보적인 위치를 차지하고 있으며, 향후 성장 가능성이 크다는 점을 강조합니다. 그러나 여전히 일부 환각 현상을 완전히 제거하지 못한 한계가 있으며, 이러한 문제를 해결하기 위한 추가 연구와 개선이 필요합니다. Perplexity의 기술은 다양한 산업에서 실질적으로 적용 가능하며, 미래에는 더욱 발전된 AI 검색 서비스를 제공할 수 있을 것으로 예상됩니다.

8. 용어집

• 8-1. Perplexity [회사]

• Perplexity는 대규모 언어 모델을 바탕으로 빠르고 정확한 AI 검색 엔진을 개발한 미국의 스타트업입니다. SK텔레콤과 협력하여 한국어 검색 성능 향상 및 글로벌 AI 서비스 시장에서의 경쟁력을 강화하고 있습니다.

• 8-2. SK텔레콤 [회사]

• SK텔레콤은 한국의 주요 통신사로, Perplexity와의 협력을 통해 AI 검색 엔진 서비스를 고도화하고 있습니다. 이를 통해 한국어 검색 성능을 향상시키고, 글로벌 AI 시장에서의 경쟁력을 강화하고 있습니다.

• 8-3. LLM (대규모 언어 모델) [기술]

• LLM은 대규모 데이터를 학습하여 텍스트를 이해하고 생성하는 데 뛰어난 능력을 갖춘 언어 모델입니다. Perplexity는 LLM을 활용하여 높은 정확도를 유지하면서 사용자 질문에 대응합니다.

• 8-4. Mistral AI [회사]

• Mistral AI는 Mixtral이라는 모듈을 통해 효율성을 높이고 있습니다. 다양한 뉴럴 네트워크를 효율적으로 구성하여 AI 검색 엔진의 성능을 극대화하고 있습니다.

• 8-5. Llama 3 [기술]

• Llama 3는 70억 개의 파라미터를 가지고 있으며, MMLU 벤치마크 테스트에서 높은 정확도를 달성한 대규모 언어 모델입니다. Perplexity와 비교할 때 유사한 성능을 가지고 있는 모델입니다.

9. 출처 문서

• SKT, ‘대화형 검색엔진’으로 AI 서비스 고도화https://www.the-tech.co.kr/news/article.html?no=38660
• SKT, 美 퍼플렉시티에 137억 투자https://www.hankyung.com/article/2024061349591
• SKT, ‘에이닷’에 美 퍼플렉시티 ‘대화형 검색엔진’ 탑재http://www.enewstoday.co.kr/news/articleView.html?idxno=2139500
• AI 스타트업들의 반란…구글 잡는 '퍼플렉시티'·엔비디아 투자받은 '트웰브랩스'https://v.daum.net/v/20240622143009853
• SKT, '구글 대항마' AI 검색 스타트업 퍼플렉시티에 1000만 달러 투자 : ZUM 뉴스https://news.zum.com/articles/91238175
• Weekly news on LLM - 6월 셋째주https://brunch.co.kr/@@gC6r/21
• 드미트리 셰벨렌코 美퍼블렉시티 CBO 인터뷰...“AI로 대화형 검색 시대 열릴 것” - 매일경제https://www.mk.co.kr/news/it/11046017