>  기사  >  기술 주변기기  >  메타 스마트 안경은 멀티모달 Llama 3를 사용합니다! 국산 AR글래스의 기회가 온다

메타 스마트 안경은 멀티모달 Llama 3를 사용합니다! 국산 AR글래스의 기회가 온다

王林
王林앞으로
2024-04-24 14:50:14518검색

SF 블록버스터에 등장했던 AR 블랙 기술이 실제로 현실로 다가왔습니다!

지금, Meta의 자체 Ray-Ban 스마트 안경이 Llama 3의 다중 모드 버전을 지원하기 시작했습니다! 아시다시피 Llama 3의 오픈 소스 버전은 아직 다중 모드를 지원하지 않습니다.

최근 Xiao Zha도 토론에서 오픈 소스 모델의 가치가 100억 달러에 달한다고 인정했습니다. 하지만 제품 측면으로 가면 얘기가 달라진다.

야, 여기 제품 있지 않아?

여행 중, 차를 타고 심심할 때 메타에게 음악을 틀어달라고 요청할 수 있는 스마트 안경입니다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

AR 안경을 착용하면 모르는 언어도 직접 번역할 수 있습니다. 또는 이동 중에 시간이 없을 때 Meta는 친구에게 음성 메시지를 보낼 수 있습니다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

건물로 가서 Meta에 전화하여 자세한 정보를 알아보세요.

영상통화, 생방송, 과학 대중화 등 생각만 하면 AR 안경이 가능합니다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

Meta는 작년 12월 Ray-Ban Meta 스마트 안경에서 멀티모달 AI 테스트를 시작했다고 소개했습니다. 현재 이 새로운 기능은 미국과 캐나다에서 판매되는 안경에 출시되었습니다.

Zha도 자신의 실력을 뽐내기 위해 여기에 왔습니다

이 안경에는 1200만 화소 카메라와 5개의 마이크가 장착되어 있습니다. Meta AI 도우미가 통합되어 있어 더 많은 일을 할 수 있습니다.

당신이 보는 모든 것을 설명할 수 있습니다.

"헤이 메타, 이거 봐, 이게 뭔지 알려줘"라고 말하면 음성 명령으로 제어할 수 있습니다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

메타는 주방 조리대에 쌓인 재료 더미를 보면서 관련 레시피를 빠르게 만들 수 있습니다.

더 흥미로운 점은 샤오자가 인스타그램에 스마트 안경을 착용하고 스스로 옷을 선택하는 영상도 올렸다는 점이다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

그는 짙은색 셔츠를 골랐고 메타에게 어떤 바지를 입으면 좋을지 물었습니다. Meta는 청바지와 반바지에 대한 제안을 제공합니다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

귀여운 애완동물 사진에 재미있는 설명을 추가해 달라고 스마트 안경에도 요청했습니다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

샤오자가 손에 일종의 과일을 들고 있는데, 스마트 안경을 통해 그것이 빵나무임을 알 수 있습니다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

그리고 AR 안경의 경우 실시간 번역이 킬러 앱이 될 것입니다.

여행을 가면서 프랑스 메뉴를 읽으려고 할 때. 스마트 안경은 휴대폰으로 상담할 필요 없이 실시간 번역을 완료할 수 있습니다.

다른 언어의 제스처도 읽을 수 있어 여행에 필수품입니다.

또한 Meta는 다중 모드 Llama 3의 지원 외에도 스마트 안경이 WhatsApp 및 Messenger와 핸즈프리 화상 통화를 통합한다고 발표했습니다.

동시에 처방 안경과 함께 다양하고 패셔너블한 프레임 디자인을 사용할 수 있습니다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

그러나 이 스마트 안경은 300달러(2100위안)부터 시작하는데, 결코 저렴하지는 않습니다.

정확한 테스트를 거쳐 휴대폰 외부의 물체 식별이 더 편리합니다

업데이트의 열기에 힘입어 외신 더버지는 사전에 내부 테스트 자격을 갖춘 사람의 리뷰를 게재했습니다.

얼마 전 휴메인 스마트 디바이스 AI 핀이 만족스럽지 못한 성능으로 혹평을 받은 적이 있습니다. 요점은 700달러면 전혀 가치가 없다는 것입니다.

저자는 "메타 스마트 안경은 만능이 아니기 때문에 너무 큰 기대를 해서는 안 된다"고 말했습니다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

테스트의 재미 중 절반은 한계가 어디인지 알아내는 것입니다.

거리에 있는 무작위 자동차를 정확하게 식별할 수 있나요? (Alfa Romeo Giulia Quadrifoglio 및 Alfa Romeo Tonale).

대부분의 AI와 마찬가지로 Meta AI는 때로는 매우 정확하고 때로는 환각적입니다.

줄리아를 정확하게 식별했습니다. 그러나 Tonale은 Giulia로도 식별됩니다.

그러나 흥미롭게도 두 자동차는 유사점이 거의 없으며 Giulia는 세단이고 Tonale은 크로스오버 SUV입니다.

작가는 자신이 심은 다육식물이 무엇인지도 알려달라고 요청했습니다. (그 중 일부는 다른 사람이 제공한 것이기 때문에 특정 품종을 완전히 알지는 못했습니다.)

메타는 "에케베리아, 알로에베라, 크라술라 품종"이라고 답했습니다.

그런데 실제로 저자는 AI 사진을 통해 식물을 식별할 수 있는 애플리케이션인 플랜타(Planta)를 사용해 검증한 결과, 그 어떤 식물도 에케베리아가 아니라는 사실을 발견했습니다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

가장 흥미진진한 점은 작가의 연인이 이웃집 뒷마당에서 우연히 큰 다람쥐를 보고 스마트 안경을 끼고 그것이 어떤 종이었는지 알아보는 것입니다.

작가님이 휴대폰으로 사진을 찍어서 다른 앱으로 시도해 봤습니다.

물론 메타가 잘못 식별했는데, 작성자가 사용한 APP에서는 마멋으로 식별하는데 성공했습니다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

그러나 스마트 안경을 이용해 휴대폰 속 사진을 확인하자 과연 '마멋'이라는 정답이 나왔다.

이 사례는 AR 안경에 '줌' 기능이 부족하여 오답이 발생했음을 보여줍니다.

다중 인식 기능에 더해, 휴대폰과 페어링했을 때 저자가 테스트해 본 결과 응답 속도도 매우 빨랐습니다. 동시에 스마트 안경은 사운드 기능을 통합하여 안경을 착용하는 수고를 없애고 상호작용을 더욱 자연스럽게 만들어줍니다.

Meta智能眼镜用上多模态Llama 3!国内AR眼镜机会来了

일반적으로 야외 활동 시 사물을 식별하는 데 메타 스마트 안경의 AI 비서가 큰 역할을 합니다.

과거 작성자는 외출 중에 흥미로운 것을 발견하면 휴대폰을 꺼내 사진을 찍어 식별해야 했습니다.

이제 식별하려는 콘텐츠를 여러 번 확대하지 않는다면 스마트 안경도 휴대폰의 기능을 매우 잘 확장할 수 있습니다.

위 내용은 메타 스마트 안경은 멀티모달 Llama 3를 사용합니다! 국산 AR글래스의 기회가 온다의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

성명:
이 기사는 51cto.com에서 복제됩니다. 침해가 있는 경우 admin@php.cn으로 문의하시기 바랍니다. 삭제