Meta는 메타버스 산업에 또 다른 AI 개념을 도입했습니다. AI 교육자이자 개발자인 Allen T.의 최근 트윗에 따르면 회사는 Audio2Photoreal이라는 새로운 프레임워크를 출시했습니다.

Audio2Photoreal 작가의 목소리에 따라 자연스럽게 제스처를 기반으로 하는 사실적인 전신 아바타를 생성하기 위한 프레임워크입니다. 이러한 아바타는 인간의 몸짓 동작에 통합된 음성 오디오를 통해 생생하게 살아납니다.

개인의 원시 오디오 음성을 바탕으로 해당하는 사실적인 제스처를 생성하는 모델이 생성됩니다. 시스템은 아바타의 표현 코드와 신체 포즈를 나타내는 두 가지 생성 모델로 구성됩니다.

Allen T가 업로드한 클립에 따르면 입, 손, 얼굴 등 개인의 다양한 부분이 이 추가의 영향을 받습니다.

Meta는 Audio2Photoreal을 소개합니다.

작가의 목소리에 따라 자연스럽게 몸짓을 표현하는 사실적인 전신 아바타 생성

메타버스는 재미있을 것입니다.

아래 6가지 재미있는 예와 데모: pic.twitter.com/EeImouEakC

— 앨런 T(@Mr_AllenT) 2024 년 1 월 4 일

공개된 데모 중 일부는 생성된 여러 샘플, 두 개의 개인 대화, 생성된 여성 아바타 샘플 및 확산 모델을 구동하는 가이드 포즈입니다. Allen T.는 이번 개발로 메타버스가 재미있을 것이라고 덧붙였습니다. 다른 곳에서는 기술 커뮤니티가 게시물에 대한 댓글에 흥분한 것 같습니다. 사용자 @EverettWorld 트위트 된, “메타버스가 이렇다면 나도 합격이다!”

그러나 또 다른 사용자는 더 이상 Meta를 별로 신뢰하지 않는다고 선동했습니다. @AIandDesign에 따르면, 메타는 인간에게 해롭다 Cambridge Analytica 전체를 따르는 것입니다. 사용자는 다음과 같이 덧붙입니다.

“정말 멋지네요. 메타가 아니길 바랄 뿐입니다. 나는 더 이상 그들을 별로 신뢰하지 않습니다. Cambridge Analytica의 모든 일을 마치고 나면 Meta는 완전히 끝났습니다. 그들은 인류에게 해롭다. 문자 그대로. 저는 FB에 있지만 가족용으로만 사용하고 있습니다.”

Audio2Photoreal 개념 뒤에 숨은 기술

ArXiv과학자들이 동료 검토를 받기 전에 연구를 공유할 수 있도록 개방된 엄선된 연구 공유 플랫폼인 는 다음에 대한 더 많은 통찰력을 제공했습니다. Audio2Photoreal.

아바타의 신체 동작은 각각 오디오 또는 텍스트를 조건으로 한 확산 모델을 사용하여 합성됩니다. 얼굴 동작의 경우 오디오 입력을 통해 오디오 조절 확산 모델을 구성했습니다.

그러나 몸과 얼굴은 매우 다른 역학을 따릅니다. 여기서 얼굴은 입력 오디오와 강한 상관관계가 있는 반면 신체는 음성과 약한 상관관계를 갖습니다.

메타버스에서 Audio2Photoreal의 중요성 

Metaverse에 대한 Meta의 참여는 생태계를 보다 현실적으로 만드는 것을 목표로 합니다. 이러한 Audio2Photoreal 아바타는 오디오를 사용하여 개인의 얼굴 표정과 몸짓을 반영할 수 있습니다.

이는 개인이 대면 대화를 할 때와 유사한 연결을 생성합니다. 그 사람은 키, 피부와 머리 색깔, 체형, 기타 정확한 특성과 같은 독특한 신체적 특성을 갖게 됩니다. 에서 근무 메타버스 생태계 웹캠, 비디오 또는 고품질 스마트폰 카메라가 필요하지 않으므로 더욱 유연해집니다.

페이스북, X, 인스타그램, 소셜미디어법 중단을 위해 오하이오주 소송

또 다른 최근 개발에서는 Facebook, Instagram, X와 같은 소셜 미디어 플랫폼을 대표하는 회사인 NetChoice가 소송 5월 XNUMX일 오하이오의 새로운 소셜 미디어법에 반대합니다.

회사는 34월 15일부터 발효될 오하이오주의 소셜 미디어 부모 통지법을 막기 위해 XNUMX페이지 분량의 소송을 발표했습니다. 이 법은 해당 날짜 이후에 생성된 계정에만 적용됩니다.

소셜미디어법은 플랫폼이 16세 이하 사용자에 대해 부모의 동의를 받아야 한다고 주장합니다. 그러나 소송에서는 이 법이 “일부 미성년자가 해당 웹사이트에서 발언에 참여할 수 있는 능력에 심각한 장애를 가할 것”이라고 명시하고 있습니다.

• SEO 기반 콘텐츠 및 PR 배포. 오늘 증폭하십시오.
• PlatoData.Network 수직 생성 Ai. 자신에게 권한을 부여하십시오. 여기에서 액세스하십시오.
• PlatoAiStream. 웹3 인텔리전스. 지식 증폭. 여기에서 액세스하십시오.
• 플라톤ESG. 탄소, 클린테크, 에너지, 환경, 태양광, 폐기물 관리. 여기에서 액세스하십시오.
• PlatoHealth. 생명 공학 및 임상 시험 인텔리전스. 여기에서 액세스하십시오.
• 출처: https://metanews.com/meta-introduces-audio2photoreal-to-facilitate-metaverse-interactions/