Google의 AI DolphinGemma는 돌고래 소리를 해독하고 생성하는 데 훈련된 모델로, Pixel 스마트폰에서 실행 가능하며, 올여름 오픈소스가 될 예정입니다. Wild Dolphin Project와 협력하여 개발된 이 모델은 돌고래의 발성을 입력받아 예측합니다. 연구자들은 DolphinGemma를 통해 실시간 소리 패턴을 연구하고, 양방향 돌고래 소통 시스템도 개발 중입니다.
(이미지 출처: Google)
- Google과 Wild Dolphin Project는 돌고래 발성을 이해하도록 훈련된 AI 모델을 개발했습니다
- DolphinGemma는 Pixel 스마트폰에서 직접 실행 가능
- 올여름 오픈소스가 될 예정
인류 역사 대부분 동안, 우리와 돌고래의 관계는 일방적 대화였습니다: 우리는 말하고, 그들은 소리를 내며, 우리는 서로 이해하는 것처럼 고개를 끄덕인 후 그들에게 물고기를 던져 주었습니다. 하지만 이제 Google은 AI를 활용하여 그 간격을 해소할 계획입니다. Georgia Tech 및 Wild Dolphin Project (WDP)와 협력하여 Google은 새로운 AI 모델인 DolphinGemma를 개발했습니다. 이 모델은 돌고래의 소리를 이해하고 심지어 생성하도록 훈련되었습니다.
WDP는 1985년부터 특정 그룹의 야생 대서양 점박이 돌고래에 관한 데이터를 수집해 왔습니다. 바하마에 기반을 둔 이 돌고래 무리는 연구자들이 매일 관찰하면서 소리, 영상 및 행동 노트를 대량으로 제공하여 그들의 모든 소리와 버즈를 기록하고 그 의미를 해석하려고 노력했습니다. 이제 이러한 방대한 오디오 자료가 Google’s 오픈 Gemma 가족 모델에 기반한 DolphinGemma에 투입되고 있습니다. DolphinGemma는 돌고래 소리를 입력으로 받아들여 SoundStream과 같은 오디오 토크나이저를 사용하여 처리하고 다음에 나올 발성을 예측합니다. 마치 돌고래를 위한 자동완성 기능이라고 할 수 있습니다.
이 모델은 매우 가볍고 Google Pixel에서 실행할 수 있습니다. WDP는 이 모델을 올여름에 필드에 배치하여 방수 장비에 Pixel 9를 사용하고 있습니다. 이 모델들은 실시간으로 듣고, 발성 패턴을 식별하며 의미 있는 시퀀스를 연구자들이 실시간으로 표시할 수 있도록 돕고 있습니다.
You may like

Watch On
플리퍼의 헝
하지만 궁극적인 목표는 단순히 듣는 것에 그치지 않습니다. WDP와 Georgia Tech는 CHAT(고래류 청각 증강 텔레메트리)이라는 시스템도 개발 중이며, 이는 인간과 돌고래 간의 양방향 통신 시스템입니다. CHAT는 연구자들이 돌고래들이 좋아하는 해초나 부유하는 스카프와 같은 물체에 합성 휘파람 소리를 할당하고 그들이 이 소리를 모방하여 요청하는지 기다릴 수 있게 해줍니다. 마치 카드 대신 수중 마이크를 사용하는 공유 언어를 발명하는 것과 같습니다.
DolphinGemma는 단순히 사후에 돌고래 소리를 분석하는 것이 아니라 어떤 소리가 올지 예측함으로써 더 빠른 반응 시간과 더 원활한 상호작용을 가능케 합니다. 본질적으로 이는 돌고래를 위한 예측 키보드와 같습니다. 전체 프로젝트는 아직 초기 단계에 있지만 Google은 올해 말 DolphinGemma를 오픈소스로 공개해서 진전을 가속화하려고 합니다.
초기 모델은 대서양 점박이 돌고래의 발성으로 훈련되었지만, 이론적으로 약간의 조정만으로 다른 종에도 적용될 수 있습니다. 아이디어는 다른 연구자들에게 AI의 키를 제공하여 그들이 자신의 음향 데이터셋에 적용할 수 있게 하는 것입니다. 물론, 이것이 철학이나 좋아하는 간식에 대해 돌고래와 대화할 수 있는 상태까지는 아직 먼 길입니다. 돌고래의 발성이 인간과 같은 언어로 깔끔하게 매핑된다는 보장은 없습니다. 그러나 DolphinGemma는 의미 있는 패턴을 찾기 위해 수년간의 오디오를 거르는 데 도움이 될 것입니다.
돌고래는 인간이 AI를 사용해 소통할 수 있는 유일한 동물이 아닐지도 모릅니다. 다른 과학자 그룹은 돼지의 울음소리를 바탕으로 그들의 감정을 해독하는 AI 알고리즘을 개발하여 농부들이 돼지의 정서적, 신체적 건강을 이해하는 데 도움을 주고 있습니다. 하지만 돌고래는 분명히 더 매력적입니다. 언젠가 당신이 배를 타고 있을 때, 돌고래에게 길을 물어볼 수 있을지도 모릅니다, 적어도 당신이 물에 휴대전화를 떨어뜨리지 않는다면 말이죠.
당신이 좋아할 만한 것들
※출처: TechRadar