AI 이미지 대체텍스트 — 사진에 '보이지 않는 설명'을 다는 기술

웹에서 이미지에 대체텍스트(alt text)가 없으면, 시각 장애인은 스크린리더를 통해 "이미지"라는 단어만 듣게 된다. 이미지가 무엇을 담고 있는지 전혀 알 수 없다. Facebook/Instagram은 AI를 사용해 사용자가 업로드한 사진에 자동으로 대체텍스트를 생성한다. "3명의 사람이 웃고 있는 셀카", "음식이 담긴 접시", "산과 호수가 있는 풍경" 등 AI가 이미지 내용을 분석해 텍스트 설명을 생성하고, 스크린리더가 이를 읽어준다. 이 기능 도입 전, 소셜미디어의 이미지 수십억 장 중 대부분은 시각 장애인에게 접근 불가능했다.

2023년 3월, 어도비가 파이어플라이(Firefly)를 발표했다. 이 AI 이미지 생성 도구의 핵심 차별점은 학습 데이터다. 다른 AI 이미지 생성 도구들이 인터넷에서 수집한 데이터(저작권 논쟁 중)로 학습한 것과 달리, 파이어플라이는 Adobe Stock의 라이선스된 이미지, 공개 도메인 콘텐츠, 저작권이 만료된 콘텐츠만으로 학습됐다. 어도비는 파이어플라이로 생성된 이미지로 인한 저작권 분쟁에 대해 법적 배상을 보장하는 지적재산권 면책(IP indemnity)까지 제공한다. 이로써 디자이너와 기업은 AI 생성 이미지를 상업적으로 안심하고 사용할 수 있게 됐다.

2021년, 피터 잭슨 감독은 다큐멘터리 'The Beatles: Get Back' 제작을 위해 MAL이라는 AI 소프트웨어를 사용했다. 1969년에 녹음된 비틀즈의 원본 테이프는 여러 악기와 대화 소리가 하나로 뒤섞인 상태였다. AI는 이 혼합 음원에서 존 레논의 목소리, 폴 매카트니의 베이스, 조지 해리슨의 기타, 링고 스타의 드럼을 각각 분리해 냈다. 이전에는 기술적으로 불가능했던 작업이다. 분리된 음원은 현대 기준의 고음질로 리마스터링됐고, 이를 통해 52년 전의 녹음 세션이 마치 어제 일어난 것처럼 생생하게 되살아났다. 이후 같은 기술로 비틀즈의 마지막 신곡 'Now and Then'이 완성·발매됐다.

AI 영상 복원 기술은 크게 세 가지 축으로 작동한다. 첫째, 초해상도(Super Resolution): 저해상도 영상의 픽셀을 AI가 추론해 채워 고해상도로 변환한다. 둘째, 프레임 보간(Frame Interpolation): 초당 16프레임이었던 옛 영상을 AI가 중간 프레임을 생성해 60프레임으로 부드럽게 만든다. 셋째, 컬러화: 흑백 영상에 AI가 시대와 맥락에 맞는 색상을 입힌다. Peter Jackson 감독이 비틀즈 다큐멘터리(C-12)에서 AI 기반 음원 분리를 사용한 것처럼, 영상 분야에서도 1차 세계대전 기록 영상, 역사적 뉴스릴, 가족 홈비디오 등이 AI로 복원되고 있다. YouTube에서 "AI 복원 영상"은 수천만 회 조회를 기록하며, 과거를 현재의 눈으로 보는 새로운 경험을 제공한다.

기존 게임의 NPC는 미리 작성된 대사(대본)만 말할 수 있었다. 플레이어가 무엇을 물어보든, NPC의 응답은 제한된 선택지 안에 있었다. Inworld AI 등의 기업은 LLM을 NPC에 통합해, 플레이어와 자유롭게 대화하는 캐릭터를 구현했다. NPC에게 "중세 대장장이, 성격은 무뚝뚝하지만 속은 따뜻하다"와 같은 설정을 부여하면, AI가 이 설정에 맞게 대화를 실시간으로 생성한다. 플레이어가 예상치 못한 질문을 해도, NPC는 캐릭터에 맞는 답변을 즉석에서 만들어낸다. 이는 게임의 몰입감과 재플레이 가치를 극적으로 높인다.

2016년 설립된 AIVA는 프랑스의 저작권 협회 SACEM에 '작곡가'로 정식 등록된 최초의 AI다. 30,000곡 이상의 클래식 음악 악보를 학습한 뒤, 사용자가 "영화 트레일러용 웅장한 오케스트라 곡"이나 "로파이 카페 분위기 피아노 곡" 같은 스타일을 지정하면, 완전한 악보를 생성한다. 생성된 곡은 영화, 광고, 게임, YouTube 콘텐츠의 배경음악으로 사용되고 있다. 무료 버전은 비상업적 사용, 유료 구독은 상업적 사용과 저작권 소유가 가능하다.

Runway는 텍스트 프롬프트로 영상 클립을 생성하고(Gen-2, Gen-3), 기존 영상의 배경 제거, 객체 추적, 스타일 변환 등을 AI로 자동화하는 도구다. 2023년 TV 기술 혁신 부문 에미상을 수상했으며, 영화 'Everything Everywhere All at Once'의 VFX 작업에도 사용됐다. Runway는 할리우드 스튜디오부터 1인 유튜버까지 넓은 사용자층을 보유하고 있다. 기존에 전문 VFX 팀이 수 주 걸리던 작업을 몇 분으로 단축하는 도구로 자리잡았다.