인터넷에서 노래의 내용을 자동으로 분석하는 바카라 규칙 듣기 시스템

정보 기술 연구 부서 [Nomaguchi ARI의 회장] (이하 "AIST"로 언급) 정보 기술 연구 부서 [ITO SATOSHI 회장] GOTO MASATAKA 수석 연구원 겸 미디어 상호 작용 연구 그룹, FUJIWARA HIROMASA, NAKANO MIMA의 YOSHII KAZUYOSHI, FUJIWARA HIROMASA 및 NAKANO MIMA의 Yoshii Kazuyoshi의 미디어 상호 작용 연구 그룹 이사바카라 규칙 이해 기술노래 개발가시성 기능코러스 기능을 사용하는 동안 더 활동적이고 풍부한 바카라 규칙을 즐길 수 있습니다활성 바카라 규칙 듣기 서비스"Songle"(http : //songlejp)는 2012 년 8 월 29 일에 공개되며 데모 실험이 시작됩니다

최근 몇 년 동안 디지털화 된 바카라 규칙 콘텐츠의 확산으로 인해 인터넷 및 기타 영역을 통해 많은 양의 바카라 규칙에 액세스 할 수있는 정량적 변화가 발생했지만 사람들이 바카라 규칙을 더 깊이 이해하고 즐길 수있는 질적 변화를 가져올 기술의 개발은 거의 없었습니다

AIST는 독특한 바카라 규칙 이해 기술을 기반으로 곡의 내용 (코러스, 비트, 멜로디, 코드)을 자동으로 분석하고 "바카라 규칙지도"를 표시하고 대표적이고 흥미로운 코러스로 자유롭게 점프하여 누구나 웹에서 서비스를 제공 할 수 있도록 코러스 기능을 표시하는 시각화 기능을 갖춘 바카라 규칙 청취 시스템을 개발했습니다 "바카라 규칙지도"사용을 통해 반복과 같은 다양한 관점을 알아 차리면 사용자는 바카라 규칙에 대한 이해를 심화시킬 수 있으며 코러스를 발표 할 수있는 기능을 통해 사용자는 바카라 규칙의 흥미로운 부분을 쉽게 찾아 볼 수 있습니다 또한 사용자가 자동 분석에서 자발적으로 오류를 수정할 수있는 인터페이스를 제공함으로써 사용자가 사용자 수정 협력과보다 정확한 "바카라 규칙지도"를 공유하고 표시 할 수있는 시스템을 도입했습니다

이 연구는 일본 과학 및 기술 기관 (JST)의 전략적 창조적 인 연구 프로모션 프로젝트 팀 유형 연구 프로젝트 (CREST)의 연구 주제 (연구원 Goto Masataka)의 일부로 수행되었습니다 이 결과는 AIST Open Lab에서 전시 될 예정이며, 2012 년 10 월 25 일부터 26 일까지 AIST Tsukuba Center에서 개최됩니다

Songle, AIST의 독특한 바카라 규칙 이해 기술을 활용하는 적극적인 바카라 규칙 감사 서비스

바카라 규칙 배포와 온라인 스토리지가 확산되면 인터넷의 수많은 노래를 언제 어디서나 볼 수 있습니다 그리고 노래 이름, 아티스트 이름 등서지 정보를 기반으로 한 바카라 규칙 정보 검색과거보기 기록 등을 기반으로 사용자 선호도 분석공동 작업 필터링을 기반으로 한 바카라 규칙 추천실용적으로 사용되었습니다 이로 인해 많은 양의 노래에 액세스 할 수있는 능력이 정량적으로 변화했지만 지금까지는 언제 어디서나 다양한 노래를 볼 수있는 능력을 즐기는 데 중점을 두었으며, 사람들이 노래를 더 깊이 이해하고 즐길 수있는 질적 변화를 가져올 기술의 개발은 거의 없었습니다

산업 및 문화의 중요한 동인 중 하나 인 바카라 규칙 정보 처리 분야는 국내 및 국제적으로 적극적으로 연구되고 있습니다 AIST는 또한 바카라 규칙을 자동으로 분석 할 수있는 바카라 규칙 이해 기술과 그것을 적용하는 바카라 규칙 인터페이스에 대한 광범위한 연구를 수행했습니다 지금까지, 우리는 전통적인 수동적 시청과 다른 능동적 인 바카라 규칙 듣기를 가능하게하는 바카라 규칙 인터페이스를 연구하고 있으며, 그것을 "활동적인 바카라 규칙 듣기 인터페이스"라고 불렀으며 바카라 규칙 이해 기술이 바카라 규칙을 더 깊고 더 깊게 만드는 방법에 대한 다양한 예를 공개했습니다 AIST의 연구 결과를 축적하면 "인터넷에서 바카라 규칙 내용을 자동으로 분석하는 바카라 규칙 청취 시스템"이라는 아이디어가 생겼습니다 이 아이디어를 기반으로 한 시스템베타로 연구원들에게 게시되었지만 시각화 기능, 코드 진행 검색 기능 및 외부 임베디드 플레이어 기능과 같은 다양한 기능이 완료되었으므로 시연 목적으로 대중에게 공개하기로 결정했습니다

이 연구는 JST (Japan Science and Technology Agency) 전략적 창조적 인 연구 촉진 프로젝트 (CREST)의 일환으로 수행되었습니다 "공생 학회를위한 조화로운 정보 기술 구축"연구 분야의 연구 주제 : "콘텐츠 공생 학회를위한 유사성을 보이게하는 정보 환경의 실현"(주요 연구원 Goto Masataka)

"Songle"은 사람들이 바카라 규칙 이해 기술의 힘으로 대중 바카라 규칙을 이해하고 즐길 수 있도록 개발 된 적극적인 바카라 규칙 감사 서비스입니다http : //songlejp)로 게시 송들에는 세 가지 기능이 있습니다

그림 1 바카라 규칙의 내용을 자동으로 분석하고 "바카라 규칙지도"로 시각화하는 세부 화면 표시의 예

"Music Map"의 수평 축은 시간을 나타내며 상단의 대규모 디스플레이는 바카라 규칙의 반복적 인 구조를 시각화하는 바카라 규칙 구조를 표시하고 코러스 섹션이 상단 행에 표시되고 다양한 길이의 반복 섹션을 표시하는 5 개의 레벨을 표시합니다 이것은 컬러 섹션이 비슷하다는 것을 나타냅니다 (반복) 하단의 로컬 디스플레이는 상단에서 선택한 섹션의 확대 된 디스플레이입니다 바닥에서 작은 삼각형은 각 비트의 위치 (쿼터 노트에 해당하는 비트)를 나타내고 큰 삼각형은 막대의 시작을 나타냅니다 비트 구조 위에는 멜로디의 노래 목소리의 피치피아노 롤형식으로 표시됩니다 또한 각 코드 이름은 텍스트로 표시됩니다 (예 : 코드 이름 EBM은 루트 톤이 EB이고 구성 톤이 M임을 나타내는 코드 유형을 의미합니다

그림 2 노래가 진행됨에 따라 분석 결과를 애니메이션하는 Visualizer 화면 표시의 예

디스플레이 컨텐츠는 4 개의 대표적인 바카라 규칙 요소 (노래 구조, 비트 구조, 멜로디, 코드)와 밀접하게 조정하여 동적으로 변경됩니다 네 가지 유형으로 전환 할 수 있습니다 그림의 왼쪽 상단에있는 기하학적 패턴은 서로 함께 널리 움직이고 피아노 롤 모양의 디스플레이, 왼쪽 하단의 반원형 모양으로 그리기 된 바카라 규칙적 요소, 전체의 눈에 눈에 띄는 디스크와 같은 디스크 디스플레이가 있습니다 자세한 화면은 바카라 규칙적 요소를 이해하기위한 인터페이스이지만 Visualizer Screen은 사용자가 바카라 규칙적 요소를 기반으로 동적으로 생성되는 디스플레이를 즐길 수있는 인터페이스입니다

그림 3 녹 제거 기능의 사용 예

코러스 릴리스 기능을 사용하면 노래 구조에 해당하는 4 가지 유형의 버튼을 사용하여 "첫 번째 코러스 섹션", "첫 번째 코러스 섹션", "첫 번째 코러스 섹션"및 "첫 번째 코러 섹션"및 "노래 구조에 해당하는 4 가지 유형의 버튼을 사용하여 재생 위치로 이동할 수 있습니다

그림 4 Songle의 외부 임베딩 플레이어의 예제 및 다른 웹 페이지에 포함

외부 웹 페이지에 작은 송글 플레이어 (다이어그램 상단)를 포함하여 Songle에 노래를 소개 할 수 있습니다 이 기능은 바카라 규칙 구조를 시각화하고 코러스를 출시하여 코러스를 쉽게들을 수 있습니다 또한 웹 페이지의 배경에 시각적 효과 (그림 맨 아래의 배경 모양)가 포함되도록 제공하는 선택적 기능을 포함시킬 때 바카라 규칙의 재생과 관련하여 변경 될 수 있습니다

그림 5 자동 분석에서 오류를 수정할 수있는 인터페이스 화면의 예

세부 사항 화면에서 아래 탭을 전환하면 4 가지 대표적인 바카라 규칙 요소의 자동 분석 결과를 수정할 수 있습니다 그림의 왼쪽 상단에있는 코러스 편집에서 코러스 섹션과 반복 섹션의 섹션 길이를 추가, 삭제, 이동 및 수정할 수 있습니다 오른쪽 상단의 비트 편집에서는 다른 클릭 소리가 비트와 바의 시작 부분에서 재생되며, 부정확 한 경우 후보자 중에서 선택하거나 직접 지정하여 수정할 수 있습니다 왼쪽 하단의 멜로디를 편집 할 때 멜로디 피치의 복합 음표가 재생되므로 잘못된 경우 피아노 롤에 반음선을 그려서 수정할 수 있습니다 오른쪽 하단의 코드를 편집하면 코드 합성 사운드가 재생되므로 올바르지 않으면 코드 이름을 클릭하여 표시 될 후보자 중에서 선택하거나 코드 이름을 직접 입력하여 수정할 수 있습니다 코드의 경계를 변경할 수도 있습니다 위에서 언급 한 바와 같이, 수정 중에 분석 결과의 비트, 멜로디 및 코드는 바카라 규칙과 함께 재생되어 가청으로 만들어집니다 이 가청 사운드 자체는 시각화와 함께 바카라 규칙에 대한 이해를 심화시키는 효과가 있습니다

1. 바카라 규칙 이해 기술을 사용하여 웹에서 바카라 규칙 내용을 자동으로 분석하고 "바카라 규칙지도"로 시각화합니다
   사용자가 송글과 함께 웹 사이트에 게시 된 대중 바카라 규칙 노래 (MP3 형식 오디오 신호 파일)를 등록하면 노래의 내용을 표시합니다
   (1) 노래 구조 (코러스 섹션 및 반복 섹션)
   (2) 비트 구조 (비트 및 측정 시작)
   (3) 멜로디 (노래 피치)
   (4) 코드 (루트 및 코드 유형)
   사용자가 Songle에 등록 된 노래를 선택하면 오리지널 웹 사이트에서 노래를 스트리밍하고 즐길 수 있으며 다양한 형식으로 자동 분석 결과를 시각화하는 화면을보십시오 시각화 화면에는 두 가지 유형의 시각화 화면이 있습니다 자세한 화면 (그림 1)은 사용자가 바카라 규칙적 요소를 쉽게 이해할 수있는 "바카라 규칙지도"와 바카라 규칙의 진행과 관련된 다양한 애니메이션을 표시하는 시각화 화면 (그림 2)을 표시합니다 이러한 시각화를 통해 전문 지식이없는 사용자는 각 바카라 규칙 요소의 존재, 요소 간의 관계 및 바카라 규칙 구성의 의도를 쉽게 알 수 있습니다 예를 들어, 코러스를 반복하고 소개 및 엔딩을 반복하는 등 노래의 전반적인 구조를 이해할 수 있습니다 (코러스로 시작하는 예외적으로 많은 코러스 또는 노래가있는 노래를 쉽게 알 수 있습니다) 멜로디가 동일한 조화 (코드 진행)에도 불구하고 멜로디가 어떻게 변하는 지 알 수 있습니다 이런 식으로, 분석 결과를 "찾고"하여 재생과 동기화하여 바카라 규칙에 대한 이해를 심화시킬 수 있습니다


2. 코드 릴리스 기능, 코드 진행 검색 기능 및 외부 임베디드 플레이어 기능으로 바카라 규칙 듣기
   자동 분석 결과를 사용하여 시각화보다 바카라 규칙을 더 활발하고 풍부하게하는 다음 기능을 달성했습니다
   (a) 노래의 가장 대표적이고 흥미 진진한 부분 인 코러스와 같은 코러스를 해제 할 수있는 기능이있어 노래에 대한 관심의 일부를 쉽게 찾고들을 수 있습니다 일반 재생 및 중지 버튼 외에도 "다음/이전 코러스 섹션 설립"및 "다음/이전 반복 섹션 설립"버튼을 사용하여 노래 구조에 해당합니다 (그림 3) 일반적으로 모든 바카라 규칙을 듣지 않으면 어떤 노래의 노래와 코러스가 나타날지 알지 못하지만 "바카라 규칙 맵"을 사용하면 노래를 듣기 전에 구조를 이해할 수 있으므로 관심있는 섹션에서 직접 클릭하여 재생하는 등 무작위로 액세스 할 수 있습니다
   (b) 코드 진행 검색 함수가 구현되어 동일한 코드 진행으로 여러 곡을 듣고 비교할 수 있습니다 노래 이름 및 아티스트 이름과 같은 서지 정보를 기반으로 한 전통적인 바카라 규칙 정보 검색 외에도 새로운 바카라 규칙 정보 검색은 코드 이름을 검색하고 코드 진행으로 포함하는 노래를 목록에 추가하여 일련의 코드 이름을 추가하여 만들 수 있습니다
   (c) 외부 임베디드 플레이어 함수는 사용자가 홈페이지 또는 블로그와 같은 외부 웹 페이지에 작은 송글 플레이어를 포함시켜 송글에 노래를 소개 할 수 있다는 것을 깨달았습니다 (그림 4) 이 플레이어는 바카라 규칙 구조와 위 코러스 기능을 시각화 할 수있는 기능을 가지고있어 웹 페이지를 본 사람들이 쉽게 듣고 노래에 대해 배울 수 있습니다 노래 이름을 클릭하여 액세스하고 노래의 페이지를 송글에서 직접 사용하십시오


3. 사용자가 자동 분석 오류를 수정할 수있는 인터페이스를 제공합니다
   사용자가 웹에서 자동 분석 오류를 수정하여 서비스 품질 향상에 기여할 수있는 인터페이스가 개발되었습니다 (그림 5) 현재 바카라 규칙 이해 기술을 사용한 분석 결과에는 오류가 포함되지만 인간이 영원히들을 수없는 많은 양의 바카라 규칙을 처리 할 수 있다는 이점이 있습니다 반면에 인간은 바카라 규칙 내용을 더 깊이 이해하고 설명 할 수 있으며 분석 오류를 알아 차릴 수 있지만 모든 것을 설명하는 데 시간이 오래 걸리고 한계가 걸립니다 따라서 보완력을 결합함으로써 두 팀은 노래의 내용을보다 정확하게 설명 할 수있었습니다 구체적으로, 사용자는 그 자리에서 비트, 코드 및 멜로디 만 선택하고 청각 적으로 바카라 규칙 재생과 일치하도록하는 기능을 제공하므로 사용자가 자동 분석에서 오류를 쉽게 알 수 있습니다 웹에서 자동 분석 중에 얻은 후보 목록에서 오류를 직접 편집하거나 선택할 수있는 인터페이스를 만들어 수정했습니다 또한 오류가 수정되면 원래 자동 분석 결과가 다른 색상으로 채색되고 히스토리도 추가됩니다 이것은 또한 바카라 규칙 이해 기술의 성능이 과대 평가되는 것을 방지하는 효과가 있습니다 일부 바카라 규칙적 요소의 경우 수정 된 결과의 기계 학습을 통해 성능을 자동으로 향상시키는 기능을 제공하기 시작했습니다 이러한 방식으로 Songle은 사용자가 서비스 품질을 즉시 개선 할 수있는 고유 한 시스템을 달성하여 사용자가보다 편리하게 느낄 수 있도록합니다

우리는 누구나 웹 브라우저에서 사용할 수있는 활발한 바카라 규칙 듣기 서비스 인 Songle의 지속 가능한 연구 및 개발을 계속 수행 할 것입니다 이번에 개발 된 바카라 규칙 청취 시스템은 바카라 규칙 이해 기술을 사용하여 바카라 규칙의 내용을 자동으로 분석하고 업계와의 공동 작업에 실질적으로 사용되며 바카라 규칙 정보 검색, 바카라 규칙 추천 및 바카라 규칙 배포 서비스를 포함한 다양한 응용 프로그램에 배치 될 것입니다 현재 고급 바카라 규칙 이해 기술의 존재는 아직 널리 알려지지 않았으며, 송들은 인식을 확장 할 것으로 예상됩니다 Songle은 노래하는 목소리로 인기있는 바카라 규칙만큼 모든 웹 사이트 (MP3 형식 오디오 신호 파일)에서 노래를 수용 할 수 있지만 앞으로는 많은 노래를 소유 한 웹 사이트와 함께 작업 할 계획입니다

◆ 바카라 규칙 이해 기술

이것은 노래의 내용을 자동으로 분석 할 수있는 기술입니다 인터넷의 대부분의 바카라 규칙은 음향 신호로 표현됩니다 음향 신호는 바카라 규칙 공연의 사운드 파를 기록하는 신호이기 때문에 음표가 배열되는 악보와 달리, 시대가 언제, 어떤 높이가 재생되는지, 기호로 기록되지 않습니다 과거에는 내용물이 종종 바카라 규칙 배포 또는 바카라 규칙 청취 서비스에서 단순한 파형으로 취급되었지만 완전히 불분명했지만 대조적으로, Songle의 바카라 규칙 이해 기술은 노래의 음향 신호의 주요 내용 인 코러스, 비트, 멜로디 및 코드의 자동 분석을 허용합니다[참조로 돌아 가기]

◆ 가시성 기능

전통적인 바카라 규칙 서비스 및 바카라 규칙 소프트웨어에서는 파형 및 주파수 스펙트로 그램 (주파수 구성 요소 분석 결과)을 표시하는 것이 일반적이며 바카라 규칙의 내용은 알려지지 않았습니다 예를 들어, 바카라 규칙을 듣고있을 때, 나는 재생 위치를 코러스로 바꾸려고했지만 그것이 어디에 있는지 알지 못했기 때문에 재생 위치를 추측으로 변경했습니다 Songle의 자동 분석 및 시각화 기능을 통해 바카라 규칙 내용 (코러스, 비트, 멜로디, 코드)을 "바카라 규칙지도"로 설명 할 수 있으므로지도에 의해 안내되어 재생 위치를 쉽게 변경할 수 있습니다 또한 바카라 규칙지도를 보면 일반적으로 눈에 띄지 않는 노래에서 다양한 요소와 구조를 알 수 있으므로 바카라 규칙에 대한 이해를 심화시킬 수 있습니다 또한 애니메이션 디스플레이를 사용한 시각화를 때로는 시각화라고하며 과거에는 파형과 주파수 구성 요소를 반영하는 것이 표시되었지만 Songle의 Visualizer 화면에서는 디스플레이가 바카라 규칙의 내용과 밀접하게 변경됩니다[참조로 돌아 가기]

◆ 액티브 바카라 규칙 듣기 서비스

"Active Music Listenge Service"라는 용어는 전례없는 코인이며 송은 첫 번째 서비스입니다 여기서 "활성"이라는 용어는 바카라 규칙을 만드는 것이 아니라 바카라 규칙을 듣는 것을 즐기는 능동적 인 상호 작용을 의미합니다 리스너의 의지에 따라 바카라 규칙 재생 위치를 변경하는 행위는 원하는 부분을 듣거나 다양한 노래의 코러스를 듣는 동안 탐색하는 동안 활발한 바카라 규칙 감상의 예이며,이 모든 것이 송글을 통해 달성 될 수 있습니다[참조로 돌아 가기]

◆ 서지 정보를 기반으로 한 바카라 규칙 정보 검색

노래 제목, 아티스트 이름 및 장르 이름과 같은 서지 정보라는 텍스트는 종종 바카라 규칙 파일에 제공됩니다 전통적인 바카라 규칙 정보 검색은 종종 노래 제목 검색과 같은이 서지 정보를 검색하는 텍스트 기술을 기반으로합니다 Songle은 또한 노래 이름과 아티스트 이름을 검색하는 것을 지원하지만 검색 용어로 코드 이름 시퀀스를 제공하고 코드 진행으로 포함하는 노래를 검색하는 기능도 있습니다 앞으로 Songle의 연구 결과를 적용하여 바카라 규칙 콘텐츠에 대한 다양한 바카라 규칙 정보 검색을 실현할 수 있습니다[참조로 돌아 가기]

◆ 협업 필터링을 기반으로 한 바카라 규칙 추천

과거의 히스토리 및 등급에서 사용자 선호도를 분석하여 바카라 규칙 추천은 이미 한 사용자와 비슷한 선호도를 가진 다른 사용자가 선호하는 노래를 추천하는 것으로 실현되었습니다 사용자 선호도를 기반으로하는 이러한 유형의 권장 기술을 협업 필터링이라고하며 바카라 규칙의 내용이 전혀 알려지지 않은 경우에도 작동하기 때문에 널리 사용되었습니다 그러나 아직 아무도 보지 못한 새로운 노래에 직접 적용 할 수없는 등 다양한 제한 사항이 지적되었으며 노래의 내용을 기반으로 컨텐츠 기반 바카라 규칙 권장 사항을 보완적인 기능으로 사용하는 것이 효과적입니다 Songle의 연구 결과는 그러한 바카라 규칙 권장 사항을 실현하기위한 기초로 유용합니다[참조로 돌아 가기]

◆ 베타 버전

이것은 개발의 테스트 목적으로 제공되는 시험판입니다 Songle은 이전에 문제를 해결하기 위해 베타 버전을 테스트했지만 새로운 기능을 사용하면 2012 년 8 월 29 일에 대중에게 공개됩니다[참조로 돌아 가기]

◆ 피아노 롤

피아노 롤은 발음되는 부분이 수평 축의 2 차원 시간 평면에서 채색되고 세로 축에서 피치가 색상되는 디스플레이 방법입니다 소리가 언제, 어떤 높이가 재생되는지, 어떤 높이에서 직관적으로 이해하기 쉽고, 멜로디를 시각화하는 훌륭한 방법이므로 Songle에서도 사용되었습니다[참조로 돌아 가기]