CHANTER

Projet ANR Cha(nt)N(umérique)Te(mps)R(éel)

Outils pour utilisateurs

Outils du site


Panneau latéral

Start

Special Session Interspeech 2016 Singing synthesis challenge "Fill-in the Gap"

Work

Scientific and industrial Partners

en:start

Retour à la version française

Special Session Interspeech 2016 Singing synthesis challenge “Fill-in the Gap”

ChaNTeR project


ChaNTeR

Chant Numérique Temps-Réel / Realtime singing synthesis

A project supported by the Agence Nationale de la Recherche


LIMSI IRCAM Acapela Group Dualo

Agence Nationale pour la Recherche


/*

Résumé

Le but du projet est de réaliser un système de synthèse de chant de haute qualité, qui puisse être utilisé par le grand public musicien. Le système doit non seulement chanter sur des voyelles, mais aussi prononcer les paroles d’une chanson. Un tel système n’existe pas pour la langue française. Le synthétiseur fonctionne sur deux modes : le mode « chant à partir du texte » dans lequel l’utilisateur doit saisir le texte à chanter et les notes de la partition (durées et hauteurs), que la machine transforme en son, et le mode « chanteur virtuel » dans lequel l’utilisateur utilise des interfaces de contrôle temps réel pour contrôler le synthétiseur de chant comme un instrument. Pour réaliser ces outils, nous proposons dans ce projet une combinaison de technologies avancées de transformation de voix incluant l’analyse et la transformation des paramètres du conduit vocal et de la source glottique, avec le savoir faire sur la sélection des unités et les systèmes de règles du chant, et des interfaces de contrôle gestuel innovantes. Le projet porte une attention particulière à capturer et reproduire la variété des styles vocaux (lyrique/classique, populaire/chanson). Outre les tests de qualité utilisés d’ordinaire pour la synthèse vocale, l’utilisabilité des systèmes sera testée et démontrée en prêtant une attention dès le départ aux aspects de création qu’ils permettent (évaluation sous forme de mini-concerts et mini-projets compositionnels utilisant les nouveaux gestes de contrôle, un choeur virtuel et/ou un soliste virtuel). Le prototype de synthèse de chant qui sera développé dans le projet sera utilisé par les partenaires pour proposer des produits de synthèse de voix chantée et d’instrument chanteur, qui font actuellement défaut ou améliorer les fonctionnalités de produits existants. Ainsi, le projet permettra d’offrir à des artistes-chanteurs, des compositeurs et à un large public une approche artistique nouvelle du chant (un nouveau moyen de création permettant des expériences interactives utilisant leur voix ou d’autres voix chantées).


Abstract

The goal of the project is to develop a synthesis system for high quality singing voices, which can be used by the general public musician. The system should not be limited to sing vowels, but allow to generate complete songs including arbitrary texts. Such a system does not exist in the French language. The synthesizer will operate in two modes: “text to singing”, in which the user must enter the text and the notes of the score (lengths and heights), that the machine will then sing, and “virtual singer” in which the user operates the real-time control interface to control the synthesizer as a musical instrument. To achieve the synthesizer, we propose in this project a combination of advanced voice transformation techniques, including analysis and processing of the parameters of the vocal tract and the glottal source, with state of the art know how about unit selection for concatenative speech synthesis, rules based singing synthesis systems, and innovative gesture control interfaces. A central objective for the synthesizer to be developed is the ability to capture and reproduce the variety of singing styles (opera/classical, popular/song). Besides evaluation techniques that are commonly used for speech synthesis systems, the usability of the systems will be evaluated in particular with respect to the creative aspects that they allow (evaluation in form of mini-concerts and compositional mini-projects using the developed control interface, Acronyme du projet : ChaNTeR Page 3 sur 18 virtual choirs and/or virtual soloists). The prototype system for singing synthesis that will be developed in the project will be used by partners to offer products including singing voice synthesis as well as virtual singer instruments. These functions are currently lacking or exist only in a very limited form. Thus, the project will provide for performing musicians, composers and the general public an artistic new singing synthesis and new means to create interactive experiences using the vocals. */

en/start.txt · Dernière modification: 2016/02/11 15:46 par feugere