trous de mémoire_vidéos

DOI : 10.34847/nkl.627daa01 Publique
Auteur : = guykayser

Portrait(s) : des paroles en image(s)

La troisième piste de collaboration était beaucoup moins prévisible et elle s’est véritablement développée au fur et à mesure de l’avancée du projet. Le cœur de cette réflexion est la forme graphique des paroles et l’impact de la réception des variations graphiques voire orthographiques. A l’origine il y a une étude du laboratoire ligérien de linguistique s...ur la transcription des enregistrements sonores. Dans le cadre de ce projet l’accent a été mis sur la diversité des formes graphiques que peut prendre une parole enregistrée. En effet la lecture de transcriptions de paroles spontanées, transcriptions scientifiquement rigoureuses et contenant toutes les marques de l’oral, produit inexorablement un effet de stigmatisation des locuteurs. Cet effet est si puissant qu’il peut aller jusqu’à produire une autocensure des locuteurs « Moi je ne veux pas être enregistré, je parle avec des fautes d’orthographe ».


L’équipe a donc entrepris un travail sur la restitution graphique des enregistrements sonores. Les linguistes se sont appuyés sur les outils et les méthodes utilisés fréquemment dans le domaine des sciences du langage. Chaque enregistrement a été transcrit par un chercheur et analysé à l’aide de logiciels de traitements du signal sonore (Transcriber, Praat, Elan). La matière sonore a ainsi été découpée en « phrases », mots, syllabes, phonèmes et décrite dans ses grandes caractéristiques phono-acoustique (fréquence fondamentale, intensité, intonation, formants etc. )



Cette nouvelle matière, formée d’une description scientifique des paroles et d’une relation temporelle entre cette description et le son lui-même a ensuite été traitée par Guykayser et Gérard Parésys à l’aide du logiciel Processing afin de produire une image visuelle exclusivement pilotée par ces informations.

Le spectre, vertical, en niveau de gris, défile de gauche à droite.
La durée du défilement est égale à la durée du fichier audio.
Les mots qui apparaissent devant/derrière, en suivant l’avancée du spectre viennent de la tiers 3 « Words » de Praat.
La position verticale de ces mots est liée à la courbe Intensity extraite de Praat.
La couleur de ces mots est aussi liée à la courbe Intensity extraite de Praat.
Un effet de « Blur » floute progressivement les gris du spectre et ces mots.
A droite, de bas en haut défile point par point en blanc, la courbe Pitch de Praat.
A droite, superposée a la courbe Pitch, la tiers 2 « syll » en phonétique de Praat s’écrit en bleu clair.
La taille de ces syllabes est proportionnelle au Pitch.
La position de ces syllabes suit la courbe Pitch.

En changeant très peu de chose dans le sketch, on peut changer ces divers constituants de l’affichage.



Cette partie du travail tout a fait inattendue a produit un résultat très prometteur et ouvre de nombreuses perspectives de collaboration ultérieure. C’est en effet une contribution singulière aux travaux sur la visualisation des données. Le travail conjoint d’artistes et d’universitaires se concrétisera par la poursuite d’installations artistiques et de projets culturels mais aussi par la production de conférences et d’articles scientifiques.

Fichiers  
Visualisation

ID : 10.34847/nkl.627daa01/3c6dc45df20cac9e66b15bcf9fa133412aa3e2d5

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/3c6dc45df20cac9e66b15bcf9fa133412aa3e2d5

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/3c6dc45df20cac9e66b15bcf9fa133412aa3e2d5

Nom du fichier : TDM1_denxiaoping.mp4
Extension : mp4
Taille : 81.2 Mo

ID : 10.34847/nkl.627daa01/d093fb069cf705beeeb09c31f87716ea2d319003

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/d093fb069cf705beeeb09c31f87716ea2d319003

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/d093fb069cf705beeeb09c31f87716ea2d319003

Nom du fichier : TDM1_le corbeau et le renard.mp4
Extension : mp4
Taille : 74.4 Mo

ID : 10.34847/nkl.627daa01/eb53d3c0ab65dacf91f34880a3a67359b93aca70

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/eb53d3c0ab65dacf91f34880a3a67359b93aca70

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/eb53d3c0ab65dacf91f34880a3a67359b93aca70

Nom du fichier : TDM1_le gendarme et sa mère.mp4
Extension : mp4
Taille : 83.7 Mo

ID : 10.34847/nkl.627daa01/848b88f0235b5f1ae0ee95f3970d86e0021b3253

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/848b88f0235b5f1ae0ee95f3970d86e0021b3253

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/848b88f0235b5f1ae0ee95f3970d86e0021b3253

Nom du fichier : TDM1_miss montargis.mp4
Extension : mp4
Taille : 69.9 Mo

ID : 10.34847/nkl.627daa01/2f659adfe6ecefa46f35224c1f63a8b5314bf421

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/2f659adfe6ecefa46f35224c1f63a8b5314bf421

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/2f659adfe6ecefa46f35224c1f63a8b5314bf421

Nom du fichier : TDM2_de la géologie à l'oenologie.mp4
Extension : mp4
Taille : 91.6 Mo

ID : 10.34847/nkl.627daa01/ed41290cedb64ca1a11e3e6335f6cf3188cda2d7

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/ed41290cedb64ca1a11e3e6335f6cf3188cda2d7

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/ed41290cedb64ca1a11e3e6335f6cf3188cda2d7

Nom du fichier : TDM2_la charité est un rêve.mp4
Extension : mp4
Taille : 75.5 Mo

ID : 10.34847/nkl.627daa01/d40b0616e6c18dd3745f113458fce6c37cd4943d

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/d40b0616e6c18dd3745f113458fce6c37cd4943d

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/d40b0616e6c18dd3745f113458fce6c37cd4943d

Nom du fichier : TDM2_militante.mp4
Extension : mp4
Taille : 80.4 Mo

ID : 10.34847/nkl.627daa01/b2899508221f6203ece378528191aa4dc5fb4686

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/b2899508221f6203ece378528191aa4dc5fb4686

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/b2899508221f6203ece378528191aa4dc5fb4686

Nom du fichier : TDM2_milles_sourires.mp4
Extension : mp4
Taille : 87.6 Mo

ID : 10.34847/nkl.627daa01/45329c6646b1402c51a31c2c99c03499537a89de

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/45329c6646b1402c51a31c2c99c03499537a89de

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/45329c6646b1402c51a31c2c99c03499537a89de

Nom du fichier : TDM3_mélodie des saveurs.mp4
Extension : mp4
Taille : 90.6 Mo

ID : 10.34847/nkl.627daa01/90afd66367f635cfeee249cac2273869e3e9d29a

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/90afd66367f635cfeee249cac2273869e3e9d29a

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/90afd66367f635cfeee249cac2273869e3e9d29a

Nom du fichier : TDM3_né ici.mp4
Extension : mp4
Taille : 105.9 Mo

ID : 10.34847/nkl.627daa01/c273d49efe93909f9e58add11eabf87931078779

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/c273d49efe93909f9e58add11eabf87931078779

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/c273d49efe93909f9e58add11eabf87931078779

Nom du fichier : TDM3_pas trop loin de paris.mp4
Extension : mp4
Taille : 107.7 Mo

ID : 10.34847/nkl.627daa01/92b7fc984a46457358777f7f2523ea6165fe6598

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/92b7fc984a46457358777f7f2523ea6165fe6598

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/92b7fc984a46457358777f7f2523ea6165fe6598

Nom du fichier : TDM3_vous la voulez ma voix.mp4
Extension : mp4
Taille : 83.9 Mo

ID : 10.34847/nkl.627daa01/14dbd702fee83a540c985a46a231c88a115aea3d

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/14dbd702fee83a540c985a46a231c88a115aea3d

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/14dbd702fee83a540c985a46a231c88a115aea3d

Nom du fichier : TDM4_c'est trés gai le portugal.mp4
Extension : mp4
Taille : 93.2 Mo

ID : 10.34847/nkl.627daa01/e42d8edcb67fd3bdc09d25132d2764270f65b1cc

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/e42d8edcb67fd3bdc09d25132d2764270f65b1cc

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/e42d8edcb67fd3bdc09d25132d2764270f65b1cc

Nom du fichier : TDM4_le foot et la turquie.mp4
Extension : mp4
Taille : 70.4 Mo

ID : 10.34847/nkl.627daa01/4cecd5cdd4372e344694881d0bd1c637b2c49386

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/4cecd5cdd4372e344694881d0bd1c637b2c49386

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/4cecd5cdd4372e344694881d0bd1c637b2c49386

Nom du fichier : TDM4_le foot et le civet de lapin.mp4
Extension : mp4
Taille : 79.1 Mo

ID : 10.34847/nkl.627daa01/553c882ebce5f3db20af8908232139da8674c05c

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/553c882ebce5f3db20af8908232139da8674c05c

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/553c882ebce5f3db20af8908232139da8674c05c

Nom du fichier : TDM4_math et dessin.mp4
Extension : mp4
Taille : 76.5 Mo

ID : 10.34847/nkl.627daa01/7e6a081713e23ce698344db7ef3a55a86458f0d6

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/7e6a081713e23ce698344db7ef3a55a86458f0d6

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/7e6a081713e23ce698344db7ef3a55a86458f0d6

Nom du fichier : TDM5_darfour.mp4
Extension : mp4
Taille : 69.1 Mo

ID : 10.34847/nkl.627daa01/c9786cff5400c643d8febc2f77b6a70f63279d0e

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/c9786cff5400c643d8febc2f77b6a70f63279d0e

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/c9786cff5400c643d8febc2f77b6a70f63279d0e

Nom du fichier : TDM5_deux vaches.mp4
Extension : mp4
Taille : 81.5 Mo

ID : 10.34847/nkl.627daa01/52e22c017d9fad0bfb9a12b93608e07b7e0bc5bd

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/52e22c017d9fad0bfb9a12b93608e07b7e0bc5bd

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/52e22c017d9fad0bfb9a12b93608e07b7e0bc5bd

Nom du fichier : TDM5_le calme et l'agité.mp4
Extension : mp4
Taille : 81 Mo

ID : 10.34847/nkl.627daa01/b428bc1467d5ef695baf04abd3cb7b2646f539da

Url d'intégration : https://api.nakala.fr/embed/10.34847/nkl.627daa01/b428bc1467d5ef695baf04abd3cb7b2646f539da

Url de téléchargement : https://api.nakala.fr/data/10.34847/nkl.627daa01/b428bc1467d5ef695baf04abd3cb7b2646f539da

Nom du fichier : TDM5_le pergamano.mp4
Extension : mp4
Taille : 82.4 Mo
Licence
Creative Commons Attribution Non Commercial No Derivatives 4.0 International (CC-BY-NC-ND-4.0)
Collection
Citer
Partager
Déposée par Guy Kayser le 25/03/2021
nakala:title trous de mémoire_vidéos
nakala:creator = guykayser
nakala:created 2011
nakala:type dcterms:URI Vidéo
nakala:license Creative Commons Attribution Non Commercial No Derivatives 4.0 International (CC-BY-NC-ND-4.0)
dcterms:description Français Portrait(s) : des paroles en image(s)

La troisième piste de collaboration était beaucoup moins prévisible et elle s’est véritablement développée au fur et à mesure de l’avancée du projet. Le cœur de cette réflexion est la forme graphique des paroles et l’impact de la réception des variations graphiques voire orthographiques. A l’origine il y a une étude du laboratoire ligérien de linguistique sur la transcription des enregistrements sonores. Dans le cadre de ce projet l’accent a été mis sur la diversité des formes graphiques que peut prendre une parole enregistrée. En effet la lecture de transcriptions de paroles spontanées, transcriptions scientifiquement rigoureuses et contenant toutes les marques de l’oral, produit inexorablement un effet de stigmatisation des locuteurs. Cet effet est si puissant qu’il peut aller jusqu’à produire une autocensure des locuteurs « Moi je ne veux pas être enregistré, je parle avec des fautes d’orthographe ».


L’équipe a donc entrepris un travail sur la restitution graphique des enregistrements sonores. Les linguistes se sont appuyés sur les outils et les méthodes utilisés fréquemment dans le domaine des sciences du langage. Chaque enregistrement a été transcrit par un chercheur et analysé à l’aide de logiciels de traitements du signal sonore (Transcriber, Praat, Elan). La matière sonore a ainsi été découpée en « phrases », mots, syllabes, phonèmes et décrite dans ses grandes caractéristiques phono-acoustique (fréquence fondamentale, intensité, intonation, formants etc. )



Cette nouvelle matière, formée d’une description scientifique des paroles et d’une relation temporelle entre cette description et le son lui-même a ensuite été traitée par Guykayser et Gérard Parésys à l’aide du logiciel Processing afin de produire une image visuelle exclusivement pilotée par ces informations.

Le spectre, vertical, en niveau de gris, défile de gauche à droite.
La durée du défilement est égale à la durée du fichier audio.
Les mots qui apparaissent devant/derrière, en suivant l’avancée du spectre viennent de la tiers 3 « Words » de Praat.
La position verticale de ces mots est liée à la courbe Intensity extraite de Praat.
La couleur de ces mots est aussi liée à la courbe Intensity extraite de Praat.
Un effet de « Blur » floute progressivement les gris du spectre et ces mots.
A droite, de bas en haut défile point par point en blanc, la courbe Pitch de Praat.
A droite, superposée a la courbe Pitch, la tiers 2 « syll » en phonétique de Praat s’écrit en bleu clair.
La taille de ces syllabes est proportionnelle au Pitch.
La position de ces syllabes suit la courbe Pitch.

En changeant très peu de chose dans le sketch, on peut changer ces divers constituants de l’affichage.



Cette partie du travail tout a fait inattendue a produit un résultat très prometteur et ouvre de nombreuses perspectives de collaboration ultérieure. C’est en effet une contribution singulière aux travaux sur la visualisation des données. Le travail conjoint d’artistes et d’universitaires se concrétisera par la poursuite d’installations artistiques et de projets culturels mais aussi par la production de conférences et d’articles scientifiques.