Middleware multimédia

Privat

Description

• exposé - matière potentielle : èmédias

Réseaux Haut-Débits et Multimédia-Autrans-10/05/02 - D1 Middleware multimédia Gilles Privat France Télécom R&D Phuong-Hoang Nguyen France Télécom R&D et IMAG/LSR Réseaux Haut-Débits et Multimédia -Autrans -10/05/02 -D2 Middleware multimédia, plan de l'exposé èMédias : définitions, niveaux de représentation § Des signes aux médias, des mono-médias aux multimédias èDes médias « signal » aux médias structurés § Du codage de signal au codage basé-objet, structuration des médias continus § Le niveau syntaxique comme pont entre les différents médias, vers les hypermédias § Intégration des données et des

• temporel vidéo
• codage de signal au codage
• langages déclaratifs de représentation de médias
• modèles source-canal aux protocoles client-serveur
• multimédia -autrans
• systèmes de signes
• système de signe
• médias
• média
• vidéos
• vidéo

Sujets

• Privat
• Modèle
• Serveur
• Représentation
• Multimédia
• Codage
• Client
• Temporel et spirituel

Informations

• Publié par: shawyer
• Nombre de lectures: 30
• Langue: Français
• Poids de l'ouvrage: 2 Mo

Extrait

Middleware multimédia
Gilles Privat
France Télécom R&D
Phuong-Hoang Nguyen
France Télécom R&D et IMAG/LSR
Réseaux Haut-Débits et Multimédia-Autrans-10/05/02 - D1
Middleware multimédia, plan de l’exposé
ŁMédias : définitions, niveaux de représentation
§ Des signes aux médias, des mono-médias aux multimédias
ŁDes médias « signal » aux médias structurés
§ Du codage de signal au codage basé-objet, structuration des médias continus
§ Le niveau syntaxique comme pont entre les différents médias, vers les hypermédias
§ Intégration des données et des méta-données
ŁAbstractions déclaratives et abstractions programmatiques d’objets de médias
§ Langages déclaratifs de représentation de médias
§ APIs et représentations programmatiques basées-objet de contenus
ŁCommunication mono- et multimédia
§ Des modèles source-canal aux protocoles client-serveur
§ Protocoles "télécoms" d’héritage
§ Protocoles spécifiques au multimédia sur IP, RTSP, SIP
§ Des modèles client-serveur aux modèles « middleware réparti »
ŁDes API multimédias aux frameworks multimédias répartis
§ Frameworks spécifiques, JavaMediaFramework
§ Adaptations des ORB génériques pur des objets médias banalisés
ŁAdaptation des infrastructures multimédia à la communication « pervasive »
§ Exemples d’applications sur interfaces réparties/réseaux « ambiants »
ŁConclusion : vers une nouvelle théorie de la communication multimédia?
Réseaux Haut-Débits et Multimédia-Autrans-10/05/02 -D2à
Middleware multimédia : délimitation du sujet
ŁMiddleware/intergiciel
§ Au sens (trop) large : tout logiciel se situant entre le matériel/les systèmes d’exploitation et les
applications…
§ Spécifiquement 1 : middleware réparti
l Exclut les APIs locales à une plate-forme
l Exclut les solutions fermées…
l Abstraction logicielle du réseau (bus logiciel)
§ Spécifiquement 2 : middleware basé-objet
l Abstraction objet = commun dénominateur
ŁMultimédia : définition provisoire
§ Application utilisant conjointement plusieurs médias, dont au moins un média temporel
l médias spatiaux (statiques)
–texte
–graphique (vector graphics)
–image (raster graphics, bit-mapped graphics, bit-mapped image, still video)
l médias temporels (dynamiques)
–audio
–vidéo (moving pictures)
–animation
§ Propriétés caractéristiques
l Intégration des différents médias dans des modèles de représentation conjoints
l Programmabilité/adaptativité des contenus
l Interactivité mono/multi-utilisateurs Réseaux Haut-Débits et Multimédia-Autrans-10/05/02 -D3
l Répartition multilatérale de l’application (serveurs/terminaux clients/proxies pairs)
La triangle du multimédia
Télécoms
Transmission Interpersonnalité
BVT
Information Visiophonie Information
Visioconférence
TraitementProduction Globalité Intelligence
Communication de groupe
multimedia e-mail
multimédia
Objets Hypermédias répartis
WWWVidéo à la demande
Télévision Interactive
Télévision câblée
Télévision diffusée
DVD-vidéo DVD-ROM CD-ROM multimediaBVJ BVO
Médias Informatique
Réseaux Haut-Débits et Multimédia-Autrans-10/05/02 -D4Middleware multimédia, plan de l’exposé
ŁMédias : définitions, niveaux de représentation
§ Des signes aux médias, des mono-médias aux multimédias
ŁDes médias « signal » aux médias structurés
§ Du codage de signal au codage basé-objet, structuration des médias continus
§ Le niveau syntaxique comme pont entre les différents médias, vers les hypermédias
§ Intégration des données et des méta-données
ŁAbstractions déclaratives et abstractions programmatiques d’objets de médias
§ Langages déclaratifs de représentation de médias
§ APIs et représentations programmatiques basées-objet de contenus
ŁCommunication mono- et multimédia
§ Des modèles source-canal aux protocoles client-serveur
§ Protocoles "télécoms" d’héritage
§ Protocoles spécifiques au multimédia sur IP, RTSP, SIP
§ Des modèles client-serveur aux modèles « middleware réparti »
ŁDes API multimédias aux frameworks multimédias répartis
§ Frameworks spécifiques, JavaMediaFramework
§ Adaptations des ORB génériques pur des objets médias banalisés
ŁAdaptation des infrastructures multimédia à la communication « pervasive »
§ Exemples d’applications sur interfaces réparties/réseaux « ambiants »
ŁConclusion : vers une nouvelle théorie de la communication multimédia?
Réseaux Haut-Débits et Multimédia-Autrans-10/05/02 -D5
Théorie sémiotique/cognitive des médias
ŁModalité d'information
§ canal perceptuel utilisé par le destinataire du message ; on peut distinguer ainsi les
modalités :
l Auditive
l Visuelle
l Tactile
l Olfactive
l haptique…
ŁMedia, définition sémiotique/cognitive
§ support perceptuel de représentation d'information caractérisé par la modalité
d'information utilisée et le système sémiotique (système de signes) véhiculant
l'information dans cette modalité
Réseaux Haut-Débits et Multimédia-Autrans-10/05/02 -D6Caractéristiques d’un système de signes
ŁUn système de signes peut être
§ analogique (continu)
l variations continues entre les signifiants --> variations continues entre les
signifiés
§ digital (discret)
l signifiants caractérisés par différenciation entre eux et non par relation
directe avec le signifié, pas de relation continue entre signifiant et signifié
Ł Ne pas confondre avec la distinction analogique-numérique au niveau de
codage le plus bas
§ à articulation correspondante : signes composites = assemblage de sous-signes
à correspondance sémantique (e.g. graphique)
§non- : sous-signes non associés à des signifiés
propres (e.g. phonèmes, lettres de l'alphabet)
Réseaux Haut-Débits et Multimédia-Autrans-10/05/02 -D7
Caractéristiques d’un système de signes
ŁNiveaux d ’abstraction et motivation
§ indiciel
l lien physique causal du signifiant avec le signifié
§ iconique concret
l représentation analogique du signifié
§ iconique abstrait
l analogie du signifié dans un ensemble discret de
signifiants
§ symbolique
l la relation entre le signifiant et le signifié est arbitraire
Réseaux Haut-Débits et Multimédia-Autrans-10/05/02 -D8Les trois dimensions de la sémiotique
Interprétant
Pragmatique
Signe
Sémantique Signifié
(designatum)
Syntaxe
Autres signes
Réseaux Haut-Débits et Multimédia-Autrans-10/05/02 -D9
Syntaxes d’un système de signes
ŁSyntaxe = contraintes pour l ’arrangement des signes individuels d’un
système de signe, pour former des signes composés
§ Les systèmes de signe sont en cascade!
l le signifié d ’un système de signes est le signifiant d ’un autre!
l Le niveau perceptuel n ’est en général qu’un niveau intermédiaire
§ chaque niveau a sa propre syntaxe :
ŁSpatiale
§ 1D/linéaire : texte écrit simple, image bit-map
§ 2D : graphique, diagramme, textes mis en page, etc
ŁTemporelle
§ statique : un seule signe à extension temporelle et interprétation temporelle
§ linéaire : suite temporelle de signes individuels
ŁAbstraite hiérarchique/générative
§ grammaire formelle d'un code ou langage informatique
§ langage naturel au niveau supérieur (conceptuel)
ŁHyperliens
§ syntaxe liée à un modèle cognitif de haut niveau (réseau sémantique)
Réseaux Haut-Débits et Multimédia-Autrans-10/05/02 -D10Modalité
Visuel
Auditif
Caractéristique d’un média cognitif/perceptif
Abstraction
Symbolique
Iconique
abstrait
Iconique
concret
Indiciaire
Syntaxe
Temporelle Linéaire Spatiale 2D (Hiérarchique/générative) Hyperliens
Réseaux Haut-Débits et Multimédia-Autrans-10/05/02 -D11
Sémiotique et cognition : la double articulation
Łe