Publication et abonnement avec le SDK de diffusion Android IVS | Streaming en temps réel
Ce document explique les étapes nécessaires pour la publication et l'abonnement à une étape à l'aide du SDK de diffusion Android IVS en temps réel.
Concepts
Trois concepts de base sous-tendent la fonctionnalité temps réel : scène, stratégie et moteur de rendu. L’objectif de la conception consiste à minimiser la quantité de logique côté client nécessaire à la création d’un produit fonctionnel.
Étape
La classe Stage
est le principal point d’interaction entre l’application hôte et le kit SDK. Il représente l’étape elle-même et est utilisé pour rejoindre et quitter l’étape. La création et la participation à une étape nécessitent une chaîne de jetons valide et non expirée provenant du plan de contrôle (représentée par token
). Il est très facile de rejoindre une étape et de la quitter.
Stage stage = new Stage(context, token, strategy); try { stage.join(); } catch (BroadcastException exception) { // handle join exception } stage.leave();
La classe Stage
est également l’endroit où vous pouvez joindre le StageRenderer
:
stage.addRenderer(renderer); // multiple renderers can be added
Strategy
L’interface Stage.Strategy
permet à l’application hôte de communiquer l’état de l’étape souhaité au kit SDK. Trois fonctions doivent être mises en œuvre : shouldSubscribeToParticipant
, shouldPublishFromParticipant
et stageStreamsToPublishForParticipant
. Elles sont toutes abordées ci-dessous.
Abonnement aux participants
Stage.SubscribeType shouldSubscribeToParticipant(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo);
Lorsqu’un participant distant rejoint l’étape, le kit SDK interroge l’application hôte sur l’état de l’abonnement souhaité pour ce participant. Les options sont NONE
, AUDIO_ONLY
et AUDIO_VIDEO
. Lors d’un renvoi d’une valeur pour cette fonction, l’application hôte n’a pas à se soucier de l’état de publication, de l’état actuel de l’abonnement ou de l’état de la connexion de l’étape. Si AUDIO_VIDEO
est renvoyé, le kit SDK attend que le participant distant effectue une publication avant de s’abonner, puis il met à jour l’application hôte par le biais du moteur de rendu tout au long du processus.
Voici un exemple d’implémentation :
@Override Stage.SubscribeType shouldSubscribeToParticipant(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo) { return Stage.SubscribeType.AUDIO_VIDEO; }
Il s’agit de l’implémentation complète de cette fonction pour une application hôte qui souhaite toujours que tous les participants se voient mutuellement, comme une application de chat vidéo.
Des implémentations plus avancées sont également possibles. Utilisez la propriété userInfo
sur ParticipantInfo
pour vous abonner de manière sélective aux participants en fonction des attributs fournis par le serveur :
@Override Stage.SubscribeType shouldSubscribeToParticipant(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo) { switch(participantInfo.userInfo.get(“role”)) { case “moderator”: return Stage.SubscribeType.NONE; case “guest”: return Stage.SubscribeType.AUDIO_VIDEO; default: return Stage.SubscribeType.NONE; } }
Elle peut servir à créer une scène où les modérateurs peuvent surveiller tous les invités sans être vus ou entendus. L’application hôte pourrait utiliser une logique métier supplémentaire pour permettre aux modérateurs de se voir mutuellement tout en restant invisible pour les invités.
Configuration d’abonnement aux participants
SubscribeConfiguration subscribeConfigurationForParticipant(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo);
Lorsqu’un participant distant est abonné (voir Abonnement aux participants), le kit SDK interroge l’application hôte sur une configuration d’abonnement personnalisée pour ce participant. Cette configuration est facultative et permet à l’application hôte de contrôler certains aspects du comportement de l’abonné. Pour plus d’informations sur les options de configuration, consultez SubscribeConfiguration
Voici un exemple d’implémentation :
@Override public SubscribeConfiguration subscribeConfigrationForParticipant(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo) { SubscribeConfiguration config = new SubscribeConfiguration(); config.jitterBuffer.setMinDelay(JitterBufferConfiguration.JitterBufferDelay.MEDIUM()); return config; }
Cette implémentation met à jour le délai minimum de la mémoire tampon pour tous les participants abonnés à un préréglage de MEDIUM
.
Comme pour shouldSubscribeToParticipant
, des implémentations plus avancées sont possibles. ParticipantInfo
peut être utilisé pour mettre à jour de manière sélective la configuration d’abonnement pour des participants spécifiques.
Nous recommandons d’utiliser les comportements par défaut. Spécifiez une configuration personnalisée uniquement si vous souhaitez modifier un comportement particulier.
Publication
boolean shouldPublishFromParticipant(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo);
Une fois connecté à l’étape, le kit SDK interroge l’application hôte pour savoir si un participant en particulier doit effectuer une publication. Elle n’est invoquée que pour les participants locaux autorisés à publier sur la base du jeton fourni.
Voici un exemple d’implémentation :
@Override boolean shouldPublishFromParticipant(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo) { return true; }
Il s’agit d’une application de chat vidéo standard dans laquelle les utilisateurs souhaitent toujours publier. Ils peuvent désactiver et réactiver leur son et leur vidéo pour être instantanément masqués ou vus/entendus. (Ils peuvent également utiliser la fonction de publication/d’annulation de la publication, mais c’est beaucoup plus lent. Il est préférable de désactiver ou de réactiver le son dans les cas d’utilisation où il est souvent souhaitable de modifier la visibilité.)
Choix des flux à publier
@Override List<LocalStageStream> stageStreamsToPublishForParticipant(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo); }
Lors de la publication, cette fonction est utilisée pour déterminer les flux audio et vidéo à publier. Ce point est abordé plus en détail dans la section Publier un flux multimédia.
Mise à jour de la stratégie
La stratégie se veut dynamique : les valeurs renvoyées par n’importe laquelle des fonctions ci-dessus peuvent être modifiées à tout moment. Par exemple, si l’application hôte ne souhaite pas publier tant que l’utilisateur final n’a pas appuyé sur un bouton, vous pouvez renvoyer une variable depuis shouldPublishFromParticipant
(quelque chose comme hasUserTappedPublishButton
). Lorsque cette variable change en fonction d’une interaction de l’utilisateur final, appelez stage.refreshStrategy()
pour signaler au kit SDK qu’il doit interroger la stratégie pour connaître les dernières valeurs, en appliquant uniquement les éléments qui ont changé. Si le kit SDK constate que la valeur shouldPublishFromParticipant
a changé, il lance le processus de publication. Si les requêtes du kit SDK et toutes les fonctions renvoient la même valeur qu’auparavant, l’appel refreshStrategy
n’apportera aucune modification à l’étape.
Si la valeur de retour de shouldSubscribeToParticipant
passe de AUDIO_VIDEO
à AUDIO_ONLY
, le flux vidéo sera supprimé pour tous les participants dont les valeurs renvoyées ont été modifiées, s’il existait déjà un flux vidéo.
En général, l’étape utilise la stratégie pour appliquer au mieux la différence entre les stratégies précédentes et actuelles, sans que l’application hôte n’ait à se soucier de tout l’état requis pour la gérer correctement. Pour cette raison, et pour réduire les frais, envisagez d’appeler stage.refreshStrategy()
, car cela ne fait rien à moins que la stratégie ne change.
Moteur de rendu
L’interface StageRenderer
communique l’état de l’étape à l’application hôte. Les mises à jour de l’interface utilisateur de l’application hôte peuvent généralement être entièrement optimisées par les événements fournis par le moteur de rendu. Le moteur de rendu fournit les fonctions suivantes :
void onParticipantJoined(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo); void onParticipantLeft(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo); void onParticipantPublishStateChanged(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo, @NonNull Stage.PublishState publishState); void onParticipantSubscribeStateChanged(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo, @NonNull Stage.SubscribeState subscribeState); void onStreamsAdded(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo, @NonNull List<StageStream> streams); void onStreamsRemoved(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo, @NonNull List<StageStream> streams); void onStreamsMutedChanged(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo, @NonNull List<StageStream> streams); void onError(@NonNull BroadcastException exception); void onConnectionStateChanged(@NonNull Stage stage, @NonNull Stage.ConnectionState state, @Nullable BroadcastException exception); void onStreamAdaptionChanged(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo, @NonNull RemoteStageStream stream, boolean adaption); void onStreamLayersChanged(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo, @NonNull RemoteStageStream stream, @NonNull List<RemoteStageStream.Layer> layers); void onStreamLayerSelected(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo, @NonNull RemoteStageStream stream, @Nullable RemoteStageStream.Layer layer, @NonNull RemoteStageStream.LayerSelectedReason reason);
Pour la plupart de ces méthodes, les Stage
et ParticipantInfo
correspondantes sont fournies.
Les informations fournies par le moteur de rendu ne devraient pas avoir d’impact sur les valeurs de retour de la stratégie. Par exemple, la valeur de retour de shouldSubscribeToParticipant
ne devrait pas changer lors de l’appel de onParticipantPublishStateChanged
. Si l’application hôte souhaite s’abonner à un participant en particulier, elle doit renvoyer le type d’abonnement souhaité, quel que soit l’état de publication de ce participant. Le kit SDK est chargé de s’assurer que l’état souhaité de la stratégie est appliqué au bon moment en fonction de l’état de l’étape.
Le StageRenderer
peut être attaché à la classe de l’étape :
stage.addRenderer(renderer); // multiple renderers can be added
Notez que seuls les participants à la publication déclenchent onParticipantJoined
et que chaque fois qu’un participant arrête de publier ou quitte la session de l’étape, onParticipantLeft
est déclenché.
Publier un flux multimédia
Les appareils locaux tels que les microphones et les caméras intégrés sont découverts via DeviceDiscovery
. Voici un exemple de sélection de la caméra frontale et du microphone par défaut, puis de leur renvoi en tant que LocalStageStreams
à publier par le SDK :
DeviceDiscovery deviceDiscovery = new DeviceDiscovery(context); List<Device> devices = deviceDiscovery.listLocalDevices(); List<LocalStageStream> publishStreams = new ArrayList<LocalStageStream>(); Device frontCamera = null; Device microphone = null; // Create streams using the front camera, first microphone for (Device device : devices) { Device.Descriptor descriptor = device.getDescriptor(); if (!frontCamera && descriptor.type == Device.Descriptor.DeviceType.Camera && descriptor.position = Device.Descriptor.Position.FRONT) { front Camera = device; } if (!microphone && descriptor.type == Device.Descriptor.DeviceType.Microphone) { microphone = device; } } ImageLocalStageStream cameraStream = new ImageLocalStageStream(frontCamera); AudioLocalStageStream microphoneStream = new AudioLocalStageStream(microphoneDevice); publishStreams.add(cameraStream); publishStreams.add(microphoneStream); // Provide the streams in Stage.Strategy @Override @NonNull List<LocalStageStream> stageStreamsToPublishForParticipant(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo) { return publishStreams; }
Afficher et supprimer des participants
Une fois l’abonnement effectué, vous recevrez un tableau d’objets StageStream
via la fonction onStreamsAdded
du moteur de rendu. Vous pouvez récupérer l’aperçu à partir d’un ImageStageStream
:
ImagePreviewView preview = ((ImageStageStream)stream).getPreview(); // Add the view to your view hierarchy LinearLayout previewHolder = findViewById(R.id.previewHolder); preview.setLayoutParams(new LinearLayout.LayoutParams( LinearLayout.LayoutParams.MATCH_PARENT, LinearLayout.LayoutParams.MATCH_PARENT)); previewHolder.addView(preview);
Vous pouvez récupérer les statistiques au niveau de l’audio à partir d’un AudioStageStream
:
((AudioStageStream)stream).setStatsCallback((peak, rms) -> { // handle statistics });
Lorsqu’un participant arrête de publier ou en cas de désabonnement, la fonction onStreamsRemoved
est appelée avec les flux qui ont été supprimés. Les applications hôte doivent utiliser ce signal pour supprimer le flux vidéo du participant de la hiérarchie des vues.
onStreamsRemoved
est invoqué pour tous les scénarios dans lesquels un flux peut être supprimé, notamment :
-
Le participant distant arrête de publier.
-
Un appareil local se désabonne ou modifie l’abonnement de
AUDIO_VIDEO
enAUDIO_ONLY
. -
Le participant distant quitte l’étape.
-
Le participant local quitte l’étape.
Comme onStreamsRemoved
est invoqué pour tous les scénarios, aucune logique métier personnalisée n’est requise pour supprimer des participants de l’interface utilisateur lors des opérations de départ locales ou à distance.
Désactiver et réactiver le son des flux de médias sociaux
Les objets LocalStageStream
ont une fonction setMuted
qui contrôle si le son du flux est désactivé. Cette fonction peut être appelée sur le flux avant ou après son renvoi par la fonction de stratégie streamsToPublishForParticipant
.
Important : si une nouvelle instance d’objet LocalStageStream
est renvoyée par streamsToPublishForParticipant
après un appel à refreshStrategy
, l’état muet du nouvel objet de flux est appliqué à l’étape. Lorsque vous créez des instances LocalStageStream
, veillez à ce que l’état muet attendu soit conservé.
Surveiller l’état muet du contenu multimédia des participants distants
Lorsqu’un participant modifie l’état muet de son flux vidéo ou audio, la fonction onStreamMutedChanged
du moteur de rendu est invoquée avec une liste des flux qui ont changé. Utilisez la méthode getMuted
sur StageStream
pour mettre à jour votre interface utilisateur en conséquence.
@Override void onStreamsMutedChanged(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo, @NonNull List<StageStream> streams) { for (StageStream stream : streams) { boolean muted = stream.getMuted(); // handle UI changes } }
Obtenir les statistiques WebRTC
Pour obtenir les dernières statistiques WebRTC relatives à un flux de publication ou d’abonnement, utilisez requestRTCStats
sur StageStream
. Lorsqu’une collecte est réalisée, vous recevez des statistiques via le StageStream.Listener
que vous pouvez définir sur StageStream
.
stream.requestRTCStats(); @Override void onRTCStats(Map<String, Map<String, String>> statsMap) { for (Map.Entry<String, Map<String, string>> stat : statsMap.entrySet()) { for(Map.Entry<String, String> member : stat.getValue().entrySet()) { Log.i(TAG, stat.getKey() + “ has member “ + member.getKey() + “ with value “ + member.getValue()); } } }
Obtenir les attributs des participants
Si vous spécifiez des attributs dans la demande de l’opération CreateParticipantToken
, vous pouvez les voir dans les propriétés ParticipantInfo
:
@Override void onParticipantJoined(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo) { for (Map.Entry<String, String> entry : participantInfo.userInfo.entrySet()) { Log.i(TAG, “attribute: “ + entry.getKey() + “ = “ + entry.getValue()); } }
Obtenir des informations supplémentaires sur les améliorations (SEI)
L’unité NAL d’informations supplémentaires sur les améliorations (SEI) est utilisée pour stocker des métadonnées alignées sur l’image à côté de la vidéo. Les clients abonnés peuvent lire les données utiles SEI d’un diffuseur de publication qui publie une vidéo H.264 en inspectant la propriété embeddedMessages
sur les objets ImageDeviceFrame
provenant de l’objet ImageDevice
du diffuseur de publication. Pour ce faire, acquérez ImageDevice
d’un diffuseur de publication, puis observez chaque image via un rappel fourni à setOnFrameCallback
, comme le montre l’exemple suivant :
// in a StageRenderer’s onStreamsAdded function, after acquiring the new ImageStream val imageDevice = imageStream.device as ImageDevice imageDevice.setOnFrameCallback(object : ImageDevice.FrameCallback { override fun onFrame(frame: ImageDeviceFrame) { for (message in frame.embeddedMessages) { if (message is UserDataUnregisteredSeiMessage) { val seiMessageBytes = message.data val seiMessageUUID = message.uuid // interpret the message's data based on the UUID } } } })
Poursuivre la session en arrière-plan
Lorsque l’application passe en arrière-plan, vous souhaiterez peut-être vous abonner uniquement au contenu audio des autres participants distants ou arrêter de le publier. Pour ce faire, mettez à jour votre implémentation Strategy
pour arrêter la publication et abonnez-vous à AUDIO_ONLY
(ou NONE
, le cas échéant).
// Local variables before going into the background boolean shouldPublish = true; Stage.SubscribeType subscribeType = Stage.SubscribeType.AUDIO_VIDEO; // Stage.Strategy implementation @Override boolean shouldPublishFromParticipant(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo) { return shouldPublish; } @Override Stage.SubscribeType shouldSubscribeToParticipant(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo) { return subscribeType; } // In our Activity, modify desired publish/subscribe when we go to background, then call refreshStrategy to update the stage @Override void onStop() { super.onStop(); shouldPublish = false; subscribeTpye = Stage.SubscribeType.AUDIO_ONLY; stage.refreshStrategy(); }
Encodage en couches avec Simulcast
L’encodage en couches avec diffusion simultanée est une fonctionnalité de diffusion en temps réel d’IVS qui permet aux diffuseurs d’envoyer plusieurs couches de vidéo de qualité différente et aux abonnés de configurer ces couches de manière dynamique ou manuelle. Cette fonctionnalité est décrite plus en détail dans le document Optimisations de la diffusion.
Configuration du codage en couches (diffuseur de publication)
En tant que diffuseur de publication, pour activer l’encodage en couches avec la diffusion simultanée, ajoutez la configuration suivante à votre LocalStageStream
lors de l’instanciation :
// Enable Simulcast StageVideoConfiguration config = new StageVideoConfiguration(); config.simulcast.setEnabled(true); ImageLocalStageStream cameraStream = new ImageLocalStageStream(frontCamera, config); // Other Stage implementation code
En fonction de la résolution que vous avez définie dans la configuration vidéo, un certain nombre de couches seront encodées et envoyées comme défini dans la section Couches, qualités et fréquences d’images par défaut de la section Optimisations de la diffusion.
Vous avez également la possibilité de configurer des couches individuelles depuis la configuration de diffusion simultanée :
// Enable Simulcast StageVideoConfiguration config = new StageVideoConfiguration(); config.simulcast.setEnabled(true); List<StageVideoConfiguration.Simulcast.Layer> simulcastLayers = new ArrayList<>(); simulcastLayers.add(StagePresets.SimulcastLocalLayer.DEFAULT_720); simulcastLayers.add(StagePresets.SimulcastLocalLayer.DEFAULT_180); config.simulcast.setLayers(simulcastLayers); ImageLocalStageStream cameraStream = new ImageLocalStageStream(frontCamera, config); // Other Stage implementation code
Vous pouvez également créer vos propres configurations de couches personnalisées pour un maximum de trois couches. Si vous fournissez un tableau vide ou ne contenant aucune valeur, les valeurs par défaut décrites ci-dessus sont utilisées. Les couches sont décrites avec les propriétés setter requises suivantes :
-
setSize: Vec2;
-
setMaxBitrate: integer;
-
setMinBitrate: integer;
-
setTargetFramerate: integer;
À partir des préréglages, vous pouvez remplacer des propriétés individuelles ou créer une toute nouvelle configuration :
// Enable Simulcast StageVideoConfiguration config = new StageVideoConfiguration(); config.simulcast.setEnabled(true); List<StageVideoConfiguration.Simulcast.Layer> simulcastLayers = new ArrayList<>(); // Configure high quality layer with custom framerate StageVideoConfiguration.Simulcast.Layer customHiLayer = StagePresets.SimulcastLocalLayer.DEFAULT_720; customHiLayer.setTargetFramerate(15); // Add layers to the list simulcastLayers.add(customHiLayer); simulcastLayers.add(StagePresets.SimulcastLocalLayer.DEFAULT_180); config.simulcast.setLayers(simulcastLayers); ImageLocalStageStream cameraStream = new ImageLocalStageStream(frontCamera, config); // Other Stage implementation code
Pour connaître les valeurs maximales, les limites et les erreurs qui peuvent être déclenchées lors de la configuration de couches individuelles, consultez la documentation de référence du kit SDK.
Configuration de l’encodage en couches (abonné)
En tant qu’abonné, il n’est pas nécessaire d’activer l’encodage en couches. Si un diffuseur de publication envoie des couches de diffusion simultanée, le serveur s’adapte dynamiquement entre les couches pour choisir la qualité optimale en fonction de l’appareil de l’abonné et des conditions du réseau.
Sinon, pour choisir les couches explicites que le diffuseur de publication envoie, il existe plusieurs options, décrites ci-dessous.
Option 1 : préférence pour la qualité de la couche initiale
En utilisant la stratégie subscribeConfigurationForParticipant
, il est possible de choisir la couche initiale que vous voulez recevoir en tant qu’abonné :
@Override public SubscribeConfiguration subscribeConfigrationForParticipant(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo) { SubscribeConfiguration config = new SubscribeConfiguration(); config.simulcast.setInitialLayerPreference(SubscribeSimulcastConfiguration.InitialLayerPreference.LOWEST_QUALITY); return config; }
Par défaut, les abonnés reçoivent toujours d’abord la couche de qualité la plus faible, puis la couche de qualité la plus élevée. Cela permet d’optimiser la consommation de bande passante de l’utilisateur final et d’offrir le meilleur temps d’accès à la vidéo, réduisant ainsi les blocages initiaux de la vidéo pour les utilisateurs sur des réseaux plus faibles.
Ces options sont disponibles pour InitialLayerPreference
:
-
LOWEST_QUALITY
: le serveur diffuse d’abord la couche de vidéo de qualité la plus faible. Cela permet d’optimiser la consommation de la bande passante ainsi que le temps d’accès au contenu multimédia. La qualité est définie comme la combinaison de la taille, du débit binaire et de la fréquence d’images de la vidéo. Par exemple, une vidéo 720p est de moins bonne qualité qu’une vidéo 1080p. -
HIGHEST_QUALITY
: le serveur délivre d’abord la couche de vidéo de la plus haute qualité. Cela permet d’optimiser la qualité, mais peut augmenter le temps d’accès au contenu multimédia. La qualité est définie comme la combinaison de la taille, du débit binaire et de la fréquence d’images de la vidéo. Par exemple, la vidéo 1080p est de meilleure qualité que la vidéo 720p.
Remarque : pour que les préférences de couche initiale (l’appel setInitialLayerPreference
) prennent effet, un nouvel abonnement est nécessaire, car ces mises à jour ne s’appliquent pas à l’abonnement actif.
Option 2 : couche préférée pour le flux
La méthode de stratégie preferredLayerForStream
vous permet de sélectionner une couche après le démarrage du flux. Cette méthode de stratégie reçoit les informations relatives au participant et au flux, ce qui vous permet de sélectionner une couche participant par participant. Le kit SDK appelle cette méthode en réponse à des événements spécifiques, par exemple lorsque les couches de flux changent, que l’état des participants change ou que l’application hôte actualise la stratégie.
La méthode de stratégie renvoie un objet RemoteStageStream.Layer
, qui peut être l’un des suivants :
-
Un objet de couche, tel qu’un objet renvoyé par
RemoteStageStream.getLayers
. -
null, qui indique qu’aucune couche ne doit être sélectionnée et que l’adaptation dynamique est privilégiée.
Par exemple, dans la stratégie suivante, les utilisateurs sélectionneront toujours la couche de vidéo de la plus basse qualité disponible :
@Nullable @Override public RemoteStageStream.Layer preferredLayerForStream(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo, @NonNull RemoteStageStream stream) { return stream.getLowestQualityLayer(); }
Pour réinitialiser la sélection des couches et revenir à l’adaptation dynamique, renvoyez null ou undefined dans la stratégie. Dans cet exemple, appState
est une variable d’espace réservé qui représente l’état de l’application hôte.
@Nullable @Override public RemoteStageStream.Layer preferredLayerForStream(@NonNull Stage stage, @NonNull ParticipantInfo participantInfo, @NonNull RemoteStageStream stream) { if (appState.isAutoMode) { return null; } else { return appState.layerChoice; } }
Option 3 : aides pour les couches de RemoteStageStream
RemoteStageStream
possède plusieurs aides qui peuvent être utilisées pour prendre des décisions concernant la sélection des couches et afficher les sélections correspondantes aux utilisateurs finaux :
-
Événements relatifs aux couches : tout comme
StageRenderer
,RemoteStageStream.Listener
possède des événements qui communiquent les modifications apportées aux couches et à l’adaptation de la diffusion simultanée :-
void onAdaptionChanged(boolean adaption)
-
void onLayersChanged(@NonNull List<Layer> layers)
-
void onLayerSelected(@Nullable Layer layer, @NonNull LayerSelectedReason reason)
-
-
Méthodes relatives aux couches :
RemoteStageStream
possède plusieurs méthodes d’aide qui peuvent être utilisées pour obtenir des informations sur le flux et les couches présentées. Ces méthodes sont disponibles sur le flux distant fourni dans la stratégiepreferredLayerForStream
, ainsi que sur les flux distants exposés viaStageRenderer.onStreamsAdded
.-
stream.getLayers
-
stream.getSelectedLayer
-
stream.getLowestQualityLayer
-
stream.getHighestQualityLayer
-
stream.getLayersWithConstraints
-
Pour plus de détails, consultez la classe RemoteStageStream
dans la documentation de référence du kit SDKLayerSelected
, si le message UNAVAILABLE
est renvoyé, cela indique que la couche demandée n'a pas pu être sélectionnée. La meilleure sélection est faite à sa place, qui est généralement une couche de qualité inférieure pour maintenir la stabilité du flux.
Limitations relatives à la configuration vidéo
Le kit SDK ne permet pas de forcer l’utilisation du mode portrait ou paysage à l’aide de StageVideoConfiguration.setSize(BroadcastConfiguration.Vec2 size)
. En orientation portrait, la plus petite dimension est utilisée comme largeur, tandis qu’en orientation paysage, il s’agit de la hauteur. Cela signifie que les deux appels suivants à setSize
ont le même effet sur la configuration vidéo :
StageVideo Configuration config = new StageVideo Configuration(); config.setSize(BroadcastConfiguration.Vec2(720f, 1280f); config.setSize(BroadcastConfiguration.Vec2(1280f, 720f);
Gestion des problèmes de réseau
En cas de perte de la connexion réseau de l’appareil local, le kit SDK essaie de se reconnecter en interne sans aucune action de l’utilisateur. Dans certains cas, le kit SDK échoue et une action de l’utilisateur est requise. Deux erreurs principales sont liées à la perte de la connexion réseau :
-
Code d’erreur 1400, message : « PeerConnection perdue en raison d’une erreur réseau inconnue »
-
Code d’erreur 1300, message : « Le nombre de nouvelles tentatives est épuisé »
Si la première erreur est reçue, mais pas la seconde, cela signifie que le kit SDK est toujours connecté à l’étape et qu’il essaiera de rétablir ses connexions automatiquement. Par mesure de sécurité, vous pouvez appeler refreshStrategy
sans modifier les valeurs de retour de la méthode stratégique, afin de déclencher une tentative de reconnexion manuelle.
Si la deuxième erreur est reçue, les tentatives de reconnexion du kit SDK ont échoué et l’appareil local n’est plus connecté à l’étape. Dans ce cas, essayez de rejoindre l’étape en appelant join
une fois votre connexion réseau rétablie.
En général, le fait de rencontrer des erreurs après avoir correctement rejoint une étape indique que le kit SDK n’a pas réussi à rétablir la connexion. Créez un objet Stage
et essayez de le joindre lorsque les conditions du réseau s’améliorent.
Utilisation de microphones Bluetooth
Pour publier à l’aide de microphones Bluetooth, vous devez établir une connexion Bluetooth SCO :
Bluetooth.startBluetoothSco(context); // Now bluetooth microphones can be used … // Must also stop bluetooth SCO Bluetooth.stopBluetoothSco(context);