转载于:Android多人视频聊天应用的开发(三)多人聊天-玖哥的书房-51CTO博客 http://blog.51cto.com/dongfeng9ge/2104587

本系列文章结合声网官方在GitHub提供的Demo源码进行分析。声网官方在GitHub提供的Demo源码下载链接

在上一篇《Android多人视频聊天应用的开发(二)一对一聊天》中我们学习了如何使用声网Agora SDK进行一对一的聊天,本篇主要讨论如何使用Agora SDK进行多人聊天。主要需要实现以下功能:

1、上一篇已经实现过的聊天功能

2、随着加入人数和他们的手机摄像头分辨率的变化,显示不同的UI,即所谓的“分屏”

3、点击分屏中的小窗,可以放大显示该聊天窗

分屏

根据前期技术调研,分屏显示最好的方式是采用瀑布流结合动态聊天窗实现,这样比较方便的能够适应UI的变化。所谓瀑布流,就是目前比较流行的一种列表布局,会在界面上呈现参差不齐的多栏布局。我们先实现一个瀑布流:

瀑布流的实现方式很多,本文采用结合GridLayoutManager的RecyclerView来实现。我们首先自定义一个RecyclerView,命名为GridVideoViewContainer。核心代码如下:

int count = uids.size();
if (count <= 2) {
    // 只有本地视频或聊天室内只有另外一个人
    this.setLayoutManager(new LinearLayoutManager(activity.getApplicationContext(), orientation, false));
} else if (count > 2) {
    // 多人聊天室
    int itemSpanCount = getNearestSqrt(count);
    this.setLayoutManager(new GridLayoutManager(activity.getApplicationContext(), itemSpanCount, orientation, false));
}

根据上面的代码可以看出,在聊天室里只有自己的本地视频或者只有另外一个人的时候,采用LinearLayoutManager,这样的布局其实与前文的一对一聊天类似;而在真正意义的多人聊天室里,则采用GridLayoutManager实现瀑布流,其中itemSpanCount就是瀑布流的列数。

有了一个可用的瀑布流之后,下面我们就可以实现动态聊天窗了:

动态聊天窗的要点在于item的大小由视频的宽高比决定,因此Adapter及其对应的layout就该注意不要写死尺寸。在Adapter里控制item具体尺寸的代码如下:

if (force || mItemWidth == 0 || mItemHeight == 0) {
    WindowManager windowManager = (WindowManager) mContext.getSystemService(Context.WINDOW_SERVICE);
    DisplayMetrics outMetrics = new DisplayMetrics();
    windowManager.getDefaultDisplay().getMetrics(outMetrics);

int count = uids.size();
    int DividerX = 1;
    int DividerY = 1;

if (count == 2) {
        DividerY = 2;
    } else if (count >= 3) {
        DividerX = getNearestSqrt(count);
        DividerY = (int) Math.ceil(count * 1.f / DividerX);
    }

int width = outMetrics.widthPixels;
    int height = outMetrics.heightPixels;

if (width > height) {
        mItemWidth = width / DividerY;
        mItemHeight = height / DividerX;
    } else {
        mItemWidth = width / DividerX;
        mItemHeight = height / DividerY;
    }
}

以上代码根据视频的数量确定了列数和行数,然后根据列数和屏幕宽度确定了视频的宽度,接着根据视频的宽高比和视频宽度确定了视频高度。同时也考虑了手机的横竖屏情况(就是if (width > height)这行代码)。

该Adapter对应的layout的代码如下:

<RelativeLayout
    xmlns:android=“http://schemas.android.com/apk/res/android”
    android:id=“@+id/user_control_mask”
    android:layout_width=“match_parent”
    android:layout_height=“match_parent”
    android:orientation=“vertical”>

<ImageView
        android:id=“@+id/default_avatar”
        android:layout_width=“wrap_content”
        android:layout_height=“wrap_content”
        android:layout_centerInParent=“true”
        android:visibility=“gone”
        android:src=“@drawable/icon_default_avatar”
        android:contentDescription=“DEFAULT_AVATAR” />

<ImageView
        android:id=“@+id/indicator”
        android:layout_width=“wrap_content”
        android:layout_height=“wrap_content”
        android:layout_centerHorizontal=“true”
        android:layout_alignParentBottom=“true”
        android:layout_marginBottom=“@dimen/video_indicator_bottom_margin”
        android:contentDescription=“VIDEO_INDICATOR” />

<LinearLayout
        android:id=“@+id/video_info_container”
        android:layout_width=“wrap_content”
        android:layout_height=“wrap_content”
        android:layout_alignParentTop=“true”
        android:layout_marginTop=“24dp”
        android:layout_marginStart=“15dp”
        android:layout_marginLeft=“15dp”
        android:visibility=“gone”
        android:orientation=“vertical”>

<TextView
            android:id=“@+id/video_info_metadata”
            android:layout_width=“wrap_content”
            android:layout_height=“wrap_content”
            android:singleLine=“true”
            style=“@style/NotificationUIText” />
    </LinearLayout>

</RelativeLayout>

我们可以看到,layout中有关尺寸的属性都是wrap_content,这就使得item大小随视频宽高比变化成为可能。

把分屏的布局写好之后,我们就可以在每一个item上播放聊天视频了。

播放聊天视频

在Agora SDK中一个远程视频的显示只和该用户的UID有关,所以使用的数据源只需要简单定义为包含UID和对应的SurfaceView即可,就像这样:

private final HashMap<Integer, SurfaceView> mUidsList = new HashMap<>();

每当有人加入了我们的聊天频道,都会触发onFirstRemoteVideoDecoded(int uid, int width, int height, int elapsed)方法,第一个uid就是他们的UID;接下来我们要为每个item新建一个SurfaceView并为其创建渲染视图,最后将它们加入刚才创建好的mUidsList里并调用setupRemoteVideo( VideoCanvas remote )方法播放这个聊天视频。这个过程的完整代码如下:

@Override
public void onFirstRemoteVideoDecoded(int uid, int width, int height, int elapsed) {
    doRenderRemoteUi(uid);
}

private void doRenderRemoteUi(final int uid) {
    runOnUiThread(new Runnable() {
        @Override
        public void run() {
            if (isFinishing()) {
                return;
            }

if (mUidsList.containsKey(uid)) {
                return;
            }

SurfaceView surfaceV = RtcEngine.CreateRendererView(getApplicationContext());
            mUidsList.put(uid, surfaceV);

boolean useDefaultLayout = mLayoutType == LAYOUT_TYPE_DEFAULT;

surfaceV.setZOrderOnTop(true);
            surfaceV.setZOrderMediaOverlay(true);

rtcEngine().setupRemoteVideo(new VideoCanvas(surfaceV, VideoCanvas.RENDER_MODE_HIDDEN, uid));

if (useDefaultLayout) {
                log.debug(“doRenderRemoteUi LAYOUT_TYPE_DEFAULT ” + (uid & 0xFFFFFFFFL));
                switchToDefaultVideoView();
            } else {
                int bigBgUid = mSmallVideoViewAdapter == null ? uid : mSmallVideoViewAdapter.getExceptedUid();
                log.debug(“doRenderRemoteUi LAYOUT_TYPE_SMALL ” + (uid & 0xFFFFFFFFL) + ” ” + (bigBgUid & 0xFFFFFFFFL));
                switchToSmallVideoView(bigBgUid);
            }
        }
    });
}

以上代码与前文中播放一对一视频的代码如出一撤,但是细心的读者可能已经发现我们并没有将生成的SurfaceView放在界面里,这正是与一对一视频的不同之处:我们要在一个抽象的VideoViewAdapter类里将SurfaceView放出来,关键代码如下:

SurfaceView target = user.mView;
VideoViewAdapterUtil.stripView(target);
holderView.addView(target, 0, new FrameLayout.LayoutParams(ViewGroup.LayoutParams.MATCH_PARENT, ViewGroup.LayoutParams.MATCH_PARENT));

一般Android工程师看见holderView就明白这是ViewHolder的layout的根layout了,而user是哪儿来的,详见文末的代码,文中不做赘述。

这样在多人聊天的时候我们就能使用分屏的方式播放用户聊天视频了,如果想放大某一个用户的视频该怎么办呢?

全屏和小窗

当用户双击某一个item的时候,他希望对应的视频能够全屏显示,而其他的视频则变成小窗口,那么我们先定义一个双击事件接口:

public interface VideoViewEventListener {
    void onItemDoubleClick(View v, Object item);
}

具体实现方式如下:

mGridVideoViewContainer.setItemEventHandler(new VideoViewEventListener() {
    @Override
    public void onItemDoubleClick(View v, Object item) {
        log.debug(“onItemDoubleClick ” + v + ” ” + item + ” ” + mLayoutType);

if (mUidsList.size() < 2) {
            return;
        }

UserStatusData user = (UserStatusData) item;
        int uid = (user.mUid == 0) ? config().mUid : user.mUid;

if (mLayoutType == LAYOUT_TYPE_DEFAULT && mUidsList.size() != 1) {
            switchToSmallVideoView(uid);
        } else {
            switchToDefaultVideoView();
        }
    }
});

将被选中的视频全屏播放的方法很容易理解,我们只看生成小窗列表的方法:

private void switchToSmallVideoView(int bigBgUid) {
    HashMap<Integer, SurfaceView> slice = new HashMap<>(1);
    slice.put(bigBgUid, mUidsList.get(bigBgUid));
    Iterator<SurfaceView> iterator = mUidsList.values().iterator();
    while (iterator.hasNext()) {
        SurfaceView s = iterator.next();
        s.setZOrderOnTop(true);
        s.setZOrderMediaOverlay(true);
    }

mUidsList.get(bigBgUid).setZOrderOnTop(false);
    mUidsList.get(bigBgUid).setZOrderMediaOverlay(false);

mGridVideoViewContainer.initViewContainer(this, bigBgUid, slice, mIsLandscape);

bindToSmallVideoView(bigBgUid);

mLayoutType = LAYOUT_TYPE_SMALL;

requestRemoteStreamType(mUidsList.size());
}

小窗列表要注意移除全屏的那个UID,此外一切都和正常瀑布流视图相同,包括双击小窗的item将其全屏播放。

到了这里我们就已经使用Agora SDK完成了一个有基本功能的简单多人聊天demo,要产品化还有很多的东西要做,在这里先做一个简单的总结吧!

Agora SDK使用总结

声网Agora提供了高质量的视频通信SDK,不仅覆盖了主流的操作系统,集成效率也比较高,而且还支持包括聊天,会议,直播等功能在内的多个模式的视频通话。SDK中API设计基本能够满足大部分的开发需要,而且隐藏了底层开发,只需要提供SurfaceView和UID即可播放视频,这样对于App层的开发者来说十分友好。非常适合有视频聊天开发需求的开发者。在视频领域创业大爆发的今天,建议更多的想要从事该领域的开发者可以尝试下。

当然声网Agora也并非尽善尽美,有些地方还有改进的空间,我有两个建议,以往厂商可以考虑下:

1、Agora支持Kotlin,目前Kotlin现在已经成为Google官方建议的Android开发语言,支持Kotlin有助于跟上时代的步伐。但Agora并没有把Kotlin的demo放在官网上。

2、希望可以提供带基础UI的SDK,就像UMeng的分享SDK一样或者AMap的导航SDK,一套带简单UI的SDK不仅能直接应用到项目中,还允许开发者进一步定制,这样更容易收到App层的开发者技术选型时的青睐,他们的集成效率也会更高。

                </div>

(Agora声网)多人视频聊天应用的开发(三)多人聊天相关推荐

  1. 基于声网的音视频SDK和FreeSWITCH开发WebRTC2SIP Gateway 方案和思路

    为什么做这个? 今年初接到一个项目任务,客户要求在自己的音视频平台系统中集成webrtc功能(原系统是基于SIP协议开发的,已经稳定运行多年,有很多客户).在比对了多家RTC产品的效果后,.他们对声网 ...

  2. vue项目Agora声网实现一对一视频聊天Demo示例(Agora声网实战及agora-rtc-vue使用,新增在线预览地址)

    最终效果 在线预览地址 一.声网简介---->请查看官网 二.声网注册---->请自行百度(创建音视频连接需要在Agora注册属于您的appid) 三.具体实现视频聊天步骤 1. 实现音视 ...

  3. Unity Metaverse(八)、RTC Engine 基于Agora声网SDK实现音视频通话

    文章目录 简介 创建应用 构建应用场景 API调用与回调事件 测试 简介 本文介绍如何在Unity中接入声网SDK,它可以应用的场景有许多,例如直播.电商.游戏.社交等,音视频通话是其实时互动的基础能 ...

  4. Agora声网-Uniapp拉流(Vue拉流)

    /** * agora声网解决方案* 1. 创建 AgoraClient 对象* 2. join进入相应频道* 3. on 监听 user-published 拿到远端用户对象 AgoraRTCRem ...

  5. 使用声网sdk音视频时,播放本地音频心得

    注意: 使用声网sdk音视频时,需要使用声网sdk内部的播放音频api 否则在iOS12系统上,通过avplayer播放时,使用replaceItem的方式切换AVPlayerItem时会出现声音消失 ...

  6. [跳舞吧多人视频空间]ADS集成开发环境先容

    [跳舞吧多人视频空间]ADS集成开发环境先容 2012年01月11日 [b]跳舞吧[/b][b]视频空间美女主播聊天交友,尽在[/b][b]同城聊天室[/b][b]跳舞吧 [/b] ADS全称为ARM ...

  7. (Agora声网)多人视频聊天应用的开发(二)一对一聊天

    转载于:Android多人视频聊天应用的开发(二)一对一聊天-玖哥的书房-51CTO博客 http://blog.51cto.com/dongfeng9ge/2095626 本系列文章结合声网官方在G ...

  8. (Agora声网)多人视频聊天应用的开发(一)快速集成

    转载于:Android多人视频聊天应用的开发(一)快速集成-玖哥的书房-51CTO博客 http://blog.51cto.com/dongfeng9ge/2095621 本系列文章结合声网官方在Gi ...

  9. vue2集成声网-环信即时通讯SDK,建议实现两人聊天

    1.注册登陆环信并创建用户 步骤:注册 => 登录 => 创建应用 => 创建应用用户 登录注册:环信登陆注册页面(https://console.easemob.com/user/ ...

最新文章

  1. (C++)202012-2 期末预测之最佳阈值 满分
  2. 敏捷开发中的故事点到底是什么?如何预估故事点?
  3. 回文java_回文 Java
  4. kettle mysql 分页_kettle 分页抽数
  5. 31 锁,信号量,事件,队列
  6. 《JUnit实战(第2版)》—第1章1.2节从零开始
  7. Android View 的scrollTo 和 scrollBy方法
  8. springboot统一校验validator实现
  9. live555源码编译(win7+vs2010)
  10. Aittit rpc的实现协议 JSON-RPC XML-RPC . Ws协议webservice 目录 1. XML-RPC协议 1 1.1. JSON-RPC远程调用协议 - CieloSun
  11. springboot整合rpc远程调用_SpringBoot—-JsonRpc跨语言远程调用协议 - Java天堂
  12. WorkPlus即时通讯软件,满足政企局域网办公需求
  13. 微信小程序构建新闻列表
  14. android图片和文字设计,如何为图片加上精美文字?
  15. 魔兽世界怀旧服服务器显示地图,魔兽世界怀旧服:1-60级地图任务路线大全,快来拿走收藏!部落篇...
  16. vscode安装mindmap插件之后无法打开.km文件,vscode中文版mindmap安装
  17. java实现rsa加解密算法_JAVA实现RSA加密解密 非对称算法
  18. 关于运行软件报错Address already in use
  19. RESB 0x7dfe-$ 报错
  20. linux下使用磁带备份

热门文章

  1. 智能手机的发展有多猛?
  2. 【问题处理】Error response from daemon: Pool overlaps with other one on this address space
  3. Linux操作系统——磁盘管理
  4. 一段C语言写的病毒代码
  5. sw+vba非批量操作=180822
  6. 信息系统项目管理师教程第3版pdf下载
  7. 五线谱基础教程视频乐理基础
  8. 【附源码】Java计算机毕业设计幼儿园管理系统(程序+LW+部署)
  9. 足下教育日精进自动提交
  10. 最牛人工智能 ChatGPT,进一步的应用心得和感受,提升10倍工作效率?