16 | APNs：聊一聊第三方系统级消息通道的事

Oct 2, 2019

16 | APNs：聊一聊第三方系统级消息通道的事-极客时间



下载APP





关闭

讲堂部落提薪训练营云原生训练营架构实战营企业版极客商城兑换中心 App下载浏览器插件

渠道合作

推荐作者

16 | APNs：聊一聊第三方系统级消息通道的事

2019-10-02 袁武林来自北京

《即时消息技术剖析与实战》

课程介绍



讲述：袁武林

时长17:54大小14.31M



你好，我是袁武林。
前面几节课里，我讲到在即时消息场景下，我们会依赖服务端推送技术来提升消息到达的实时性，以及通过各种手段来保证消息收发通道的可用性，从而让消息能尽量实时、稳定地给到接收人。
但在实际情况中，出于各种原因，App 与服务端的长连接会经常断开。比如，用户彻底关闭了 App，或者 App 切换到后台一段时间后，手机操作系统为了节省资源，会杀掉进程或者禁止进程的网络功能。在这些情况下，消息接收方就没有办法通过 App 和 IM 服务端的长连接来进行消息接收了。
那有没有办法，能让消息在 App 被关闭或者网络功能被限制的情况下，也能发送到接收人的设备呢？答案是：有。
现在手机常用的 iOS 和 Android 系统，都提供了标准的系统级下发通道，这个通道是系统提供商维护的与设备的公共长连接，可以保证在 App 关闭的情况下，也能通过手机的通知栏来下发消息给对应的接收人设备。而且，当用户点击这些通知时，还能重新唤醒我们的 App，不仅能提升消息的到达率，还增加了用户的活跃度。
第三方系统下发通道常见的第三方系统下发通道，有 iOS 端的 APNs，以及 Android 端的 GCM 和厂商系统通道。
iOS 端的 APNs（Apple Push Notification service，苹果推送通知服务），是独立于应用之外，依托系统常驻进程来维护和苹果服务器的公共长连接，负责全局的系统推送服务。
在 Android 端上，有 Google 的 GCM（Google Cloud Message，Google 云消息传递）。但 GCM 由于某些技术原因（如 NAT 超时太长、暴露的 5228 端口连通性差等）和某些非技术原因（需要和 Google 服务器建立连接），Android 端的 GCM 在国内被大部分手机厂商定制化后直接去掉，并替换成了各自的系统通道。目前国内 Android 的系统级下发通道基本都是厂商通道，目前已知的有 5 家：小米、华为、vivo、OPPO、魅族。
APNs接下来我们就来了解一下 iOS 端的系统推送服务 APNs。
下面借用苹果官网的一张图来简单说明一下，当 App 在没有打开的情况下，消息通过 APNs 下发到设备的过程：
首先，Provider（也就是 IM 服务器）把消息通过长连接发送到 APNs 上；
紧接着，APNs 把消息推送到接收方用户的 iOS 设备端，并在设备的通知栏进行展示；
最后，用户通过点击通知等操作可以唤醒 App，来进行一系列的交互活动。
整个流程看起来比较简单。但仔细思考后，你可能会对其中的几个地方产生疑惑，比如，APNs 是如何识别 App 的用户在哪台设备上？还有 IM 服务器是如何告知 APNs，应该把消息推送给哪个设备的哪个 App 呢？
别着急，下面我就带你来了解一下，这两个问题在技术上是怎么解决的。
先了解一个概念吧：DeviceToken。
什么是 DeviceToken？DeviceToken 是 APNs 用于区分识别不同 iOS 设备同一个 App 的唯一标识，APNs 的网关和设备通信时，通过系统默认自带的长连接进行连接，并通过 DeviceToken 作为当前连接设备的唯一标识进行系统消息的推送。
要通过 APNs 实现系统推送，我们的推送服务（Provider）需要先和 APNs 建立长连，建连时携带的证书包含“准备接收”系统消息推送的 App 的 Bundle Identifier（Bundle Identifier 是一款 App 的唯一标识）。
每当我们有消息需要推送时，都必须连同消息，再携带待接收系统设备的 DeviceToken 给到 APNs。APNs 通过这个 DeviceToken，就能找到对应的连接设备，从而就可以把消息通过 APNs 和设备间的长连接，推送给这台设备上的 App 了。具体的流程你可以参考下面这张官网图。
那么，DeviceToken 是固定不变的吗？
一般来说，在同一台设备上，设备的 DeviceToken 是不会发生变化的，除了以下几种情况：
iOS 系统升级后；
APNs 出于安全等原因，禁用了这个 DeviceToken。
因此，如果 DeviceToken 由于某种原因发生变化，但 IM 服务端并不知道，就会导致 IM 服务端携带失效的 DeviceToken 给到 APNs，最终导致这次系统推送消息失败。
所以，一般情况下，我们的 IM 服务端可以在每次启动 App 时，都去请求 APNs 服务器进行注册，来获取 DeviceToken。正常情况下，客户端每次获取到的 DeviceToken 都不会变，速度也比较快。客户端在首次获取到 DeviceToken 之后，会先缓存到本地，如果下次获取到 DeviceToken 后，它没有发生变化，那么就不需要我们再调用 IM 服务端进行更新了。这也算是个小技巧，你可以试试看。
那么，如果 App 没来得及更新到 IM 服务端，但 DeviceToken 已经过期了，我们该怎么办呢？
最新的 APNs 协议是基于 HTTP/2 实现的，针对每条消息的推送，APNs 都会返回对应的状态码来明确告知 IM 服务端此次的消息推送成功与否。
当 IM 服务端把待推送的消息和 DeviceToken 给到 APNs 时，APNs 会先检查这个 DeviceToken 是否失效，如果已经失效，那么 APNs 会返回一个 400 的 HTTP 状态码，根据这个状态码，IM 服务端就可以对维护的这个失效 DeviceToken 进行更新删除。
当然，这里我有必要说一下：当我们在使用旧版的 APNs 协议时，可能会比较麻烦一点，因为旧版的 APNs 协议在判断 DeviceToken 失效时，会断开连接，这时就需要 IM 服务端再通过 APNs 提供的另一个 Feedback 接口，来定时获取这些失效的 DeviceToken，然后删除掉，这样下次推送才不会再用到。
APNs 都能发啥消息？了解了 DeviceToken 的作用后，我们再来看一下，通过 APNs 都能下发什么样类型的消息。
从 IM 服务端发送到 APNs 的每一条消息，都会有一个 Payload（负载）的数据结构，这个 Payload 包括我们要发送的消息内容和一些推送相关的方式等数据信息，一般是一个 JSON 格式的字符串。
这个字符串可能会包括：接收时通知的标题、子标题、具体通知的内容，以及 App 的角标数是多少、接收时播放的声音，等等。同时也包括一些自定义的内容字段，比如，群消息一般还会携带群 ID 和具体的这条消息 ID，便于用户点击唤醒 App 时能够跳转到相应的群聊会话。你可以参考下面这个代码设计：
{
   "aps": {
       "alert : {
      "title": “新消息”,           //标题
          "subtitle": “来自： 张三”,   //副标题
      "body": “你好”              //正文内容  
       },
       "badge": 1,                   //角标数字
       "sound": "default"            //收到通知时播放的声音
    },
    "groupID": “123”,
    "mid": "1001"
}
这里需要注意的是：Payload 的大小是有限制的，iOS 8 之前是 256B，iOS 8 之后是 2KB。在 iOS 10 以后，推送的消息 Payload 大小调整为了 4KB。另外，iOS 10 之前只能推送文字，而在它之后可以支持主标题、副标题，还能支持附件。
静默推送除了发送各自通知栏弹窗的强提醒推送外，APNs 还支持“静默推送”。
“静默推送”是 iOS 7 之后推出的一种远程系统推送类型，它的特色就是没有文字弹窗，没有声音，也没有角标，可以在不打扰用户的情况下，悄无声息地唤醒 App 来进行一些更新操作。
比如，我们可以使用“静默推送”来每天定点推送消息，让某些 App 在后台静默地去更新订阅号的文章内容，这样用户打开 App 时就能直接看到，不需要再去服务端拉取或者等待服务端的离线推送了。
APNs 的缺陷了解了 APNs 的实现机制和能力，你可能会比较困惑：既然 APNs 能够做到 App 打开或者关闭的情况下，通过系统通知把消息推送给用户，那好像也不需要我们再去实现自己维护一条 App 和 IM 服务器的长连接了？通过 APNs 的系统通知的跳转，去唤醒 App 后，再根据未读数从服务端拉取未读消息，好像也没问题啊？
既然如此，那么为什么大部分即时消息系统还是要自己维护一条长连通道呢？主要原因是由于 APNs 本身还存在一些缺陷。
可靠性低APNs 的第一个缺陷就是可靠性没有保障。这应该是苹果官方出于维护成本的考虑，APNs 并不能保证推送消息的到达率，也不能保证消息不发生延迟。
也就是说，你要推送的消息给到了 APNs，但 APNs 并不能保证这条消息能真正推送到用户设备上，而且也无法保障消息不发生延迟，可能你给到 APNs 的消息需要几分钟后用户才收到，这个现象用过 iPhone 的用户估计应该都碰到过。
离线消息的支持差除了可能丢消息和延迟高的风险外，APNs 的另一个缺陷就是无法保障离线消息的存储。当用户的设备离线或者关机时，APNs 就没有办法马上把消息送达给用户，这种情况下，如果 APNs 需要向你这台设备发送多条推送时，就会启动它的 QoS（Quality of Service，服务质量）机制，只保留给你最新的一条消息，在这种场景下，就会存在丢失离线消息的问题。
出现这种问题的主要原因应该也是出于存储成本方面的考虑，由于 APNs 的消息接收量整体基数太大，大量的存储和转发对服务器的资源消耗非常大，出于成本考虑，APNs 就会丢掉一部分离线消息。
角标累加问题除此之外，APNs 还有一个小吐槽点是：对于角标的未读数，APNs 不支持累计 +1 操作，只支持覆盖原来的角标未读数。所以在每条消息下推时，APNs 还需要把这个用户的总未读消息数一起带下去，对后端未读数服务来说会增加额外的调用压力，而 Android 端的厂商通道就相对更友好一些，很多厂商的角标未读支持根据接收到的通知消息自动累加的特性。
Android 的厂商通道对于 Android 端来说，应用的后台保活一直是提升消息在线推送到达率的重要手段，很多操作系统默认的配置是：切到后台一段时间后，会直接杀掉进程或者让进程断网。
虽然 App 间有互相拉起进程的取巧方式，以及系统厂商给某些超级 App（比如微信）的保活白名单机制，但对于大部分 App 来说，还是需要在 App 被杀死或者被限制的情况下，通过厂商的系统通道推送消息，以此提升整体的消息到达率。
对于开头我提到的 5 家厂商通道的接入，它们都提供了专门的 SDK（Software Development Kit，软件开发工具包），这些厂商 SDK 能够支持的功能，大致上和 APNs 比较类似，这里就不详细展开了，你可以自行了解一下。
不过值得说一下的是，由于各家 SDK 使用上各异，开发接入成本会相对较高，因此市面上还有很多第三方的 Push 服务，这些第三方的 Push 服务整合了多家厂商的 SDK，对外提供统一的接入，降低了对接门槛，比如个推、信鸽、极光、友盟等。
国内统一推送联盟由于国内各个厂商系统推送通道的差异性，造成 Android 端系统推送整体上的混乱和复杂性。为此在 2017 年，中华人民共和国工业和信息化部（简称工信部）主导成立了安卓统一推送联盟，联合各大手机厂商和运营商共同推出了“推必达”产品，对标的是苹果的 APNs 和 Google 的 GCM。
根据官网的介绍，“推必达”除了通过传统的 TCP 长连网络来进行系统消息的下推外，还会和运营商合作，支持通过运营商的信令通道来进行消息下推。因此在没有 WiFi 和移动网络的场景下，我们只要有手机信号，也能接收到系统推送。
下面是“推必达”官网提供的技术架构图。你可以看到，“推必达”提供了专门的 SDK 给到客户端，当各个 IM 服务端有消息需要通过系统推送触达用户时，会把消息直接或通过第三方推送服务交给各个厂商部署的 UPS 服务器，UPS 服务器再通过和客户端 SDK 维护的长连接，把消息推送下去。
由于其支持多种消息的触达途径，“推必达”的消息到达率据官网反馈：在全国 34 个省市的测试，消息到达率为 99.999%。目前，国内主要的手机厂商如华为、小米、OPPO、vivo 等，都已经加入到这个联盟中。另外，工信部要求到 2019 年 12 月 31 日，现有的各推送通道需要兼容统一推送标准。
因此，我认为对于 Android 端的系统推送来说，“推必达”产品如果能够成功落地，应该是未来系统推送的趋势。
小结好，简单回顾一下今天课程的内容。这一讲，我主要讲到了提升消息整体到达率的利器：第三方系统推送。通过手机厂商提供的系统级长连推送服务，可以让 App 在没被打开或后台网络功能被系统限制的情况下，也能够通过厂商通道将消息触达到用户。
在 iOS 端，是由苹果提供的 APNs 服务来提供系统推送的能力。IM 服务器把待推送的消息连同唯一标识某台设备的 DeviceToken，一起给到 APNs 服务器，再由 APNs 服务器通过系统级的与任何 App 无关的长连接，来推送给用户设备并展示。新版本的 APNs 服务支持文本、音频、图片等多媒体消息的推送，以及无任何弹窗通知的静默推送。
但是 APNs 并不保证消息推送不发生延迟，也不保证消息能真正到达设备，对消息大小也有限制。因此，在可靠性上，APNs 比 App 自建的长连接会差一些，所以一般也只是作为自建长连接不可用时的备选通道。
Android 端下，目前国内主要是由各个手机厂商各自维护的厂商通道来提供系统推送服务。目前已知支持厂商通道的也只有 5 家，而且各家 SDK 都没有统一，所以整体上看，Android 端的推送接入比较复杂和混乱。
目前工信部主导的“统一推送联盟”，它的目的就在于通过提供统一的接入方式，以此解决这种混乱状况。其推出的产品“推必达”支持在移动网络不可用的情况下，通过电信信令通道来触达用户，能进一步提升消息的到达率，是我们值得期待的解决方案。
系统推送作为一种常用的触达用户的方式，对于即时消息场景来说是提升消息到达率的一条非常重要的途径。但这些系统推送通道目前还存在可靠性低、功能不完善、生态混乱等问题，因此，对消息可靠性要求较高的场景来说，系统推送通道基本上只能作为对自建长连接推送通道的一个补充。系统推送也是一门普适性很强的技术，了解当前系统推送的业界现状和进展，对于你的前后端知识体系也是一个很好的补充和拓展。
最后给大家留一个思考题：静默推送支持的“唤醒 App 在后台运行”功能，你觉得都有哪些应用场景呢？
以上就是今天课程的内容，欢迎你给我留言，我们可以在留言区一起讨论。感谢你的收听，我们下期再见。

分享给需要的人，Ta购买本课程，你将得18元

生成海报并分享

赞 3

提建议

15 | CDN加速：如何让你的图片、视频、语音消息浏览播放不卡？

17 | Cache：多级缓存架构在消息系统中的应用

 写留言

精选留言(18)

GeekAmI
2019-11-11
“一般情况下，我们的 IM 服务端可以在每次启动 App 时，都去请求 APNs 服务器进行注册，来获取 DeviceToken。” 老师，这句话不太理解，到底是App去APNs获取DeviceToken，还是IM服务端获取呢？
作者回复: app去APNs获取devicetoken，如果发生了变化再由app上报给im服务器进行记录。
5
clip
2019-10-03
“DeviceToken 是 APNs 用于区分识别不同 iOS 设备同一个 App 的唯一标识” 是“不同 iOS 设备不同 App”吗？
作者回复: devicetoken只是识别设备的哈，每台设备的devicetoken都不一样。
共 4 条评论
2
冬
2019-11-21
老师，Apple除了静默推送，还有更可靠的Voip 推送哦
作者回复: 👍
1
谢炳辉
2019-11-15
怎么理解因此在没有 WiFi 和移动网络的场景下，我们只要有手机信号就能推送不是有信号就有网络了吗
作者回复: 这里说的是某些场景下手机没有网络信号，只有通信信号，也就是能打电话能收短信但是上不了网。
1
GeekAmI
2019-11-11
静默推送是不是可以这样搞？静默推送->唤起app->重新建立长连接通道->服务端通道长连接通道下达消息。
作者回复: app在后台被静默推送唤醒后只有30s的后台运行时间，所以建立长连后可能也会很快再被掐断。可以考虑用来进行一些多媒体消息的后台预拉取。
1
小可
2019-10-02
app后台自动升级(如果设置自动更新升级)
作者回复: 嗯，这个应该是可行的。
1
追风筝的人
2022-09-19 来自陕西
推必达产品还没做出来凉了应该，域名也不能访问了chinaupa.com
薛建辉
2022-07-19
老师你好，我实际工作中遇到一个问题，如何提高自建长连接的在线推送成功率。原本国内线上单次推送成功率在70%左右，我将业务心跳从30秒改成5秒之后，线上环境成功率提升到90%，内测环境成功率达到98%，将近10%的差距。请老师给些下一步改造建议。我想到的下一步改造措施是：从原本单次推送，改成5秒内多次重推的方式。请问老师是否靠谱？另外，请教下老师你是怎么提高自建长连接推送成功率的？
展开
不卷怎么搞钱
2022-07-01
老师，我想问下，DeviceToken存的话怎么存好点呢？因为当大批量发push的时候，可能要查几百万的DeviceToken去发push，对于循环查mysql来说，肯定是没那么友好，reids的话也不合适，因为可能有的用户每天就只会收到一条push，redis的成本也高。
laolinshi
2022-03-28
老师，想问个问题，每次调用APNS通道时需要传人deviceToken, 假如一次需要推送几千万的用户，那传人APNS接口的deviceToken就会达到几千万这个量级？
Geek_fa166f
2022-02-18
请教下老师：海外APP推送，使用什么第三方的服务比较好呢（包含IOS以及安卓）?
李进
2022-02-09
之前做过IPad的mdm，有用到APNS，应该是静默推送。
空白
2020-05-28
请教下统一推送联盟不会出统一的sdk嘛？目前和第三方厂商了解到并没有提供，对于开发者接入的成本还是很大
🐌🐌🐌
2020-03-16
im中app端如何实现在线电话和在线视频，现在流行一般采用何种技术实现，在线视频和电话在服务端说一般做录音存储文件吗？
共 1 条评论
白泗小林
2019-10-31
apns 的消息去重一般怎么做的？
作者回复: APNs本身并不保证消息不重不丢，所以实际上很难控制，应用层面能做的只是尽量避免业务层面重复发送给APNs导致重复下推的问题。
Michael
2019-10-20
每台iPhone设备的的deviceToken都不一样，IM服务器给APNs推送消息数据需要带上deviceToken,但是IM Server是如何获取到设备的deviceToken的呢？
作者回复: 课程中有讲到哈：一般情况下，我们的 IM 服务端可以在每次启动 App 时，都去请求 APNs 服务器进行注册，来获取 DeviceToken。正常情况下，客户端每次获取到的 DeviceToken 都不会变，速度也比较快。客户端在首次获取到 DeviceToken 之后，会先缓存到本地，如果下次获取到 DeviceToken 后，它没有发生变化，那么就不需要我们再调用 IM 服务端进行更新了。这也算是个小技巧。
共 2 条评论
Michael
2019-10-04
思考题：可以唤起app，重新建立长连接。
作者回复: 嗯，这个是比较常见的用法。
刘丹
2019-10-02
请问如果发送方使用小米的推送服务，那么非小米手机怎样接收到消息呢？竞争品牌可能不允许在手机里安装小米的拉取软件。
作者回复: 一般这些推送服务是已sdk的方式集成到你自己的app里，推送不是独立存在的一个app。另外，这个得看下小米的推送服务是否有集成接收方手机的厂商sdk，如果有，那应该是没问题的，如果没有，估计厂商很难让第三方推送服务的长连接运行。

