Android Alpha/Beta测试

Question

我的公司将在未来几周/几个月内发布一款用于Android的通讯应用程序。它是Nexus 7 2013设备上的嵌入式应用程序，运行AOSP时做了一些小修改。这使得典型的远程更新变得复杂，因为要将APK/libs安装到OS系统文件夹中，还必须运行一个额外的步骤。

我们的计划是进行Alpha和Beta试验，我们已经开始召集志愿者。我们将把APK加载到设备上，并初步发布。我已经找到了很多关于一般准备发布的信息(单元测试，签署APK，等等)，但我正在寻找有关Alpha和Beta版本的信息。

问题：

• 我们需要远程更新应用程序，而不需要将设备带进来。
• 我们需要收集尽可能多的(有用的)关于使用、设备统计、错误和崩溃的数据。

研究与可能的解决方案：

• 开发控制台Alpha/Beta测试- https://developer.android.com/distribute/googleplay/developer-console.html
• 应用程序刀片或其他第三方支持工具- https://appblade.com
• 分析库
  • Flurry https://developer.yahoo.com/analytics
  • 混合面板- https://mixpanel.com/android-analytics
  • Google https://developers.google.com/analytics/devguides/collection/android/v4/
  • 振幅- https://amplitude.com/behavioral-analytics-platform
  • 地方学($) - https://www.localytics.com

​

• 以编程方式在设备上获取logcat并上载到服务器
• 将特定的应用程序内日志/统计数据保存到内部SharedPreferences或SQLite数据库，并定期上载到服务器。
• 收集来自阿尔法/贝塔测试人员的书面反馈，通过调查，电子邮件交流等。
• 如果设备在手，我们可以通过：调试崩溃。
  1. 将logcat转储到文件-- "adb logcat -d > logcat.txt“
  2. 检查内核日志-/proc/last
  3. 检查转储-/数据/不恐慌

​

问题：

• 你有没有使用Google Play Developer控制台运行Alpha/Beta测试？有用吗？
• 您是否使用过像App这样的第三方工具来推动发布和收集统计数据？
• 在应用程序发布后，收集详细统计数据/反馈的最佳实践是什么？

提前感谢

Answer 1

1. Alpha/Beta测试非常有用。您可以为Alpha和beta测试人员创建google+社区。然后添加那些与指定用户共享应用程序的社区。新版本可以很容易地部署并通知alpha和beta用户。
   1. Nups
   2. 实际上有多种方法:编写您自己的信标类型的系统，从设备收集信息，并定期发送使用警报管理器的信息。对于存储日志，应该使用sql。

​

Answer 2

1. 是。我尝试过使用开发控制台和G+组运行私有Alpha和公共测试版。如果测试人员习惯于g+，以及当我们在那里收集反馈时，它是如何工作的，这是非常有用的。此外，这也是我所知道的无缝地将更新“推送”给用户的唯一方法。唯一的缺点是开发控制台缺乏api，因此无法从ci服务器自动上传构建。
2. 尝试试飞之前，它被苹果收购，但没有使用它作为反馈，只是分发。在最简单的情况下，我使用了Dropbox。
3. 我建议采用以下反馈“堆栈”：

- Crashlytics for exception reports (they also do beta distribution now but haven't tried it yet) - [http://crashlytics.com](http://crashlytics.com/) 
- Google analytics for metrics like time spent on certain parts, load times etc
- G+ groups for direct feedback

​