与100多名测试人员一起测试iOS应用程序Alpha和Beta

Question

我们正在寻找解决方案，以测试与测试人员的大群体。我们希望首先测试2,000个用户的应用程序，然后将测试人员数量增加到30,000人，然后将应用程序发布给一般观众。

我的理解是，对于常规的苹果开发帐户，我们只能使用100台设备，而使用企业帐户，我们不能在我们的组织之外分发构建。

对于发布之前的大规模用户测试，还有哪些苹果公司可以接受的测试策略？

Answer 1

这可能不是你正在寻找的答案，但据我所知，如果你正在寻找控制谁来测试你的游戏的方法，唯一的方法是使用Promo Code(每个批准的二进制版本100 )和Ad-Hoc (也是另外100个特定的设备)。

你可能已经意识到了这些，所以这里有另一个(控制较低的)方法:在1-3个小国家发布它。我看到其他公司做了很多这样的事情。如果我没记错的话，Rovio通过先在加拿大发布游戏来测试他们的游戏，以便“测试”游戏是否好，或者是否有任何关键问题出现在系统上，也最有可能测试他们的指标。据我所知，其他公司也在做同样的事情。

由于您可以精确控制发布到的国家/地区，因此这可能是一个很好的选择。尽管如我前面所说，您将无法真正控制样本大小，也无法确定谁可以或不可以测试您的应用程序。

编辑:为了它的价值，我们将使用这种方法，当我们第一次软启动我们的游戏时。我们将首先从新加坡开始，因为它是一个非常小的国家，拥有非常好的全国移动网络支持和智能手机普及率。另外，英语是这个国家的官方语言之一。

Answer 2

因为删除用户并不能在100个用户的限制中腾出空间(直到下一年)，所以在beta测试时很容易遇到这个问题，甚至是狗脚。我们使用以下平台进行版本分发和安装：

TestFlight：在几个问题之后，我们最终放弃了它，其中最大的问题是有很大一部分时间“实时”崩溃报告几个小时甚至几天都没有出现。当我们开始多个iOS开发团队时，其他问题是不一致的堆栈跟踪符号化和与分发列表的恼人。

HockeyApp：它不是完美的，但它对我们来说工作得更顺利，并解决了我们的主要痛点。

无论您选择什么，我都强烈建议您使用SDK进行应用内更新和反馈，以及崩溃报告和其他分析。

hockeyapp testflight

Answer 3

@Elvin R.

最初，您希望从大约25个内部测试人员开始(这将是您的alpha测试)，然后最终扩展到1000个外部测试人员(这将是您的beta测试)。

当你满意的时候，你就可以上线了。

有关使用试飞进行alpha和beta测试的详细信息：

https://developer.apple.com/library/mac/documentation/IDEs/Conceptual/AppDistributionGuide/DistributingYourAppUsingTestFlight/DistributingYourAppUsingTestFlight.html#//apple_ref/doc/uid/TP40012582-CH37-SW1

https://developer.apple.com/testflight/

要开始，您可以转到下面的页面。页面中有帮助你的链接，底部有前一个和下一个链接，帮助你在itunes上工作。

https://developer.apple.com/library/mac/documentation/IDEs/Conceptual/AppDistributionGuide/SubmittingYourApp/SubmittingYourApp.html