airtest python脚本 airtest游戏脚本

 ==========================================================================================================

    写在前面：

     按照以下的游戏脚本，自己编写了一个与业务相关的点击，输入，搜索，播放和暂停等脚本。

    使用AirTest的图形界面touch总是感觉很怪异，可能是长时间使用脚本的原因，在代码里希望能够使用到唯一性定位的更方便。

========================================================================================================== 

1.1 如何为你的游戏写一个测试脚本

在这篇教程中，我们将使用一个基于Unity引擎开发的游戏“大鱼来了”作为范例，向大家演示如何使用我们的AirtestIDE快速地编写属于你的第一个游戏自动化测试脚本，它看上去并没有想象中的那么难。

在开始之前，我们强烈推荐你事先阅读过官网提供的5分钟上手自动化测试教程，它大致展示了从连接手机开始，到编写脚本、运行脚本、生成报告的一系列流程，然后再回头来看这篇文章中详细描述的关于游戏脚本编写的入门介绍。

本文约4500字，仔细阅读全文可能将花费10分钟以上（但能让你少走很多弯路！）。

1. 准备工作

假设现在我们已经在电脑上安装好了AirtestIDE，将手上一台Android手机通过USB线连上了电脑（连接方法请参考教程），并且打开了接下来想要测试的游戏大鱼来了。

万事俱备，现在我们在AirtestIDE上看到的画面是这样的：

image

2. 基于图像识别的脚本

首先，我们将为大家介绍如何使用基于图像识别的方式来编写脚本，我们提供了一个开源框架Airtest，它可以非常直观地在当前游戏画面上通过图像识别的方式来找出我们的目标元素，并对它进行操作。

Airtest的touch语句

例如，我们的第一个测试用例是：点击画面上的“闯关”按钮，进入关卡选择画面，然后选择“第一关”。

这个用例可以使用touch这个语句来完成，在AirtestIDE中可以通过点击Airtest辅助窗中的touch按钮，然后框选按钮来生成语句：

image

对于这个用例，我们写出了这样两行代码：

touch(

image)touch(

image)

运行代码，效果就是游戏中的“闯关”按钮和“第一关”按钮依次被按下，代码运行的原理如图：

image

进阶阅读：API文档中的touch语句

touch语句的代码看起来简单直观，就是在当前的游戏画面中寻找符合这张图片内容的坐标，如果找到了就点击一下这个坐标，如果没有找到相符的图片将会抛出一个异常。

假如我们想要进行更多复杂的操作，可以通过查阅Airtest的API文档来获取更多细节，例如了解更多的参数和用法。由于Airtest是跨平台的，因此所有平台都有的接口统一被写在了airtest.core.api中了，我们可以先在airtest.core.api这一章节中找到我们要了解的touch接口。

在接口文档中，描述了touch这个语句的作用是：对设备屏幕执行点击操作，并且是跨平台的，可以用于Android、Windows和iOS，各平台都有的公用参数是：点击位置的坐标v（或一张图片，airtest将在画面上寻找到这张图片对应的位置坐标）和点击次数times，以及一些其他平台相关的参数。

由于我们在这个例子中使用的是Android手机来录制脚本，因此我们可以继续查阅文档中平台相关的章节，找到airtest.core.android.android模块中的touch接口，可以看到，在android平台上的touch接口接受2个参数，一个是pos，也就是实际点击位置的坐标，还有一个是duration，通过它可以控制我们点击屏幕的时长，默认是0.01秒的一下轻触，我们能将它变为一下长按。

这是touch语句的另外一个示例，我们把刚才传入的图片参数替换成了一个坐标并添加了一个参数duration，所以这行代码可以长按某个坐标位置一秒钟：

touch((500, 600), duration=1)

如果觉得查阅API文档有些麻烦的话，可以直接将鼠标指针移动到AirtestIDE的Airtest辅助窗里的各个快捷按钮上，能够直接看到这个接口对应的可用参数信息。当然，我们也非常推荐各位阅读Airtest源码。

更多操作语句

除了touch之外，我们还提供了其他几种最常见的操作语句，利用它们我们能实现更加复杂的操作：

• swipe，可以从一个位置滑动到另外一个位置
• wait，可以等待画面中某个图片出现
• exists，判断画面中是否存在某个图片
• text，调用输入法，输入一段文字
• …

除了操作语句外，我们在编写测试脚本的过程中也需要验证运行结果是否正确，Airtest提供了专属的断言语句，方便我们进行验证：

• assert_exists，断言图片存在于当前画面上
• assert_not_exists， 断言图片不存在
• …

一个完整的测试用例

了解过常用语句后，接下来我们可以通过一小段代码来实现这样的一个用例：

• 打开我们的待测游戏
• 选择游戏模式
• 滑动屏幕到最右方，选择想玩的关卡“第20关”
• 验证是否成功进入到了“第20关”的关卡准备画面

示例代码：

image

在这段代码中，我们展示了绝大多数的Airtest语句，利用它们能够轻松地写出逻辑复杂的自动化测试脚本了。

新的用例和新的挑战

Airtest满足了我们简单快速地编写游戏自动化测试脚本的需求，然而它的核心技术是基于图像识别，除了上一章节中提出来的成功率较低的问题之外，我们发现它在测试一些更复杂的需求时有些力不从心。

例如我们现在有一个新的用例：

• 打开商城
• 升级“无敌泡泡”道具，这将会扣除一定的金币
• 验证是否成功扣除了背包中的金币

image

如图所示，尽管我们能够轻而易举地通过截图的方式来识别到金币控件，然而里面的数值难以获取。同样地，我们能够写出touch语句去点击升级按钮（尽管需要一些小技巧才能区分出哪一个是“无敌泡泡”对应的“升级”按钮），却难以验证背包金币是否正确扣除了画面中标注的“400”金币。

好在，我们提供了另外一种方案来更好地解决这类问题，那就是基于控件搜索的Poco框架。

3. 基于控件识别的Poco

先暂时抛开上面提出的用例不提，我们简单了解一下Poco和Airtest的区别在哪里。

image

这是一张在AirtestIDE中使用Poco插件时的截图，我们利用Poco，可以准确地定位到当前游戏画面上的元素在实际UI结构树中的位置，还能够获取到这个“Go”按钮的名字、坐标等详细信息，并且我们还能通过编写一定的筛选语句来获取到这个按钮，并对它进行点击等操作。

假设我们现在想点击画面中这个“Go”按钮，使用Airtest的话，我们将写出这样的语句：

touch(

image)

在Poco中，写出来的语句截然不同，却简单而不失优雅：

poco("Go").click()

这是一个简化的原理图，对比了Airtest和Poco的操作原理： 

image

可以看到，Poco最大的区别就是多了一个Poco-SDK模块，我们需要将Poco-SDK嵌入到被测游戏中，才能够顺利地获取到UI结构树，从而进行接下来的解析和处理操作。

如何接入Poco

在这一个章节里，我们将介绍如何让你的游戏接入Poco，享受它的强大之处。

Poco目前支持以下几种模式（不仅仅包含游戏引擎）：

• Cocos2dx-js，Cocos2dx-lua -> 接入文档
• Unity3D -> 接入文档
• Android 原生APP -> 无需接入
• iOS -> 帮助文档
• 网易自研引擎
• 其他引擎 -> 可自行接入
• 更多平台更多引擎，敬请期待

简而言之，对于游戏测试来说，想要使用Poco就需要事先根据接入文档，将Poco-SDK接入到你想要测试的游戏中，如果对于文档有疑问，可以邀请你的项目组程序来帮忙一起阅读和接入。

上手写Poco脚本

好了，假设在项目组程序大哥的帮助下，我们已经把测试用的大鱼来了游戏接入了Poco的Unity3D版本的SDK，接下来的脚本编写就很简单了：

image

基本的使用流程类似这样：

• 在Poco辅助窗中选择对应的模式，例如这里我们选择Unity
• 脚本编辑窗口将提示是否插入对应的初始化语句，点击yes
• 空白的脚本中将被插入两行poco的初始化语句内容
• 等待几秒钟，Poco辅助窗中将显示出当前游戏画面中的UI树结构
• 单击UI树上的节点，将显示节点内容到下方log窗口中；双击UI树上的节点，将自动插入该节点对应的代码到编辑框中；点击暂停按钮，可以将当前UI树冻结，方便查看更详细的信息
• 拿到我们需要的节点后，我们可以对它进行操作，例如.click()，.swipe()

接下来，回到我们刚才的那个使用Airtest难以完成的用例：

• 打开商城
• 升级“无敌泡泡”道具，这将会扣除一定的金币
• 验证是否成功扣除了背包中对应数量的金币

于是我们可以写出一个这样的示例脚本：

# 请务必先启动待测的app，再对poco进行初始化
start_app("fish.package")

# 初始化Poco，非常重要！
from poco.drivers.unity3d import UnityPoco
poco = UnityPoco()

money = int(poco("Money").child('Text').get_text())

# .get_text()能够帮助我们获取到它的值
cost = int(poco("2024").child("Upgrade").child("NonFullPanel").child("Cost").child("Number").get_text())

# 点击待测道具的升级按钮，请注意末尾的.click()
poco("2024").child("Upgrade").child("NonFullPanel").child("UpgradeBtn").click()

current_money = int(poco("Money").child('Text').get_text())

assert_equal(money-cost, current_money, "成功扣除对应金币")

对于新手来说，有几个点非常容易出错：

• poco的初始化应该放在游戏启动以后再进行，因为poco需要与游戏中的poco-sdk进行通信，需要等待游戏将poco-sdk初始化完成，才能初始化poco
• 请务必选择正确的Poco模式，先弄清楚自己的游戏是什么引擎做的，然后再进行对应的SDK接入，接入成功后才能够开始使用
• poco中的UI对象只是一个代理，需要对它进行进一步操作（例如.click()，或是.exists()）才能达到符合我们预期的效果，举个例子：

# 例如，这样来判断画面中存在Go按钮的if语句写法是错误的
# 因为Poco("Go")是一个UIObjectProxy对象
if Poco("Go"):
    Poco("Go").click()
# 正确写法应该是
if Poco("Go").exists():
    Poco("Go").click()

进阶：如何改进和完善脚本

刚才我们写出来的代码是直接使用AirtestIDE的Poco插件来自动生成对应的节点选择代码的（通过双击UI树上的节点），这对于新手来说非常容易操作（我们还提供了一个自动录制的功能，可以直接把当前鼠标的操作快速录制成语句），然而需要注意的是，有些时候自动生成的代码可能不符合我们的需求。

举个例子，在大鱼来了的道具选择画面中，有多个标注价格的节点，如图： 

image

假如直接使用AirtestIDE选中节点，双击后生成的节点选择代码有可能是这样的：

# 磁力泡泡道具需要花费的金币标签
poco(text="600")

乍看之下，这行自动生成的代码简洁明了，也能完成我们的需求“获取磁力泡泡道具对应的金币值”，然而这段代码直接使用了text="600"作为选择条件，假如这个节点的数值发生了变化、或是有其他的道具也需要花费600金币时，这行代码的运行结果可能就不符合我们的预期，因为它不能精确地定位到我们指定的特定节点。

如何修改这行代码，就需要我们对Poco的选择器有一定了解，通过自己编写一定的选择条件来修改它。

所以在这里我们建议大家：

• 阅读我们提供的入门教学用例，教学demo里提供的游戏和应用都已经接入了Poco-SDK，能够最快速度上手体验Poco
• 仔细阅读Poco文档，学习如何使用Poco选择UI对象，对于选择器的熟练掌握能够让我们写出更符合我们需求的UI选择代码
• 文档中的操作UI对象描述了最常用的一些操作，可以先学习上手
• 当已经大致入门后，可以更深入地阅读Poco instance API和Poco proxy object API，以及API文档的其他章节

4. 小结

这篇文章介绍了使用Airtest和Poco编写游戏测试脚本的一些入门指南，和一些新手常见问题的解答，更多进阶的内容请查阅官方文档手册。

值得注意的是，Poco和Airtest都是作为Python第三方库引用的，本质上我们编写出的脚本都是普通的Python脚本，因此完全可以同时使用，搭配起来能够更精准地实现我们的测试需求，同时还能引入Python的其他第三方库，写出更复杂强大的脚本。