飞天助手学习笔记

[TENCHIANG]

安装安卓模拟器

• 雷电模拟器
• 遁地模拟器（官网有）
• 安装 指端精灵（调试版）
  • ais/apk/dAisApp.apk
• 分辨率设置为 720p （红手指云手机平台默认分辨率）

指端精灵脚本调试

• 勾选 免脚本配置运行 （不用在手机里点击会自动运行脚本）
• 点击 运行，运行脚本调试
• 点击 停止，停止脚本调试
• 要经常点击编译，才会编译最新的代码
• floatwinrun：是必须的，相当于主函数
  • 先运行这个文件里的所有代码，如果出错则不往下执行（也不报错）
  • floatwinrun 本身会在另外的地方被调用
  • 只有在主函数里面的代码才会被报错

图色助手

• 先点击快照（比红手指截图快）
• 然后选择坐标体系（home键方位）：setrotatescreen
  • 0 下
  • 1 右
  • 2 左
  • 3 上
• 点击截图上的点，Ctrl+1 获取 绝对坐标 和 颜色值 到右边的 第 1 栏 总共有 1 ~ 0 十个
  • 模拟轻点 tap(x, y)

多点找色

findmulticolor、findmulticolorex

• 去图色助手先生成快照、选择坐标体系设置后，打三个点
• 左边 选取范围
• 右边勾选 坐标+多点同步复制
• 点击 多点找色 的 复制（此时已经复制六个参数，还差 sim、scantype）
• findmulticolor(x1, y1, x2, y2, color, OffsetPos, sim, scantype)
  • sim 相似度
  • 0.1~1.0（一般0.9）
  • scantype 扫描方式（一般选0就行）
  • 0 从左上到右下
  • 1 从中间到四周
  • 2 从右下到左上
  • 会返回 x, y 如果没找到则返回 -1

解决Hyper-V和VT-x冲突的方法

• Hyper-V（docker）
  • 装了Hyper-V就会关闭VT，也就是用不了其它虚拟机了?
• VT-x（安卓模拟器）
• 不可兼得也

XM插件使用技巧

导入XM插件

• 右上角，插件，点击添加 XM.lua
  • 左侧项目 plugin 就会有
• 在主函数 floatwinrun 里 require "XM"
• 注意：每新建一个项目都得重复上述两个操作

多点找色

• 按住 ctrl 然后点击鼠标左键 就会依次加入色点

function floatwinrun()
    require "XM"

    local tab = {}

    tab["多点找色"] = {
        --[[
        1 名称
        2 相似度（不填默认为0.8）
        3~6 范围 不填则为全屏
        7~8 
        ]]
        { "微信", 0.8, 398,210,486,301,"03DC6C-000000","10|19|FFFFFF-000000,42|48|06C562-000000" }
    }

    local function startApp (name)
        assert(type(name) == "string")
        XM.SetTableID("多点找色")
        lineprint(tostring(XM.Find(name, true)))
    end

    XM.KeepScreen()
    XM.AddTable(tab)

    startApp("微信")
end

综合滑动

• XM.Swipe

要模拟人的行为

• 时间间隔不能一样
• 点的位置不能一样

同比例分辨率乘倍数即可

• 如默认 720p，实际机器 1080p，也就是1.5倍（取色的时候也是基于720p）
• 需要在所有用到坐标参数的位置乘1.5（包括偏移量）
• XM.SetScale(720, 1280) 封装好了的函数

尽可能的减少色点检测功能

• 检测一个“锚点”，然后直接使用 XM.RndTap
• 界面切换时，点击不要太快

尽量封装自己的库

• 自己封装AIS库，避免使用XM

因为多语言的原因，能不取字尽量就不要取字

• 选择文字范围，右键制作字库
• 选择文字的颜色，勾选，然后调整偏色到最佳的状态
• 点击 提取点阵（多个）
• 输入定义文字的框，然后回车

新版字库

• 选择文字范围 右键制作新字库
• 点击左边 手机快照 对文字进行取色
• 点击右边色盘 粘贴 文字的颜色 偏色先调整为0
• 点击右边 多个点阵 ，看看右边每个是否一一对应，否则调整色偏
• 中间的定义文字 回车
• 字库另存为

点击时间很重要，不能太快，要有适当的延迟

• 还有截屏的原因

上架

• 脚本说明就是更新说明

setrotatescreen

• 0 1 2 3 Hom键在 下 右 上 左
• 设置坐标体系相当于
  • releasecapture(0)
  • releasecapture(1)

getscreendata 截取全屏像素点

• x0 y0最好从0, 0开始 不然的话 有的 #screen[1]会报错（第1行，没有列，是空的）
• 把选中区域的像素点保存为二位数组
  • 因为 lua 的索引从1开始所以 0, 0 相当于 screen[1][1]
• 可以配合 getgray 获得亮度值或灰度值
  • 值越大越亮
  • 区域不能太大 太大就不太准了
  • 0.3 * r + 0.6 * g + 0.1 * b （有更优化的算法）
• 十六进制字符串转十进制数字
  • tonumber("0xff")
  • tonumber("ff", 16) （string.format("%#x", tonumber("ff", 16))同理）

local res, w, h = sysgetscreen()
local screen = getscreendata(0,0,700,1040, 1) -- 720 * 1280 x0 y0最好从0, 0开始
print(#screen, #screen[1], res, w, h)

local max, min = { x = 1, y = 1, v = getgray(screen[1][1]) }, { x = 1, y = 1, v = getgray(screen[1][1]) }
for i = 1, #screen, 100 do
    for j = 1, #screen[i], 100 do
        local color = screen[i][j]
        local gray = getgray(tonumber(color, 16))
        if gray > 250 or gray == 0 then print(i - 1, j - 1, gray, color) end
        if gray > max.v then
            max.x, max.y, max.v = i - 1, j - 1, gray
        elseif gray < min.v then
            min.x, min.y, min.v = i - 1, j - 1, gray
        end
    end
end
print("Max")
XM.Print(max)
local colorHex = getcolor(max.x, max.y, 1)
local colorDec = getcolor(max.x, max.y, 0)
local gray = getgray(colorDec)
lineprint(string.format("%d %#x %d\n", tonumber(colorHex, 16), colorDec, gray))

print("Min")
XM.Print(min)
colorHex = getcolor(min.x, min.y, 1)
colorDec = getcolor(min.x, min.y, 0)
gray = getgray(colorDec)
lineprint(string.format("%d %#x %d\n", tonumber(colorHex, 16), colorDec, gray))

keepcapture 是截图，很坑的要注意

• 尽量避免使用，除非是要捕捉一瞬即逝的画面
• keepcapture 的搭档就是 releasecapture 表示刷新数据
  • 0 识图
  • 1 字库

不用频繁创建账号：换区即可

新版字库的使用

• 下面的 0 是字库编号 0 ~ 19 这20个
• 一般用不了那么多，也可以把所有字都只放在一个字库文件里
  • 同一字形不同颜色存在一个字库里
  • 但是识字的时候用不同的参数
  • 不同字形能否存在一个字库有待考证

local rc = getrcpath("rc:叹号任务字库.txt")
setnewdict(rc, 0)
usenewdict(0)
local val = ocrrec(74,1044,330,1074,"e7e7e7-222222|bdbabd-222222|b5b2b5-111111|ffffff-111111", 0.75)
print("ocrrec ", val)

• 编辑字库 的意思是 保存字库

字库的制作

1. 选择要制作字库的范围，右键点击制作新字库(New)
2. 打开/新建字库 新建一个字库 xxx字库.txt
3. 手机快照 在字里面选择一个点的颜色，粘贴到颜色窗口选择偏色为111111并勾上
4. 调整间距，点击 多个点阵 ，然后看预览窗口是否清晰，不清晰的地方多取一个色
   1. 加大色偏或者是增加颜色
5. 看字的数量是不是一一对应，多的可以删掉，然后在 定义文字 里一一添加
6. 如果不是新建字库的话，做完 3~5 的操作直接点 编辑字库 意思就是保存字库
7. 颜色窗口的截图范围和颜色描述很重要，是识字时的操作

可以多点击的，尽量多点击，以免遗漏