分享

用JAVA和adb实现微信跳一跳全自动完成

 一本正经地胡闹 2019-04-15

最近很火的微信小程序跳一跳,玩了几次分数都低的可怜,所以作为码农的我就想着怎么通过程序去实现自动跳啊跳啊跳啊跳。。。

下面简单讲讲个人实现方法及过程,请连上android手机,让程序飞起来吧!


一、基本思路

微信跳一跳原理就是小人和目标物体上表面中心点的直线距离,然后根据按住屏幕时间长短跳到相应的位置,

击中目标物体上表面区域中心点附近即可得分。

  • 我们可以看到微信跳一跳背景颜色是接近单调色,所以很容易就过滤掉背景色;

  • 小人颜色也是固定的,所以也很容易定位小人所在的位置;

  • 目标物体颜色跟背景色区别比较大,也很容易定位;

  • 采用adb shell 可以很简单的控制Android手机;

二、实现过程

软硬件环境: adb、java、MAC、android手机一台(1080*1920)

  1. MAC连接android手机,手机端打开usb调试开关;

  2. 首先是要获取手机屏幕截图,代码如下:
    注意:获取屏幕截图要等屏幕图片稳定下来,即跳完后3秒左右,不然一些弹出的图像会干扰到计算点位

    1. private static void getScreenshot() {
    2. try {
    3. // 获取手机截图
    4. Runtime.getRuntime()
    5. .exec("/Users/gavin/adt-bundle-mac/sdk/platform-tools/adb shell /system/bin/screencap -p /sdcard/screenshot.png");
    6. Thread.sleep(1000);

    7. // 上传手机截图到电脑
    8. Runtime.getRuntime()
    9. .exec("/Users/gavin/adt-bundle-mac/sdk/platform-tools/adb pull /sdcard/screenshot.png /Users/gavin/Downloads/screenshot.png");
    10. Thread.sleep(1000);
    11. System.out.print("Get screenshot success!\n");
    12. } catch (Exception e) {
    13. e.printStackTrace();
    14. }

    15. }
  3. 通过截图获取小人和目标物体的坐标,然后计算直线距离,最后乘以1.35ms,得到的就是长按的时间;


    得到的测试图片如下:
     

    1. public static void getPosition() throws Exception {
    2. int[] rgb = new int[3];
    3. File file = new File(IMAGE_PATH);
    4. BufferedImage bi = null;
    5. try {
    6. bi = ImageIO.read(file);
    7. } catch (Exception e) {
    8. e.printStackTrace();
    9. }

    10. // 只搜索屏幕中间矩形区域,可根据分辨率配置高度
    11. int width = bi.getWidth();
    12. int height = mEndY;
    13. int minx = bi.getMinX();
    14. int miny = mStartY;

    15. int personStartX = 0;
    16. int personStartY = 0;
    17. int personEndX = 0;
    18. int personEndY = 0;

    19. int targetStartX = 0;
    20. int targetStartY = 0;
    21. int targetEndX = 0;
    22. int targetEndY = 0;
    23. int targetR = 0;
    24. int targetG = 0;
    25. int targetB = 0;

    26. // 获取背景色值,这里直接选取坐标(500, 500)这个点的颜色值,不同分辨率手机要依据实际情况修改
    27. int pixel = bi.getRGB(500, 500);
    28. mBasicR = (pixel & 0xff0000) >> 16;
    29. mBasicG = (pixel & 0xff00) >> 8;
    30. mBasicB = (pixel & 0xff);
    31. System.out.println("mBasicR = " + mBasicR + ", mBasicG = " + mBasicG + ", mBasicB = " + mBasicB);

    32. // 获取小人区域和中心点
    33. for (int j = miny; j < height; j++) {
    34. for (int i = minx; i < width; i++) {
    35. pixel = bi.getRGB(i, j);
    36. rgb[0] = (pixel & 0xff0000) >> 16;
    37. rgb[1] = (pixel & 0xff00) >> 8;
    38. rgb[2] = (pixel & 0xff);

    39. // 背景颜色跳过
    40. if (getColorOffset(mBasicR, mBasicG, mBasicB, rgb[0], rgb[1], rgb[2]) < mColorOffset){
    41. continue;
    42. }

    43. // 小人颜色接近点,用取色器取到的小人底部中心点颜色大致为R:55, G:55, B:93,所以可以搜索目标区域的该颜色相近的区域
    44. // 然后取X, Y坐标最小和最大的两个值
    45. // 最后计算最大最小值的中间值
    46. if (rgb[0] >= 50 && rgb[0] <= 60 && rgb[1] >= 50 && rgb[1] <= 60 && rgb[2] >= 90 && rgb[2] <= 95 ){
    47. if (personStartX == 0){
    48. personStartX = i;
    49. personStartY = j;
    50. personEndX = i;
    51. personEndY = j;
    52. }

    53. if (i <= personStartX){
    54. personStartX = i;
    55. }
    56. if (j <= personStartY){
    57. personStartY = j;
    58. }

    59. if (i >= personEndX){
    60. personEndX = i;
    61. }
    62. if (j >= personEndY){
    63. personEndY = j;
    64. }
    65. }
    66. }
    67. }

    68. mPersonX = personStartX + ((personEndX - personStartX) / 2) - 15;
    69. mPersonY = personEndY - 20;



    70. // 获取下一个物体位置
    71. for (int j = miny; j < height; j++) {
    72. for (int i = minx; i < width; i++) {
    73. pixel = bi.getRGB(i, j);
    74. rgb[0] = (pixel & 0xff0000) >> 16;
    75. rgb[1] = (pixel & 0xff00) >> 8;
    76. rgb[2] = (pixel & 0xff);

    77. // 背景颜色跳过
    78. if (getColorOffset(mBasicR, mBasicG, mBasicB, rgb[0], rgb[1], rgb[2]) < mColorOffset){
    79. continue;
    80. }

    81. // 过滤小人干扰,通过调试发现有时候小人会干扰判断所以要过滤小人所在的纵向区域
    82. if (Math.abs(i - mPersonX) < 50){
    83. continue;
    84. }

    85. // 从上至下横向便利每个点(排除上面的背景色和小人纵向区域),获取到的第一个其他颜色点即为物体上边缘点
    86. if (targetStartX == 0){
    87. targetStartX = i;
    88. targetStartY = j + 10; // 加点偏移量,使其定位到物体较大面积区域的颜色
    89. pixel = bi.getRGB(targetStartX, targetStartY);
    90. rgb[0] = (pixel & 0xff0000) >> 16;
    91. rgb[1] = (pixel & 0xff00) >> 8;
    92. rgb[2] = (pixel & 0xff);
    93. targetR = rgb[0];
    94. targetG = rgb[1];
    95. targetB = rgb[2];
    96. }

    97. // 根据上面取到的上边缘点,纵向向下搜索相同颜色的点中Y坐标最大的点,注意要根据跳跃的进度修改纵向搜索区域
    98. // 这里的mTargetHeight 默认值设为250,即搜索纵向250个像素点,然后在主函数那个每10次递减10直到最小值为20
    99. // 可根据调试结果修改
    100. if (targetStartX != 0 &&targetStartY != 0){
    101. if (i >= targetStartX - 25 && i < targetStartX + 25 && j < targetStartY + mTargetHeight && getColorOffset(targetR, targetG, targetB, rgb[0], rgb[1], rgb[2]) <= 3){
    102. targetEndX = i;
    103. targetEndY = j;
    104. }
    105. }
    106. }
    107. }

    108. mTargetX = targetStartX;
    109. mTargetY = targetStartY + ((targetEndY - targetStartY) / 2) - 10;

    110. System.out.println("mPersonX = " + mPersonX + ", mPsersonY = " + mPersonY + ", mTargetX = " + mTargetX + ", mTargetY = " + mTargetY);

    111. // 将处理完后的图片,如小人位置,物体上下边缘点和中心点、搜索矩形区域绘制好后保存,以便调试调整参数
    112. drawPoint(IMAGE_PATH, Color.green, mPersonX, mPersonY);
    113. drawPoint(mImageOutPath, Color.red, targetStartX, targetStartY);
    114. drawPoint(mImageOutPath, Color.red, targetEndX, targetEndY);
    115. drawPoint(mImageOutPath, Color.red, mTargetX, mTargetY);
    116. drawRect(mImageOutPath, 0, mStartY, width, mEndY - mStartY);

    117. }
  4. adb shell没有长按,所以我用swipe替换,结果是一样的。

    根据第三步中获取的位置计算滑动时间,每个像素点1.35ms,我的测试机是1080*1920,不同分辨率不一样可以自行调整匹配。

    1. private static void swipeTime(long ms) {
    2. try {
    3. Runtime.getRuntime()
    4. .exec("/Users/gavin/adt-bundle-mac/sdk/platform-tools/adb shell input swipe 400 400 600 600 " + ms);
    5. } catch (Exception e) {
    6. e.printStackTrace();
    7. }

    8. }
  5. 运行日志如下:




四、运行

 游戏打开,点击开始游戏后
 terminal 运行:
  1. javac -d . Tiaotiao.java
  2. java Tiaotiao

 有什么问题欢迎交流。

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多