某会员商店App的api接口分析

1、目的

探索学习app的加解密机制，并通过api模拟调用的方式，发起业务请求。仅供学习。

2、工具准备

样本App版本：v5.0.80，v5.0.90

设备：Oppo R9s（Android7.1.1）+ MacOS Big Sur（Intel）

注入框架：xposed、frida（hluda 15.2.2）

反编译&其他：JEB、jadx、Charles

3、过程

大致分为抓包、脱壳、反编译、动态调试/加解密算法探索，构造模拟请求几个步骤，每个步骤都可能有不同的异常出现，本文主要记录在过程中的主体脉络和流程，过程中会附上关键代码。

3.1 抓包

首先尝试在手机上配置wifi代理，但Charles中无法看到相应的包记录。猜测是因为App屏蔽了网络代理，因此改用其他方式。手机上安装Drony，并开启手机全局网络代理（类型选择：socks5），代理地址指向Chares，此时就可以愉快的看到请求记录了。

如果是通过iOS抓包，直接通过小火箭抓包也是灰常方便。另外下载Drony App可能需要TZ，解决无法访问的问题。

在抓到的报文中，可以看到每次请求中，都包含了一些奇怪的header，比如t、spv、n、st，这些字段大概率与api接口的加密与签名有关。接下来，需要结合代码进一步分析。

3.2 脱壳&反编译

直接通过Xposed + 反射大师App，即可做到轻松脱壳，App未针对Xposed做检测。脱壳后得到7个dex文件，使用python脚本合并，将7个dex文件利用jadx全部反编译成Java文件到同一目录，即可直接翻阅App反编译后的源码。

import os, sys

# 合并dex
# e.g:  python3 merge_dex.py ./source_dir/ output_dir
if __name__ == "__main__":
    if len(sys.argv) < 3:
        print("start error")
        sys.exit()
    source_dir = sys.argv[1]
    output_dir = sys.argv[2]
    print(source_dir, output_dir)

files = os.listdir(source_dir) 
for file in files: 
    if file.find(".dex") > 0: 
        sh = '{your_path}/bin/jadx -Pdex-input.verify-checksum=no -j 1 -r -d ' + output_dir + " " + source_dir + file
        print(sh)
        os.system(sh)

这时直接在反编译的结果中搜索关键词”spv”，却发现找不到。难道这些字段都隐藏到so中了，那就麻烦了。这时使用JEB再次反编译试试看，再次搜索”spv”，找到了。

这里，要提醒一下：针对反编译，同样的dex文件，用不同的反编译工具，结果也会不一样，可读性差异很多，因此当使用一种工具反编译失败的话，可以尝试用不同的工具，比如，通用一段代码的反编译结果，使用jadx时，提示反编译失败，如下：

/* JADX WARN: Code restructure failed: missing block: B:61:0x017a, code lost:
    r0 = r8.a("ssk");
    b.f.b.l.a(r0);
    r3 = r8.a("siv");
    b.f.b.l.a(r3);
    cn.xxxxclub.app.base.h.z.a(r0, r3);
 */
/* JADX WARN: Removed duplicated region for block: B:54:0x0168 A[Catch: Exception -> 0x018c, TryCatch #0 {Exception -> 0x018c, blocks: (B:42:0x0138, B:46:0x0154, B:48:0x015c, B:54:0x0168, B:56:0x0170, B:61:0x017a, B:45:0x014d), top: B:66:0x0138 }] */
/*
    Code decompiled incorrectly, please refer to instructions dump.
    To view partially-correct add '--show-bad-code' argument
*/
public okhttp3.ad intercept(okhttp3.w.a r19) {
    /*
        Method dump skipped, instructions count: 415
        To view this dump add '--comments-level debug' option
    */
    throw new UnsupportedOperationException("Method not decompiled: cn.xxxxclub.app.e.c.intercept(okhttp3.w$a):okhttp3.ad");
}

但是使用JEB时，结果则基本可用，如下：

public ad intercept(w.a arg19) {
      ....(略)
      String v8_1 = String.valueOf(z.b());
      v4_1.b("t", v8_1);
      l.b("dc1ad18e-3e2d-4d49-a303-f637c6a5a3fb", "randomUUID().toString()");
      String v9_1 = b.m.g.a("dc1ad18e-3e2d-4d49-a303-f637c6a5a3fb", "-", "", false, 4, null);
      v4_1.b("n", v9_1);
      v4_1.b("sy", "0");
      int v10_1 = v10 == 0 || !cn.xxxxclub.app.base.manager.d.a.i() ? 0 : 1;
      String v5_4 = this.a(((boolean)v10_1), v8_1 + v5_3 + v9_1 + g.a.b());
      if(((CharSequence)v5_4).length() > 0) {
          v4_1.b("st", v5_4);
      }

      v4_1.b("sny", (v10_1 == 0 ? "j" : "c"));
      v4_1.b("rcs", "1");
      v4_1.b("spv", "1.1");
      if(v11) {
          String v5_5 = URLEncoder.encode(String.valueOf(cn.xxxxclub.app.base.manager.f.a.b()), "utf-8");
          l.b(v5_5, "encode(LocationManager.g…de().toString(), \"utf-8\")");
          v4_1.b("Local-Longitude", v5_5);
          String v5_6 = URLEncoder.encode(String.valueOf(cn.xxxxclub.app.base.manager.f.a.a()), "utf-8");
          l.b(v5_6, "encode(LocationManager.g…de().toString(), \"utf-8\")");
          v4_1.b("Local-Latitude", v5_6);
      }
      ....
      return v5_7;
  }

3.3 动态调试分析

拿到反编译源码后，接下来就需要结合frida动态分析代码调用链，找到api调用的核心算法逻辑并加以验证。

在App最新版本v5.0.90上，连接frida客户端。frida注入失败。随后换了hluda、xcube等方案均以失败告终，看了下app的加固方案，使用的腾讯的加固方案，对应的壳文件是libshell-super.cn.xxxxclub.app.so，尝试绕过壳的反注入逻辑，也没有效果。

这时偶然看到旧版本的app使用的壳文件是libshell-super.2019.so，灵光一闪，感觉旧版本的app上应该有机会，于是下载安装v5.0.80，frida注入成功了。app上开启了强制更新，于是在Charles上hook重写了app检查更新接口的返回结果，让app检查不到新版本，app仍然可以继续使用（后续有风险，历史接口可能下线）。

旧版本app上也可以使用frida工具集：Objection，通过调试和代码比对，基本确认了核心的算法签名逻辑位置：

签名的传入参数为分别为：t - 时间戳、data_json - 按json序列化后的业务对象参数、n - 去掉”-“符号后的uuid（32位字符串）、auth_token - 登录后用户令牌，按照如下规则排列所得：

"{t}{data_json}{n}{auth_token}"

返回字符串即为签名结果 - st

该签名算法有使用native方法，具体算法逻辑应该需要反汇编相应的so文件了。签名规则已经基本明确了，直接调用java层方法，走RPC调用即可得到我们想要的结果。偷懒了，就不去深挖汇编代码了，笔者也不确认一定能找到结果-_-||

3.4 RPC调用

1）创建js文件app_inject.js，声明rpc接口

var g_instance = null;
Java.enumerateClassLoaders({
    onMatch: function (loader) {
        try {
            if (loader.findClass("cn.xxxxclub.app.e.c")) {
                Java.classFactory.loader = loader;
                g_instance = Java.use("cn.xxxxclub.app.e.c").$new();
                console.log("target found!")
            }
        } catch (error) {}
    }, onComplete: function () {
    }
});

// boolean z, String str
function sign(z, text){
    console.log("js7 start run: sign", g_instance, text)
    var result = g_instance.a.overload('boolean', 'java.lang.String').call(g_instance, z, text);
    console.log("result = ", result)
    return result
}

rpc.exports = {
    getsign: sign,
    hello: function () {
        return 'hello';
    }
}
console.log("injected.")

2）创建frida客户端，声明rpc调用。文件名:frida_client.py

import frida
import time

class FridaClient:
    class StartMode:
        attach = 'attach'
        spawn = 'spawn'

    def __init__(self, package_name, js_file, mode=StartMode.attach, delay_sec_4_spawn=2):
        self.results = {}
        self.script = None
        self.package_name = package_name
        self.delay_sec_4_spawn = delay_sec_4_spawn
        self.mode = mode
        self.js_file = js_file

    def on_message(self, message, data):
        if message['type'] == 'send':
            payload = message['payload']
            print("[on_message]:", payload)
        else:
            print(message)

    def start(self):
        print(f"starting frida client with mode: {self.mode} ... pkg = [{self.package_name}]")
        if self.mode == FridaClient.StartMode.attach:
            session = frida.get_device_manager().add_remote_device("127.0.0.1:1234").attach(self.package_name)
        elif self.mode == FridaClient.StartMode.spawn:
            device = frida.get_device_manager().add_remote_device("127.0.0.1:1234")
            pid = device.spawn([self.package_name])
            device.resume(pid)
            time.sleep(self.delay_sec_4_spawn)
            session = device.attach(pid)
        with open(self.js_file, 'r') as f:
            js_code = f.read()
        script = session.create_script(js_code)
        script.on('message', self.on_message)
        self.script = script
        script.load()
        print("load ready")

    def stop(self):
        if self.script:
            self.script.unload()
        self.script = None

    def get_sign(self, text: str):
        return self.script.exports.getsign(True, text)

3）构造参数，发起RPC调用。文件名：demo.py

# -*- coding: utf-8 -*-
import json
import time
import uuid
import requests

from frida_client import FridaClient

def _headers(auth_token, device_id, t, n, signed, lon, lat):
    return {
        'system-language': 'CN',
        'device-type': 'android',
        'tpg': '1',
        'app-version': '5.0.80',
        'device-id': device_id,
        'device-os-version': '7.1.1',
        'device-name': 'OPPO_OPPO+R9s',
        'treq-id': '1540d0ec530741abbab593af41966110.313.17103985647343144',
        'auth-token': auth_token,
        'longitude': lon,
        'latitude': lat,
        'p': '1656120205',
        't': t,
        'n': n,
        'sy': '0',
        'st': signed,
        'sny': 'c',
        'rcs': '1',
        'spv': '1.1',
        'Local-Longitude': '0.0',
        'Local-Latitude': '0.0',
        'Content-Type': 'application/json;charset=utf-8',
        'Host': 'api-xxxx.walmartmobile.cn',
        'User-Agent': 'okhttp/4.8.1'
    }

def work():
    frida_client = FridaClient(package_name='cn.xxxxclub.app', js_file='app_inject.js', mode=FridaClient.StartMode.spawn)
    frida_client.start()

    url = "https://api-xxxx.walmartmobile.cn/api/v1/xxxx/goods-portal/spu/search"
    device_id = 'b9fb859f7cfeb98ef39a31c410001f716c04'
    user_uid = '181864991321'
    auth_token = '740d926b981716f45de7a402b7b6761a46d9af48f752262b77a2cb0701d482f20c60e6345685b46681a1c23129bdffad022e2e75f60ac763'
    lon, lat = '114.151608', '22.554734'
    # t = '1711440481379'
    t = f"{int(time.time() * 1000)}"
    goods_name = '蛋糕'

    data = {
        "userUid": user_uid,
        "pageNum": 1,
        "pageSize": 20,
        "keyword": goods_name,
        "rewriteWord": goods_name,
        "filter": [],
        "storeInfoVOList": [
            {
                "storeId": 9991,
                "storeType": 32,
                "storeDeliveryAttr": [10]
            },
            {
                "storeId": 6758,
                "storeType": 256,
                "storeDeliveryAttr": [2, 3, 4, 5, 6, 9, 12, 13]
            },
            {
                "storeId": 6580,
                "storeType": 2,
                "storeDeliveryAttr": [7, 13]
            },
            {
                "storeId": 9992,
                "storeType": 8,
                "storeDeliveryAttr": [1]
            }
        ],
        "addressVO": {
            "cityName": "",
            "countryName": "",
            "detailAddress": "",
            "districtName": "",
            "provinceName": ""
        },
        "uid": device_id,
        "uidType": 3,
        "sort": "0"
    }
    n = str(uuid.uuid4()).replace('-', '')
    data_json = json.dumps(data, indent=None, separators=(',', ':'), ensure_ascii=False)
    signed = frida_client.get_sign(text=f"{t}{data_json}{n}{auth_token}")

    headers = _headers(auth_token=auth_token, device_id=device_id, t=t, n=n, signed=signed, lon=lon, lat=lat)
    response = requests.request("POST", url, headers=headers, data=data_json.encode('utf-8'))
    print(response.text)

work()

再看看结果，已经成功得到响应数据了。大功告成！

3.5 踩坑说明

在执行frida js注入时，Java.enumerateClassLoaders()仅支持Android 7.0及以上系统，若使用低版本的Android系统，如Android 6.1，则需要使用send()，进行消息异步通知。当采用异步通知时，在Python客户端的编码中，需要定义消息回调函数，同时将异步调用封装成同步调用，方便上游调用使用。对应的js代码和python代码如下：

app_inject_for_android_6.0.js:

var g_instance = null;
// boolean z, String str
function sign(msgId, z, text){
    Java.perform(function(){
        console.log("js start run: sign", g_instance, text)
        try {
            if (g_instance == null) {
                g_instance = Java.use('cn.xxxxclub.app.e.c').$new();
                console.log("init instance success")
            }
            var result = g_instance.a.overload('boolean', 'java.lang.String').call(g_instance, z, text);
            send({'msgId': msgId, 'content': result})

        } catch (e) {}
        return result
    });
}

rpc.exports = {
    getsign: sign,
    hello: function () {
        return 'hello';
    }
}
log("injected.")

frida_client_for_android_6.0.js：

import uuid
import frida
import threading
import time


class FridaClient:
    class StartMode:
        attach = 'attach'
        spawn = 'spawn'

    def __init__(self, package_name, js_file, mode=StartMode.attach, delay_sec_4_spawn=2):
        self.results = {}
        self.script = None
        self.package_name = package_name
        self.event = threading.Event()
        self.result_queue = []
        self.delay_sec_4_spawn = delay_sec_4_spawn
        self.mode = mode
        self.js_file = js_file

    def on_message(self, message, data):
        if message['type'] == 'send':
            payload = message['payload']
            msdId = payload['msgId']
            content = payload['content']
            print("[on_message]:", msdId, content)
            # 将结果存入队列
            self.result_queue.append((msdId, content))
            # 设置事件，通知主线程结果已经准备好
            self.event.set()
        else:
            print(message)

    def get_result(self, msgId):
        # 返回指定id的结果
        for idx, (id, result) in enumerate(self.result_queue):
            if id == msgId:
                del self.result_queue[idx]
                return result
        return None

    def start(self):
        print(f"starting frida client with mode: {self.mode} ... pkg = [{self.package_name}]")
        if self.mode == FridaClient.StartMode.attach:
            # session = frida.get_usb_device().attach(self.package_name)
            session = frida.get_device_manager().add_remote_device("127.0.0.1:1234").attach(self.package_name)
        elif self.mode == FridaClient.StartMode.spawn:
            device = frida.get_device_manager().add_remote_device("127.0.0.1:1234")
            pid = device.spawn([self.package_name])
            device.resume(pid)
            time.sleep(self.delay_sec_4_spawn)
            session = device.attach(pid)
        with open(self.js_file, 'r') as f:
            js_code = f.read()
        script = session.create_script(js_code)
        script.on('message', self.on_message)
        self.script = script
        script.load()
        print("load ready")

    def stop(self):
        # 停止脚本和会话
        if self.script:
            self.script.unload()
        self.script = None

    def get_sign_sync(self, text: str, timeout=5, poll_interval=0.1, max_polls=3):
        """
            因为rpc调用结果是异步返回的，因此通过线程等待唤醒的方式，得到结果后才返回，以此达到接口数据同步返回的效果
        """
        msgId = str(uuid.uuid4())
        self.script.exports.getsign(msgId, True, text)
        # 等待事件，设置超时
        self.event.wait(timeout=timeout)
        self.event.clear()  # 清除事件，以便下次使用
        # 返回结果
        result = self.get_result(msgId)
        if result is None:
            # 如果超时未收到结果，启动轮询
            start_time = time.time()
            poll_count = 0
            while time.time() - start_time < timeout and poll_count < max_polls:
                result = self.get_result(msgId)
                if result is not None:
                    break
                poll_count += 1
                time.sleep(poll_interval)
        return result

    def get_sign(self, text: str):
        return self.script.exports.getsign(True, text)

3.6 备注

通过测试验证，可以发现两个版本v5.0.80，v5.0.90的签名算法是一致的。因此可以直接利用v5.0.80做签名即可。

打完收工！