吾爱破解 - 52pojie.cn

 找回密码
 注册[Register]

QQ登录

只需一步,快速开始

查看: 1937|回复: 14
收起左侧

[其他原创] 安卓容器化部署方案

[复制链接]
xinjun_ying 发表于 2024-1-19 17:17
本帖最后由 xinjun_ying 于 2024-1-19 17:19 编辑

前言

业务需要大量模拟器场景进行测试,单纯的在windows开模拟器不现实,本想着拉取AOSP源码进行编译然后制作镜像,后来发现开源redroid有现成镜像,于是拿来直接使用并在debian11下成功实现多开
系统版本:debian11
内核:5.10.0-26-amd64
docker 24.0.7

1.方案选择

1.1.方案一k8s集群部署(开源镜像为基础)

测试结论:需要在宿主机上配置binder或BinderFS即可。注意直接用k8s可以直接测通。如果你有自己的构建机以及统一维护的发布系统可以使用这套。(测试通过)

1.2.方案二物理机docker部署发布

测试结论:新物理机 配置docker、binder或BinderFS就可使用。轻量级适合独立维护。(测试通过)

2.环境配置(物理机上执行)

2.1开启binder(只能开启一个模拟器)

sudo modprobe binder_linux devices=binder1,binder2,binder3,binder4,binder5,binder6
chmod 666 /dev/binder*

2.2开启BinderFS(可以开启多个模拟器)


# 1.安装必要的工具
sudo apt-get update
sudo apt-get install build-essential libncurses5-dev flex bison libssl-dev libelf-dev bc

# 2.下载当前Debian内核版本的源代码
sudo apt-get source linux-source
# 3.进入内核源码目录
cd linux-*

# 4.配置内核,运行配置工具以启用BinderFS支持。使用 make menuconfig 或 make nconfig:
make menuconfig
# 出现选项就按这个流程走 General setup -> Pseudo filesystems -> Binder IPC and BinderFS file system 启用这些选项,然后保存并退出

# 也可以检查下源码目录下.config文件,并设置一下内容
CONFIG_ANDROID_BINDER_IPC=y
CONFIG_ANDROID_BINDERFS=y
CONFIG_ANDROID_BINDER_DEVICES="binder,hwbinder,vndbinder"
CONFIG_ANDROID_BINDER_IPC_SELFTEST=y

# 5.编译内核
make -j$(nproc)

# 6.安装新内核
sudo make modules_install
sudo make install

# 7.重新启动
sudo reboot

2.3配置Magisk(android root,如有需要)

#下载magisk 并拆解出libmagisk64.so与libbusybox.so 
mkdir ~/MagiskOnRedroid
cd ~/MagiskOnRedroid

find -maxdepth 1 -iname "magisk*" -not -name "*.apk" -exec rm -r {} \;
magisk_file="app-debug.apk"

# download Magisk 9b61bdfc(25201) debug as you did i guess
# 下载magisk apk
if [ ! -f $magisk_file ]; then
  wget "https://cdn.jsdelivr.net/gh/topjohnwu/magisk-files@1cea72840fbf690f9a95512d03721f6a710fe02e/app-debug.apk"
fi
# because my machine x64 i will choose x86_64
# 解压并提取两个so,根据系统镜像位数来提取
unzip -j $magisk_file "lib/x86_64/libmagisk64.so" -d magisk
unzip -j $magisk_file "lib/x86_64/libbusybox.so" -d magisk
# 重命名
mv -v magisk/libmagisk64.so magisk/magisk
mv -v magisk/libbusybox.so magisk/busybo

# 压缩,将magisk app 和依赖so都放到一起,供后续脚本使用
tar --transform 's/.*\///g' -cf ~/magisk.tar --absolute-names $( find ~/MagiskOnRedroid | grep -E "magisk/|app-debug.apk$" )

2.3.1.配置magisk所需脚本-remove.rc

cat <<\EOF > ~/remove.rc
on early-init
    export PATH /sbin:/product/bin:/apex/com.android.runtime/bin:/apex/com.android.art/bin:/system_ext/bin:/system/bin:/system/xbin:/odm/bin:/vendor/bin:/vendor/xbin
    chmod 0700 /magisk.tar
    chown root root /magisk.tar
    chmod 0700 /setup.sh
    chown root root /setup.sh
    exec root root -- /setup.sh
service magisk-d /sbin/magisk --daemon
    user root
    oneshot
on boot
    start magisk-d
on post-fs-data
    start logd
    rm /dev/.magisk-unblock
    start s1
    wait /dev/.magisk-unblock 5
    rm /dev/.magisk-unblock
service s1 /sbin/magisk --post-fs-data
    user root
    oneshot
service s2 /sbin/magisk --service
    class late_start
    user root
    oneshot
on property:sys.boot_completed=1
    exec /sbin/magisk --boot-complete
on property:init.svc.zygote=restarting
    exec /sbin/magisk --zygote-restart
on property:init.svc.zygote=stopped
    exec /sbin/magisk --zygote-restart
EOF

sudo chmod 644 ~/remove.rc
sudo chown root:root ~/remove.rc

2.3.2.配置magisk所需脚本-setup.sh

cat <<\EOF > ~/setup.sh
#!/system/bin/sh

# rm /system/fonts/NotoColorEmoji.ttf
tmpPushed=/magisk
rm -rf $tmpPushed
mkdir $tmpPushed
tar -xvf /magisk.tar --no-same-owner -C $tmpPushed
umount /magisk.tar ; rm -v /magisk.tar
mkdir /sbin
chown root:root /sbin
# chmod 0700 /sbin
chmod 0751 /sbin
cp $tmpPushed/magisk /sbin/
cp $tmpPushed/app-debug.apk /sbin/stub.apk
find /sbin -type f -exec chmod 0755 {} \;
find /sbin -type f -exec chown root:root {} \;
# add /sbin
# /sbin/
# ├── magisk
# └── stub.apk

ln -f -s /sbin/magisk /system/xbin/su
mkdir /product/bin
chmod 751 /product/bin
ln -f -s /sbin/magisk /product/bin/su
# add su (override `/system/xbin/su`)
# /product/bin/
# └── su -> /sbin/magisk

mkdir -p /data/adb/magisk
chmod 700 /data/adb
mv $tmpPushed/busybox /data/adb/magisk/
chmod -R 755 /data/adb/magisk
chmod -R root:root /data/adb/magisk
# /data/adb/
# ├── magisk
# │   └── busybox

# rm -rf $tmpPushed
EOF
sudo chmod 700 ~/setup.sh
sudo chown root:root ~/setup.sh

3.配置文件

3.1.k8s sts.yml

# /dev/binder 如果对内核进行编译ll饿是不需要添加这个
apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: redroid11
spec:
  replicas: 1
  selector:
    matchLabels:
      app: redroid11
  serviceName: redroid
  template:
    metadata:
      labels:
        app: redroid11
    spec:
      terminationGracePeriodSeconds: 0
      nodeName: xxxxx.xxxx.xxx.xx
      containers:
      - name: redroid
        image: redroid/redroid:11.0.0-latest
        securityContext:
          privileged: true
          capabilities:
            add:
            - SYS_ADMIN
        volumeMounts:
        - mountPath: /dev/binder
          name: binder1
        - mountPath: /dev/hwbinder
          name: binder2
        - mountPath: /dev/vndbinder
          name: binder3
        - name: data
          mountPath: /data
        readinessProbe:
          exec:
            command:
            - /system/bin/sh
            - -c
            - test "1" = "`/system/bin/getprop sys.boot_completed`"
          initialDelaySeconds: 5
        stdin: true
        tty: true
      volumes:
      - name: data
        emptyDir: {}
      - name: binder1
        hostPath:
          path: /dev/binder4
      - name: binder2
        hostPath:
          path: /dev/binder5
      - name: binder3
        hostPath:
          path: /dev/binder6
---
apiVersion: v1
kind: Service
metadata:
  name: redroid
spec:
  ports:
  - port: 5555
    targetPort: 5555
  selector:
    app: redroid11

3.2.docker启动命令


# 如果开启BinderFS就不需要挂载/dev/binder了
# 开源镜像启动命令
docker run -itd --rm --privileged \
    -v /dev/binder1:/dev/binder \
    -v /dev/binder2:/dev/hwbinder \
    -v /dev/binder3:/dev/vndbinder \
    # 磁盘挂载,映射安卓存储的路径
    -v ~/data11:/data \
    -p 5555:5555 \
    <镜像名称>

# 多启动调整端口即可
docker run -itd --rm --privileged \
    # 磁盘挂载,映射安卓存储的路径
    -v ~/data11:/data \
    -p 5556:5555 \
    <镜像名称>

# 需要使用magisk就挂载进去,.rc文件会在系统初始化的时候就加载,并启动magisk服务。
  -v ~/remove.rc:/vendor/etc/init/remove.rc \
  -v ~/setup.sh:/setup.sh \
  -v ~/magisk.tar:/magisk.tar \

4.检测


# 本机测试安装
apt install adb
# 查看设备,端口为启动的端口
adb devices或adb connect localhost:5555

#安装scrcpy 可视化查看
apt install scrcpy
scrcpy -s [设备号||localhost:5555]

看到以下界面即为成功

640.png

免费评分

参与人数 4吾爱币 +10 热心值 +4 收起 理由
Edith123 + 1 + 1 用心讨论,共获提升!
侃遍天下无二人 + 7 + 1 欢迎分析讨论交流,吾爱破解论坛有你更精彩!
la2000 + 1 + 1 感谢发布原创作品,吾爱破解论坛因你更精彩!
blindcat + 1 + 1 谢谢@Thanks!

查看全部评分

发帖前要善用论坛搜索功能,那里可能会有你要找的答案或者已经有人发布过相同内容了,请勿重复发帖。

 楼主| xinjun_ying 发表于 2024-1-23 11:34
lyd2199 发表于 2024-1-21 19:15
docker 驱动的这个镜像好像没有图形渲染加速,消耗cpu挺高的吧?楼主有解决方案吗?

可以开启gpu渲染加速,前提你的宿主机要有显卡,启动 命令增加
[Asm] 纯文本查看 复制代码
androidboot.redroid_gpu_mode=guest

详情参考开源
isa777 发表于 2024-7-25 10:12
请教一下, 使用libhoudini是不是对国内的应用兼容比较差? 我看国内应用基本好像都只有arm64了
louisxiu 发表于 2024-1-19 17:58
yndoc 发表于 2024-1-19 18:11
66哦,还有这种操作!学习了。。
blindcat 发表于 2024-1-19 19:01
真没想到还可以这样搞
gjwapj 发表于 2024-1-19 19:54
还没完全消化,mark下后面再来学习
头像被屏蔽
moruye 发表于 2024-1-19 20:53
提示: 作者被禁止或删除 内容自动屏蔽
Edith123 发表于 2024-1-19 23:34
卧槽 学习了
BLUE7777777 发表于 2024-1-20 00:34
这个能启动纯arm架构的应用吗?例如QQ
艾莉希雅 发表于 2024-1-20 00:42
现在安卓容器都上k8s了吗,究竟是什么业务场景啊这
lyd2199 发表于 2024-1-21 19:15
docker 驱动的这个镜像好像没有图形渲染加速,消耗cpu挺高的吧?楼主有解决方案吗?
您需要登录后才可以回帖 登录 | 注册[Register]

本版积分规则

返回列表

RSS订阅|小黑屋|处罚记录|联系我们|吾爱破解 - LCG - LSG ( 京ICP备16042023号 | 京公网安备 11010502030087号 )

GMT+8, 2024-11-24 13:37

Powered by Discuz!

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表