getpid failed when glibc dynamic linked

[Martins3]

• printf 还是正常工作

• getpid 有时候还是正常返回的

• syscall 没有被调用

• 多次调用的结果不相同

• 如果在进入到 dune 之前进行函数调用，那么就是正确运行

  • dune 没有实现要求的地址保持一致: 如果调用过一次，那个跳转就应该被修改掉了

• [x] 为什么 gettimeofday 不是在 vdso 中间的 ?

• [x] 测试 tlbrefill 的方法，分配 1 GB 的空间，然后全部访问一次

[Martins3]

这个是和 vdso 有关的，getpid 和 getuid 会走 vdso，而 vdso 中实现 getpid 需要利用到 timerid:

1. disable 系统的 vdso : 重新编译内核
2. disable 这个程序的 vdso
   • https://stackoverflow.com/questions/8280014/disabling-vsyscalls-in-linux
3. 修改 kvm 代码，当 vcpu_load 的时候刷新 timerid
4. 让 glibc 静态链接
   • [ ] 为什么让 glibc 静态链接可以阻止 vdso

[Martins3]

• [ ] 为什么 MIPS 中间没有出现问题？测试机没有 vdso 吗？

[Martins3]

ltp 结果分析:

• [ ] 出现了一堆 /dev/kvm 打不开的情况
• [ ] shmat01 : exit_reason
• [ ] unshare02 : /dev/kvm
• [ ] setresuid : /dev/kvm
• [ ] accsss : /dev/kvm

[Martins3]

• [x] access02 是可以 100% 出现问题的
  • [x] 更加让人脑壳痛的是，为什么执行的这么慢？
  • [x] 为什么测试例子很快就结束了

    before 30493
    Info: top = fffbd4c000, limit = 800000
    Info: open /dev/kvm
    Info: KVM_GET_API_VERSION
    Info: KVM_CREATE_VM
    Info: KVM_SET_USER_MEMORY_REGION
    Info: ebase address : fff7e48000
    Info: ebase address : fff7e49600
    after 30493
    after 28335
    after 30493
    after 30493
    after 30493
    after 30493
    after 30493
    after 30493
    after 9
    after 28335
    ➜  example git:(main) ✗

    问题并没有被修复。

[Martins3]

diff --git a/arch/loongarch/kvm/mmu.c b/arch/loongarch/kvm/mmu.c
index fd93cbea93fe..d5af832d7e33 100644
+++ b/arch/loongarch/kvm/mmu.c
@@ -1200,11 +1200,12 @@ void kvm_arch_vcpu_load(struct kvm_vcpu *vcpu, int cpu)
                 */
                kvm_loongarch_migrate_count(vcpu);
        }
+       write_gcsr_timerid(cpu);
+       kvm_restore_gcsr_timerid(vcpu->arch.csr);

        /* restore guest state to registers */
        kvm_cpu_cb->vcpu_load(vcpu, cpu);
        local_irq_restore(flags);
 }

• [x] 也许这种方法并不是解决之道，了解一下 vdso 的实现吧!
  • 猜测 : 虽然让进入到虚拟机中间之后同步刷新了 timerid，但是，实际上，timerid 中间

[Martins3]

• [ ] 对于 vcpu_load 的实现，我们的理解存在问题，将刷新放到 kvm_vz_vcpu_run 中间了
• [x] 所以，access02 会出现错误。(这是权限问题，不是我的错误)
• [ ] 使用一些更加 hacking 的技术，让之后 getpid 之类的强制走 glibc，进而走系统调用
• [ ] 将 dune 作为一个体检加载的动态库，然后其中含有 init module 来提前执行代码。