<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=iso-8859-1">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<!--[if !mso]><style>v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style><![endif]--><style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:\7B49\7EBF;
        panose-1:2 1 6 0 3 1 1 1 1 1;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:"\@\7B49\7EBF";
        panose-1:2 1 6 0 3 1 1 1 1 1;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:#954F72;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal-compose;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-family:"Calibri",sans-serif;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.25in 1.0in 1.25in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="#0563C1" vlink="#954F72">
<div class="WordSection1">
<p class="MsoNormal">Hi Jaco & Christian<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">As titled , check below patch:<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">commit 10790a09ea584cc832353a5c2a481012e5e31a13<o:p></o:p></p>
<p class="MsoNormal">Author: Jacob He <jacob.he@amd.com><o:p></o:p></p>
<p class="MsoNormal">Date:   Fri Feb 28 20:24:41 2020 +0800<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">    drm/amdgpu: Update SPM_VMID with the job's vmid when application reserves the vmid<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">    SPM access the video memory according to SPM_VMID. It should be updated<o:p></o:p></p>
<p class="MsoNormal">    with the job's vmid right before the job is scheduled. SPM_VMID is a<o:p></o:p></p>
<p class="MsoNormal">    global resource<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">    Change-Id: Id3881908960398f87e7c95026a54ff83ff826700<o:p></o:p></p>
<p class="MsoNormal">    Signed-off-by: Jacob He <jacob.he@amd.com><o:p></o:p></p>
<p class="MsoNormal">    Reviewed-by: Christian König <christian.koenig@amd.com><o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">diff --git a/drivers/gpu/drm/amd/amdgpu/amdgpu_vm.c b/drivers/gpu/drm/amd/amdgpu/amdgpu_vm.c<o:p></o:p></p>
<p class="MsoNormal">index 6e6fc8c..ba2236a 100644<o:p></o:p></p>
<p class="MsoNormal">--- a/drivers/gpu/drm/amd/amdgpu/amdgpu_vm.c<o:p></o:p></p>
<p class="MsoNormal">+++ b/drivers/gpu/drm/amd/amdgpu/amdgpu_vm.c<o:p></o:p></p>
<p class="MsoNormal">@@ -1056,8 +1056,12 @@ int amdgpu_vm_flush(struct amdgpu_ring *ring, struct amdgpu_job *job,<o:p></o:p></p>
<p class="MsoNormal">        struct dma_fence *fence = NULL;<o:p></o:p></p>
<p class="MsoNormal">        bool pasid_mapping_needed = false;<o:p></o:p></p>
<p class="MsoNormal">        unsigned patch_offset = 0;<o:p></o:p></p>
<p class="MsoNormal">+       bool update_spm_vmid_needed = (job->vm && (job->vm->reserved_vmid[vmhub] != NULL));<o:p></o:p></p>
<p class="MsoNormal">        int r;<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">+       if (update_spm_vmid_needed && adev->gfx.rlc.funcs->update_spm_vmid)<o:p></o:p></p>
<p class="MsoNormal">+               adev->gfx.rlc.funcs->update_spm_vmid(adev, job->vmid);<o:p></o:p></p>
<p class="MsoNormal">+<o:p></o:p></p>
<p class="MsoNormal">        if (amdgpu_vmid_had_gpu_reset(adev, id)) {<o:p></o:p></p>
<p class="MsoNormal">                gds_switch_needed = true;<o:p></o:p></p>
<p class="MsoNormal">                vm_flush_needed = true;<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">this update_spm_vmid() looks an completely overkill to me, we only need to do it once for its VM …<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">in SRIOV the register reading/writing for update_spm_vmid() is now carried by KIQ thus there is too much burden on KIQ for such unnecessary jobs …<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">I want to change it to only do it once per VM, like:<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">diff --git a/drivers/gpu/drm/amd/amdgpu/amdgpu_vm.c b/drivers/gpu/drm/amd/amdgpu/amdgpu_vm.c<o:p></o:p></p>
<p class="MsoNormal">index 6e6fc8c..ba2236a 100644<o:p></o:p></p>
<p class="MsoNormal">--- a/drivers/gpu/drm/amd/amdgpu/amdgpu_vm.c<o:p></o:p></p>
<p class="MsoNormal">+++ b/drivers/gpu/drm/amd/amdgpu/amdgpu_vm.c<o:p></o:p></p>
<p class="MsoNormal">@@ -1056,8 +1056,12 @@ int amdgpu_vm_flush(struct amdgpu_ring *ring, struct amdgpu_job *job,<o:p></o:p></p>
<p class="MsoNormal">        struct dma_fence *fence = NULL;<o:p></o:p></p>
<p class="MsoNormal">       bool pasid_mapping_needed = false;<o:p></o:p></p>
<p class="MsoNormal">        unsigned patch_offset = 0;<o:p></o:p></p>
<p class="MsoNormal">+       bool update_spm_vmid_needed = (job->vm && (job->vm->reserved_vmid[vmhub] != NULL));<o:p></o:p></p>
<p class="MsoNormal">        int r;<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">+       if (update_spm_vmid_needed && adev->gfx.rlc.funcs->update_spm_vmid &&  !vm->spm_updated) {<o:p></o:p></p>
<p class="MsoNormal">+               adev->gfx.rlc.funcs->update_spm_vmid(adev, job->vmid);
<o:p></o:p></p>
<p class="MsoNormal">+               vm->spm_updated = true;<o:p></o:p></p>
<p class="MsoNormal">+       }<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">        if (amdgpu_vmid_had_gpu_reset(adev, id)) {<o:p></o:p></p>
<p class="MsoNormal">                gds_switch_needed = true;<o:p></o:p></p>
<p class="MsoNormal">                vm_flush_needed = true;<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">what do you think ?<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">P.S.: the best way is to let GFX ring itself to do the update_spm_vmid() instead of let CPU doing it, e.g.: we put more PM4 command in VM-FLUSH packets ….
<o:p></o:p></p>
<p class="MsoNormal">But I prefer the simple way first like I demonstrated above <o:p>
</o:p></p>
<p class="MsoNormal">_____________________________________<o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:12.0pt;color:black;background:white">Monk Liu|GPU Virtualization Team |</span><span style="font-size:12.0pt;color:#C82613;border:none windowtext 1.0pt;padding:0in;background:white">AMD<o:p></o:p></span></p>
<p class="MsoNormal"><img width="80" height="80" style="width:.8333in;height:.8333in" id="Picture_x0020_1" src="cid:image001.png@01D61728.EAC3A7B0" alt="sig-cloud-gpu"><o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</body>
</html>