<div dir="ltr"><div class="gmail_extra"><div class="gmail_quote">On Thu, Feb 9, 2017 at 10:33 AM, Nanley Chery <span dir="ltr"><<a href="mailto:nanleychery@gmail.com" target="_blank">nanleychery@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div class="HOEnZb"><div class="h5">On Wed, Feb 08, 2017 at 06:27:52PM -0800, Jason Ekstrand wrote:<br>
> On Wed, Feb 8, 2017 at 5:34 PM, Nanley Chery <<a href="mailto:nanleychery@gmail.com">nanleychery@gmail.com</a>> wrote:<br>
><br>
> > On Thu, Feb 02, 2017 at 01:26:05PM -0800, Jason Ekstrand wrote:<br>
> > > In order to get good performance numbers for this, I had to hack up the<br>
> > > driver to whack wm_prog_data::uses_kill to true to emulate a discard and<br>
> > > used the Sascha "shadowmapping" demo.  Setting uses_kill to true dropped<br>
> > > the framerate on the demo by 25-30%.  Enabling the PMA fix brought it<br>
> > > back up to around 90% of the original framerate.  This doesn't seem to<br>
> > > really impact Dota 2;  probably because it doesn't use 16-bit depth.<br>
> > ><br>
> > > Reviewed-by: Lionel Landwerlin <<a href="mailto:lionel.g.landwerlin@intel.com">lionel.g.landwerlin@intel.com</a><wbr>><br>
> > > ---<br>
> > >  src/intel/vulkan/TODO              |   1 -<br>
> > >  src/intel/vulkan/anv_cmd_<wbr>buffer.c  |   2 +<br>
> > >  src/intel/vulkan/anv_genX.h        |   3 +<br>
> > >  src/intel/vulkan/anv_private.h     |  17 +++++<br>
> > >  src/intel/vulkan/gen7_cmd_<wbr>buffer.c |   7 ++<br>
> > >  src/intel/vulkan/gen8_cmd_<wbr>buffer.c | 133 ++++++++++++++++++++++++++++++<br>
> > +++++++<br>
> > >  src/intel/vulkan/genX_blorp_<wbr>exec.c |   5 ++<br>
> > >  src/intel/vulkan/genX_cmd_<wbr>buffer.c |  15 ++++-<br>
> > >  src/intel/vulkan/genX_<wbr>pipeline.c   |  38 +++++++++++<br>
> > >  9 files changed, 219 insertions(+), 2 deletions(-)<br>
> > ><br>
> > > diff --git a/src/intel/vulkan/TODO b/src/intel/vulkan/TODO<br>
> > > index 38acc0d..f8b73a1 100644<br>
> > > --- a/src/intel/vulkan/TODO<br>
> > > +++ b/src/intel/vulkan/TODO<br>
> > > @@ -12,5 +12,4 @@ Performance:<br>
> > >   - Compressed multisample support<br>
> > >   - Pushing pieces of UBOs?<br>
> > >   - Enable guardband clipping<br>
> > > - - pma stall workaround<br>
> > >   - Use soft-pin to avoid relocations<br>
> > > diff --git a/src/intel/vulkan/anv_cmd_<wbr>buffer.c<br>
> > b/src/intel/vulkan/anv_cmd_<wbr>buffer.c<br>
> > > index 5886fa6..8c08f8d 100644<br>
> > > --- a/src/intel/vulkan/anv_cmd_<wbr>buffer.c<br>
> > > +++ b/src/intel/vulkan/anv_cmd_<wbr>buffer.c<br>
> > > @@ -135,6 +135,8 @@ anv_cmd_state_reset(struct anv_cmd_buffer<br>
> > *cmd_buffer)<br>
> > >     state->restart_index = UINT32_MAX;<br>
> > >     state->dynamic = default_dynamic_state;<br>
> > >     state->need_query_wa = true;<br>
> > > +   state->pma_fix_enabled = false;<br>
> > > +   state->hiz_enabled = false;<br>
> > ><br>
> > >     if (state->attachments != NULL) {<br>
> > >        vk_free(&cmd_buffer->pool-><wbr>alloc, state->attachments);<br>
> > > diff --git a/src/intel/vulkan/anv_genX.h b/src/intel/vulkan/anv_genX.h<br>
> > > index d04fe38..67147b0 100644<br>
> > > --- a/src/intel/vulkan/anv_genX.h<br>
> > > +++ b/src/intel/vulkan/anv_genX.h<br>
> > > @@ -55,6 +55,9 @@ void genX(cmd_buffer_flush_dynamic_<wbr>state)(struct<br>
> > anv_cmd_buffer *cmd_buffer);<br>
> > ><br>
> > >  void genX(cmd_buffer_flush_compute_<wbr>state)(struct anv_cmd_buffer<br>
> > *cmd_buffer);<br>
> > ><br>
> > > +void genX(cmd_buffer_enable_pma_<wbr>fix)(struct anv_cmd_buffer *cmd_buffer,<br>
> > > +                                     bool enable);<br>
> > > +<br>
> > >  void<br>
> > >  genX(emit_urb_setup)(struct anv_device *device, struct anv_batch *batch,<br>
> > >                       const struct gen_l3_config *l3_config,<br>
> > > diff --git a/src/intel/vulkan/anv_<wbr>private.h b/src/intel/vulkan/anv_<br>
> > private.h<br>
> > > index 4fe3ebc..6efe4ea 100644<br>
> > > --- a/src/intel/vulkan/anv_<wbr>private.h<br>
> > > +++ b/src/intel/vulkan/anv_<wbr>private.h<br>
> > > @@ -1163,6 +1163,20 @@ struct anv_cmd_state {<br>
> > >     bool                                         need_query_wa;<br>
> > ><br>
> > >     /**<br>
> > > +    * Whether or not the gen8 PMA fix is enabled.  We ensure that, at<br>
> > the top<br>
> > > +    * of any command buffer it disabled by disabling it in<br>
> > EndCommandBuffer<br>
> >                                  ^<br>
> >                                  is?<br>
> ><br>
<br>
</div></div>Fixed?<span class=""><br></span></blockquote><div><br></div><div>done<br></div><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><span class="">
> > > +    * and before invoking the secondary in ExecuteCommands.<br>
> > > +    */<br>
> > > +   bool                                         pma_fix_enabled;<br>
> > > +<br>
> > > +   /**<br>
> > > +    * Whether or not we now for certain that HiZ is enabled for the<br>
> > current<br>
> >                            ^<br>
> >                            know<br>
> ><br>
<br>
</span>Fixed?<br></blockquote><div><br></div><div>done<br></div><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div class="h5">
> > > +    * subpass.  If, for whatever reason, we are unsure as to whether<br>
> > HiZ is<br>
> > > +    * enabled or not, this will be false.<br>
> > > +    */<br>
> > > +   bool                                         hiz_enabled;<br>
> > > +<br>
> > > +   /**<br>
> > >      * Array length is anv_cmd_state::pass::<wbr>attachment_count. Array<br>
> > content is<br>
> > >      * valid only when recording a render pass instance.<br>
> > >      */<br>
> > > @@ -1465,8 +1479,11 @@ struct anv_pipeline {<br>
> > ><br>
> > >     uint32_t                                     cs_right_mask;<br>
> > ><br>
> > > +   bool                                         writes_depth;<br>
> > > +   bool                                         depth_test_enable;<br>
> > >     bool                                         writes_stencil;<br>
> > >     bool                                         depth_clamp_enable;<br>
> > > +   bool                                         kill_pixel;<br>
> > ><br>
> > >     struct {<br>
> > >        uint32_t                                  sf[7];<br>
> > > diff --git a/src/intel/vulkan/gen7_cmd_<wbr>buffer.c<br>
> > b/src/intel/vulkan/gen7_cmd_<wbr>buffer.c<br>
> > > index 013ed87..c1a25e8 100644<br>
> > > --- a/src/intel/vulkan/gen7_cmd_<wbr>buffer.c<br>
> > > +++ b/src/intel/vulkan/gen7_cmd_<wbr>buffer.c<br>
> > > @@ -260,6 +260,13 @@ genX(cmd_buffer_flush_dynamic_<wbr>state)(struct<br>
> > anv_cmd_buffer *cmd_buffer)<br>
> > >     cmd_buffer->state.dirty = 0;<br>
> > >  }<br>
> > ><br>
> > > +void<br>
> > > +genX(cmd_buffer_enable_pma_<wbr>fix)(struct anv_cmd_buffer *cmd_buffer,<br>
> > > +                                bool enable)<br>
> > > +{<br>
> > > +   /* The NP PMA fix doesn't exist on gen7 */<br>
> > > +}<br>
> > > +<br>
> > >  void genX(CmdSetEvent)(<br>
> > >      VkCommandBuffer                             commandBuffer,<br>
> > >      VkEvent                                     event,<br>
> > > diff --git a/src/intel/vulkan/gen8_cmd_<wbr>buffer.c<br>
> > b/src/intel/vulkan/gen8_cmd_<wbr>buffer.c<br>
> > > index 8c8de62..271ab3f 100644<br>
> > > --- a/src/intel/vulkan/gen8_cmd_<wbr>buffer.c<br>
> > > +++ b/src/intel/vulkan/gen8_cmd_<wbr>buffer.c<br>
> > > @@ -155,6 +155,135 @@ __emit_sf_state(struct anv_cmd_buffer *cmd_buffer)<br>
> > >  #endif<br>
> > ><br>
> > >  void<br>
> > > +genX(cmd_buffer_enable_pma_<wbr>fix)(struct anv_cmd_buffer *cmd_buffer,<br>
> > bool enable)<br>
> > > +{<br>
> > > +#if GEN_GEN == 8<br>
> > > +   if (cmd_buffer->state.pma_fix_<wbr>enabled == enable)<br>
> > > +      return;<br>
> > > +<br>
> > > +   anv_batch_emit(&cmd_buffer-><wbr>batch, GENX(PIPE_CONTROL), pc) {<br>
> > > +      pc.DepthCacheFlushEnable = true;<br>
> > > +      pc.CommandStreamerStallEnable = true;<br>
> > > +      pc.<wbr>RenderTargetCacheFlushEnable = true;<br>
> ><br>
> > Instead of flushing the depth and RT caches, what do you think about<br>
> > implementing a stall that writes 0 to the workaround bo? That should<br>
> > consume less bandwidth.<br>
> ><br>
> > To make the pipeline idle, flushing the caches shouldn't be necessary,<br>
> > we should be able to do it with a valid pipecontrol packet that has the<br>
> > CS stall bit set.<br>
> ><br>
><br>
> Without having an extremely good idea of how these bits interact with<br>
> caching, I'm very reluctant to try too hard to over-optimize the pipe<br>
> control.<br>
><br>
><br>
<br>
</div></div>Okay. I don't have any data on the impact of cache flushes, so I don't<br>
know if this is a micro-optimization or not. In any case, we are seeing<br>
a performance benefit, so I won't focus on the pipe control.<br>
<span class=""><br>
> > The BDW PRM states:<br>
> ><br>
> >    If the stall bit is set, the command streamer waits until the pipe is<br>
> >    completely flushed.<br>
> ><br>
><br>
> It waits until whatever flush/stall operation you gave it is finished.  You<br>
> also need to specify a stall/flush operation.  If you just do a depth stall<br>
<br>
</span>You could alternatively specify a Post-Sync operation [BDW]:<br>
<br>
   One of the following must also be set:<br>
      • Render Target Cache Flush Enable ([12] of DW1)<br>
      • Depth Cache Flush Enable ([0] of DW1)<br>
      • Stall at Pixel Scoreboard ([1] of DW1)<br>
      • Depth Stall ([13] of DW1)<br>
--->  • Post-Sync Operation ([13] of DW1)<br>
      • DC Flush Enable ([5] of DW1)<br>
<div><div class="h5"><br>
> for instance and no depth reads/writes are in-flight, I don't think it<br>
> actually stalls at all.  We may be able to use StallAtPixelScoreboard<br>
> instead but, again, I don't know for sure how this interacts with caches.<br>
><br>
><br>
> > > +   }<br>
> > > +<br>
> > > +   uint32_t cache_mode;<br>
> > > +   anv_pack_struct(&cache_mode, GENX(CACHE_MODE_1),<br>
> > > +                   .NPPMAFixEnable = enable,<br>
> > > +                   .NPEarlyZFailsDisableMask = enable,<br>
> >                                            ^<br>
> > I don't think you intended to set the mask here. It should be:<br>
> ><br>
> >                       .NPEarlyZFailsDisable = enable,<br>
> ><br>
> > Does fixing this impact your FPS measurements significantly?<br>
> ><br>
><br>
> Thanks for catching that!  I'm a bit surprised that it worked at all.  I'll<br>
> definitely re-measure.<br>
><br>
><br>
> > > +                   .NPPMAFixEnableMask = true,<br>
> > > +                   .NPEarlyZFailsDisableMask = true);<br>
> > > +   anv_batch_emit(&cmd_buffer-><wbr>batch, GENX(MI_LOAD_REGISTER_IMM), lri)<br>
> > {<br>
> > > +      lri.RegisterOffset   = GENX(CACHE_MODE_1_num);<br>
> > > +      lri.DataDWord        = cache_mode;<br>
> > > +   }<br>
> > > +<br>
> > > +   /* After the LRI, a PIPE_CONTROL with both the Depth Stall and Depth<br>
> > Cache<br>
> > > +    * Flush bits is often necessary.  We do it regardless because it's<br>
> > easier.<br>
> > > +    * The render cache flush is also necessary if stencil writes are<br>
> > enabled.<br>
> > > +    */<br>
> ><br>
> > I couldn't find a requirement to flush these specific caches in the<br>
> > docs, but I did find:<br>
> ><br>
><br>
> Both of these flushes are documented in the bspec (not PRM) docs for<br>
> PIPE_CONTROL.<br>
><br>
><br>
> >    To ensure this command gets executed before upcoming commands in the<br>
> >    ring, either a stalling pipecontrol should be sent after this<br>
> >    command, or MMIO 0x20C0 bit 7 should be set to 1.<br>
> ><br>
> > Perhaps we could use the flush I suggested earlier?<br>
> ><br>
> > > +   anv_batch_emit(&cmd_buffer-><wbr>batch, GENX(PIPE_CONTROL), pc) {<br>
> > > +      pc.DepthStallEnable = true;<br>
> > > +      pc.DepthCacheFlushEnable = true;<br>
> > > +      pc.<wbr>RenderTargetCacheFlushEnable = true;<br>
> > > +   }<br>
> > > +<br>
> > > +   cmd_buffer->state.pma_fix_<wbr>enabled = enable;<br>
> > > +#endif /* GEN_GEN == 8 */<br>
> > > +}<br>
> > > +<br>
> > > +static inline bool<br>
> > > +want_depth_pma_fix(struct anv_cmd_buffer *cmd_buffer)<br>
> > > +{<br>
> > > +   assert(GEN_GEN == 8);<br>
> > > +<br>
> > > +   /* From the Broadwell PRM Vol. 2c CACHE_MODE_1::NP_PMA_FIX_<wbr>ENABLE:<br>
> > > +    *<br>
> > > +    *    SW must set this bit in order to enable this fix when following<br>
> > > +    *    expression is TRUE.<br>
> > > +    *<br>
> > > +    *    3DSTATE_WM::<wbr>ForceThreadDispatch != 1 &&<br>
> > > +    *    !(3DSTATE_RASTER::<wbr>ForceSampleCount != NUMRASTSAMPLES_0) &&<br>
> > > +    *    (3DSTATE_DEPTH_BUFFER::<wbr>SURFACE_TYPE != NULL) &&<br>
> > > +    *    (3DSTATE_DEPTH_BUFFER::HIZ Enable) &&<br>
> > > +    *    !(3DSTATE_WM::EDSC_Mode == EDSC_PREPS) &&<br>
> > > +    *    (3DSTATE_PS_EXTRA::<wbr>PixelShaderValid) &&<br>
> > > +    *    !(3DSTATE_WM_HZ_OP::<wbr>DepthBufferClear ||<br>
> > > +    *      3DSTATE_WM_HZ_OP::<wbr>DepthBufferResolve ||<br>
> > > +    *      3DSTATE_WM_HZ_OP::Hierarchical Depth Buffer Resolve Enable ||<br>
> > > +    *      3DSTATE_WM_HZ_OP::<wbr>StencilBufferClear) &&<br>
> > > +    *    (3DSTATE_WM_DEPTH_STENCIL::<wbr>DepthTestEnable) &&<br>
> > > +    *    (((3DSTATE_PS_EXTRA::<wbr>PixelShaderKillsPixels ||<br>
> > > +    *       3DSTATE_PS_EXTRA::oMask Present to RenderTarget ||<br>
> > > +    *       3DSTATE_PS_BLEND::<wbr>AlphaToCoverageEnable ||<br>
> > > +    *       3DSTATE_PS_BLEND::<wbr>AlphaTestEnable ||<br>
> > > +    *       3DSTATE_WM_CHROMAKEY::<wbr>ChromaKeyKillEnable) &&<br>
> > > +    *      3DSTATE_WM::ForceKillPix != ForceOff &&<br>
> > > +    *      ((3DSTATE_WM_DEPTH_STENCIL::<wbr>DepthWriteEnable &&<br>
> > > +    *        3DSTATE_DEPTH_BUFFER::DEPTH_<wbr>WRITE_ENABLE) ||<br>
> > > +    *       (3DSTATE_WM_DEPTH_STENCIL::<wbr>Stencil Buffer Write Enable &&<br>
> > > +    *        3DSTATE_DEPTH_BUFFER::STENCIL_<wbr>WRITE_ENABLE &&<br>
> > > +    *        3DSTATE_STENCIL_BUFFER::<wbr>STENCIL_BUFFER_ENABLE))) ||<br>
> > > +    *     (3DSTATE_PS_EXTRA:: Pixel Shader Computed Depth mode !=<br>
> > PSCDEPTH_OFF))<br>
> > > +    *<br>
> > > +    * This function only takes care of the pipeline parts of the<br>
> > equation.<br>
> ><br>
> > Which parts are the pipeline parts? It looks like you take care of the<br>
> > entire equation in this function.<br>
> ><br>
><br>
> Yes, I do.<br>
><br>
><br>
<br>
</div></div>Since you do, can we omit the sentence?<span class=""><br></span></blockquote><div><br></div><div>Sure.  Done.<br></div><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><span class="">
> > > +    */<br>
> > > +<br>
> > > +   /* These are always true:<br>
> > > +    *    3DSTATE_WM::<wbr>ForceThreadDispatch != 1 &&<br>
> > > +    *    !(3DSTATE_RASTER::<wbr>ForceSampleCount != NUMRASTSAMPLES_0)<br>
> > > +    */<br>
> ><br>
> > I couldn't quite understand what ForcedSampleCount does from looking at<br>
> > the HW docs. If you know, could you tell me what this does and why it<br>
> > wouldn't change under any circumstance in the future?  Otherwise, I<br>
> > think we should put an assertion where we assign ForcedSampleCount and<br>
> > reference this PMA optimization.<br>
> ><br>
><br>
> Honestly, I'm not 100% sure what it's for.  I think it lets you make the<br>
> rasterizer run at a different number of samples than the underlying<br>
> surface.  We've never used this bit in Vulkan or GL.  Also, there's no flag<br>
> for us to assert on.<br>
><br>
><br>
<br>
</span>We can put an assertion below and/or a comment above this line:<br>
<br>
genX_pipeline.c:   raster.ForcedSampleCount = FSC_NUMRASTSAMPLES_0;<br><div><div class="h5"></div></div></blockquote><div><br></div><div>Sure, I'll add a comment so that we know to update the PMA fix if we ever change it.<br><br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div class="h5">
> > > +<br>
> > > +   /* We only enable the PMA fix if we know for certain that HiZ is<br>
> > enabled.<br>
> > > +    * If we don't know whether HiZ is enabled or not, we disable the<br>
> > PMA fix<br>
> > > +    * and there is no harm.<br>
> > > +    *<br>
> > > +    * (3DSTATE_DEPTH_BUFFER::<wbr>SURFACE_TYPE != NULL) &&<br>
> > > +    * 3DSTATE_DEPTH_BUFFER::HIZ Enable<br>
> > > +    */<br>
> > > +   if (!cmd_buffer->state.hiz_<wbr>enabled)<br>
> > > +      return false;<br>
> > > +<br>
> > > +   /* 3DSTATE_PS_EXTRA::<wbr>PixelShaderValid */<br>
> > > +   struct anv_pipeline *pipeline = cmd_buffer->state.pipeline;<br>
> > > +   if (!anv_pipeline_has_stage(<wbr>pipeline, MESA_SHADER_FRAGMENT))<br>
> > > +      return false;<br>
> > > +<br>
> > > +   /* !(3DSTATE_WM::EDSC_Mode == EDSC_PREPS) */<br>
> > > +   const struct brw_wm_prog_data *wm_prog_data =<br>
> > get_wm_prog_data(pipeline);<br>
> > > +   if (wm_prog_data->early_fragment_<wbr>tests)<br>
> > > +      return false;<br>
> ><br>
> > In keeping with your top-to-bottom evaluation of the logical statement,<br>
> > could you move this part to be above the PixelShaderValid part?<br>
> ><br>
><br>
> Not really.  If we don't' have a fragment shader, we wm_prog_data is NULL<br>
><br>
><br>
<br>
</div></div>In that case couldn't we do the following?<br>
<br>
   if (wm_prog_data && wm_prog_data->early_fragment_<wbr>tests)<br>
      return false;<br></blockquote><div><br></div><div>I suppose... Seems easier just to check them in the other order.<br></div><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
> > > +<br>
> > > +   /* We never use anv_pipeline for HiZ ops so this is trivially true:<br>
<div><div class="h5">> > > +   *    !(3DSTATE_WM_HZ_OP::<wbr>DepthBufferClear ||<br>
> >       ^<br>
> >       misaligned asterisk<br>
> ><br>
><br>
> Fixed.<br>
><br>
><br>
> > > +    *      3DSTATE_WM_HZ_OP::<wbr>DepthBufferResolve ||<br>
> > > +    *      3DSTATE_WM_HZ_OP::Hierarchical Depth Buffer Resolve Enable ||<br>
> > > +    *      3DSTATE_WM_HZ_OP::<wbr>StencilBufferClear)<br>
> > > +    */<br>
> > > +<br>
> > > +   /* 3DSTATE_WM_DEPTH_STENCIL::<wbr>DepthTestEnable */<br>
> > > +   if (!pipeline->depth_test_enable)<br>
> > > +      return false;<br>
> > > +<br>
> > > +   /* (((3DSTATE_PS_EXTRA::<wbr>PixelShaderKillsPixels ||<br>
> > > +    *    3DSTATE_PS_EXTRA::oMask Present to RenderTarget ||<br>
> > > +    *    3DSTATE_PS_BLEND::<wbr>AlphaToCoverageEnable ||<br>
> > > +    *    3DSTATE_PS_BLEND::<wbr>AlphaTestEnable ||<br>
> > > +    *    3DSTATE_WM_CHROMAKEY::<wbr>ChromaKeyKillEnable) &&<br>
> > > +    *   3DSTATE_WM::ForceKillPix != ForceOff &&<br>
> > > +    *   ((3DSTATE_WM_DEPTH_STENCIL::<wbr>DepthWriteEnable &&<br>
> > > +    *     3DSTATE_DEPTH_BUFFER::DEPTH_<wbr>WRITE_ENABLE) ||<br>
> > > +    *    (3DSTATE_WM_DEPTH_STENCIL::<wbr>Stencil Buffer Write Enable &&<br>
> > > +    *     3DSTATE_DEPTH_BUFFER::STENCIL_<wbr>WRITE_ENABLE &&<br>
> > > +    *     3DSTATE_STENCIL_BUFFER::<wbr>STENCIL_BUFFER_ENABLE))) ||<br>
> > > +    *  (3DSTATE_PS_EXTRA:: Pixel Shader Computed Depth mode !=<br>
> > PSCDEPTH_OFF))<br>
> > > +    */<br>
> > > +   return (pipeline->kill_pixel && (pipeline->writes_depth ||<br>
> > > +                                    pipeline->writes_stencil)) ||<br>
> ><br>
> > anv_pipeline::writes_stencil !=<br>
> > (3DSTATE_WM_DEPTH_STENCIL::<wbr>Stencil Buffer Write Enable &&<br>
> >  3DSTATE_DEPTH_BUFFER::STENCIL_<wbr>WRITE_ENABLE &&<br>
> >  3DSTATE_STENCIL_BUFFER::<wbr>STENCIL_BUFFER_ENABLE);<br>
> ><br>
> > The last two lines are not accounted for - we don't detect if the<br>
> > currently bound depth_stencil attachment lacks or possesses a stencil<br>
> > buffer.<br>
> ><br>
><br>
> We should be checking for the presence of a stencil aspect in the<br>
> pipeline.  I think that got missed when I added the writes_stencil bit.  We<br>
> do by the end of the series, but I'll patch up the disable stencil writes<br>
> patch to make it check.<br>
><br>
><br>
<br>
</div></div>Sounds good.<br>
<span class=""><br>
> > This is a valid scenario according to section 25.9. Stencil Test of the<br>
> > Vulkan spec, which states:<br>
> ><br>
> >    If there is no stencil framebuffer attachment, stencil modification<br>
> >    cannot occur, and it is as if the stencil tests always pass.<br>
> ><br>
> > anv_pipeline::writes_depth should be correct because hiz_enabled is true<br>
> > by the time we reach it. For hiz_enabled to be true, there must be a<br>
> > depth buffer present.<br>
> ><br>
><br>
> Yup<br>
><br>
><br>
> > > +          wm_prog_data->computed_depth_<wbr>mode != PSCDEPTH_OFF;<br>
> > > +}<br>
> > > +<br>
> > > +void<br>
> > >  genX(cmd_buffer_flush_dynamic_<wbr>state)(struct anv_cmd_buffer *cmd_buffer)<br>
> > >  {<br>
> > >     struct anv_pipeline *pipeline = cmd_buffer->state.pipeline;<br>
> > > @@ -211,6 +340,7 @@ genX(cmd_buffer_flush_dynamic_<wbr>state)(struct<br>
> > anv_cmd_buffer *cmd_buffer)<br>
> > >     }<br>
> > ><br>
> > >     if (cmd_buffer->state.dirty & (ANV_CMD_DIRTY_PIPELINE |<br>
> > > +                                  ANV_CMD_DIRTY_RENDER_TARGETS |<br>
> ><br>
> > Why is this necessary?<br>
> ><br>
><br>
> We set RENDER_TARGETS dirty when the depth buffer changes due to<br>
> NextSubpass or BeginCommandBuffer<br>
><br>
><br>
<br>
</span>I'm familiar with when this flag gets set, but I don't see what case<br>
this catches over the already present bits.<br></blockquote><div><br></div><div>We look at the framebuffer and subpass to determine whether or not HiZ is enabled.<br></div><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
> > >                                    ANV_CMD_DIRTY_DYNAMIC_STENCIL_<wbr>COMPARE_MASK<br>
> > |<br>
> > >                                    ANV_CMD_DIRTY_DYNAMIC_STENCIL_<wbr>WRITE_MASK))<br>
> > {<br>
> > >        uint32_t wm_depth_stencil_dw[GENX(<wbr>3DSTATE_WM_DEPTH_STENCIL_<br>
<div><div class="h5">> > length)];<br>
> > > @@ -234,6 +364,9 @@ genX(cmd_buffer_flush_dynamic_<wbr>state)(struct<br>
> > anv_cmd_buffer *cmd_buffer)<br>
> > ><br>
> > >        anv_batch_emit_merge(&cmd_<wbr>buffer->batch, wm_depth_stencil_dw,<br>
> > >                             pipeline->gen8.wm_depth_<wbr>stencil);<br>
> > > +<br>
> > > +      genX(cmd_buffer_enable_pma_<wbr>fix)(cmd_buffer,<br>
> > > +                                      want_depth_pma_fix(cmd_buffer)<wbr>);<br>
> > >     }<br>
> > >  #else<br>
> > >     if (cmd_buffer->state.dirty & ANV_CMD_DIRTY_DYNAMIC_BLEND_<wbr>CONSTANTS)<br>
> > {<br>
> > > diff --git a/src/intel/vulkan/genX_blorp_<wbr>exec.c<br>
> > b/src/intel/vulkan/genX_blorp_<wbr>exec.c<br>
> > > index 663e6c9..6f0b063 100644<br>
> > > --- a/src/intel/vulkan/genX_blorp_<wbr>exec.c<br>
> > > +++ b/src/intel/vulkan/genX_blorp_<wbr>exec.c<br>
> > > @@ -154,6 +154,11 @@ genX(blorp_exec)(struct blorp_batch *batch,<br>
> > ><br>
> > >     genX(cmd_buffer_emit_gen7_<wbr>depth_flush)(cmd_buffer);<br>
> > ><br>
> > > +   /* BLORP doesn't do anything fancy with depth such as discards, so<br>
> > we want<br>
> > > +    * the PMA fix off.  Also, off is always the safe option.<br>
> > > +    */<br>
> > > +   genX(cmd_buffer_enable_pma_<wbr>fix)(cmd_buffer, false);<br>
> > > +<br>
> > >     blorp_exec(batch, params);<br>
> > ><br>
> > >     cmd_buffer->state.vb_dirty = ~0;<br>
> > > diff --git a/src/intel/vulkan/genX_cmd_<wbr>buffer.c<br>
> > b/src/intel/vulkan/genX_cmd_<wbr>buffer.c<br>
> > > index b6b7f74..66de93a 100644<br>
> > > --- a/src/intel/vulkan/genX_cmd_<wbr>buffer.c<br>
> > > +++ b/src/intel/vulkan/genX_cmd_<wbr>buffer.c<br>
> > > @@ -627,6 +627,11 @@ genX(EndCommandBuffer)(<br>
> > >  {<br>
> > >     ANV_FROM_HANDLE(anv_cmd_<wbr>buffer, cmd_buffer, commandBuffer);<br>
> > ><br>
> > > +   /* We want every command buffer to start with the PMA fix in a known<br>
> > state,<br>
> > > +    * so we disable it at the end of the command buffer.<br>
> > > +    */<br>
> > > +   genX(cmd_buffer_enable_pma_<wbr>fix)(cmd_buffer, false);<br>
> > > +<br>
> > >     genX(cmd_buffer_apply_pipe_<wbr>flushes)(cmd_buffer);<br>
> > ><br>
> > >     anv_cmd_buffer_end_batch_<wbr>buffer(cmd_buffer);<br>
> > > @@ -644,6 +649,11 @@ genX(CmdExecuteCommands)(<br>
> > ><br>
> > >     assert(primary->level == VK_COMMAND_BUFFER_LEVEL_<wbr>PRIMARY);<br>
> > ><br>
> > > +   /* The secondary command buffers will assume that the PMA fix is<br>
> > disabled<br>
> > > +    * when they begin executing.  Make sure this is true.<br>
> > > +    */<br>
> > > +   genX(cmd_buffer_enable_pma_<wbr>fix)(primary, false);<br>
> > > +<br>
> > >     for (uint32_t i = 0; i < commandBufferCount; i++) {<br>
> > >        ANV_FROM_HANDLE(anv_cmd_<wbr>buffer, secondary, pCmdBuffers[i]);<br>
> > ><br>
> > > @@ -2181,7 +2191,8 @@ cmd_buffer_emit_depth_stencil(<wbr>struct<br>
> > anv_cmd_buffer *cmd_buffer)<br>
> > >     const bool has_stencil =<br>
> > >        image && (image->aspects & VK_IMAGE_ASPECT_STENCIL_BIT);<br>
> > ><br>
> > > -   /* FIXME: Implement the PMA stall W/A */<br>
> > > +   cmd_buffer->state.hiz_enabled = has_hiz;<br>
> > > +<br>
> > >     /* FIXME: Width and Height are wrong */<br>
> > ><br>
> > >     genX(cmd_buffer_emit_gen7_<wbr>depth_flush)(cmd_buffer);<br>
> > > @@ -2419,6 +2430,8 @@ void genX(CmdEndRenderPass)(<br>
> > ><br>
> > >     anv_cmd_buffer_resolve_<wbr>subpass(cmd_buffer);<br>
> > ><br>
> > > +   cmd_buffer->state.hiz_enabled = false;<br>
> > > +<br>
> > >  #ifndef NDEBUG<br>
> > >     anv_dump_add_framebuffer(cmd_<wbr>buffer, cmd_buffer->state.framebuffer)<wbr>;<br>
> > >  #endif<br>
> > > diff --git a/src/intel/vulkan/genX_<wbr>pipeline.c b/src/intel/vulkan/genX_<br>
> > pipeline.c<br>
> > > index 18fe48c..0588d01 100644<br>
> > > --- a/src/intel/vulkan/genX_<wbr>pipeline.c<br>
> > > +++ b/src/intel/vulkan/genX_<wbr>pipeline.c<br>
> > > @@ -653,6 +653,8 @@ emit_ds_state(struct anv_pipeline *pipeline,<br>
> > >         * to make sure it's initialized to something useful.<br>
> > >         */<br>
> > >        pipeline->writes_stencil = false;<br>
> > > +      pipeline->writes_depth = false;<br>
> > > +      pipeline->depth_test_enable = false;<br>
> > >        memset(depth_stencil_dw, 0, sizeof(depth_stencil_dw));<br>
> > >        return;<br>
> > >     }<br>
> > > @@ -711,6 +713,9 @@ emit_ds_state(struct anv_pipeline *pipeline,<br>
> > >     if (info->depthTestEnable && info->depthCompareOp ==<br>
> > VK_COMPARE_OP_EQUAL)<br>
> > >        depth_stencil.<wbr>DepthBufferWriteEnable = false;<br>
> > ><br>
> > > +   pipeline->writes_depth = depth_stencil.<wbr>DepthBufferWriteEnable;<br>
> > > +   pipeline->depth_test_enable = depth_stencil.DepthTestEnable;<br>
> > > +<br>
> > >  #if GEN_GEN <= 7<br>
> > >     GENX(DEPTH_STENCIL_STATE_pack)<wbr>(NULL, depth_stencil_dw,<br>
> > &depth_stencil);<br>
> > >  #else<br>
> > > @@ -1429,6 +1434,38 @@ emit_3dstate_vf_topology(<wbr>struct anv_pipeline<br>
> > *pipeline)<br>
> > >  }<br>
> > >  #endif<br>
> > ><br>
> > > +static void<br>
> > > +compute_kill_pixel(struct anv_pipeline *pipeline,<br>
> > > +                   const VkPipelineMultisampleStateCrea<wbr>teInfo *ms_info,<br>
> > > +                   const struct anv_subpass *subpass)<br>
> > > +{<br>
> > > +   if (!anv_pipeline_has_stage(<wbr>pipeline, MESA_SHADER_FRAGMENT)) {<br>
> > > +      pipeline->kill_pixel = false;<br>
> > > +      return;<br>
> > > +   }<br>
> > > +<br>
> > > +   const struct brw_wm_prog_data *wm_prog_data =<br>
> > get_wm_prog_data(pipeline);<br>
> > > +<br>
> > > +   /* This computes the KillPixel portion of the computation for<br>
> > whether or<br>
> > > +    * not we want to enable the PMA fix on gen8.  It's given by this<br>
> > chunk of<br>
> > > +    * the giant formula:<br>
> > > +    *<br>
> > > +    *    (3DSTATE_PS_EXTRA::<wbr>PixelShaderKillsPixels ||<br>
> > > +    *     3DSTATE_PS_EXTRA::oMask Present to RenderTarget ||<br>
> > > +    *     3DSTATE_PS_BLEND::<wbr>AlphaToCoverageEnable ||<br>
> > > +    *     3DSTATE_PS_BLEND::<wbr>AlphaTestEnable ||<br>
> > > +    *     3DSTATE_WM_CHROMAKEY::<wbr>ChromaKeyKillEnable)<br>
> > > +    *<br>
> > > +    * 3DSTATE_WM_CHROMAKEY::<wbr>ChromaKeyKillEnable is always false and so<br>
> > is<br>
> > > +    * 3DSTATE_PS_BLEND::<wbr>AlphaTestEnable since Vulkan doesn't have a<br>
> > concept<br>
> > > +    * of an alpha test.<br>
> > > +    */<br>
> > > +   pipeline->kill_pixel =<br>
> > > +      subpass->has_ds_self_dep || wm_prog_data->uses_kill ||<br>
> ><br>
> > Why do we set kill_pixel in the presence of has_ds_self_dep?<br>
> ><br>
> > Section 7.1 of the Vulkan spec states:<br>
> ><br>
> >    If a subpass uses the same attachment as both an input attachment and<br>
> >    either a color attachment or a depth/stencil attachment, writes via<br>
> >    the color or depth/stencil attachment are not automatically made<br>
> >    visible to reads via the input attachment, causing a feedback loop,<br>
> >    except in any of the following conditions:<br>
> ><br>
> >    [...]<br>
> ><br>
> > I don't see how any of the conditions are satisfied through the use<br>
> > of kill_pixel.<br>
> ><br>
><br>
> There's a really good comment where we set<br>
> 3DSTATE_PS::<wbr>PixelShaderKillsPixel and<br>
> 3DSTATE_PS_EXTRA::<wbr>PixelShaderKillsPixel<br>
><br>
><br>
<br>
</div></div>Sorry, I saw the comment earlier, but I didn't think about this long<br>
enough before commenting. Looks good.<br>
<div class="HOEnZb"><div class="h5"><br>
> > > +      wm_prog_data->uses_omask ||<br>
> > > +      (ms_info && ms_info-><wbr>alphaToCoverageEnable);<br>
> > > +}<br>
> > > +<br>
> > >  static VkResult<br>
> > >  genX(graphics_pipeline_create)<wbr>(<br>
> > >      VkDevice                                    _device,<br>
> > > @@ -1466,6 +1503,7 @@ genX(graphics_pipeline_create)<wbr>(<br>
> > >     emit_ds_state(pipeline, pCreateInfo-><wbr>pDepthStencilState, pass,<br>
> > subpass);<br>
> > >     emit_cb_state(pipeline, pCreateInfo->pColorBlendState,<br>
> > >                             pCreateInfo-><wbr>pMultisampleState);<br>
> > > +   compute_kill_pixel(pipeline, pCreateInfo-><wbr>pMultisampleState,<br>
> > subpass);<br>
> > ><br>
> > >     emit_urb_setup(pipeline);<br>
> > ><br>
> > > --<br>
> > > 2.5.0.400.gff86faf<br>
> > ><br>
> > > ______________________________<wbr>_________________<br>
> > > mesa-dev mailing list<br>
> > > <a href="mailto:mesa-dev@lists.freedesktop.org">mesa-dev@lists.freedesktop.org</a><br>
> > > <a href="https://lists.freedesktop.org/mailman/listinfo/mesa-dev" rel="noreferrer" target="_blank">https://lists.freedesktop.org/<wbr>mailman/listinfo/mesa-dev</a><br>
> ><br>
</div></div></blockquote></div><br></div></div>