<div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr">Hi Pekka,<div><br></div><div>Yes, sorry, I was writing specifically about Weston implementation. In the merge request from Alexandros the actual compatibility check is in the main compositor, while compositor doesn't have enough information to decide whether the selected renderer can handle buffer+fence combination or not. </div><div><br></div><div>As for the opaque wl_buffer, that's an internal implementation detail of Vulkan WSI or EGL so different drivers can choose to do different things here. It's the 3D driver, and *NOT* the client application, that creates those buffers and sends attach/damage/commit sequence to the compositor. The 3D driver makes a decision what type of buffer to use, an EGL or Vulkan client application doesn't have any means of accessing wl_buffer objects, it's all hidden away.</div><div><br></div><div>On the compositor side buffers are received through one of the protocol extensions you've mentioned. The compositor has a choice to make. It can either probe the wl_buffer for known buffer types or leave that task to the EGL implementation. Let's say a client-side driver uses dma-buf buffers for its swapchain images. If the compositor knows how to handle dma-buf, it can either directly access those buffers or it can hand them over to the compositor-side 3D driver through eglCreateImage(dpy,  EGL_LINUX_DMA_BUF_EXT, ...). If the compositor doesn't know the particular type of buffer, it can check if EGL can handle it either through eglCreateImage(dpy,  EGL_WAYLAND_BUFFER_WL, ...) or <span style="color:rgb(0,0,0);font-size:13.3333px">eglQueryWaylandBufferWL(...). If the client and compositor use the same 3D driver (that's the most likely scenario) this is bound to work. In multiple-GPU configurations your mileage may vary though. </span></div><div><span style="color:rgb(0,0,0);font-size:13.3333px"><br></span></div><div><span style="color:rgb(0,0,0);font-size:13.3333px">If the EGL implementation can use the type of the wl_buffer and can import the fence fd, you're home. </span><span style="color:rgb(0,0,0);font-size:13.3333px">Having said that, I can't think of a way of figuring out ahead of time what type of wl_buffer the client-side driver is going to use for its swapchain and whether this particular type will be accepted by the compositor-side driver.</span></div><div><br></div><div>This is how I use it at the moment: I've written a custom Weston backend because the code runs on top of an embedded middleware. My backend always uses GL renderer. The GL renderer has to call <span style="color:rgb(0,0,0);font-size:13.3333px">eglBindWaylandDisplayWL() at startup, and the implementation of that API in the 3D driver adds a custom Wayland protocol extension for sharing buffers. Now the scene is set. When a Wayland client application starts, the EGL or Vulkan WSI implementation </span><span style="color:rgb(0,0,0);font-size:13.3333px">driver</span><span style="color:rgb(0,0,0);font-size:13.3333px"> goes for </span><span style="color:rgb(0,0,0);font-size:13.3333px">that</span><span style="color:rgb(0,0,0);font-size:13.3333px"> extension and bails out if unavailable. This way swapchain buffers from EGL and Vulkan client can be used by Weston's GL renderer without any knowledge of the embedded platform details.</span></div><div><span style="color:rgb(0,0,0);font-size:13.3333px"><br></span></div><div><span style="color:rgb(0,0,0);font-size:13.3333px">With regards to using fences directly by the client app, I guess it's the same principle as drawing into the window. Either client app does everything "by hand" or lets the Vulkan or EGL/GLES do it. If the app is in charge, the app manages the window swap chain buffers and synchronization, otherwise the 3D driver does it. You shouldn't allow more than one thing managing the Wayland window at the same time. Perhaps you could use wording similar to Vulkan WSI or EGL window surface when describing what is and what isn't allowed when it comes to Wayland windows.</span></div><div><span style="color:rgb(0,0,0);font-size:13.3333px"><br></span></div><div><span style="color:rgb(0,0,0);font-size:13.3333px">Cheers,</span></div><div><span style="color:rgb(0,0,0);font-size:13.3333px">Tomek</span></div><div><span style="color:rgb(0,0,0);font-size:13.3333px"><br></span></div><div><br></div></div></div></div></div></div></div><br><div class="gmail_quote"><div dir="ltr">On Mon, 26 Nov 2018 at 09:22, Pekka Paalanen <<a href="mailto:ppaalanen@gmail.com">ppaalanen@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">On Fri, 23 Nov 2018 16:26:19 +0000<br>
Tomek Bury <<a href="mailto:tomek.bury@gmail.com" target="_blank">tomek.bury@gmail.com</a>> wrote:<br>
<br>
> Hi Pekka,<br>
> <br>
> > I presume you have a driver stack that relies on the opaque EGL buffers  <br>
> and not zwp_linux_dmabuf any time soon?<br>
> Yes, exactly. I've added a protocol extension for sharing those buffers and<br>
> our eglCreateImage() implementation can import such buffers into the driver<br>
> on the compositor end. The buffers are carried by an fd to the compositor<br>
> that's the only similarity. They're not dma-buf.<br>
> <br>
> > Yeah, support for opaque EGL buffers could be added, just need to think  <br>
> of a good wording, since acquire fences do not make sense for all buffer<br>
> types.<br>
<br>
> Isn't that renderer's and/or backend's decision? The GL renderer can accept<br>
> fence with any buffer it can send to the 3D driver, so, effectively,<br>
> anything backed by available EGL image extensions. Someone may add a custom<br>
> backend and/or renderer using whatever hardware or API they have at hand. A<br>
> Vulkan renderer could potentially use fences with anything a Vulkan driver<br>
> is capable of importing. A renderer that does the CPU wait could be useful<br>
> at least for debugging. So I wouln't block the explicit sync at the<br>
> compositor level based on the white list.<br>
<br>
Hi Tomek,<br>
<br>
fences do not make sense to all buffer types to begin with, today. My<br>
objection is to allowing fencing buffer types that cannot be sent to<br>
the 3D driver, e.g. wl_shm which is usually copied through glTexImage2D<br>
and friends. We cannot ignore those in the spec language.<br>
<br>
A renderer (a compositor really, we're not talking about just Weston)<br>
decides what buffer types it accepts, yes. This is communicated to<br>
clients through which buffer factory interface globals are being<br>
advertised. Each type is a different protocol extension. The fence<br>
extension OTOH is just a single extension, and currently there is no<br>
protocol to negotiate which buffer types are usable with acquire<br>
fences. The first attempt is to define in the spec language what will<br>
always be supported, provided the buffer factory exists.<br>
<br>
The opaque EGL buffer type is really just one type in practise:<br>
compositors and clients use it through a well-known, single API: EGL.<br>
It does not matter that there are multiple incompatible EGL<br>
implementations, it all looks like just one opaque buffer type to<br>
compositors. I think this makes it easier to extend the fence spec<br>
wording to require opaque EGL buffers to be supported.<br>
<br>
Either the fence protocol spec needs to be clear on what works, or we<br>
need advertisement events to let clients know in advance what the<br>
compositor supports. A client sending a fence that the compositor<br>
cannot use must not be possible; compositor, client, EGL, driver, etc.<br>
bugs notwithstanding.<br>
<br>
Btw. I just realized that if client-side EGL uses the fence extension<br>
internally, that means the client app code must not attempt to add or<br>
request fences of its own, because the spec disallows multiple acquire<br>
fences and multiple release notification requests. I suppose that's<br>
fine?<br>
<br>
Alf, can you come up with changes to the spec wording and Weston to<br>
require opaque EGL buffers are supported?<br>
<br>
On one hand it is actually a little strange to couple opaque EGL<br>
buffers (a private, EGL implementation specific protocol interface)<br>
with a generic fencing extension, but maybe that is necessary because<br>
there is not enough compositor-side GBM and EGL API so that the EGL<br>
implementation could handle it all in an EGL implementation specific<br>
interface?<br>
<br>
<br>
Thanks,<br>
pq<br>
<br>
> On Fri, 23 Nov 2018 at 13:47, Pekka Paalanen <<a href="mailto:ppaalanen@gmail.com" target="_blank">ppaalanen@gmail.com</a>> wrote:<br>
> <br>
> > On Fri, 23 Nov 2018 13:07:37 +0000<br>
> > Tomek Bury <<a href="mailto:tomek.bury@gmail.com" target="_blank">tomek.bury@gmail.com</a>> wrote:<br>
> >  <br>
> > > Hi Alexandros,<br>
> > ><br>
> > > Sorry for a delay. I've finally got an end-to-end system to test it out.  <br>
> > It  <br>
> > > took some time because Weston backend I wrote a while back needed serious<br>
> > > rework to catch up with latest changes.<br>
> > ><br>
> > > There's one thing that didn't work for me. In compositor you reject<br>
> > > anything that isn't a DMA buffer and then in glrenderer you put an extra<br>
> > > assertion. Why? All you do is use an EGL extension in order to import<br>
> > > external fence_fd. There's no dmabuf dependency there. As long as the EGL<br>
> > > implementation exposes EGL_SYNC_NATIVE_FENCE_ANDROID extension this  <br>
> > should  <br>
> > > "just work" (tm) for the GL renderer. It certainly did for me. CPU-based<br>
> > > renderers can poll() to wait.  <br>
> ><br>
> > Hi Tomek,<br>
> ><br>
> > with Weston it was decided not to implement a poll() based wait at<br>
> > first as implementing that properly (not blocking the compositor) would<br>
> > be a big hassle and no-one could see the benefit of it given what<br>
> > clients could actually produce.<br>
> ><br>
> > Therefore the acquire fence can only apply to buffers which can be<br>
> > pipelined to a GPU. Mesa EGL is using zwp_linux_dmabuf, but the support<br>
> > could be extended to opaque EGL buffers very well. We just chose to<br>
> > start small and bring up the infrastructure around fences first.<br>
> ><br>
> > Restrictions on buffer types etc. can certainly be lifted in the future<br>
> > if there are good use cases. I presume you have a driver stack that<br>
> > relies on the opaque EGL buffers and not zwp_linux_dmabuf any time soon?<br>
> ><br>
> > Would anyone ever use an acquire fence with wl_shm buffers? That sounds<br>
> > fundamentally wrong to me as one cannot create fences to be signalled<br>
> > by userspace AFAIK. Therefore buffers whose wait cannot be pipelined to<br>
> > the GPU or the display device do not make much sense to me.<br>
> >  <br>
> > > The type of buffer used is an orthogonal problem. The<br>
> > > EGL_WL_bind_wayland_display<br>
> > > extension takes care of GL clients' buffers in GL renderer, for anything<br>
> > > else the renderer needs to know how to get pixels and use whatever means  <br>
> > to  <br>
> > > put those pixels on screen.  <br>
> ><br>
> > Yeah, support for opaque EGL buffers could be added, just need to think<br>
> > of a good wording, since acquire fences do not make sense for all<br>
> > buffer types. A compositor must be allowed to raise protocol errors for<br>
> > fence+buffer combinations it cannot use, which means that clients must<br>
> > know in advance what they cannot use.<br>
> ><br>
> ><br>
> > Thanks,<br>
> > pq<br>
> >  <br>
> > > On Tue, 13 Nov 2018 at 09:33, Tomek Bury <<a href="mailto:tomek.bury@gmail.com" target="_blank">tomek.bury@gmail.com</a>> wrote:<br>
> > >  <br>
> > > > Thanks!<br>
> > > ><br>
> > > > On Tue, Nov 13, 2018 at 9:08 AM Alexandros Frantzis <  <br>
> > > > <a href="mailto:alexandros.frantzis@collabora.com" target="_blank">alexandros.frantzis@collabora.com</a>> wrote:  <br>
> > > >  <br>
> > > >> On Mon, Nov 12, 2018 at 12:39:58PM +0000, Tomek Bury wrote:  <br>
> > > >> > On Mon, Nov 12, 2018 at 11:15 AM Daniel Stone <<a href="mailto:daniel@fooishbar.org" target="_blank">daniel@fooishbar.org</a>>  <br>
> >  <br>
> > > >> wrote:  <br>
> > > >> >  <br>
> > > >> > > On Fri, 9 Nov 2018 at 10:48, Pekka Paalanen <<a href="mailto:ppaalanen@gmail.com" target="_blank">ppaalanen@gmail.com</a>>  <br>
> >  <br>
> > > >> wrote:  <br>
> > > >> > > > I can add that while pushing upstream, if there are no other  <br>
> > changes  <br>
> > > >> > > > coming.<br>
> > > >> > > ><br>
> > > >> > > > Reviewed-by: Pekka Paalanen <<a href="mailto:pekka.paalanen@collabora.co.uk" target="_blank">pekka.paalanen@collabora.co.uk</a>><br>
> > > >> > > ><br>
> > > >> > > > You have ensured that the C files generated from this revision  <br>
> > build  <br>
> > > >> > > > fine in Weston, right?<br>
> > > >> > > ><br>
> > > >> > > > David, Daniel, since your name is in the maintainers, can I  <br>
> > have  <br>
> > > >> your  <br>
> > > >> > > > R-b, please?  <br>
> > > >> > ><br>
> > > >> > > The protocol is:<br>
> > > >> > > Reviewed-by: Daniel Stone <<a href="mailto:daniels@collabora.com" target="_blank">daniels@collabora.com</a>><br>
> > > >> > ><br>
> > > >> > > The Weston implementation looks pretty good so far, though  <br>
> > there's no  <br>
> > > >> > > full implementation of release yet.<br>
> > > >> > ><br>
> > > >> > > Cheers,<br>
> > > >> > > Daniel<br>
> > > >> > > _______________________________________________<br>
> > > >> > > wayland-devel mailing list<br>
> > > >> > > <a href="mailto:wayland-devel@lists.freedesktop.org" target="_blank">wayland-devel@lists.freedesktop.org</a><br>
> > > >> > > <a href="https://lists.freedesktop.org/mailman/listinfo/wayland-devel" rel="noreferrer" target="_blank">https://lists.freedesktop.org/mailman/listinfo/wayland-devel</a><br>
> > > >> > >  <br>
> > > >> ><br>
> > > >> > HI Daniel,<br>
> > > >> ><br>
> > > >> > Where can I find the work-in-progress implementation? I'd like to  <br>
> > try it  <br>
> > > >> > out with Broadcom driver which doesn't have implicit cross-process  <br>
> > > >> sync. I  <br>
> > > >> > can add the explicit sync protocol implementation on the driver  <br>
> > side but  <br>
> > > >> > I'd need a reference to test it against.<br>
> > > >> ><br>
> > > >> > Cheers,<br>
> > > >> > Tomek  <br>
> > > >><br>
> > > >> Hi Tomek,<br>
> > > >><br>
> > > >> the WIP implementation can be found here [1]. I hope to push an  <br>
> > update,  <br>
> > > >> including some zwp_buffer_release_v1 correctness fixes, in the  <br>
> > following  <br>
> > > >> days.<br>
> > > >><br>
> > > >> Thanks,<br>
> > > >> Alexandros<br>
> > > >><br>
> > > >> [1] <a href="https://gitlab.freedesktop.org/wayland/weston/merge_requests/32" rel="noreferrer" target="_blank">https://gitlab.freedesktop.org/wayland/weston/merge_requests/32</a><br>
> > > >>  <br>
> > > >  <br>
> ><br>
> >  <br>
<br>
</blockquote></div>