<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"> <head> <meta http-equiv="Content-Type" content="text/html; charset=us-ascii"> <meta name="Generator" content="Microsoft Word 12 (filtered medium)"> <style></style> </head> <body lang="EN-US" link="blue" vlink="purple"> <div class="WordSection1"> Hi Gwenole:<o:p></o:p> In order to support raw video stream (decoded by sw decoder) on wayland platform, I heard that you have<o:p></o:p> ideas to add upload functionality in vaapisink, right?<o:p></o:p> Here is a patch to make that work, could you give some comments.<o:p></o:p> <o:p></o:p> Do you prefer to separate the functionality to a new GObject? If yes, I could give more try.<o:p></o:p> <o:p> </o:p> <o:p> </o:p> From d599f18a654025328c34d49a09c60edfb3de147f Mon Sep 17 00:00:00 2001<o:p></o:p> From: Zhao Halley <halley.zhao@intel.com><o:p></o:p> Date: Fri, 7 Sep 2012 13:14:04 +0800<o:p></o:p> Subject: [PATCH] add yuv upload functionality in vaapisink to support raw<o:p></o:p> video stream<o:p></o:p> <o:p> </o:p> ---<o:p></o:p> gst/vaapi/gstvaapisink.c | 330 ++++++++++++++++++++++++++++++++++++++++++++--<o:p></o:p> gst/vaapi/gstvaapisink.h | 9 ++<o:p></o:p> 2 files changed, 328 insertions(+), 11 deletions(-)<o:p></o:p> mode change 100644 => 100755 gst/vaapi/gstvaapisink.c<o:p></o:p> mode change 100644 => 100755 gst/vaapi/gstvaapisink.h<o:p></o:p> <o:p> </o:p> diff --git a/gst/vaapi/gstvaapisink.c b/gst/vaapi/gstvaapisink.c<o:p></o:p> old mode 100644<o:p></o:p> new mode 100755<o:p></o:p> index 4611974..9aa453e<o:p></o:p> --- a/gst/vaapi/gstvaapisink.c<o:p></o:p> +++ b/gst/vaapi/gstvaapisink.c<o:p></o:p> @@ -35,6 +35,9 @@<o:p></o:p> #include <gst/video/videocontext.h><o:p></o:p> #include <gst/vaapi/gstvaapivideobuffer.h><o:p></o:p> #include <gst/vaapi/gstvaapivideosink.h><o:p></o:p> +#include <gst/vaapi/gstvaapiimagepool.h><o:p></o:p> +#include <gst/vaapi/gstvaapisurfacepool.h><o:p></o:p> +#include <gst/vaapi/gstvaapipluginbuffer.h><o:p></o:p> #if USE_DRM<o:p></o:p> # include <gst/vaapi/gstvaapidisplay_drm.h><o:p></o:p> #endif<o:p></o:p> @@ -72,12 +75,25 @@ static const GstElementDetails gst_vaapisink_details =<o:p></o:p> "Gwenole Beauchesne <gwenole.beauchesne@intel.com>");<o:p></o:p> <o:p></o:p> /* Default template */<o:p></o:p> +static const char gst_vaapisink_raw_caps_str[] =<o:p></o:p> + "video/x-raw-yuv, "<o:p></o:p> + "width = (int) [ 1, MAX ], "<o:p></o:p> + "height = (int) [ 1, MAX ]; ";<o:p></o:p> +<o:p></o:p> +static const char gst_vaapisink_sink_caps_str[] =<o:p></o:p> + "video/x-raw-yuv, "<o:p></o:p> + "width = (int) [ 1, MAX ], "<o:p></o:p> + "height = (int) [ 1, MAX ]; "<o:p></o:p> + GST_VAAPI_SURFACE_CAPS;<o:p></o:p> +<o:p></o:p> static GstStaticPadTemplate gst_vaapisink_sink_factory =<o:p></o:p> GST_STATIC_PAD_TEMPLATE(<o:p></o:p> "sink",<o:p></o:p> GST_PAD_SINK,<o:p></o:p> GST_PAD_ALWAYS,<o:p></o:p> - GST_STATIC_CAPS(GST_VAAPI_SURFACE_CAPS));<o:p></o:p> + GST_STATIC_CAPS(gst_vaapisink_sink_caps_str));<o:p></o:p> +<o:p></o:p> +static GstStaticCaps in_raw_caps = GST_STATIC_CAPS (gst_vaapisink_raw_caps_str);<o:p></o:p> <o:p></o:p> static void<o:p></o:p> gst_vaapisink_implements_iface_init(GstImplementsInterfaceClass *iface);<o:p></o:p> @@ -223,6 +239,8 @@ gst_vaapisink_xoverlay_iface_init(GstXOverlayClass *iface)<o:p></o:p> static void<o:p></o:p> gst_vaapisink_destroy(GstVaapiSink *sink)<o:p></o:p> {<o:p></o:p> + g_clear_object(&sink->images);<o:p></o:p> + g_clear_object(&sink->surfaces);<o:p></o:p> g_clear_object(&sink->texture);<o:p></o:p> g_clear_object(&sink->display);<o:p></o:p> <o:p></o:p> @@ -475,13 +493,145 @@ gst_vaapisink_stop(GstBaseSink *base_sink)<o:p></o:p> }<o:p></o:p> <o:p></o:p> static gboolean<o:p></o:p> +gst_vaapisink_ensure_image_pool(GstVaapiSink *sink, GstCaps *caps)<o:p></o:p> +{<o:p></o:p> + GstStructure * const structure = gst_caps_get_structure(caps, 0);<o:p></o:p> + gint width, height;<o:p></o:p> +<o:p></o:p> + gst_structure_get_int(structure, "width", &width);<o:p></o:p> + gst_structure_get_int(structure, "height", &height);<o:p></o:p> +<o:p></o:p> + if (width != sink->video_width || height != sink->video_height) {<o:p></o:p> + sink->video_width = width;<o:p></o:p> + sink->video_height = height;<o:p></o:p> + g_clear_object(&sink->images);<o:p></o:p> + sink->images = gst_vaapi_image_pool_new(sink->display, caps);<o:p></o:p> + if (!sink->images)<o:p></o:p> + return FALSE;<o:p></o:p> + sink->images_reset = TRUE;<o:p></o:p> + }<o:p></o:p> + return TRUE;<o:p></o:p> +}<o:p></o:p> +<o:p></o:p> +static gboolean<o:p></o:p> +gst_vaapisink_ensure_surface_pool(GstVaapiSink *sink, GstCaps *caps)<o:p></o:p> +{<o:p></o:p> + GstStructure * const structure = gst_caps_get_structure(caps, 0);<o:p></o:p> + gint width, height;<o:p></o:p> +<o:p></o:p> + gst_structure_get_int(structure, "width", &width);<o:p></o:p> + gst_structure_get_int(structure, "height", &height);<o:p></o:p> +<o:p></o:p> + if (width != sink->surface_width || height != sink->surface_height) {<o:p></o:p> + sink->surface_width = width;<o:p></o:p> + sink->surface_height = height;<o:p></o:p> + g_clear_object(&sink->surfaces);<o:p></o:p> + sink->surfaces = gst_vaapi_surface_pool_new(sink->display, caps);<o:p></o:p> + if (!sink->surfaces)<o:p></o:p> + return FALSE;<o:p></o:p> + sink->surfaces_reset = TRUE;<o:p></o:p> + }<o:p></o:p> + return TRUE;<o:p></o:p> +}<o:p></o:p> +<o:p></o:p> +static void<o:p></o:p> +gst_vaapisink_ensure_direct_rendering_caps(<o:p></o:p> + GstVaapiSink *sink,<o:p></o:p> + GstCaps *caps<o:p></o:p> +)<o:p></o:p> +{<o:p></o:p> + GstVaapiSurface *surface;<o:p></o:p> + GstVaapiImage *image;<o:p></o:p> + GstVaapiImageFormat vaformat;<o:p></o:p> + GstVideoFormat vformat;<o:p></o:p> + GstStructure *structure;<o:p></o:p> + gint width, height;<o:p></o:p> +<o:p></o:p> + if (!sink->images_reset && !sink->surfaces_reset)<o:p></o:p> + return;<o:p></o:p> +<o:p></o:p> + sink->images_reset = FALSE;<o:p></o:p> + sink->surfaces_reset = FALSE;<o:p></o:p> + sink->direct_rendering_caps = 0;<o:p></o:p> +<o:p></o:p> + structure = gst_caps_get_structure(caps, 0);<o:p></o:p> + if (!structure)<o:p></o:p> + return;<o:p></o:p> + gst_structure_get_int(structure, "width", &width);<o:p></o:p> + gst_structure_get_int(structure, "height", &height);<o:p></o:p> +<o:p></o:p> + /* Translate from Gst video format to VA image format */<o:p></o:p> + if (!gst_video_format_parse_caps(caps, &vformat, NULL, NULL))<o:p></o:p> + return;<o:p></o:p> + if (!gst_video_format_is_yuv(vformat))<o:p></o:p> + return;<o:p></o:p> + vaformat = gst_vaapi_image_format_from_video(vformat);<o:p></o:p> + if (!vaformat)<o:p></o:p> + return;<o:p></o:p> +<o:p></o:p> + /* Check if we can alias sink & output buffers (same data_size) */<o:p></o:p> + image = gst_vaapi_video_pool_get_object(sink->images);<o:p></o:p> + if (image) {<o:p></o:p> + if (sink->direct_rendering_caps == 0 &&<o:p></o:p> + (gst_vaapi_image_get_format(image) == vaformat &&<o:p></o:p> + gst_vaapi_image_is_linear(image) &&<o:p></o:p> + (gst_vaapi_image_get_data_size(image) ==<o:p></o:p> + gst_video_format_get_size(vformat, width, height))))<o:p></o:p> + sink->direct_rendering_caps = 1;<o:p></o:p> + gst_vaapi_video_pool_put_object(sink->images, image);<o:p></o:p> + }<o:p></o:p> +<o:p></o:p> + /* Check if we can access to the surface pixels directly */<o:p></o:p> + surface = gst_vaapi_video_pool_get_object(sink->surfaces);<o:p></o:p> + if (surface) {<o:p></o:p> + image = gst_vaapi_surface_derive_image(surface);<o:p></o:p> + if (image) {<o:p></o:p> + if (gst_vaapi_image_map(image)) {<o:p></o:p> + if (sink->direct_rendering_caps == 1 &&<o:p></o:p> + (gst_vaapi_image_get_format(image) == vaformat &&<o:p></o:p> + gst_vaapi_image_is_linear(image) &&<o:p></o:p> + (gst_vaapi_image_get_data_size(image) ==<o:p></o:p> + gst_video_format_get_size(vformat, width, height))))<o:p></o:p> + sink->direct_rendering_caps = 2;<o:p></o:p> + gst_vaapi_image_unmap(image);<o:p></o:p> + }<o:p></o:p> + g_object_unref(image);<o:p></o:p> + }<o:p></o:p> + gst_vaapi_video_pool_put_object(sink->surfaces, surface);<o:p></o:p> + }<o:p></o:p> +}<o:p></o:p> +<o:p></o:p> +static gboolean<o:p></o:p> +gst_vaapisink_negotiate_buffers(<o:p></o:p> + GstVaapiSink *sink,<o:p></o:p> + GstCaps *caps<o:p></o:p> +)<o:p></o:p> +{<o:p></o:p> + guint dr;<o:p></o:p> +<o:p></o:p> + if (!gst_vaapisink_ensure_image_pool(sink, caps))<o:p></o:p> + return FALSE;<o:p></o:p> +<o:p></o:p> + if (!gst_vaapisink_ensure_surface_pool(sink, caps))<o:p></o:p> + return FALSE;<o:p></o:p> +<o:p></o:p> + gst_vaapisink_ensure_direct_rendering_caps(sink, caps);<o:p></o:p> + dr = MIN(sink->direct_rendering, sink->direct_rendering_caps);<o:p></o:p> + if (sink->direct_rendering != dr) {<o:p></o:p> + sink->direct_rendering = dr;<o:p></o:p> + GST_DEBUG("direct-rendering level: %d", dr);<o:p></o:p> + }<o:p></o:p> + return TRUE;<o:p></o:p> +}<o:p></o:p> +<o:p></o:p> +static gboolean<o:p></o:p> gst_vaapisink_set_caps(GstBaseSink *base_sink, GstCaps *caps)<o:p></o:p> {<o:p></o:p> GstVaapiSink * const sink = GST_VAAPISINK(base_sink);<o:p></o:p> GstStructure * const structure = gst_caps_get_structure(caps, 0);<o:p></o:p> guint win_width, win_height, display_width, display_height;<o:p></o:p> gint video_width, video_height, video_par_n = 1, video_par_d = 1;<o:p></o:p> -<o:p></o:p> + <o:p></o:p> #if USE_DRM<o:p></o:p> if (sink->display_type == GST_VAAPI_DISPLAY_TYPE_DRM)<o:p></o:p> return TRUE;<o:p></o:p> @@ -489,6 +639,11 @@ gst_vaapisink_set_caps(GstBaseSink *base_sink, GstCaps *caps)<o:p></o:p> <o:p></o:p> if (!structure)<o:p></o:p> return FALSE;<o:p></o:p> + if (gst_structure_has_name(structure, "video/x-raw-yuv")) {<o:p></o:p> + sink->raw_yuv_stream = TRUE;<o:p></o:p> + if (!gst_vaapisink_negotiate_buffers(sink, caps))<o:p></o:p> + return FALSE;<o:p></o:p> + }<o:p></o:p> if (!gst_structure_get_int(structure, "width", &video_width))<o:p></o:p> return FALSE;<o:p></o:p> if (!gst_structure_get_int(structure, "height", &video_height))<o:p></o:p> @@ -714,34 +869,94 @@ gst_vaapisink_put_surface(<o:p></o:p> return TRUE;<o:p></o:p> }<o:p></o:p> <o:p></o:p> +<o:p></o:p> +static GstVaapiSurface *<o:p></o:p> +gst_vaapisink_upload_raw_yuv(<o:p></o:p> + GstVaapiSink *sink,<o:p></o:p> + GstBuffer *inbuf)<o:p></o:p> +{<o:p></o:p> + GstVaapiVideoBuffer *vbuffer = NULL;<o:p></o:p> + GstVaapiImage *image = NULL;<o:p></o:p> + GstVaapiSurface *surface = NULL;<o:p></o:p> + gboolean success = FALSE;<o:p></o:p> +<o:p></o:p> + if (sink->direct_rendering) {<o:p></o:p> + vbuffer = GST_VAAPI_VIDEO_BUFFER(inbuf);<o:p></o:p> + }<o:p></o:p> +<o:p></o:p> + if (sink->direct_rendering == 2) {<o:p></o:p> + surface = gst_vaapi_video_buffer_get_surface(vbuffer);<o:p></o:p> + g_assert(surface);<o:p></o:p> + return surface;<o:p></o:p> + }<o:p></o:p> + <o:p></o:p> + surface = gst_vaapi_video_pool_get_object(sink->surfaces);<o:p></o:p> + g_assert(surface);<o:p></o:p> + if (!surface)<o:p></o:p> + return NULL;<o:p></o:p> +<o:p></o:p> + if (sink->direct_rendering == 1) {<o:p></o:p> + image = gst_vaapi_video_buffer_get_image(vbuffer);<o:p></o:p> + g_assert(image);<o:p></o:p> + }<o:p></o:p> + else if (sink->direct_rendering == 0) {<o:p></o:p> + image = gst_vaapi_video_pool_get_object(sink->images);<o:p></o:p> + gst_vaapi_image_update_from_buffer(image, inbuf, NULL);<o:p></o:p> + }<o:p></o:p> +<o:p></o:p> + success = gst_vaapi_surface_put_image(surface, image);<o:p></o:p> + <o:p></o:p> + if (sink->direct_rendering = 0) {<o:p></o:p> + gst_vaapi_video_pool_put_object(sink->images, image);<o:p></o:p> + }<o:p></o:p> + <o:p></o:p> + if (!success)<o:p></o:p> + goto error_put_image;<o:p></o:p> + return surface;<o:p></o:p> +<o:p></o:p> +error_put_image:<o:p></o:p> + {<o:p></o:p> + GST_WARNING("failed to upload %" GST_FOURCC_FORMAT " image "<o:p></o:p> + "to surface 0x%08x",<o:p></o:p> + GST_FOURCC_ARGS(gst_vaapi_image_get_format(image)),<o:p></o:p> + gst_vaapi_surface_get_id(surface));<o:p></o:p> + return GST_FLOW_OK;<o:p></o:p> + }<o:p></o:p> +}<o:p></o:p> +<o:p></o:p> static GstFlowReturn<o:p></o:p> gst_vaapisink_show_frame(GstBaseSink *base_sink, GstBuffer *buffer)<o:p></o:p> {<o:p></o:p> GstVaapiSink * const sink = GST_VAAPISINK(base_sink);<o:p></o:p> - GstVaapiVideoBuffer * const vbuffer = GST_VAAPI_VIDEO_BUFFER(buffer);<o:p></o:p> + GstVaapiVideoBuffer * vbuffer = NULL; <o:p></o:p> GstVaapiSurface *surface;<o:p></o:p> guint flags;<o:p></o:p> gboolean success;<o:p></o:p> GstVideoOverlayComposition * const composition =<o:p></o:p> gst_video_buffer_get_overlay_composition(buffer);<o:p></o:p> <o:p></o:p> - if (sink->display != gst_vaapi_video_buffer_get_display (vbuffer)) {<o:p></o:p> - g_clear_object(&sink->display);<o:p></o:p> - sink->display = g_object_ref (gst_vaapi_video_buffer_get_display (vbuffer));<o:p></o:p> - }<o:p></o:p> -<o:p></o:p> if (!sink->window)<o:p></o:p> return GST_FLOW_UNEXPECTED;<o:p></o:p> <o:p></o:p> - surface = gst_vaapi_video_buffer_get_surface(vbuffer);<o:p></o:p> + if (sink->raw_yuv_stream) {<o:p></o:p> + surface = gst_vaapisink_upload_raw_yuv(sink, buffer);<o:p></o:p> + flags = 0; // todo<o:p></o:p> + }<o:p></o:p> + else {<o:p></o:p> + vbuffer = GST_VAAPI_VIDEO_BUFFER(buffer);<o:p></o:p> + surface = gst_vaapi_video_buffer_get_surface(vbuffer);<o:p></o:p> + flags = gst_vaapi_video_buffer_get_render_flags(vbuffer);<o:p></o:p> + if (sink->display != gst_vaapi_video_buffer_get_display (vbuffer)) {<o:p></o:p> + g_clear_object(&sink->display);<o:p></o:p> + sink->display = g_object_ref (gst_vaapi_video_buffer_get_display (vbuffer));<o:p></o:p> + }<o:p></o:p> + }<o:p></o:p> if (!surface)<o:p></o:p> return GST_FLOW_UNEXPECTED;<o:p></o:p> <o:p></o:p> GST_DEBUG("render surface %" GST_VAAPI_ID_FORMAT,<o:p></o:p> GST_VAAPI_ID_ARGS(gst_vaapi_surface_get_id(surface)));<o:p></o:p> <o:p></o:p> - flags = gst_vaapi_video_buffer_get_render_flags(vbuffer);<o:p></o:p> -<o:p></o:p> if (!gst_vaapi_surface_set_subpictures_from_composition(surface,<o:p></o:p> composition, TRUE))<o:p></o:p> GST_WARNING("could not update subtitles");<o:p></o:p> @@ -772,9 +987,92 @@ gst_vaapisink_show_frame(GstBaseSink *base_sink, GstBuffer *buffer)<o:p></o:p> success = FALSE;<o:p></o:p> break;<o:p></o:p> }<o:p></o:p> +<o:p></o:p> + if (sink->direct_rendering <2) {<o:p></o:p> + gst_vaapi_video_pool_put_object(sink->surfaces, surface);<o:p></o:p> + }<o:p></o:p> return success ? GST_FLOW_OK : GST_FLOW_UNEXPECTED;<o:p></o:p> }<o:p></o:p> <o:p></o:p> +static GstFlowReturn<o:p></o:p> +gst_vaapisink_buffer_alloc(<o:p></o:p> + GstBaseSink *base_sink,<o:p></o:p> + guint64 offset,<o:p></o:p> + guint size,<o:p></o:p> + GstCaps *caps,<o:p></o:p> + GstBuffer **pbuf<o:p></o:p> +)<o:p></o:p> +{<o:p></o:p> + GstVaapiSink *sink = GST_VAAPISINK(base_sink);<o:p></o:p> + GstBuffer *buffer = NULL;<o:p></o:p> + GstVaapiImage *image = NULL;<o:p></o:p> + GstVaapiSurface *surface = NULL;<o:p></o:p> + GstVaapiVideoBuffer *vbuffer;<o:p></o:p> + GstStructure *structure = NULL;<o:p></o:p> +<o:p></o:p> + *pbuf = NULL;<o:p></o:p> + <o:p></o:p> + structure = gst_caps_get_structure(caps, 0);<o:p></o:p> + if (!gst_structure_has_name(structure, "video/x-raw-yuv")) {<o:p></o:p> + return GST_FLOW_OK;<o:p></o:p> + }<o:p></o:p> +<o:p></o:p> + /* Check if we can use direct-rendering */<o:p></o:p> + if (!gst_vaapisink_negotiate_buffers(sink, caps))<o:p></o:p> + goto error;<o:p></o:p> + if (!sink->direct_rendering)<o:p></o:p> + return GST_FLOW_OK;<o:p></o:p> +<o:p></o:p> + switch (sink->direct_rendering) {<o:p></o:p> + case 2:<o:p></o:p> + buffer = gst_vaapi_video_buffer_new_from_pool(sink->surfaces);<o:p></o:p> + if (!buffer)<o:p></o:p> + goto error;<o:p></o:p> + vbuffer = GST_VAAPI_VIDEO_BUFFER(buffer);<o:p></o:p> +<o:p></o:p> + surface = gst_vaapi_video_buffer_get_surface(vbuffer);<o:p></o:p> + image = gst_vaapi_surface_derive_image(surface);<o:p></o:p> + if (image && gst_vaapi_image_get_data_size(image) == size) {<o:p></o:p> + gst_vaapi_video_buffer_set_image(vbuffer, image);<o:p></o:p> + g_object_unref(image); /* video buffer owns an extra reference */<o:p></o:p> + break;<o:p></o:p> + }<o:p></o:p> +<o:p></o:p> + /* We can't use the derive-image optimization. Disable it. */<o:p></o:p> + sink->direct_rendering = 1;<o:p></o:p> + gst_buffer_unref(buffer);<o:p></o:p> + buffer = NULL;<o:p></o:p> +<o:p></o:p> + case 1:<o:p></o:p> + buffer = gst_vaapi_video_buffer_new_from_pool(sink->images);<o:p></o:p> + if (!buffer)<o:p></o:p> + goto error;<o:p></o:p> + vbuffer = GST_VAAPI_VIDEO_BUFFER(buffer);<o:p></o:p> +<o:p></o:p> + image = gst_vaapi_video_buffer_get_image(vbuffer);<o:p></o:p> + break;<o:p></o:p> + }<o:p></o:p> + g_assert(image);<o:p></o:p> +<o:p></o:p> + if (!gst_vaapi_image_map(image))<o:p></o:p> + goto error;<o:p></o:p> +<o:p></o:p> + GST_BUFFER_DATA(buffer) = gst_vaapi_image_get_plane(image, 0);<o:p></o:p> + GST_BUFFER_SIZE(buffer) = gst_vaapi_image_get_data_size(image);<o:p></o:p> +<o:p></o:p> + gst_buffer_set_caps(buffer, caps);<o:p></o:p> + *pbuf = buffer;<o:p></o:p> + return GST_FLOW_OK;<o:p></o:p> +<o:p></o:p> +error:<o:p></o:p> + /* We can't use the inout-buffers optimization. Disable it. */<o:p></o:p> + GST_DEBUG("disable in/out buffer optimization");<o:p></o:p> + if (buffer)<o:p></o:p> + gst_buffer_unref(buffer);<o:p></o:p> + sink->direct_rendering = 0;<o:p></o:p> + return GST_FLOW_OK;<o:p></o:p> +}<o:p></o:p> +<o:p></o:p> static gboolean<o:p></o:p> gst_vaapisink_query(GstBaseSink *base_sink, GstQuery *query)<o:p></o:p> {<o:p></o:p> @@ -870,6 +1168,7 @@ gst_vaapisink_class_init(GstVaapiSinkClass *klass)<o:p></o:p> basesink_class->preroll = gst_vaapisink_show_frame;<o:p></o:p> basesink_class->render = gst_vaapisink_show_frame;<o:p></o:p> basesink_class->query = gst_vaapisink_query;<o:p></o:p> + basesink_class->buffer_alloc = gst_vaapisink_buffer_alloc;<o:p></o:p> <o:p></o:p> gst_element_class_set_details_simple(<o:p></o:p> element_class,<o:p></o:p> @@ -942,9 +1241,18 @@ gst_vaapisink_init(GstVaapiSink *sink)<o:p></o:p> sink->video_height = 0;<o:p></o:p> sink->video_par_n = 1;<o:p></o:p> sink->video_par_d = 1;<o:p></o:p> + sink->surface_width = 0;<o:p></o:p> + sink->surface_height = 0;<o:p></o:p> sink->foreign_window = FALSE;<o:p></o:p> sink->fullscreen = FALSE;<o:p></o:p> sink->synchronous = FALSE;<o:p></o:p> sink->display_type = DEFAULT_DISPLAY_TYPE;<o:p></o:p> sink->use_reflection = FALSE;<o:p></o:p> + sink->images = NULL;<o:p></o:p> + sink->surfaces = NULL;<o:p></o:p> + sink->raw_yuv_stream = FALSE;<o:p></o:p> + sink->images_reset = FALSE;<o:p></o:p> + sink->surfaces_reset = FALSE;<o:p></o:p> + sink->direct_rendering = G_MAXUINT32;<o:p></o:p> + sink->direct_rendering_caps = 0;<o:p></o:p> }<o:p></o:p> diff --git a/gst/vaapi/gstvaapisink.h b/gst/vaapi/gstvaapisink.h<o:p></o:p> old mode 100644<o:p></o:p> new mode 100755<o:p></o:p> index c5883b3..9445cd4<o:p></o:p> --- a/gst/vaapi/gstvaapisink.h<o:p></o:p> +++ b/gst/vaapi/gstvaapisink.h<o:p></o:p> @@ -76,11 +76,20 @@ struct _GstVaapiSink {<o:p></o:p> guint video_height;<o:p></o:p> gint video_par_n;<o:p></o:p> gint video_par_d;<o:p></o:p> + gint surface_width;<o:p></o:p> + gint surface_height; // for yuv GstBuffer's surface pool<o:p></o:p> + GstVaapiVideoPool *images;<o:p></o:p> + GstVaapiVideoPool *surfaces;<o:p></o:p> GstVaapiRectangle display_rect;<o:p></o:p> + guint direct_rendering_caps;<o:p></o:p> + guint direct_rendering;<o:p></o:p> guint foreign_window : 1;<o:p></o:p> guint fullscreen : 1;<o:p></o:p> guint synchronous : 1;<o:p></o:p> guint use_reflection : 1;<o:p></o:p> + guint raw_yuv_stream : 1;<o:p></o:p> + guint images_reset : 1;<o:p></o:p> + guint surfaces_reset : 1;<o:p></o:p> };<o:p></o:p> <o:p></o:p> struct _GstVaapiSinkClass {<o:p></o:p> -- <o:p></o:p> 1.7.9.5<o:p></o:p> <o:p> </o:p> </div> </body> </html>