]> git.sesse.net Git - vlc/blob - modules/video_output/xcb/x11.c
XCB/X11: disable ARGB support
[vlc] / modules / video_output / xcb / x11.c
1 /**
2  * @file x11.c
3  * @brief X C Bindings video output module for VLC media player
4  */
5 /*****************************************************************************
6  * Copyright © 2009 Rémi Denis-Courmont
7  *
8  * This library is free software; you can redistribute it and/or
9  * modify it under the terms of the GNU General Public License
10  * as published by the Free Software Foundation; either version 2
11  * of the License, or (at your option) any later version.
12  *
13  * This library is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
16  * GNU General Public License for more details.
17  *
18  * You should have received a copy of the GNU General Public
19  * License along with this library; if not, write to the Free Software
20  * Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA  02110-1301  USA
21  ****************************************************************************/
22
23 #ifdef HAVE_CONFIG_H
24 # include <config.h>
25 #endif
26
27 #include <stdlib.h>
28 #include <assert.h>
29
30 #include <xcb/xcb.h>
31 #include <xcb/shm.h>
32
33 #include <vlc_common.h>
34 #include <vlc_plugin.h>
35 #include <vlc_vout_display.h>
36 #include <vlc_picture_pool.h>
37
38 #include "xcb_vlc.h"
39
40 #define SHM_TEXT N_("Use shared memory")
41 #define SHM_LONGTEXT N_( \
42     "Use shared memory to communicate between VLC and the X server.")
43
44 static int  Open (vlc_object_t *);
45 static void Close (vlc_object_t *);
46
47 /*
48  * Module descriptor
49  */
50 vlc_module_begin ()
51     set_shortname (N_("X11"))
52     set_description (N_("X11 video output (XCB)"))
53     set_category (CAT_VIDEO)
54     set_subcategory (SUBCAT_VIDEO_VOUT)
55     set_capability ("vout display", 75)
56     set_callbacks (Open, Close)
57     add_shortcut ("xcb-x11")
58     add_shortcut ("x11")
59
60     add_bool ("x11-shm", true, NULL, SHM_TEXT, SHM_LONGTEXT, true)
61 vlc_module_end ()
62
63 /* It must be large enough to absorb the server display jitter but it is
64  * useless to used a too large value, direct rendering cannot be used with
65  * xcb x11
66  */
67 #define MAX_PICTURES (3)
68
69 struct vout_display_sys_t
70 {
71     xcb_connection_t *conn;
72     vout_window_t *embed; /* VLC window (when windowed) */
73
74     xcb_cursor_t cursor; /* blank cursor */
75     xcb_window_t window; /* drawable X window */
76     xcb_gcontext_t gc; /* context to put images */
77     bool shm; /* whether to use MIT-SHM */
78     bool visible; /* whether to draw */
79     uint8_t bpp; /* bits per pixel */
80     uint8_t pad; /* scanline pad */
81     uint8_t depth; /* useful bits per pixel */
82     uint8_t byte_order; /* server byte order */
83
84     picture_pool_t *pool; /* picture pool */
85     picture_resource_t resource[MAX_PICTURES];
86 };
87
88 static picture_pool_t *Pool (vout_display_t *, unsigned);
89 static void Display (vout_display_t *, picture_t *);
90 static int Control (vout_display_t *, int, va_list);
91 static void Manage (vout_display_t *);
92
93 static void ResetPictures (vout_display_t *);
94
95 /**
96  * Probe the X server.
97  */
98 static int Open (vlc_object_t *obj)
99 {
100     vout_display_t *vd = (vout_display_t *)obj;
101     vout_display_sys_t *p_sys = malloc (sizeof (*p_sys));
102     if (p_sys == NULL)
103         return VLC_ENOMEM;
104
105     vd->sys = p_sys;
106     p_sys->pool = NULL;
107
108     /* Get window, connect to X server */
109     const xcb_screen_t *scr;
110     p_sys->embed = GetWindow (vd, &p_sys->conn, &scr, &p_sys->depth);
111     if (p_sys->embed == NULL)
112     {
113         free (p_sys);
114         return VLC_EGENERIC;
115     }
116
117     const xcb_setup_t *setup = xcb_get_setup (p_sys->conn);
118     p_sys->byte_order = setup->image_byte_order;
119
120     /* */
121     video_format_t fmt_pic = vd->fmt;
122
123     /* Check that the selected screen supports this depth */
124     xcb_depth_t *d = NULL;
125     for (xcb_depth_iterator_t it = xcb_screen_allowed_depths_iterator (scr);
126          it.rem > 0 && d == NULL;
127          xcb_depth_next (&it))
128         if (it.data->depth == p_sys->depth)
129             d = it.data;
130     if (d == NULL)
131     {
132         msg_Err (obj, "unexpected color depth msimatch");
133         goto error; /* WTH? depth not supported on screen */
134     }
135
136     /* Find a visual type for the selected depth */
137     xcb_visualid_t vid = 0;
138     bool gray = true;
139     const xcb_visualtype_t *vt = xcb_depth_visuals (d);
140     for (int i = xcb_depth_visuals_length (d); i > 0; i--)
141     {
142         if (vt->_class == XCB_VISUAL_CLASS_TRUE_COLOR)
143         {
144             vid = vt->visual_id;
145             fmt_pic.i_rmask = vt->red_mask;
146             fmt_pic.i_gmask = vt->green_mask;
147             fmt_pic.i_bmask = vt->blue_mask;
148             gray = false;
149             break;
150         }
151         if (p_sys->depth == 8 && vt->_class == XCB_VISUAL_CLASS_STATIC_GRAY
152          && vid == 0)
153         {
154             vid = vt->visual_id;
155         }
156     }
157
158     if (!vid)
159     {
160         msg_Err (obj, "unexpected visual type mismatch");
161         goto error;
162     }
163     msg_Dbg (vd, "using X11 visual ID 0x%"PRIx32" (depth: %"PRIu8")", vid,
164              p_sys->depth);
165
166     /* Determine our pixel format */
167     p_sys->bpp = 0;
168     for (const xcb_format_t *fmt = xcb_setup_pixmap_formats (setup),
169              *end = fmt + xcb_setup_pixmap_formats_length (setup);
170          fmt < end && !p_sys->bpp; fmt++)
171     {
172         if (fmt->depth != p_sys->depth)
173             continue; /* Wrong depth! */
174
175         /* Check that the pixmap format is supported by VLC. */
176         switch (fmt->depth)
177         {
178           case 32:
179             if (fmt->bits_per_pixel != 32)
180                 continue;
181 #ifdef FIXED_VLC_RGBA_MASK
182             fmt_pic.i_chroma = VLC_CODEC_RGBA;
183             break;
184 #else
185             msg_Dbg (vd, "X11 visual with alpha-channel not supported");
186             continue;
187 #endif
188           case 24:
189             if (fmt->bits_per_pixel == 32)
190                 fmt_pic.i_chroma = VLC_CODEC_RGB32;
191             else if (fmt->bits_per_pixel == 24)
192                 fmt_pic.i_chroma = VLC_CODEC_RGB24;
193             else
194                 continue;
195             break;
196           case 16:
197             if (fmt->bits_per_pixel != 16)
198                 continue;
199             fmt_pic.i_chroma = VLC_CODEC_RGB16;
200             break;
201           case 15:
202             if (fmt->bits_per_pixel != 16)
203                 continue;
204             fmt_pic.i_chroma = VLC_CODEC_RGB15;
205             break;
206           case 8:
207             if (fmt->bits_per_pixel != 8)
208                 continue;
209             fmt_pic.i_chroma = gray ? VLC_CODEC_GREY : VLC_CODEC_RGB8;
210             break;
211           default:
212             continue;
213         }
214         if ((fmt->bits_per_pixel << 4) % fmt->scanline_pad)
215             continue; /* VLC pads lines to 16 pixels internally */
216
217         /* Byte sex is a non-issue for 8-bits. It can be worked around with
218          * RGB masks for 24-bits. Too bad for 15-bits and 16-bits. */
219         if (fmt->bits_per_pixel == 16 && setup->image_byte_order != ORDER)
220             continue;
221
222         p_sys->bpp = fmt->bits_per_pixel;
223         p_sys->pad = fmt->scanline_pad;
224         msg_Dbg (vd, " %"PRIu8" bits per pixels, %"PRIu8" bits line pad",
225                  p_sys->bpp, p_sys->pad);
226     }
227
228     if (!p_sys->bpp)
229     {
230         msg_Err (vd, "no supported pixmap formats");
231         goto error;
232     }
233
234     /* Create colormap (needed to select non-default visual) */
235     xcb_colormap_t cmap;
236     if (vid != scr->root_visual)
237     {
238         cmap = xcb_generate_id (p_sys->conn);
239         xcb_create_colormap (p_sys->conn, XCB_COLORMAP_ALLOC_NONE,
240                              cmap, scr->root, vid);
241     }
242     else
243         cmap = scr->default_colormap;
244
245     /* Create window */
246     unsigned width, height;
247     if (GetWindowSize (p_sys->embed, p_sys->conn, &width, &height))
248         goto error;
249
250     p_sys->window = xcb_generate_id (p_sys->conn);
251     p_sys->gc = xcb_generate_id (p_sys->conn);
252     {
253         const uint32_t mask = XCB_CW_EVENT_MASK | XCB_CW_COLORMAP;
254         const uint32_t values[] = {
255             /* XCB_CW_EVENT_MASK */
256             XCB_EVENT_MASK_VISIBILITY_CHANGE,
257             /* XCB_CW_COLORMAP */
258             cmap,
259         };
260         xcb_void_cookie_t c;
261
262         c = xcb_create_window_checked (p_sys->conn, p_sys->depth,
263                                        p_sys->window,
264                                        p_sys->embed->handle.xid, 0, 0,
265                                        width, height, 0,
266                                        XCB_WINDOW_CLASS_INPUT_OUTPUT,
267                                        vid, mask, values);
268         xcb_map_window (p_sys->conn, p_sys->window);
269         /* Create graphic context (I wonder why the heck do we need this) */
270         xcb_create_gc (p_sys->conn, p_sys->gc, p_sys->window, 0, NULL);
271
272         if (CheckError (vd, p_sys->conn, "cannot create X11 window", c))
273             goto error;
274     }
275     msg_Dbg (vd, "using X11 window %08"PRIx32, p_sys->window);
276     msg_Dbg (vd, "using X11 graphic context %08"PRIx32, p_sys->gc);
277     p_sys->cursor = CreateBlankCursor (p_sys->conn, scr);
278
279     p_sys->visible = false;
280
281     CheckSHM (obj, p_sys->conn, &p_sys->shm);
282
283     /* */
284     vout_display_info_t info = vd->info;
285     info.has_pictures_invalid = true;
286
287     /* Setup vout_display_t once everything is fine */
288     vd->fmt = fmt_pic;
289     vd->info = info;
290
291     vd->pool = Pool;
292     vd->prepare = NULL;
293     vd->display = Display;
294     vd->control = Control;
295     vd->manage = Manage;
296
297     /* */
298     vout_display_SendEventFullscreen (vd, false);
299     vout_display_SendEventDisplaySize (vd, width, height, false);
300
301     return VLC_SUCCESS;
302
303 error:
304     Close (obj);
305     return VLC_EGENERIC;
306 }
307
308
309 /**
310  * Disconnect from the X server.
311  */
312 static void Close (vlc_object_t *obj)
313 {
314     vout_display_t *vd = (vout_display_t *)obj;
315     vout_display_sys_t *p_sys = vd->sys;
316
317     ResetPictures (vd);
318
319     /* show the default cursor */
320     xcb_change_window_attributes (p_sys->conn, p_sys->embed->handle.xid, XCB_CW_CURSOR,
321                                   &(uint32_t) { XCB_CURSOR_NONE });
322     xcb_flush (p_sys->conn);
323
324     /* colormap, window and context are garbage-collected by X */
325     xcb_disconnect (p_sys->conn);
326     vout_display_DeleteWindow (vd, p_sys->embed);
327     free (p_sys);
328 }
329
330 /**
331  * Return a direct buffer
332  */
333 static picture_pool_t *Pool (vout_display_t *vd, unsigned requested_count)
334 {
335     vout_display_sys_t *p_sys = vd->sys;
336     (void)requested_count;
337
338     if (!p_sys->pool)
339     {
340         vout_display_place_t place;
341
342         vout_display_PlacePicture (&place, &vd->source, vd->cfg, false);
343
344         /* */
345         const uint32_t values[] = { place.x, place.y, place.width, place.height };
346         xcb_configure_window (p_sys->conn, p_sys->window,
347                               XCB_CONFIG_WINDOW_X | XCB_CONFIG_WINDOW_Y |
348                               XCB_CONFIG_WINDOW_WIDTH | XCB_CONFIG_WINDOW_HEIGHT,
349                               values);
350
351         picture_t *pic = picture_NewFromFormat (&vd->fmt);
352         if (!pic)
353             return NULL;
354
355         assert (pic->i_planes == 1);
356         memset (p_sys->resource, 0, sizeof(p_sys->resource));
357
358         unsigned count;
359         picture_t *pic_array[MAX_PICTURES];
360         for (count = 0; count < MAX_PICTURES; count++)
361         {
362             picture_resource_t *res = &p_sys->resource[count];
363
364             res->p->i_lines = pic->p->i_lines;
365             res->p->i_pitch = pic->p->i_pitch;
366             if (PictureResourceAlloc (vd, res, res->p->i_pitch * res->p->i_lines,
367                                       p_sys->conn, p_sys->shm))
368                 break;
369             pic_array[count] = picture_NewFromResource (&vd->fmt, res);
370             if (!pic_array[count])
371             {
372                 PictureResourceFree (res, p_sys->conn);
373                 memset (res, 0, sizeof(*res));
374                 break;
375             }
376         }
377         picture_Release (pic);
378
379         if (count == 0)
380             return NULL;
381
382         p_sys->pool = picture_pool_New (count, pic_array);
383         /* TODO release picture resources if NULL */
384         xcb_flush (p_sys->conn);
385     }
386
387     return p_sys->pool;
388 }
389
390 /**
391  * Sends an image to the X server.
392  */
393 static void Display (vout_display_t *vd, picture_t *pic)
394 {
395     vout_display_sys_t *p_sys = vd->sys;
396     xcb_shm_seg_t segment = pic->p_sys->segment;
397     xcb_void_cookie_t ck;
398
399     if (!p_sys->visible)
400         goto out;
401     if (segment != 0)
402         ck = xcb_shm_put_image_checked (p_sys->conn, p_sys->window, p_sys->gc,
403           /* real width */ pic->p->i_pitch / pic->p->i_pixel_pitch,
404          /* real height */ pic->p->i_lines,
405                    /* x */ vd->fmt.i_x_offset,
406                    /* y */ vd->fmt.i_y_offset,
407                /* width */ vd->fmt.i_visible_width,
408               /* height */ vd->fmt.i_visible_height,
409                            0, 0, p_sys->depth, XCB_IMAGE_FORMAT_Z_PIXMAP,
410                            0, segment, 0);
411     else
412     {
413         const size_t offset = vd->fmt.i_y_offset * pic->p->i_pitch;
414         const unsigned lines = pic->p->i_lines - vd->fmt.i_y_offset;
415
416         ck = xcb_put_image_checked (p_sys->conn, XCB_IMAGE_FORMAT_Z_PIXMAP,
417                        p_sys->window, p_sys->gc,
418                        pic->p->i_pitch / pic->p->i_pixel_pitch,
419                        lines, -vd->fmt.i_x_offset, 0, 0, p_sys->depth,
420                        pic->p->i_pitch * lines, pic->p->p_pixels + offset);
421     }
422
423     /* Wait for reply. This makes sure that the X server gets CPU time to
424      * display the picture. xcb_flush() is *not* sufficient: especially with
425      * shared memory the PUT requests are so short that many of them can fit in
426      * X11 socket output buffer before the kernel preempts VLC. */
427     xcb_generic_error_t *e = xcb_request_check (p_sys->conn, ck);
428     if (e != NULL)
429     {
430         msg_Dbg (vd, "%s: X11 error %d", "cannot put image", e->error_code);
431         free (e);
432     }
433
434     /* FIXME might be WAY better to wait in some case (be carefull with
435      * VOUT_DISPLAY_RESET_PICTURES if done) + does not work with
436      * vout_display wrapper. */
437 out:
438     picture_Release (pic);
439 }
440
441 static int Control (vout_display_t *vd, int query, va_list ap)
442 {
443     vout_display_sys_t *p_sys = vd->sys;
444
445     switch (query)
446     {
447     case VOUT_DISPLAY_CHANGE_FULLSCREEN:
448     {
449         const vout_display_cfg_t *c = va_arg (ap, const vout_display_cfg_t *);
450         return vout_window_SetFullScreen (p_sys->embed, c->is_fullscreen);
451     }
452
453     case VOUT_DISPLAY_CHANGE_DISPLAY_SIZE:
454     {
455         const vout_display_cfg_t *p_cfg =
456             (const vout_display_cfg_t*)va_arg (ap, const vout_display_cfg_t *);
457         const bool is_forced = (bool)va_arg (ap, int);
458
459         if (is_forced
460          && vout_window_SetSize (p_sys->embed,
461                                  p_cfg->display.width,
462                                  p_cfg->display.height))
463             return VLC_EGENERIC;
464
465         vout_display_place_t place;
466         vout_display_PlacePicture (&place, &vd->source, p_cfg, false);
467
468         if (place.width  != vd->fmt.i_visible_width ||
469             place.height != vd->fmt.i_visible_height)
470         {
471             vout_display_SendEventPicturesInvalid (vd);
472             return VLC_SUCCESS;
473         }
474
475         /* Move the picture within the window */
476         const uint32_t values[] = { place.x, place.y };
477         xcb_configure_window (p_sys->conn, p_sys->window,
478                               XCB_CONFIG_WINDOW_X | XCB_CONFIG_WINDOW_Y,
479                               values);
480         return VLC_SUCCESS;
481     }
482     case VOUT_DISPLAY_CHANGE_WINDOW_STATE:
483     {
484         unsigned state = va_arg (ap, unsigned);
485         return vout_window_SetState (p_sys->embed, state);
486     }
487
488     case VOUT_DISPLAY_CHANGE_ZOOM:
489     case VOUT_DISPLAY_CHANGE_DISPLAY_FILLED:
490     case VOUT_DISPLAY_CHANGE_SOURCE_ASPECT:
491     case VOUT_DISPLAY_CHANGE_SOURCE_CROP:
492         /* I am not sure it is always necessary, but it is way simpler ... */
493         vout_display_SendEventPicturesInvalid (vd);
494         return VLC_SUCCESS;
495
496     case VOUT_DISPLAY_RESET_PICTURES:
497     {
498         ResetPictures (vd);
499
500         vout_display_place_t place;
501         vout_display_PlacePicture (&place, &vd->source, vd->cfg, false);
502
503         vd->fmt.i_width  = vd->source.i_width  * place.width  / vd->source.i_visible_width;
504         vd->fmt.i_height = vd->source.i_height * place.height / vd->source.i_visible_height;
505
506         vd->fmt.i_visible_width  = place.width;
507         vd->fmt.i_visible_height = place.height;
508         vd->fmt.i_x_offset = vd->source.i_x_offset * place.width  / vd->source.i_visible_width;
509         vd->fmt.i_y_offset = vd->source.i_y_offset * place.height / vd->source.i_visible_height;
510         return VLC_SUCCESS;
511     }
512
513     /* Hide the mouse. It will be send when
514      * vout_display_t::info.b_hide_mouse is false */
515     case VOUT_DISPLAY_HIDE_MOUSE:
516         xcb_change_window_attributes (p_sys->conn, p_sys->embed->handle.xid,
517                                   XCB_CW_CURSOR, &(uint32_t){ p_sys->cursor });
518         return VLC_SUCCESS;
519
520     default:
521         msg_Err (vd, "Unknown request in XCB vout display");
522         return VLC_EGENERIC;
523     }
524 }
525
526 static void Manage (vout_display_t *vd)
527 {
528     vout_display_sys_t *p_sys = vd->sys;
529
530     ManageEvent (vd, p_sys->conn, &p_sys->visible);
531 }
532
533 static void ResetPictures (vout_display_t *vd)
534 {
535     vout_display_sys_t *p_sys = vd->sys;
536
537     if (!p_sys->pool)
538         return;
539
540     for (unsigned i = 0; i < MAX_PICTURES; i++)
541     {
542         picture_resource_t *res = &p_sys->resource[i];
543
544         if (!res->p->p_pixels)
545             break;
546         PictureResourceFree (res, p_sys->conn);
547     }
548     picture_pool_Delete (p_sys->pool);
549     p_sys->pool = NULL;
550 }