Subversion Repositories Kolibri OS

Rev

Rev 3031 | Rev 3037 | Go to most recent revision | Blame | Compare with Previous | Last modification | View Log | Download | RSS feed

  1.  
  2. #define iowrite32(v, addr)      writel((v), (addr))
  3.  
  4. #include "drmP.h"
  5. #include "drm.h"
  6. #include "i915_drm.h"
  7. #include "i915_drv.h"
  8. #include "intel_drv.h"
  9.  
  10. #include <linux/kernel.h>
  11. #include <linux/module.h>
  12. #include <linux/mod_devicetable.h>
  13. #include <errno-base.h>
  14. #include <linux/pci.h>
  15.  
  16. #include <syscall.h>
  17.  
  18. #include "hmm.h"
  19. #include "bitmap.h"
  20.  
  21. extern struct drm_device *main_device;
  22.  
  23.  
  24. typedef struct
  25. {
  26.     kobj_t     header;
  27.  
  28.     uint32_t  *data;
  29.     uint32_t   hot_x;
  30.     uint32_t   hot_y;
  31.  
  32.     struct list_head   list;
  33.     struct drm_i915_gem_object  *cobj;
  34. }cursor_t;
  35.  
  36. #define CURSOR_WIDTH 64
  37. #define CURSOR_HEIGHT 64
  38.  
  39.  
  40. struct tag_display
  41. {
  42.     int  x;
  43.     int  y;
  44.     int  width;
  45.     int  height;
  46.     int  bpp;
  47.     int  vrefresh;
  48.     int  pitch;
  49.     int  lfb;
  50.  
  51.     int  supported_modes;
  52.     struct drm_device    *ddev;
  53.     struct drm_connector *connector;
  54.     struct drm_crtc      *crtc;
  55.  
  56.     struct list_head   cursors;
  57.  
  58.     cursor_t   *cursor;
  59.     int       (*init_cursor)(cursor_t*);
  60.     cursor_t* (__stdcall *select_cursor)(cursor_t*);
  61.     void      (*show_cursor)(int show);
  62.     void      (__stdcall *move_cursor)(cursor_t *cursor, int x, int y);
  63.     void      (__stdcall *restore_cursor)(int x, int y);
  64.     void      (*disable_mouse)(void);
  65.     u32  mask_seqno;
  66.     u32  check_mouse;
  67.     u32  check_m_pixel;
  68.  
  69. };
  70.  
  71.  
  72. static display_t *os_display;
  73.  
  74. u32_t cmd_buffer;
  75. u32_t cmd_offset;
  76.  
  77. void init_render();
  78. int  sna_init();
  79.  
  80. int init_cursor(cursor_t *cursor);
  81. static cursor_t*  __stdcall select_cursor_kms(cursor_t *cursor);
  82. static void       __stdcall move_cursor_kms(cursor_t *cursor, int x, int y);
  83.  
  84. void __stdcall restore_cursor(int x, int y)
  85. {};
  86.  
  87. void disable_mouse(void)
  88. {};
  89.  
  90. static char *manufacturer_name(unsigned char *x)
  91. {
  92.     static char name[4];
  93.  
  94.     name[0] = ((x[0] & 0x7C) >> 2) + '@';
  95.     name[1] = ((x[0] & 0x03) << 3) + ((x[1] & 0xE0) >> 5) + '@';
  96.     name[2] = (x[1] & 0x1F) + '@';
  97.     name[3] = 0;
  98.  
  99.     return name;
  100. }
  101.  
  102. bool set_mode(struct drm_device *dev, struct drm_connector *connector,
  103.               videomode_t *reqmode, bool strict)
  104. {
  105.     drm_i915_private_t      *dev_priv   = dev->dev_private;
  106.     struct drm_fb_helper    *fb_helper  = &dev_priv->fbdev->helper;
  107.  
  108.     struct drm_mode_config  *config     = &dev->mode_config;
  109.     struct drm_display_mode *mode       = NULL, *tmpmode;
  110.     struct drm_framebuffer  *fb         = NULL;
  111.     struct drm_crtc         *crtc;
  112.     struct drm_encoder      *encoder;
  113.     struct drm_mode_set     set;
  114.     char *con_name;
  115.     char *enc_name;
  116.     unsigned hdisplay, vdisplay;
  117.     int ret;
  118.  
  119.     mutex_lock(&dev->mode_config.mutex);
  120.  
  121.     list_for_each_entry(tmpmode, &connector->modes, head)
  122.     {
  123.         if( (drm_mode_width(tmpmode)    == reqmode->width)  &&
  124.             (drm_mode_height(tmpmode)   == reqmode->height) &&
  125.             (drm_mode_vrefresh(tmpmode) == reqmode->freq) )
  126.         {
  127.             mode = tmpmode;
  128.             goto do_set;
  129.         }
  130.     };
  131.  
  132.     if( (mode == NULL) && (strict == false) )
  133.     {
  134.         list_for_each_entry(tmpmode, &connector->modes, head)
  135.         {
  136.             if( (drm_mode_width(tmpmode)  == reqmode->width)  &&
  137.                 (drm_mode_height(tmpmode) == reqmode->height) )
  138.             {
  139.                 mode = tmpmode;
  140.                 goto do_set;
  141.             }
  142.         };
  143.     };
  144.  
  145.     printf("%s failed\n", __FUNCTION__);
  146.  
  147.     return -1;
  148.  
  149. do_set:
  150.  
  151.  
  152.     encoder = connector->encoder;
  153.     crtc = encoder->crtc;
  154.  
  155.     con_name = drm_get_connector_name(connector);
  156.     enc_name = drm_get_encoder_name(encoder);
  157.  
  158.     DRM_DEBUG_KMS("set mode %d %d: crtc %d connector %s encoder %s\n",
  159.               reqmode->width, reqmode->height, crtc->base.id,
  160.               con_name, enc_name);
  161.  
  162.     drm_mode_set_crtcinfo(mode, CRTC_INTERLACE_HALVE_V);
  163.  
  164.     hdisplay = mode->hdisplay;
  165.     vdisplay = mode->vdisplay;
  166.  
  167.     if (crtc->invert_dimensions)
  168.         swap(hdisplay, vdisplay);
  169.  
  170.     fb = fb_helper->fb;
  171.  
  172.     fb->width  = reqmode->width;
  173.     fb->height = reqmode->height;
  174.     fb->pitches[0]  = ALIGN(reqmode->width * 4, 64);
  175.     fb->pitches[1]  = ALIGN(reqmode->width * 4, 64);
  176.     fb->pitches[2]  = ALIGN(reqmode->width * 4, 64);
  177.     fb->pitches[3]  = ALIGN(reqmode->width * 4, 64);
  178.  
  179.     fb->bits_per_pixel = 32;
  180.     fb->depth = 24;
  181.  
  182.     crtc->fb = fb;
  183.     crtc->enabled = true;
  184.     os_display->crtc = crtc;
  185.  
  186.     set.crtc = crtc;
  187.     set.x = 0;
  188.     set.y = 0;
  189.     set.mode = mode;
  190.     set.connectors = &connector;
  191.     set.num_connectors = 1;
  192.     set.fb = fb;
  193.     ret = crtc->funcs->set_config(&set);
  194.     mutex_unlock(&dev->mode_config.mutex);
  195.  
  196.     if ( !ret )
  197.     {
  198.         os_display->width    = fb->width;
  199.         os_display->height   = fb->height;
  200.         os_display->pitch    = fb->pitches[0];
  201.         os_display->vrefresh = drm_mode_vrefresh(mode);
  202.  
  203.         sysSetScreen(fb->width, fb->height, fb->pitches[0]);
  204.  
  205.         dbgprintf("new mode %d x %d pitch %d\n",
  206.                        fb->width, fb->height, fb->pitches[0]);
  207.     }
  208.     else
  209.         DRM_ERROR("failed to set mode %d_%d on crtc %p\n",
  210.                    fb->width, fb->height, crtc);
  211.  
  212.  
  213.     return ret;
  214. }
  215.  
  216. static int count_connector_modes(struct drm_connector* connector)
  217. {
  218.     struct drm_display_mode  *mode;
  219.     int count = 0;
  220.  
  221.     list_for_each_entry(mode, &connector->modes, head)
  222.     {
  223.         count++;
  224.     };
  225.     return count;
  226. };
  227.  
  228. static struct drm_connector* get_def_connector(struct drm_device *dev)
  229. {
  230.     struct drm_connector  *connector;
  231.     struct drm_connector_helper_funcs *connector_funcs;
  232.  
  233.     struct drm_connector  *def_connector = NULL;
  234.  
  235.     list_for_each_entry(connector, &dev->mode_config.connector_list, head)
  236.     {
  237.         struct drm_encoder  *encoder;
  238.         struct drm_crtc     *crtc;
  239.  
  240.         if( connector->status != connector_status_connected)
  241.             continue;
  242.  
  243.         connector_funcs = connector->helper_private;
  244.         encoder = connector_funcs->best_encoder(connector);
  245.         if( encoder == NULL)
  246.             continue;
  247.  
  248.         connector->encoder = encoder;
  249.  
  250.         crtc = encoder->crtc;
  251.  
  252.         dbgprintf("CONNECTOR %x ID:  %d status %d encoder %x\n crtc %x",
  253.                    connector, connector->base.id,
  254.                    connector->status, connector->encoder,
  255.                    crtc);
  256.  
  257. //        if (crtc == NULL)
  258. //            continue;
  259.  
  260.         def_connector = connector;
  261.  
  262.         break;
  263.     };
  264.  
  265.     return def_connector;
  266. };
  267.  
  268.  
  269. int init_display_kms(struct drm_device *dev)
  270. {
  271.     struct drm_connector    *connector;
  272.     struct drm_connector_helper_funcs *connector_funcs;
  273.     struct drm_encoder      *encoder;
  274.     struct drm_crtc         *crtc = NULL;
  275.     struct drm_framebuffer  *fb;
  276.  
  277.     cursor_t  *cursor;
  278.     u32_t      ifl;
  279.     int        err;
  280.  
  281. //    ENTER();
  282.  
  283.     list_for_each_entry(connector, &dev->mode_config.connector_list, head)
  284.     {
  285.         if( connector->status != connector_status_connected)
  286.             continue;
  287.  
  288.         connector_funcs = connector->helper_private;
  289.         encoder = connector_funcs->best_encoder(connector);
  290.         if( encoder == NULL)
  291.         {
  292.             dbgprintf("CONNECTOR %x ID: %d no active encoders\n",
  293.                       connector, connector->base.id);
  294.             continue;
  295.         }
  296.         connector->encoder = encoder;
  297.         crtc = encoder->crtc;
  298.  
  299.         dbgprintf("CONNECTOR %x ID:%d status:%d ENCODER %x CRTC %x ID:%d\n",
  300.                connector, connector->base.id,
  301.                connector->status, connector->encoder,
  302.                crtc, crtc->base.id );
  303.  
  304.         break;
  305.     };
  306.  
  307.     if(connector == NULL)
  308.     {
  309.         dbgprintf("No active connectors!\n");
  310.         return -1;
  311.     };
  312.  
  313.     if(crtc == NULL)
  314.     {
  315.         struct drm_crtc *tmp_crtc;
  316.         int crtc_mask = 1;
  317.  
  318.         list_for_each_entry(tmp_crtc, &dev->mode_config.crtc_list, head)
  319.         {
  320.             if (encoder->possible_crtcs & crtc_mask)
  321.             {
  322.                 crtc = tmp_crtc;
  323.                 encoder->crtc = crtc;
  324.                 break;
  325.             };
  326.             crtc_mask <<= 1;
  327.         };
  328.     };
  329.  
  330.     if(crtc == NULL)
  331.     {
  332.         dbgprintf("No CRTC for encoder %d\n", encoder->base.id);
  333.         return -1;
  334.     };
  335.  
  336.  
  337.     DRM_DEBUG_KMS("[Select CRTC:%d]\n", crtc->base.id);
  338.  
  339.     os_display = GetDisplay();
  340.     os_display->ddev = dev;
  341.     os_display->connector = connector;
  342.     os_display->crtc = crtc;
  343.  
  344.     os_display->supported_modes = count_connector_modes(connector);
  345.  
  346.  
  347.     ifl = safe_cli();
  348.     {
  349.         struct intel_crtc *intel_crtc = to_intel_crtc(os_display->crtc);
  350.  
  351.         list_for_each_entry(cursor, &os_display->cursors, list)
  352.         {
  353.             init_cursor(cursor);
  354.         };
  355.  
  356.         os_display->restore_cursor(0,0);
  357.         os_display->init_cursor    = init_cursor;
  358.         os_display->select_cursor  = select_cursor_kms;
  359.         os_display->show_cursor    = NULL;
  360.         os_display->move_cursor    = move_cursor_kms;
  361.         os_display->restore_cursor = restore_cursor;
  362.         os_display->disable_mouse  = disable_mouse;
  363.  
  364.         intel_crtc->cursor_x = os_display->width/2;
  365.         intel_crtc->cursor_y = os_display->height/2;
  366.  
  367.         select_cursor_kms(os_display->cursor);
  368.     };
  369.     safe_sti(ifl);
  370.  
  371.     main_device = dev;
  372.  
  373.     err = init_bitmaps();
  374.     if( !err )
  375.     {
  376.         printf("Initialize bitmap manager\n");
  377.     };
  378.  
  379.  
  380. //    LEAVE();
  381.  
  382.     return 0;
  383. };
  384.  
  385.  
  386. int get_videomodes(videomode_t *mode, int *count)
  387. {
  388.     int err = -1;
  389.  
  390. //    ENTER();
  391.  
  392. //    dbgprintf("mode %x count %d\n", mode, *count);
  393.  
  394.     if( *count == 0 )
  395.     {
  396.         *count = os_display->supported_modes;
  397.         err = 0;
  398.     }
  399.     else if( mode != NULL )
  400.     {
  401.         struct drm_display_mode  *drmmode;
  402.         int i = 0;
  403.  
  404.         if( *count > os_display->supported_modes)
  405.             *count = os_display->supported_modes;
  406.  
  407.         list_for_each_entry(drmmode, &os_display->connector->modes, head)
  408.         {
  409.             if( i < *count)
  410.             {
  411.                 mode->width  = drm_mode_width(drmmode);
  412.                 mode->height = drm_mode_height(drmmode);
  413.                 mode->bpp    = 32;
  414.                 mode->freq   = drm_mode_vrefresh(drmmode);
  415.                 i++;
  416.                 mode++;
  417.             }
  418.             else break;
  419.         };
  420.         *count = i;
  421.         err = 0;
  422.     };
  423. //    LEAVE();
  424.     return err;
  425. };
  426.  
  427. int set_user_mode(videomode_t *mode)
  428. {
  429.     int err = -1;
  430.  
  431. //    ENTER();
  432.  
  433. //    dbgprintf("width %d height %d vrefresh %d\n",
  434. //               mode->width, mode->height, mode->freq);
  435.  
  436.     if( (mode->width  != 0)  &&
  437.         (mode->height != 0)  &&
  438.         (mode->freq   != 0 ) &&
  439.         ( (mode->width   != os_display->width)  ||
  440.           (mode->height  != os_display->height) ||
  441.           (mode->freq    != os_display->vrefresh) ) )
  442.     {
  443.         if( set_mode(os_display->ddev, os_display->connector, mode, true) )
  444.             err = 0;
  445.     };
  446.  
  447. //    LEAVE();
  448.     return err;
  449. };
  450.  
  451. void __attribute__((regparm(1))) destroy_cursor(cursor_t *cursor)
  452. {
  453. /*  FIXME    synchronization */
  454.  
  455.     list_del(&cursor->list);
  456. //    radeon_bo_unpin(cursor->robj);
  457. //    KernelFree(cursor->data);
  458.     __DestroyObject(cursor);
  459. };
  460.  
  461. int init_cursor(cursor_t *cursor)
  462. {
  463.     struct drm_i915_private *dev_priv = os_display->ddev->dev_private;
  464.     struct drm_i915_gem_object *obj;
  465.     uint32_t *bits;
  466.     uint32_t *src;
  467.  
  468.     int       i,j;
  469.     int       ret;
  470.  
  471. //    ENTER();
  472.  
  473.     if (dev_priv->info->cursor_needs_physical)
  474.     {
  475.         bits = (uint32_t*)KernelAlloc(CURSOR_WIDTH*CURSOR_HEIGHT*4);
  476.         if (unlikely(bits == NULL))
  477.             return ENOMEM;
  478.         cursor->cobj = (struct drm_i915_gem_object *)GetPgAddr(bits);
  479.     }
  480.     else
  481.     {
  482.         obj = i915_gem_alloc_object(os_display->ddev, CURSOR_WIDTH*CURSOR_HEIGHT*4);
  483.         if (unlikely(obj == NULL))
  484.             return -ENOMEM;
  485.  
  486.         ret = i915_gem_object_pin(obj, CURSOR_WIDTH*CURSOR_HEIGHT*4, true, true);
  487.         if (ret) {
  488.             drm_gem_object_unreference(&obj->base);
  489.             return ret;
  490.         }
  491.  
  492. /* You don't need to worry about fragmentation issues.
  493.  * GTT space is continuous. I guarantee it.                           */
  494.  
  495.         bits = (u32*)MapIoMem(dev_priv->mm.gtt->gma_bus_addr + obj->gtt_offset,
  496.                     CURSOR_WIDTH*CURSOR_HEIGHT*4, PG_SW);
  497.  
  498.         if (unlikely(bits == NULL))
  499.         {
  500.             i915_gem_object_unpin(obj);
  501.             drm_gem_object_unreference(&obj->base);
  502.             return -ENOMEM;
  503.         };
  504.         cursor->cobj = obj;
  505.     };
  506.  
  507.     src = cursor->data;
  508.  
  509.     for(i = 0; i < 32; i++)
  510.     {
  511.         for(j = 0; j < 32; j++)
  512.             *bits++ = *src++;
  513.         for(j = 32; j < CURSOR_WIDTH; j++)
  514.             *bits++ = 0;
  515.     }
  516.     for(i = 0; i < CURSOR_WIDTH*(CURSOR_HEIGHT-32); i++)
  517.         *bits++ = 0;
  518.  
  519. // release old cursor
  520.  
  521.     KernelFree(cursor->data);
  522.  
  523.     cursor->data = bits;
  524.  
  525.     cursor->header.destroy = destroy_cursor;
  526. //    LEAVE();
  527.  
  528.     return 0;
  529. }
  530.  
  531.  
  532. static void i9xx_update_cursor(struct drm_crtc *crtc, u32 base)
  533. {
  534.     struct drm_device *dev = crtc->dev;
  535.     struct drm_i915_private *dev_priv = dev->dev_private;
  536.     struct intel_crtc *intel_crtc = to_intel_crtc(crtc);
  537.     int pipe = intel_crtc->pipe;
  538.     bool visible = base != 0;
  539.  
  540.     if (intel_crtc->cursor_visible != visible) {
  541.         uint32_t cntl = I915_READ(CURCNTR(pipe));
  542.         if (base) {
  543.             cntl &= ~(CURSOR_MODE | MCURSOR_PIPE_SELECT);
  544.             cntl |= CURSOR_MODE_64_ARGB_AX | MCURSOR_GAMMA_ENABLE;
  545.             cntl |= pipe << 28; /* Connect to correct pipe */
  546.         } else {
  547.             cntl &= ~(CURSOR_MODE | MCURSOR_GAMMA_ENABLE);
  548.             cntl |= CURSOR_MODE_DISABLE;
  549.         }
  550.         I915_WRITE(CURCNTR(pipe), cntl);
  551.  
  552.         intel_crtc->cursor_visible = visible;
  553.     }
  554.     /* and commit changes on next vblank */
  555.     I915_WRITE(CURBASE(pipe), base);
  556. }
  557.  
  558. void __stdcall move_cursor_kms(cursor_t *cursor, int x, int y)
  559. {
  560.     struct drm_i915_private *dev_priv = os_display->ddev->dev_private;
  561.     struct intel_crtc *intel_crtc = to_intel_crtc(os_display->crtc);
  562.     u32 base, pos;
  563.     bool visible;
  564.  
  565.     int pipe = intel_crtc->pipe;
  566.  
  567.     intel_crtc->cursor_x = x;
  568.     intel_crtc->cursor_y = y;
  569.  
  570.     x = x - cursor->hot_x;
  571.     y = y - cursor->hot_y;
  572.  
  573.  
  574.     pos = 0;
  575.  
  576.     base = intel_crtc->cursor_addr;
  577.     if (x >= os_display->width)
  578.         base = 0;
  579.  
  580.     if (y >= os_display->height)
  581.         base = 0;
  582.  
  583.     if (x < 0)
  584.     {
  585.         if (x + intel_crtc->cursor_width < 0)
  586.             base = 0;
  587.  
  588.         pos |= CURSOR_POS_SIGN << CURSOR_X_SHIFT;
  589.         x = -x;
  590.     }
  591.     pos |= x << CURSOR_X_SHIFT;
  592.  
  593.     if (y < 0)
  594.     {
  595.         if (y + intel_crtc->cursor_height < 0)
  596.             base = 0;
  597.  
  598.         pos |= CURSOR_POS_SIGN << CURSOR_Y_SHIFT;
  599.         y = -y;
  600.     }
  601.     pos |= y << CURSOR_Y_SHIFT;
  602.  
  603.     visible = base != 0;
  604.     if (!visible && !intel_crtc->cursor_visible)
  605.         return;
  606.  
  607.     I915_WRITE(CURPOS(pipe), pos);
  608. //    if (IS_845G(dev) || IS_I865G(dev))
  609. //        i845_update_cursor(crtc, base);
  610. //    else
  611.         i9xx_update_cursor(os_display->crtc, base);
  612.  
  613. };
  614.  
  615.  
  616. cursor_t* __stdcall select_cursor_kms(cursor_t *cursor)
  617. {
  618.     struct drm_i915_private *dev_priv = os_display->ddev->dev_private;
  619.     struct intel_crtc *intel_crtc = to_intel_crtc(os_display->crtc);
  620.     cursor_t *old;
  621.  
  622.     old = os_display->cursor;
  623.     os_display->cursor = cursor;
  624.  
  625.     if (!dev_priv->info->cursor_needs_physical)
  626.        intel_crtc->cursor_addr = cursor->cobj->gtt_offset;
  627.     else
  628.         intel_crtc->cursor_addr = (addr_t)cursor->cobj;
  629.  
  630.     intel_crtc->cursor_width = 32;
  631.     intel_crtc->cursor_height = 32;
  632.  
  633.     move_cursor_kms(cursor, intel_crtc->cursor_x, intel_crtc->cursor_y);
  634.     return old;
  635. };
  636.  
  637.  
  638.  
  639.  
  640.  
  641. extern struct hmm bm_mm;
  642.  
  643.  
  644. typedef struct
  645. {
  646.     int left;
  647.     int top;
  648.     int right;
  649.     int bottom;
  650. }rect_t;
  651.  
  652.  
  653. #include "clip.inc"
  654.  
  655. void  FASTCALL GetWindowRect(rect_t *rc)__asm__("GetWindowRect");
  656.  
  657. #define CURRENT_TASK             (0x80003000)
  658.  
  659. static u32_t get_display_map()
  660. {
  661.     u32_t   addr;
  662.  
  663.     addr = (u32_t)os_display;
  664.     addr+= sizeof(display_t);            /*  shoot me  */
  665.     return *(u32_t*)addr;
  666. }
  667.  
  668. #define XY_COLOR_BLT                ((2<<29)|(0x50<<22)|(0x4))
  669. #define XY_SRC_COPY_BLT_CMD         ((2<<29)|(0x53<<22)|6)
  670. #define XY_SRC_COPY_CHROMA_CMD     ((2<<29)|(0x73<<22)|8)
  671. #define ROP_COPY_SRC               0xCC
  672. #define FORMAT8888                 3
  673.  
  674. #define BLT_WRITE_ALPHA             (1<<21)
  675. #define BLT_WRITE_RGB               (1<<20)
  676.  
  677.  
  678.  
  679. typedef int v4si __attribute__ ((vector_size (16)));
  680.  
  681.  
  682. static void
  683. i915_gem_execbuffer_retire_commands(struct drm_device *dev,
  684.                     struct intel_ring_buffer *ring)
  685. {
  686.     struct drm_i915_gem_request *request;
  687.     u32 invalidate;
  688.     u32 req;
  689.     /*
  690.      * Ensure that the commands in the batch buffer are
  691.      * finished before the interrupt fires.
  692.      *
  693.      * The sampler always gets flushed on i965 (sigh).
  694.      */
  695.     invalidate = I915_GEM_DOMAIN_COMMAND;
  696.     if (INTEL_INFO(dev)->gen >= 4)
  697.         invalidate |= I915_GEM_DOMAIN_SAMPLER;
  698.     if (ring->flush(ring, invalidate, 0)) {
  699.         i915_gem_next_request_seqno(ring);
  700.         return;
  701.     }
  702.  
  703.     /* Add a breadcrumb for the completion of the batch buffer */
  704.     if (request == NULL || i915_add_request(ring, NULL, &req)) {
  705.         i915_gem_next_request_seqno(ring);
  706.     }
  707. }
  708.  
  709.  
  710.  
  711.  
  712.  
  713. int blit_video(u32 hbitmap, int  dst_x, int dst_y,
  714.                int src_x, int src_y, u32 w, u32 h)
  715. {
  716.     drm_i915_private_t *dev_priv = main_device->dev_private;
  717.     struct intel_ring_buffer *ring;
  718.     struct context *context;
  719.  
  720.     bitmap_t  *bitmap;
  721.     rect_t     winrc;
  722.     clip_t     dst_clip;
  723.     clip_t     src_clip;
  724.     u32_t      width;
  725.     u32_t      height;
  726.  
  727.     u32_t      br13, cmd, slot_mask, *b;
  728.     u32_t      offset;
  729.     u8         slot;
  730.     int      n=0;
  731.  
  732.     if(unlikely(hbitmap==0))
  733.         return -1;
  734.  
  735.     bitmap = (bitmap_t*)hmm_get_data(&bm_mm, hbitmap);
  736.  
  737.     if(unlikely(bitmap==NULL))
  738.         return -1;
  739.  
  740.     context = get_context(main_device);
  741.     if(unlikely(context == NULL))
  742.         return -1;
  743.  
  744.     GetWindowRect(&winrc);
  745.  
  746.     dst_clip.xmin   = 0;
  747.     dst_clip.ymin   = 0;
  748.     dst_clip.xmax   = winrc.right-winrc.left-1;
  749.     dst_clip.ymax   = winrc.bottom -winrc.top -1;
  750.  
  751.     src_clip.xmin   = 0;
  752.     src_clip.ymin   = 0;
  753.     src_clip.xmax   = bitmap->width  - 1;
  754.     src_clip.ymax   = bitmap->height - 1;
  755.  
  756.     width  = w;
  757.     height = h;
  758.  
  759.     if( blit_clip(&dst_clip, &dst_x, &dst_y,
  760.                   &src_clip, &src_x, &src_y,
  761.                   &width, &height) )
  762.         return 0;
  763.  
  764.     dst_x+= winrc.left;
  765.     dst_y+= winrc.top;
  766.  
  767.     slot = *((u8*)CURRENT_TASK);
  768.  
  769.     slot_mask = (u32_t)slot<<24;
  770.  
  771.     {
  772. #if 0
  773.         static v4si write_mask = {0xFF000000, 0xFF000000,
  774.                                   0xFF000000, 0xFF000000};
  775.  
  776.         u8* src_offset;
  777.         u8* dst_offset;
  778.  
  779.         src_offset = (u8*)(src_y*bitmap->pitch + src_x*4);
  780.         src_offset += (u32)bitmap->uaddr;
  781.  
  782.         dst_offset = (u8*)(dst_y*os_display->width + dst_x);
  783.         dst_offset+= get_display_map();
  784.  
  785.         u32_t tmp_h = height;
  786.  
  787.         __asm__ __volatile__ (
  788.         "movdqa     %[write_mask],  %%xmm7    \n"
  789.         "movd       %[slot_mask],   %%xmm6    \n"
  790.         "punpckldq  %%xmm6, %%xmm6            \n"
  791.         "punpcklqdq %%xmm6, %%xmm6            \n"
  792.         :: [write_mask] "m" (write_mask),
  793.            [slot_mask]  "g" (slot_mask)
  794.         :"xmm7", "xmm6");
  795.  
  796.         while( tmp_h--)
  797.         {
  798.             u32_t tmp_w = width;
  799.  
  800.             u8* tmp_src = src_offset;
  801.             u8* tmp_dst = dst_offset;
  802.  
  803.             src_offset+= bitmap->pitch;
  804.             dst_offset+= os_display->width;
  805.  
  806.             while( tmp_w >= 8 )
  807.             {
  808.                 __asm__ __volatile__ (
  809.                 "movq       (%0),   %%xmm0            \n"
  810.                 "punpcklbw  %%xmm0, %%xmm0            \n"
  811.                 "movdqa     %%xmm0, %%xmm1            \n"
  812.                 "punpcklwd  %%xmm0, %%xmm0            \n"
  813.                 "punpckhwd  %%xmm1, %%xmm1            \n"
  814.                 "pcmpeqb    %%xmm6, %%xmm0            \n"
  815.                 "pcmpeqb    %%xmm6, %%xmm1            \n"
  816.                 "maskmovdqu %%xmm7, %%xmm0            \n"
  817.                 "addl       $16, %%edi                \n"
  818.                 "maskmovdqu %%xmm7, %%xmm1            \n"
  819.                 :: "r" (tmp_dst), "D" (tmp_src)
  820.                 :"xmm0", "xmm1");
  821.                 __asm__ __volatile__ ("":::"edi");
  822.                 tmp_w -= 8;
  823.                 tmp_src += 32;
  824.                 tmp_dst += 8;
  825.             };
  826.  
  827.             if( tmp_w >= 4 )
  828.             {
  829.                 __asm__ __volatile__ (
  830.                 "movd       (%0),   %%xmm0            \n"
  831.                 "punpcklbw  %%xmm0, %%xmm0            \n"
  832.                 "punpcklwd  %%xmm0, %%xmm0            \n"
  833.                 "pcmpeqb    %%xmm6, %%xmm0            \n"
  834.                 "maskmovdqu %%xmm7, %%xmm0            \n"
  835.                 :: "r" (tmp_dst), "D" (tmp_src)
  836.                 :"xmm0");
  837.                 tmp_w -= 4;
  838.                 tmp_src += 16;
  839.                 tmp_dst += 4;
  840.             };
  841.  
  842.             while( tmp_w--)
  843.             {
  844.                 *(tmp_src+3) = (*tmp_dst==slot)?0xFF:0x00;
  845.                 tmp_src+=4;
  846.                 tmp_dst++;
  847.             };
  848.         };
  849. #else
  850.         u8* src_offset;
  851.         u8* dst_offset;
  852.         u32 ifl;
  853.  
  854.         src_offset = (u8*)(src_y*bitmap->pitch + src_x*4);
  855.         src_offset += (u32)bitmap->uaddr;
  856.  
  857.         dst_offset = (u8*)(dst_y*os_display->width + dst_x);
  858.         dst_offset+= get_display_map();
  859.  
  860.         u32_t tmp_h = height;
  861.  
  862.       ifl = safe_cli();
  863.         while( tmp_h--)
  864.         {
  865.             u32_t tmp_w = width;
  866.  
  867.             u8* tmp_src = src_offset;
  868.             u8* tmp_dst = dst_offset;
  869.  
  870.             src_offset+= bitmap->pitch;
  871.             dst_offset+= os_display->width;
  872.  
  873.             while( tmp_w--)
  874.             {
  875.                 *(tmp_src+3) = (*tmp_dst==slot)?0xFF:0x00;
  876.                 tmp_src+=4;
  877.                 tmp_dst++;
  878.             };
  879.         };
  880.       safe_sti(ifl);
  881.     }
  882. #endif
  883.  
  884.     if((context->cmd_buffer & 0xFC0)==0xFC0)
  885.         context->cmd_buffer&= 0xFFFFF000;
  886.  
  887.     b = (u32_t*)ALIGN(context->cmd_buffer,16);
  888.  
  889.     offset = context->cmd_offset + ((u32_t)b & 0xFFF);
  890.  
  891.     cmd = XY_SRC_COPY_CHROMA_CMD | BLT_WRITE_RGB | BLT_WRITE_ALPHA;
  892.     cmd |= 3 << 17;
  893.  
  894.     br13 = os_display->pitch;
  895.     br13|= ROP_COPY_SRC << 16;
  896.     br13|= FORMAT8888   << 24;
  897.  
  898.     b[n++] = cmd;
  899.     b[n++] = br13;
  900.     b[n++] = (dst_y << 16) | dst_x;                   // left, top
  901.     b[n++] = ((dst_y+height-1)<< 16)|(dst_x+width-1); // bottom, right
  902.     b[n++] = 0;                          // destination
  903.     b[n++] = (src_y << 16) | src_x;      // source left & top
  904.     b[n++] = bitmap->pitch;              // source pitch
  905.     b[n++] = bitmap->gaddr;              // source
  906.  
  907.     b[n++] = 0;                          // Transparency Color Low
  908.     b[n++] = 0x00FFFFFF;                 // Transparency Color High
  909.  
  910.     b[n++] = MI_BATCH_BUFFER_END;
  911.     if( n & 1)
  912.         b[n++] = MI_NOOP;
  913.  
  914.     context->cmd_buffer+= n*4;
  915.  
  916. //    i915_gem_object_set_to_gtt_domain(bitmap->obj, false);
  917.  
  918.     if (HAS_BLT(main_device))
  919.     {
  920.         int ret;
  921.  
  922.         ring = &dev_priv->ring[BCS];
  923. //        printf("dispatch...  ");
  924.         ring->dispatch_execbuffer(ring, offset, n*4);
  925. //        printf("done\n");
  926.  
  927.         i915_gem_execbuffer_retire_commands(main_device, ring);
  928. //        printf("retire\n");
  929.     }
  930.     else
  931.     {
  932.         ring = &dev_priv->ring[RCS];
  933.         ring->dispatch_execbuffer(ring, offset, n*4);
  934.         ring->flush(ring, 0, I915_GEM_DOMAIN_RENDER);
  935.     };
  936.  
  937.     bitmap->obj->base.read_domains = I915_GEM_DOMAIN_CPU;
  938.     bitmap->obj->base.write_domain = I915_GEM_DOMAIN_CPU;
  939.  
  940.     return 0;
  941. fail:
  942.     return -1;
  943. };
  944.  
  945.  
  946. #if 0
  947.  
  948.     i915_gem_execbuffer_retire_commands(dev, ring);
  949. /* For display hotplug interrupt */
  950. static void
  951. ironlake_enable_display_irq(drm_i915_private_t *dev_priv, u32 mask)
  952. {
  953.     if ((dev_priv->irq_mask & mask) != 0) {
  954.         dev_priv->irq_mask &= ~mask;
  955.         I915_WRITE(DEIMR, dev_priv->irq_mask);
  956.         POSTING_READ(DEIMR);
  957.     }
  958. }
  959.  
  960. static int ironlake_enable_vblank(struct drm_device *dev, int pipe)
  961. {
  962.     drm_i915_private_t *dev_priv = (drm_i915_private_t *) dev->dev_private;
  963.     unsigned long irqflags;
  964.  
  965. //    if (!i915_pipe_enabled(dev, pipe))
  966. //        return -EINVAL;
  967.  
  968.     spin_lock_irqsave(&dev_priv->irq_lock, irqflags);
  969.     ironlake_enable_display_irq(dev_priv, (pipe == 0) ?
  970.                     DE_PIPEA_VBLANK : DE_PIPEB_VBLANK);
  971.     spin_unlock_irqrestore(&dev_priv->irq_lock, irqflags);
  972.  
  973.     return 0;
  974. }
  975.  
  976.  
  977.  
  978. static int i915_interrupt_info(struct drm_device *dev)
  979. {
  980.     drm_i915_private_t *dev_priv = dev->dev_private;
  981.     int ret, i, pipe;
  982.  
  983.     if (!HAS_PCH_SPLIT(dev)) {
  984.         dbgprintf("Interrupt enable:    %08x\n",
  985.                I915_READ(IER));
  986.         dbgprintf("Interrupt identity:  %08x\n",
  987.                I915_READ(IIR));
  988.         dbgprintf("Interrupt mask:      %08x\n",
  989.                I915_READ(IMR));
  990.         for_each_pipe(pipe)
  991.             dbgprintf("Pipe %c stat:         %08x\n",
  992.                    pipe_name(pipe),
  993.                    I915_READ(PIPESTAT(pipe)));
  994.     } else {
  995.         dbgprintf("North Display Interrupt enable:      %08x\n",
  996.            I915_READ(DEIER));
  997.         dbgprintf("North Display Interrupt identity:    %08x\n",
  998.            I915_READ(DEIIR));
  999.         dbgprintf("North Display Interrupt mask:        %08x\n",
  1000.            I915_READ(DEIMR));
  1001.         dbgprintf("South Display Interrupt enable:      %08x\n",
  1002.            I915_READ(SDEIER));
  1003.         dbgprintf("South Display Interrupt identity:    %08x\n",
  1004.            I915_READ(SDEIIR));
  1005.         dbgprintf("South Display Interrupt mask:        %08x\n",
  1006.            I915_READ(SDEIMR));
  1007.         dbgprintf("Graphics Interrupt enable:           %08x\n",
  1008.            I915_READ(GTIER));
  1009.         dbgprintf("Graphics Interrupt identity:         %08x\n",
  1010.            I915_READ(GTIIR));
  1011.         dbgprintf("Graphics Interrupt mask:             %08x\n",
  1012.                I915_READ(GTIMR));
  1013.     }
  1014.     dbgprintf("Interrupts received: %d\n",
  1015.            atomic_read(&dev_priv->irq_received));
  1016.     for (i = 0; i < I915_NUM_RINGS; i++) {
  1017.         if (IS_GEN6(dev) || IS_GEN7(dev)) {
  1018.             printf("Graphics Interrupt mask (%s):       %08x\n",
  1019.                    dev_priv->ring[i].name,
  1020.                    I915_READ_IMR(&dev_priv->ring[i]));
  1021.         }
  1022. //        i915_ring_seqno_info(m, &dev_priv->ring[i]);
  1023.     }
  1024.  
  1025.     return 0;
  1026. }
  1027.  
  1028. void execute_buffer (struct drm_i915_gem_object *buffer, uint32_t offset,
  1029.                      int size)
  1030. {
  1031.     struct intel_ring_buffer *ring;
  1032.     drm_i915_private_t *dev_priv = main_device->dev_private;
  1033.     u32 invalidate;
  1034.     u32 seqno = 2;
  1035.  
  1036.     offset += buffer->gtt_offset;
  1037. //    dbgprintf("execute %x size %d\n", offset, size);
  1038.  
  1039. //    asm volatile(
  1040. //    "mfence \n"
  1041. //    "wbinvd \n"
  1042. //    "mfence  \n"
  1043. //    :::"memory");
  1044.  
  1045.     ring = &dev_priv->ring[RCS];
  1046.     ring->dispatch_execbuffer(ring, offset, size);
  1047.  
  1048.     invalidate = I915_GEM_DOMAIN_COMMAND;
  1049.     if (INTEL_INFO(main_device)->gen >= 4)
  1050.         invalidate |= I915_GEM_DOMAIN_SAMPLER;
  1051.     if (ring->flush(ring, invalidate, 0))
  1052.         i915_gem_next_request_seqno(ring);
  1053.  
  1054.     ring->irq_get(ring);
  1055.  
  1056.     ring->add_request(ring, &seqno);
  1057.  
  1058. //    i915_interrupt_info(main_device);
  1059.  
  1060. };
  1061.  
  1062.  
  1063. int blit_textured(u32 hbitmap, int  dst_x, int dst_y,
  1064.                int src_x, int src_y, u32 w, u32 h)
  1065. {
  1066.     drm_i915_private_t *dev_priv = main_device->dev_private;
  1067.  
  1068.     bitmap_t  *src_bitmap, *dst_bitmap;
  1069.     bitmap_t   screen;
  1070.  
  1071.     rect_t     winrc;
  1072.  
  1073. //    dbgprintf("  handle: %d dx %d dy %d sx %d sy %d w %d h %d\n",
  1074. //              hbitmap, dst_x, dst_y, src_x, src_y, w, h);
  1075.  
  1076.     if(unlikely(hbitmap==0))
  1077.         return -1;
  1078.  
  1079.     src_bitmap = (bitmap_t*)hman_get_data(&bm_man, hbitmap);
  1080. //    dbgprintf("bitmap %x\n", src_bitmap);
  1081.  
  1082.     if(unlikely(src_bitmap==NULL))
  1083.         return -1;
  1084.  
  1085.     GetWindowRect(&winrc);
  1086.  
  1087.     screen.pitch  = os_display->pitch;
  1088.     screen.gaddr  = 0;
  1089.     screen.width  = os_display->width;
  1090.     screen.height = os_display->height;
  1091.     screen.obj    = (void*)-1;
  1092.  
  1093.     dst_bitmap = &screen;
  1094.  
  1095.     dst_x+= winrc.left;
  1096.     dst_y+= winrc.top;
  1097.  
  1098.     sna_blit_copy(dst_bitmap, dst_x, dst_y, w, h, src_bitmap, src_x, src_y);
  1099.  
  1100. };
  1101.  
  1102. int sna_blit_tex(bitmap_t *dst_bitmap, int dst_x, int dst_y,
  1103.                   int w, int h, bitmap_t *src_bitmap, int src_x, int src_y,
  1104.                   bitmap_t *mask_bitmap);
  1105.  
  1106.  
  1107. int blit_tex(u32 hbitmap, int  dst_x, int dst_y,
  1108.              int src_x, int src_y, u32 w, u32 h)
  1109. {
  1110.     drm_i915_private_t *dev_priv = main_device->dev_private;
  1111.     struct context *ctx;
  1112.  
  1113.     bitmap_t  *src_bitmap, *dst_bitmap;
  1114.     bitmap_t   screen;
  1115.     int        ret;
  1116.  
  1117.     bitmap_t *mask_bitmap;
  1118.     rect_t     winrc;
  1119.  
  1120. //    dbgprintf("  handle: %d dx %d dy %d sx %d sy %d w %d h %d\n",
  1121. //              hbitmap, dst_x, dst_y, src_x, src_y, w, h);
  1122.  
  1123.     if(unlikely(hbitmap==0))
  1124.         return -1;
  1125.  
  1126.     src_bitmap = (bitmap_t*)hman_get_data(&bm_man, hbitmap);
  1127. //    dbgprintf("bitmap %x\n", src_bitmap);
  1128.  
  1129.     if(unlikely(src_bitmap==NULL))
  1130.         return -1;
  1131.  
  1132.     ctx = get_context();
  1133.     if(unlikely(ctx==NULL))
  1134.     {
  1135.         ret = create_context();
  1136.         if(ret!=0)
  1137.             return -1;
  1138.  
  1139.         ctx = get_context();
  1140.     };
  1141.  
  1142.     mask_bitmap = ctx->mask;
  1143.  
  1144.     GetWindowRect(&winrc);
  1145.     dst_x+= winrc.left;
  1146.     dst_y+= winrc.top;
  1147.  
  1148.  
  1149.     if(ctx->seqno != os_display->mask_seqno)
  1150.     {
  1151.         u8* src_offset;
  1152.         u8* dst_offset;
  1153.         u32 slot;
  1154.         u32 ifl;
  1155.  
  1156.         ret = gem_object_lock(mask_bitmap->obj);
  1157.         if(ret !=0 )
  1158.         {
  1159.             dbgprintf("%s fail\n", __FUNCTION__);
  1160.             return ret;
  1161.         };
  1162.  
  1163. //        printf("width %d height %d\n", winrc.right, winrc.bottom);
  1164.  
  1165.         mask_bitmap->width  = winrc.right;
  1166.         mask_bitmap->height = winrc.bottom;
  1167.         mask_bitmap->pitch =  ALIGN(w,64);
  1168.  
  1169.         slot = *((u8*)CURRENT_TASK);
  1170. //        slot = 0x01;
  1171.  
  1172.         slot|= (slot<<8)|(slot<<16)|(slot<<24);
  1173.  
  1174.  
  1175.         __asm__ __volatile__ (
  1176.         "movd       %[slot],   %%xmm6    \n"
  1177.         "punpckldq  %%xmm6, %%xmm6            \n"
  1178.         "punpcklqdq %%xmm6, %%xmm6            \n"
  1179.         :: [slot]  "m" (slot)
  1180.         :"xmm6");
  1181.  
  1182.         src_offset = mask_bitmap->uaddr;
  1183.  
  1184.         dst_offset = (u8*)(dst_y*os_display->width + dst_x);
  1185.         dst_offset+= get_display_map();
  1186.  
  1187.         u32_t tmp_h = mask_bitmap->height;
  1188.  
  1189.       ifl = safe_cli();
  1190.         while( tmp_h--)
  1191.         {
  1192.             int tmp_w = mask_bitmap->width;
  1193.  
  1194.             u8* tmp_src = src_offset;
  1195.             u8* tmp_dst = dst_offset;
  1196.  
  1197.             src_offset+= mask_bitmap->pitch;
  1198.             dst_offset+= os_display->width;
  1199.  
  1200. //            while( tmp_w--)
  1201. //            {
  1202. //                *(tmp_src) = (*tmp_dst==slot)?0x1:0x00;
  1203. //                tmp_src++;
  1204. //                tmp_dst++;
  1205. //            };
  1206.             while(tmp_w >= 64)
  1207.             {
  1208.                 __asm__ __volatile__ (
  1209.                 "movdqu     (%0),   %%xmm0            \n"
  1210.                 "movdqu   16(%0),   %%xmm1            \n"
  1211.                 "movdqu   32(%0),   %%xmm2            \n"
  1212.                 "movdqu   48(%0),   %%xmm3            \n"
  1213.                 "pcmpeqb    %%xmm6, %%xmm0            \n"
  1214.                 "pcmpeqb    %%xmm6, %%xmm1            \n"
  1215.                 "pcmpeqb    %%xmm6, %%xmm2            \n"
  1216.                 "pcmpeqb    %%xmm6, %%xmm3            \n"
  1217.                 "movdqa     %%xmm0,   (%%edi)         \n"
  1218.                 "movdqa     %%xmm1, 16(%%edi)         \n"
  1219.                 "movdqa     %%xmm2, 32(%%edi)         \n"
  1220.                 "movdqa     %%xmm3, 48(%%edi)         \n"
  1221.  
  1222.                 :: "r" (tmp_dst), "D" (tmp_src)
  1223.                 :"xmm0","xmm1","xmm2","xmm3");
  1224.                 tmp_w -= 64;
  1225.                 tmp_src += 64;
  1226.                 tmp_dst += 64;
  1227.             }
  1228.  
  1229.             if( tmp_w >= 32 )
  1230.             {
  1231.                 __asm__ __volatile__ (
  1232.                 "movdqu     (%0),   %%xmm0            \n"
  1233.                 "movdqu   16(%0),   %%xmm1            \n"
  1234.                 "pcmpeqb    %%xmm6, %%xmm0            \n"
  1235.                 "pcmpeqb    %%xmm6, %%xmm1            \n"
  1236.                 "movdqa     %%xmm0,   (%%edi)         \n"
  1237.                 "movdqa     %%xmm1, 16(%%edi)         \n"
  1238.  
  1239.                 :: "r" (tmp_dst), "D" (tmp_src)
  1240.                 :"xmm0","xmm1");
  1241.                 tmp_w -= 32;
  1242.                 tmp_src += 32;
  1243.                 tmp_dst += 32;
  1244.             }
  1245.  
  1246.             while( tmp_w > 0 )
  1247.             {
  1248.                 __asm__ __volatile__ (
  1249.                 "movdqu     (%0),   %%xmm0            \n"
  1250.                 "pcmpeqb    %%xmm6, %%xmm0            \n"
  1251.                 "movdqa     %%xmm0,   (%%edi)         \n"
  1252.                 :: "r" (tmp_dst), "D" (tmp_src)
  1253.                 :"xmm0");
  1254.                 tmp_w -= 16;
  1255.                 tmp_src += 16;
  1256.                 tmp_dst += 16;
  1257.             }
  1258.         };
  1259.       safe_sti(ifl);
  1260.       ctx->seqno = os_display->mask_seqno;
  1261.     }
  1262.  
  1263.     screen.pitch  = os_display->pitch;
  1264.     screen.gaddr  = 0;
  1265.     screen.width  = os_display->width;
  1266.     screen.height = os_display->height;
  1267.     screen.obj    = (void*)-1;
  1268.  
  1269.     dst_bitmap = &screen;
  1270.  
  1271.  
  1272.     sna_blit_tex(dst_bitmap, dst_x, dst_y, w, h, src_bitmap, src_x, src_y,
  1273.                  mask_bitmap);
  1274.  
  1275. //    asm volatile ("int3");
  1276. };
  1277.  
  1278.  
  1279. #endif
  1280.  
  1281.  
  1282.  
  1283.  
  1284.  
  1285.  
  1286.  
  1287.  
  1288. void __stdcall run_workqueue(struct workqueue_struct *cwq)
  1289. {
  1290.     unsigned long irqflags;
  1291.  
  1292. //    dbgprintf("wq: %x head %x, next %x\n",
  1293. //               cwq, &cwq->worklist, cwq->worklist.next);
  1294.  
  1295.     spin_lock_irqsave(&cwq->lock, irqflags);
  1296.  
  1297.     while (!list_empty(&cwq->worklist))
  1298.     {
  1299.         struct work_struct *work = list_entry(cwq->worklist.next,
  1300.                                         struct work_struct, entry);
  1301.         work_func_t f = work->func;
  1302.         list_del_init(cwq->worklist.next);
  1303. //        dbgprintf("head %x, next %x\n",
  1304. //                  &cwq->worklist, cwq->worklist.next);
  1305.  
  1306.         spin_unlock_irqrestore(&cwq->lock, irqflags);
  1307.         f(work);
  1308.         spin_lock_irqsave(&cwq->lock, irqflags);
  1309.     }
  1310.  
  1311.     spin_unlock_irqrestore(&cwq->lock, irqflags);
  1312. }
  1313.  
  1314.  
  1315. static inline
  1316. int __queue_work(struct workqueue_struct *wq,
  1317.                          struct work_struct *work)
  1318. {
  1319.     unsigned long flags;
  1320. //    ENTER();
  1321.  
  1322. //    dbgprintf("wq: %x, work: %x\n",
  1323. //               wq, work );
  1324.  
  1325.     if(!list_empty(&work->entry))
  1326.         return 0;
  1327.  
  1328.     spin_lock_irqsave(&wq->lock, flags);
  1329.  
  1330.     if(list_empty(&wq->worklist))
  1331.         TimerHs(0,0, run_workqueue, wq);
  1332.  
  1333.     list_add_tail(&work->entry, &wq->worklist);
  1334.  
  1335.     spin_unlock_irqrestore(&wq->lock, flags);
  1336. //    dbgprintf("wq: %x head %x, next %x\n",
  1337. //               wq, &wq->worklist, wq->worklist.next);
  1338.  
  1339. //    LEAVE();
  1340.     return 1;
  1341. };
  1342.  
  1343. void __stdcall delayed_work_timer_fn(unsigned long __data)
  1344. {
  1345. //    ENTER();
  1346.     struct delayed_work *dwork = (struct delayed_work *)__data;
  1347.     struct workqueue_struct *wq = dwork->work.data;
  1348.  
  1349. //    dbgprintf("wq: %x, work: %x\n",
  1350. //               wq, &dwork->work );
  1351.  
  1352.     __queue_work(wq, &dwork->work);
  1353. //    LEAVE();
  1354. }
  1355.  
  1356.  
  1357. int queue_delayed_work_on(struct workqueue_struct *wq,
  1358.                         struct delayed_work *dwork, unsigned long delay)
  1359. {
  1360.     struct work_struct *work = &dwork->work;
  1361.  
  1362.     work->data = wq;
  1363.     TimerHs(0,0, delayed_work_timer_fn, dwork);
  1364.     return 1;
  1365. }
  1366.  
  1367. int queue_delayed_work(struct workqueue_struct *wq,
  1368.                         struct delayed_work *dwork, unsigned long delay)
  1369. {
  1370.     u32  flags;
  1371. //    ENTER();
  1372.  
  1373. //    dbgprintf("wq: %x, work: %x\n",
  1374. //               wq, &dwork->work );
  1375.  
  1376.     if (delay == 0)
  1377.         return __queue_work(wq, &dwork->work);
  1378.  
  1379.     return queue_delayed_work_on(wq, dwork, delay);
  1380. }
  1381.  
  1382.  
  1383. struct workqueue_struct *alloc_workqueue(const char *fmt,
  1384.                            unsigned int flags,
  1385.                            int max_active)
  1386. {
  1387.     struct workqueue_struct *wq;
  1388.  
  1389.     wq = kzalloc(sizeof(*wq),0);
  1390.     if (!wq)
  1391.         goto err;
  1392.  
  1393.     INIT_LIST_HEAD(&wq->worklist);
  1394.  
  1395.     return wq;
  1396. err:
  1397.     return NULL;
  1398. }
  1399.  
  1400. #define NSEC_PER_SEC    1000000000L
  1401.  
  1402. void getrawmonotonic(struct timespec *ts)
  1403. {
  1404.     u32 tmp = GetTimerTicks();
  1405.  
  1406.     ts->tv_sec  = tmp/100;
  1407.     ts->tv_nsec = (tmp - ts->tv_sec*100)*10000000;
  1408. }
  1409.  
  1410. void set_normalized_timespec(struct timespec *ts, time_t sec, long nsec)
  1411. {
  1412.         while (nsec >= NSEC_PER_SEC) {
  1413.                 nsec -= NSEC_PER_SEC;
  1414.                 ++sec;
  1415.         }
  1416.         while (nsec < 0) {
  1417.                 nsec += NSEC_PER_SEC;
  1418.                 --sec;
  1419.         }
  1420.         ts->tv_sec = sec;
  1421.         ts->tv_nsec = nsec;
  1422. }
  1423.  
  1424.  
  1425.  
  1426.