~drizzle-trunk/drizzle/development

« back to all changes in this revision

Viewing changes to drizzled/join_cache.cc

  • Committer: Brian Aker
  • Date: 2010-02-10 18:04:24 UTC
  • mfrom: (1286.1.5 build)
  • Revision ID: brian@gaz-20100210180424-03ypoyifmlc2lgcp
Merge of Brian/Padraig

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
/* - mode: c; c-basic-offset: 2; indent-tabs-mode: nil; -*-
 
2
 *  vim:expandtab:shiftwidth=2:tabstop=2:smarttab:
 
3
 *
 
4
 *  Copyright (C) 2008-2009 Sun Microsystems
 
5
 *
 
6
 *  This program is free software; you can redistribute it and/or modify
 
7
 *  it under the terms of the GNU General Public License as published by
 
8
 *  the Free Software Foundation; either version 2 of the License, or
 
9
 *  (at your option) any later version.
 
10
 *
 
11
 *  This program is distributed in the hope that it will be useful,
 
12
 *  but WITHOUT ANY WARRANTY; without even the implied warranty of
 
13
 *  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 
14
 *  GNU General Public License for more details.
 
15
 *
 
16
 *  You should have received a copy of the GNU General Public License
 
17
 *  along with this program; if not, write to the Free Software
 
18
 *  Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA  02110-1301  USA
 
19
 */
 
20
 
 
21
/**
 
22
 * @file
 
23
 *
 
24
 * Implementation of the JOIN cache
 
25
 * 
 
26
 * @defgroup Query_Optimizer  Query Optimizer
 
27
 * @{
 
28
 */
 
29
 
 
30
#include "config.h"
 
31
#include "drizzled/sql_select.h" /* include join.h */
 
32
#include "drizzled/field/blob.h"
 
33
 
 
34
#include <algorithm>
 
35
 
 
36
using namespace std;
 
37
 
 
38
namespace drizzled
 
39
{
 
40
 
 
41
static uint32_t used_blob_length(CACHE_FIELD **ptr);
 
42
 
 
43
static uint32_t used_blob_length(CACHE_FIELD **ptr)
 
44
{
 
45
  uint32_t length,blob_length;
 
46
  for (length=0 ; *ptr ; ptr++)
 
47
  {
 
48
    (*ptr)->blob_length=blob_length=(*ptr)->blob_field->get_length();
 
49
    length+=blob_length;
 
50
    (*ptr)->blob_field->get_ptr(&(*ptr)->str);
 
51
  }
 
52
  return length;
 
53
}
 
54
 
 
55
/*****************************************************************************
 
56
  Fill join cache with packed records
 
57
  Records are stored in tab->cache.buffer and last record in
 
58
  last record is stored with pointers to blobs to support very big
 
59
  records
 
60
******************************************************************************/
 
61
int join_init_cache(Session *session, JoinTable *tables, uint32_t table_count)
 
62
{
 
63
  register unsigned int i;
 
64
  unsigned int length, blobs;
 
65
  size_t size;
 
66
  CACHE_FIELD *copy,**blob_ptr;
 
67
  JOIN_CACHE  *cache;
 
68
  JoinTable *join_tab;
 
69
 
 
70
  cache= &tables[table_count].cache;
 
71
  cache->fields=blobs=0;
 
72
 
 
73
  join_tab= tables;
 
74
  for (i=0 ; i < table_count ; i++,join_tab++)
 
75
  {
 
76
    if (!join_tab->used_fieldlength)            /* Not calced yet */
 
77
      calc_used_field_length(session, join_tab);
 
78
    cache->fields+=join_tab->used_fields;
 
79
    blobs+=join_tab->used_blobs;
 
80
 
 
81
    /* SemiJoinDuplicateElimination: reserve space for rowid */
 
82
    if (join_tab->rowid_keep_flags & JoinTable::KEEP_ROWID)
 
83
    {
 
84
      cache->fields++;
 
85
      join_tab->used_fieldlength += join_tab->table->cursor->ref_length;
 
86
    }
 
87
  }
 
88
  if (!(cache->field=(CACHE_FIELD*)
 
89
        memory::sql_alloc(sizeof(CACHE_FIELD)*(cache->fields+table_count*2)+(blobs+1)*
 
90
 
 
91
                  sizeof(CACHE_FIELD*))))
 
92
  {
 
93
    free((unsigned char*) cache->buff);
 
94
    cache->buff=0;
 
95
    return(1);
 
96
  }
 
97
  copy=cache->field;
 
98
  blob_ptr=cache->blob_ptr=(CACHE_FIELD**)
 
99
    (cache->field+cache->fields+table_count*2);
 
100
 
 
101
  length=0;
 
102
  for (i=0 ; i < table_count ; i++)
 
103
  {
 
104
    uint32_t null_fields=0, used_fields;
 
105
    Field **f_ptr,*field;
 
106
    for (f_ptr= tables[i].table->field,used_fields= tables[i].used_fields; used_fields; f_ptr++)
 
107
    {
 
108
      field= *f_ptr;
 
109
      if (field->isReadSet())
 
110
      {
 
111
        used_fields--;
 
112
        length+=field->fill_cache_field(copy);
 
113
        if (copy->blob_field)
 
114
          (*blob_ptr++)=copy;
 
115
        if (field->maybe_null())
 
116
          null_fields++;
 
117
        copy->get_rowid= NULL;
 
118
        copy++;
 
119
      }
 
120
    }
 
121
    /* Copy null bits from table */
 
122
    if (null_fields && tables[i].table->getNullFields())
 
123
    {                                           /* must copy null bits */
 
124
      copy->str= tables[i].table->null_flags;
 
125
      copy->length= tables[i].table->s->null_bytes;
 
126
      copy->strip=0;
 
127
      copy->blob_field=0;
 
128
      copy->get_rowid= NULL;
 
129
      length+=copy->length;
 
130
      copy++;
 
131
      cache->fields++;
 
132
    }
 
133
    /* If outer join table, copy null_row flag */
 
134
    if (tables[i].table->maybe_null)
 
135
    {
 
136
      copy->str= (unsigned char*) &tables[i].table->null_row;
 
137
      copy->length=sizeof(tables[i].table->null_row);
 
138
      copy->strip=0;
 
139
      copy->blob_field=0;
 
140
      copy->get_rowid= NULL;
 
141
      length+=copy->length;
 
142
      copy++;
 
143
      cache->fields++;
 
144
    }
 
145
    /* SemiJoinDuplicateElimination: Allocate space for rowid if needed */
 
146
    if (tables[i].rowid_keep_flags & JoinTable::KEEP_ROWID)
 
147
    {
 
148
      copy->str= tables[i].table->cursor->ref;
 
149
      copy->length= tables[i].table->cursor->ref_length;
 
150
      copy->strip=0;
 
151
      copy->blob_field=0;
 
152
      copy->get_rowid= NULL;
 
153
      if (tables[i].rowid_keep_flags & JoinTable::CALL_POSITION)
 
154
      {
 
155
        /* We will need to call h->position(): */
 
156
        copy->get_rowid= tables[i].table;
 
157
        /* And those after us won't have to: */
 
158
        tables[i].rowid_keep_flags&=  ~((int)JoinTable::CALL_POSITION);
 
159
      }
 
160
      copy++;
 
161
    }
 
162
  }
 
163
 
 
164
  cache->length= length+blobs*sizeof(char*);
 
165
  cache->blobs= blobs;
 
166
  *blob_ptr= NULL;                                      /* End sequentel */
 
167
  size= max((size_t) session->variables.join_buff_size, (size_t)cache->length);
 
168
  if (!(cache->buff= (unsigned char*) malloc(size)))
 
169
    return 1;
 
170
  cache->end= cache->buff+size;
 
171
  reset_cache_write(cache);
 
172
  return 0;
 
173
}
 
174
 
 
175
bool store_record_in_cache(JOIN_CACHE *cache)
 
176
{
 
177
  uint32_t length;
 
178
  unsigned char *pos;
 
179
  CACHE_FIELD *copy,*end_field;
 
180
  bool last_record;
 
181
 
 
182
  pos= cache->pos;
 
183
  end_field= cache->field+cache->fields;
 
184
 
 
185
  length= cache->length;
 
186
  if (cache->blobs)
 
187
    length+= used_blob_length(cache->blob_ptr);
 
188
  if ((last_record= (length + cache->length > (size_t) (cache->end - pos))))
 
189
    cache->ptr_record= cache->records;
 
190
  /*
 
191
    There is room in cache. Put record there
 
192
  */
 
193
  cache->records++;
 
194
  for (copy= cache->field; copy < end_field; copy++)
 
195
  {
 
196
    if (copy->blob_field)
 
197
    {
 
198
      if (last_record)
 
199
      {
 
200
        copy->blob_field->get_image(pos, copy->length+sizeof(char*), copy->blob_field->charset());
 
201
        pos+= copy->length+sizeof(char*);
 
202
      }
 
203
      else
 
204
      {
 
205
        copy->blob_field->get_image(pos, copy->length, // blob length
 
206
                                    copy->blob_field->charset());
 
207
        memcpy(pos+copy->length,copy->str,copy->blob_length);  // Blob data
 
208
        pos+= copy->length+copy->blob_length;
 
209
      }
 
210
    }
 
211
    else
 
212
    {
 
213
      // SemiJoinDuplicateElimination: Get the rowid into table->ref:
 
214
      if (copy->get_rowid)
 
215
        copy->get_rowid->cursor->position(copy->get_rowid->record[0]);
 
216
 
 
217
      if (copy->strip)
 
218
      {
 
219
        unsigned char *str,*end;
 
220
        for (str= copy->str,end= str+copy->length; end > str && end[-1] == ' '; end--)
 
221
        {}
 
222
        length= (uint32_t) (end-str);
 
223
        memcpy(pos+2, str, length);
 
224
        int2store(pos, length);
 
225
        pos+= length+2;
 
226
      }
 
227
      else
 
228
      {
 
229
        memcpy(pos,copy->str,copy->length);
 
230
        pos+= copy->length;
 
231
      }
 
232
    }
 
233
  }
 
234
  cache->pos= pos;
 
235
  return last_record || (size_t) (cache->end - pos) < cache->length;
 
236
}
 
237
 
 
238
void reset_cache_read(JOIN_CACHE *cache)
 
239
{
 
240
  cache->record_nr= 0;
 
241
  cache->pos= cache->buff;
 
242
}
 
243
 
 
244
void reset_cache_write(JOIN_CACHE *cache)
 
245
{
 
246
  reset_cache_read(cache);
 
247
  cache->records= 0;
 
248
  cache->ptr_record= UINT32_MAX;
 
249
}
 
250
 
 
251
/**
 
252
  @} (end of group Query_Optimizer)
 
253
*/
 
254
 
 
255
} /* namespace drizzled */