← Back to branch summary

~drizzle-trunk/drizzle/development

« back to all changes in this revision

Viewing changes to storage/myisam/mi_write.c

  • Committer: Brian Aker
  • Date: 2008-07-01 20:14:24 UTC
  • Revision ID: brian@tangent.org-20080701201424-rsof5enxl7gkr50p
More cleanup on pread()

Show diffs side-by-side

added added

removed removed

Lines of Context:
storage/myisam/mi_write.c
15
15
 
16
16
/* Write a row to a MyISAM table */
17
17
 
18
 
#include "myisamdef.h"
19
 
#include <drizzled/util/test.h>
20
 
 
 
18
#include "fulltext.h"
 
19
#include "rt_index.h"
21
20
 
22
21
#define MAX_POINTER_LENGTH 8
23
22
 
24
23
        /* Functions declared in this file */
25
24
 
26
25
static int w_search(MI_INFO *info,MI_KEYDEF *keyinfo,
27
 
                    uint32_t comp_flag, unsigned char *key,
28
 
                    uint32_t key_length, my_off_t pos, unsigned char *father_buff,
29
 
                    unsigned char *father_keypos, my_off_t father_page,
30
 
                    bool insert_last);
31
 
static int _mi_balance_page(MI_INFO *info,MI_KEYDEF *keyinfo,unsigned char *key,
32
 
                            unsigned char *curr_buff,unsigned char *father_buff,
33
 
                            unsigned char *father_keypos,my_off_t father_page);
34
 
static unsigned char *_mi_find_last_pos(MI_KEYDEF *keyinfo, unsigned char *page,
35
 
                                unsigned char *key, uint32_t *return_key_length,
36
 
                                unsigned char **after_key);
37
 
int _mi_ck_write_tree(register MI_INFO *info, uint32_t keynr,unsigned char *key,
38
 
                      uint32_t key_length);
39
 
int _mi_ck_write_btree(register MI_INFO *info, uint32_t keynr,unsigned char *key,
40
 
                       uint32_t key_length);
 
26
                    uint comp_flag, uchar *key,
 
27
                    uint key_length, my_off_t pos, uchar *father_buff,
 
28
                    uchar *father_keypos, my_off_t father_page,
 
29
                    my_bool insert_last);
 
30
static int _mi_balance_page(MI_INFO *info,MI_KEYDEF *keyinfo,uchar *key,
 
31
                            uchar *curr_buff,uchar *father_buff,
 
32
                            uchar *father_keypos,my_off_t father_page);
 
33
static uchar *_mi_find_last_pos(MI_KEYDEF *keyinfo, uchar *page,
 
34
                                uchar *key, uint *return_key_length,
 
35
                                uchar **after_key);
 
36
int _mi_ck_write_tree(register MI_INFO *info, uint keynr,uchar *key,
 
37
                      uint key_length);
 
38
int _mi_ck_write_btree(register MI_INFO *info, uint keynr,uchar *key,
 
39
                       uint key_length);
41
40
 
42
41
        /* Write new record to database */
43
42
 
44
 
int mi_write(MI_INFO *info, unsigned char *record)
 
43
int mi_write(MI_INFO *info, uchar *record)
45
44
{
46
45
  MYISAM_SHARE *share=info->s;
47
 
  uint32_t i;
 
46
  uint i;
48
47
  int save_errno;
49
48
  my_off_t filepos;
50
 
  unsigned char *buff;
51
 
  bool lock_tree= share->concurrent_insert;
 
49
  uchar *buff;
 
50
  my_bool lock_tree= share->concurrent_insert;
 
51
  DBUG_ENTER("mi_write");
 
52
  DBUG_PRINT("enter",("isam: %d  data: %d",info->s->kfile,info->dfile));
52
53
 
 
54
  DBUG_EXECUTE_IF("myisam_pretend_crashed_table_on_usage",
 
55
                  mi_print_error(info->s, HA_ERR_CRASHED);
 
56
                  DBUG_RETURN(my_errno= HA_ERR_CRASHED););
53
57
  if (share->options & HA_OPTION_READ_ONLY_DATA)
54
58
  {
55
 
    return(my_errno=EACCES);
 
59
    DBUG_RETURN(my_errno=EACCES);
56
60
  }
57
61
  if (_mi_readinfo(info,F_WRLCK,1))
58
 
    return(my_errno);
 
62
    DBUG_RETURN(my_errno);
 
63
  dont_break();                         /* Dont allow SIGHUP or SIGINT */
 
64
#if !defined(NO_LOCKING) && defined(USE_RECORD_LOCK)
 
65
  if (!info->locked && my_lock(info->dfile,F_WRLCK,0L,F_TO_EOF,
 
66
                               MYF(MY_SEEK_NOT_DONE) | info->lock_wait))
 
67
    goto err;
 
68
#endif
59
69
  filepos= ((share->state.dellink != HA_OFFSET_ERROR &&
60
70
             !info->append_insert_at_end) ?
61
71
            share->state.dellink :
92
102
  {
93
103
    if (mi_is_key_active(share->state.key_map, i))
94
104
    {
95
 
      bool local_lock_tree= (lock_tree &&
 
105
      my_bool local_lock_tree= (lock_tree &&
96
106
                                !(info->bulk_insert &&
97
107
                                  is_tree_inited(&info->bulk_insert[i])));
98
108
      if (local_lock_tree)
100
110
        rw_wrlock(&share->key_root_lock[i]);
101
111
        share->keyinfo[i].version++;
102
112
      }
 
113
      if (share->keyinfo[i].flag & HA_FULLTEXT )
 
114
      {
 
115
        if (_mi_ft_add(info,i, buff, record, filepos))
 
116
        {
 
117
          if (local_lock_tree)
 
118
            rw_unlock(&share->key_root_lock[i]);
 
119
          DBUG_PRINT("error",("Got error: %d on write",my_errno));
 
120
          goto err;
 
121
        }
 
122
      }
 
123
      else
103
124
      {
104
125
        if (share->keyinfo[i].ck_insert(info,i,buff,
105
126
                        _mi_make_key(info,i,buff,record,filepos)))
106
127
        {
107
128
          if (local_lock_tree)
108
129
            rw_unlock(&share->key_root_lock[i]);
 
130
          DBUG_PRINT("error",("Got error: %d on write",my_errno));
109
131
          goto err;
110
132
        }
111
133
      }
132
154
                 HA_STATE_ROW_CHANGED);
133
155
  info->state->records++;
134
156
  info->lastpos=filepos;
135
 
  _mi_writeinfo(info, WRITEINFO_UPDATE_KEYFILE);
 
157
  myisam_log_record(MI_LOG_WRITE,info,record,filepos,0);
 
158
  VOID(_mi_writeinfo(info, WRITEINFO_UPDATE_KEYFILE));
136
159
  if (info->invalidator != 0)
137
160
  {
 
161
    DBUG_PRINT("info", ("invalidator... '%s' (update)", info->filename));
138
162
    (*info->invalidator)(info->filename);
139
163
    info->invalidator=0;
140
164
  }
150
174
  if (share->is_log_table)
151
175
    mi_update_status((void*) info);
152
176
 
153
 
  return(0);
 
177
  allow_break();                                /* Allow SIGHUP & SIGINT */
 
178
  DBUG_RETURN(0);
154
179
 
155
180
err:
156
181
  save_errno=my_errno;
159
184
  {
160
185
    if (info->bulk_insert)
161
186
    {
162
 
      uint32_t j;
 
187
      uint j;
163
188
      for (j=0 ; j < share->base.keys ; j++)
164
189
        mi_flush_bulk_insert(info, j);
165
190
    }
168
193
    {
169
194
      if (mi_is_key_active(share->state.key_map, i))
170
195
      {
171
 
        bool local_lock_tree= (lock_tree &&
 
196
        my_bool local_lock_tree= (lock_tree &&
172
197
                                  !(info->bulk_insert &&
173
198
                                    is_tree_inited(&info->bulk_insert[i])));
174
199
        if (local_lock_tree)
175
200
          rw_wrlock(&share->key_root_lock[i]);
 
201
        if (share->keyinfo[i].flag & HA_FULLTEXT)
 
202
        {
 
203
          if (_mi_ft_del(info,i, buff,record,filepos))
 
204
          {
 
205
            if (local_lock_tree)
 
206
              rw_unlock(&share->key_root_lock[i]);
 
207
            break;
 
208
          }
 
209
        }
 
210
        else
176
211
        {
177
 
          uint32_t key_length=_mi_make_key(info,i,buff,record,filepos);
 
212
          uint key_length=_mi_make_key(info,i,buff,record,filepos);
178
213
          if (_mi_ck_delete(info,i,buff,key_length))
179
214
          {
180
215
            if (local_lock_tree)
196
231
  my_errno=save_errno;
197
232
err2:
198
233
  save_errno=my_errno;
199
 
  _mi_writeinfo(info,WRITEINFO_UPDATE_KEYFILE);
200
 
  return(my_errno=save_errno);
 
234
  myisam_log_record(MI_LOG_WRITE,info,record,filepos,my_errno);
 
235
  VOID(_mi_writeinfo(info,WRITEINFO_UPDATE_KEYFILE));
 
236
  allow_break();                        /* Allow SIGHUP & SIGINT */
 
237
  DBUG_RETURN(my_errno=save_errno);
201
238
} /* mi_write */
202
239
 
203
240
 
204
241
        /* Write one key to btree */
205
242
 
206
 
int _mi_ck_write(MI_INFO *info, uint32_t keynr, unsigned char *key, uint32_t key_length)
 
243
int _mi_ck_write(MI_INFO *info, uint keynr, uchar *key, uint key_length)
207
244
{
 
245
  DBUG_ENTER("_mi_ck_write");
 
246
 
208
247
  if (info->bulk_insert && is_tree_inited(&info->bulk_insert[keynr]))
209
248
  {
210
 
    return(_mi_ck_write_tree(info, keynr, key, key_length));
 
249
    DBUG_RETURN(_mi_ck_write_tree(info, keynr, key, key_length));
211
250
  }
212
251
  else
213
252
  {
214
 
    return(_mi_ck_write_btree(info, keynr, key, key_length));
 
253
    DBUG_RETURN(_mi_ck_write_btree(info, keynr, key, key_length));
215
254
  }
216
255
} /* _mi_ck_write */
217
256
 
220
259
 *                Normal insert code                                  *
221
260
 **********************************************************************/
222
261
 
223
 
int _mi_ck_write_btree(register MI_INFO *info, uint32_t keynr, unsigned char *key,
224
 
                       uint32_t key_length)
 
262
int _mi_ck_write_btree(register MI_INFO *info, uint keynr, uchar *key,
 
263
                       uint key_length)
225
264
{
226
 
  uint32_t error;
227
 
  uint32_t comp_flag;
 
265
  int error;
 
266
  uint comp_flag;
228
267
  MI_KEYDEF *keyinfo=info->s->keyinfo+keynr;
229
268
  my_off_t  *root=&info->s->state.key_root[keynr];
 
269
  DBUG_ENTER("_mi_ck_write_btree");
230
270
 
231
271
  if (keyinfo->flag & HA_SORT_ALLOWS_SAME)
232
272
    comp_flag=SEARCH_BIGGER;                    /* Put after same key */
233
 
  else if (keyinfo->flag & (HA_NOSAME))
 
273
  else if (keyinfo->flag & (HA_NOSAME|HA_FULLTEXT))
234
274
  {
235
275
    comp_flag=SEARCH_FIND | SEARCH_UPDATE;      /* No duplicates */
236
276
    if (keyinfo->flag & HA_NULL_ARE_EQUAL)
241
281
 
242
282
  error=_mi_ck_real_write_btree(info, keyinfo, key, key_length,
243
283
                                root, comp_flag);
244
 
  return(error);
 
284
  if (info->ft1_to_ft2)
 
285
  {
 
286
    if (!error)
 
287
      error= _mi_ft_convert_to_ft2(info, keynr, key);
 
288
    delete_dynamic(info->ft1_to_ft2);
 
289
    my_free((uchar*)info->ft1_to_ft2, MYF(0));
 
290
    info->ft1_to_ft2=0;
 
291
  }
 
292
  DBUG_RETURN(error);
245
293
} /* _mi_ck_write_btree */
246
294
 
247
295
int _mi_ck_real_write_btree(MI_INFO *info, MI_KEYDEF *keyinfo,
248
 
    unsigned char *key, uint32_t key_length, my_off_t *root, uint32_t comp_flag)
 
296
    uchar *key, uint key_length, my_off_t *root, uint comp_flag)
249
297
{
250
298
  int error;
 
299
  DBUG_ENTER("_mi_ck_real_write_btree");
251
300
  /* key_length parameter is used only if comp_flag is SEARCH_FIND */
252
301
  if (*root == HA_OFFSET_ERROR ||
253
302
      (error=w_search(info, keyinfo, comp_flag, key, key_length,
254
 
                      *root, (unsigned char *) 0, (unsigned char*) 0,
 
303
                      *root, (uchar *) 0, (uchar*) 0,
255
304
                      (my_off_t) 0, 1)) > 0)
256
305
    error=_mi_enlarge_root(info,keyinfo,key,root);
257
 
  return(error);
 
306
  DBUG_RETURN(error);
258
307
} /* _mi_ck_real_write_btree */
259
308
 
260
309
 
261
310
        /* Make a new root with key as only pointer */
262
311
 
263
 
int _mi_enlarge_root(MI_INFO *info, MI_KEYDEF *keyinfo, unsigned char *key,
 
312
int _mi_enlarge_root(MI_INFO *info, MI_KEYDEF *keyinfo, uchar *key,
264
313
                     my_off_t *root)
265
314
{
266
 
  uint32_t t_length,nod_flag;
 
315
  uint t_length,nod_flag;
267
316
  MI_KEY_PARAM s_temp;
268
317
  MYISAM_SHARE *share=info->s;
 
318
  DBUG_ENTER("_mi_enlarge_root");
269
319
 
270
320
  nod_flag= (*root != HA_OFFSET_ERROR) ?  share->base.key_reflength : 0;
271
321
  _mi_kpointer(info,info->buff+2,*root); /* if nod */
272
 
  t_length=(*keyinfo->pack_key)(keyinfo,nod_flag,(unsigned char*) 0,
273
 
                                (unsigned char*) 0, (unsigned char*) 0, key,&s_temp);
 
322
  t_length=(*keyinfo->pack_key)(keyinfo,nod_flag,(uchar*) 0,
 
323
                                (uchar*) 0, (uchar*) 0, key,&s_temp);
274
324
  mi_putint(info->buff,t_length+2+nod_flag,nod_flag);
275
325
  (*keyinfo->store_key)(keyinfo,info->buff+2+nod_flag,&s_temp);
276
326
  info->buff_used=info->page_changed=1;         /* info->buff is used */
277
327
  if ((*root= _mi_new(info,keyinfo,DFLT_INIT_HITS)) == HA_OFFSET_ERROR ||
278
328
      _mi_write_keypage(info,keyinfo,*root,DFLT_INIT_HITS,info->buff))
279
 
    return(-1);
280
 
  return(0);
 
329
    DBUG_RETURN(-1);
 
330
  DBUG_RETURN(0);
281
331
} /* _mi_enlarge_root */
282
332
 
283
333
 
289
339
        */
290
340
 
291
341
static int w_search(register MI_INFO *info, register MI_KEYDEF *keyinfo,
292
 
                    uint32_t comp_flag, unsigned char *key, uint32_t key_length, my_off_t page,
293
 
                    unsigned char *father_buff, unsigned char *father_keypos,
294
 
                    my_off_t father_page, bool insert_last)
 
342
                    uint comp_flag, uchar *key, uint key_length, my_off_t page,
 
343
                    uchar *father_buff, uchar *father_keypos,
 
344
                    my_off_t father_page, my_bool insert_last)
295
345
{
296
346
  int error,flag;
297
 
  uint32_t nod_flag, search_key_length;
298
 
  unsigned char *temp_buff,*keypos;
299
 
  unsigned char keybuff[MI_MAX_KEY_BUFF];
300
 
  bool was_last_key;
 
347
  uint nod_flag, search_key_length;
 
348
  uchar *temp_buff,*keypos;
 
349
  uchar keybuff[MI_MAX_KEY_BUFF];
 
350
  my_bool was_last_key;
301
351
  my_off_t next_page, dupp_key_pos;
 
352
  DBUG_ENTER("w_search");
 
353
  DBUG_PRINT("enter",("page: %ld", (long) page));
302
354
 
303
355
  search_key_length= (comp_flag & SEARCH_FIND) ? key_length : USE_WHOLE_KEY;
304
 
  if (!(temp_buff= (unsigned char*) my_alloca((uint) keyinfo->block_length+
 
356
  if (!(temp_buff= (uchar*) my_alloca((uint) keyinfo->block_length+
305
357
                                      MI_MAX_KEY_BUFF*2)))
306
 
    return(-1);
 
358
    DBUG_RETURN(-1);
307
359
  if (!_mi_fetch_keypage(info,keyinfo,page,DFLT_INIT_HITS,temp_buff,0))
308
360
    goto err;
309
361
 
312
364
  nod_flag=mi_test_if_nod(temp_buff);
313
365
  if (flag == 0)
314
366
  {
315
 
    uint32_t tmp_key_length;
 
367
    uint tmp_key_length;
316
368
        /* get position to record with duplicated key */
317
369
    tmp_key_length=(*keyinfo->get_key)(keyinfo,nod_flag,&keypos,keybuff);
318
370
    if (tmp_key_length)
320
372
    else
321
373
      dupp_key_pos= HA_OFFSET_ERROR;
322
374
 
 
375
    if (keyinfo->flag & HA_FULLTEXT)
 
376
    {
 
377
      uint off;
 
378
      int  subkeys;
 
379
 
 
380
      get_key_full_length_rdonly(off, keybuff);
 
381
      subkeys=ft_sintXkorr(keybuff+off);
 
382
      comp_flag=SEARCH_SAME;
 
383
      if (subkeys >= 0)
 
384
      {
 
385
        /* normal word, one-level tree structure */
 
386
        flag=(*keyinfo->bin_search)(info, keyinfo, temp_buff, key,
 
387
                                    USE_WHOLE_KEY, comp_flag,
 
388
                                    &keypos, keybuff, &was_last_key);
 
389
      }
 
390
      else
 
391
      {
 
392
        /* popular word. two-level tree. going down */
 
393
        my_off_t root=dupp_key_pos;
 
394
        keyinfo=&info->s->ft2_keyinfo;
 
395
        get_key_full_length_rdonly(off, key);
 
396
        key+=off;
 
397
        keypos-=keyinfo->keylength+nod_flag; /* we'll modify key entry 'in vivo' */
 
398
        error=_mi_ck_real_write_btree(info, keyinfo, key, 0,
 
399
                                      &root, comp_flag);
 
400
        _mi_dpointer(info, keypos+HA_FT_WLEN, root);
 
401
        subkeys--; /* should there be underflow protection ? */
 
402
        DBUG_ASSERT(subkeys < 0);
 
403
        ft_intXstore(keypos, subkeys);
 
404
        if (!error)
 
405
          error=_mi_write_keypage(info,keyinfo,page,DFLT_INIT_HITS,temp_buff);
 
406
        my_afree((uchar*) temp_buff);
 
407
        DBUG_RETURN(error);
 
408
      }
 
409
    }
 
410
    else /* not HA_FULLTEXT, normal HA_NOSAME key */
323
411
    {
324
412
      info->dupp_key_pos= dupp_key_pos;
325
 
      my_afree((unsigned char*) temp_buff);
 
413
      my_afree((uchar*) temp_buff);
326
414
      my_errno=HA_ERR_FOUND_DUPP_KEY;
327
 
      return(-1);
 
415
      DBUG_RETURN(-1);
328
416
    }
329
417
  }
330
418
  if (flag == MI_FOUND_WRONG_KEY)
331
 
    return(-1);
 
419
    DBUG_RETURN(-1);
332
420
  if (!was_last_key)
333
421
    insert_last=0;
334
422
  next_page=_mi_kpos(nod_flag,keypos);
341
429
    if (_mi_write_keypage(info,keyinfo,page,DFLT_INIT_HITS,temp_buff))
342
430
      goto err;
343
431
  }
344
 
  my_afree((unsigned char*) temp_buff);
345
 
  return(error);
 
432
  my_afree((uchar*) temp_buff);
 
433
  DBUG_RETURN(error);
346
434
err:
347
 
  my_afree((unsigned char*) temp_buff);
348
 
  return (-1);
 
435
  my_afree((uchar*) temp_buff);
 
436
  DBUG_PRINT("exit",("Error: %d",my_errno));
 
437
  DBUG_RETURN (-1);
349
438
} /* w_search */
350
439
 
351
440
 
375
464
*/
376
465
 
377
466
int _mi_insert(register MI_INFO *info, register MI_KEYDEF *keyinfo,
378
 
               unsigned char *key, unsigned char *anc_buff, unsigned char *key_pos, unsigned char *key_buff,
379
 
               unsigned char *father_buff, unsigned char *father_key_pos, my_off_t father_page,
380
 
               bool insert_last)
 
467
               uchar *key, uchar *anc_buff, uchar *key_pos, uchar *key_buff,
 
468
               uchar *father_buff, uchar *father_key_pos, my_off_t father_page,
 
469
               my_bool insert_last)
381
470
{
382
 
  uint32_t a_length,nod_flag;
 
471
  uint a_length,nod_flag;
383
472
  int t_length;
384
 
  unsigned char *endpos, *prev_key;
 
473
  uchar *endpos, *prev_key;
385
474
  MI_KEY_PARAM s_temp;
 
475
  DBUG_ENTER("_mi_insert");
 
476
  DBUG_PRINT("enter",("key_pos: 0x%lx", (long) key_pos));
 
477
  DBUG_EXECUTE("key",_mi_print_key(DBUG_FILE,keyinfo->seg,key,USE_WHOLE_KEY););
386
478
 
387
479
  nod_flag=mi_test_if_nod(anc_buff);
388
480
  a_length=mi_getint(anc_buff);
389
481
  endpos= anc_buff+ a_length;
390
 
  prev_key=(key_pos == anc_buff+2+nod_flag ? (unsigned char*) 0 : key_buff);
 
482
  prev_key=(key_pos == anc_buff+2+nod_flag ? (uchar*) 0 : key_buff);
391
483
  t_length=(*keyinfo->pack_key)(keyinfo,nod_flag,
392
 
                                (key_pos == endpos ? (unsigned char*) 0 : key_pos),
 
484
                                (key_pos == endpos ? (uchar*) 0 : key_pos),
393
485
                                prev_key, prev_key,
394
486
                                key,&s_temp);
395
 
 
 
487
#ifndef DBUG_OFF
 
488
  if (key_pos != anc_buff+2+nod_flag && (keyinfo->flag &
 
489
                                         (HA_BINARY_PACK_KEY | HA_PACK_KEY)))
 
490
  {
 
491
    DBUG_DUMP("prev_key",(uchar*) key_buff,_mi_keylength(keyinfo,key_buff));
 
492
  }
 
493
  if (keyinfo->flag & HA_PACK_KEY)
 
494
  {
 
495
    DBUG_PRINT("test",("t_length: %d  ref_len: %d",
 
496
                       t_length,s_temp.ref_length));
 
497
    DBUG_PRINT("test",("n_ref_len: %d  n_length: %d  key_pos: 0x%lx",
 
498
                       s_temp.n_ref_length,s_temp.n_length, (long) s_temp.key));
 
499
  }
 
500
#endif
396
501
  if (t_length > 0)
397
502
  {
398
503
    if (t_length >= keyinfo->maxlength*2+MAX_POINTER_LENGTH)
399
504
    {
400
505
      mi_print_error(info->s, HA_ERR_CRASHED);
401
506
      my_errno=HA_ERR_CRASHED;
402
 
      return(-1);
 
507
      DBUG_RETURN(-1);
403
508
    }
404
 
    bmove_upp((unsigned char*) endpos+t_length,(unsigned char*) endpos,(uint) (endpos-key_pos));
 
509
    bmove_upp((uchar*) endpos+t_length,(uchar*) endpos,(uint) (endpos-key_pos));
405
510
  }
406
511
  else
407
512
  {
409
514
    {
410
515
      mi_print_error(info->s, HA_ERR_CRASHED);
411
516
      my_errno=HA_ERR_CRASHED;
412
 
      return(-1);
 
517
      DBUG_RETURN(-1);
413
518
    }
414
 
    memcpy(key_pos, key_pos - t_length, endpos - key_pos + t_length);
 
519
    bmove(key_pos,key_pos-t_length,(uint) (endpos-key_pos)+t_length);
415
520
  }
416
521
  (*keyinfo->store_key)(keyinfo,key_pos,&s_temp);
417
522
  a_length+=t_length;
418
523
  mi_putint(anc_buff,a_length,nod_flag);
419
524
  if (a_length <= keyinfo->block_length)
420
525
  {
421
 
    return(0);                          /* There is room on page */
 
526
    if (keyinfo->block_length - a_length < 32 &&
 
527
        keyinfo->flag & HA_FULLTEXT && key_pos == endpos &&
 
528
        info->s->base.key_reflength <= info->s->base.rec_reflength &&
 
529
        info->s->options & (HA_OPTION_PACK_RECORD | HA_OPTION_COMPRESS_RECORD))
 
530
    {
 
531
      /*
 
532
        Normal word. One-level tree. Page is almost full.
 
533
        Let's consider converting.
 
534
        We'll compare 'key' and the first key at anc_buff
 
535
       */
 
536
      uchar *a=key, *b=anc_buff+2+nod_flag;
 
537
      uint alen, blen, ft2len=info->s->ft2_keyinfo.keylength;
 
538
      /* the very first key on the page is always unpacked */
 
539
      DBUG_ASSERT((*b & 128) == 0);
 
540
#if HA_FT_MAXLEN >= 127
 
541
      blen= mi_uint2korr(b); b+=2;
 
542
#else
 
543
      blen= *b++;
 
544
#endif
 
545
      get_key_length(alen,a);
 
546
      DBUG_ASSERT(info->ft1_to_ft2==0);
 
547
      if (alen == blen &&
 
548
          ha_compare_text(keyinfo->seg->charset, a, alen, b, blen, 0, 0)==0)
 
549
      {
 
550
        /* yup. converting */
 
551
        info->ft1_to_ft2=(DYNAMIC_ARRAY *)
 
552
          my_malloc(sizeof(DYNAMIC_ARRAY), MYF(MY_WME));
 
553
        my_init_dynamic_array(info->ft1_to_ft2, ft2len, 300, 50);
 
554
 
 
555
        /*
 
556
          now, adding all keys from the page to dynarray
 
557
          if the page is a leaf (if not keys will be deleted later)
 
558
        */
 
559
        if (!nod_flag)
 
560
        {
 
561
          /* let's leave the first key on the page, though, because
 
562
             we cannot easily dispatch an empty page here */
 
563
          b+=blen+ft2len+2;
 
564
          for (a=anc_buff+a_length ; b < a ; b+=ft2len+2)
 
565
            insert_dynamic(info->ft1_to_ft2, b);
 
566
 
 
567
          /* fixing the page's length - it contains only one key now */
 
568
          mi_putint(anc_buff,2+blen+ft2len+2,0);
 
569
        }
 
570
        /* the rest will be done when we're back from recursion */
 
571
      }
 
572
    }
 
573
    DBUG_RETURN(0);                             /* There is room on page */
422
574
  }
423
575
  /* Page is full */
424
576
  if (nod_flag)
425
577
    insert_last=0;
426
578
  if (!(keyinfo->flag & (HA_VAR_LENGTH_KEY | HA_BINARY_PACK_KEY)) &&
427
579
      father_buff && !insert_last)
428
 
    return(_mi_balance_page(info,keyinfo,key,anc_buff,father_buff,
 
580
    DBUG_RETURN(_mi_balance_page(info,keyinfo,key,anc_buff,father_buff,
429
581
                                 father_key_pos,father_page));
430
 
  return(_mi_split_page(info,keyinfo,key,anc_buff,key_buff, insert_last));
 
582
  DBUG_RETURN(_mi_split_page(info,keyinfo,key,anc_buff,key_buff, insert_last));
431
583
} /* _mi_insert */
432
584
 
433
585
 
434
586
        /* split a full page in two and assign emerging item to key */
435
587
 
436
588
int _mi_split_page(register MI_INFO *info, register MI_KEYDEF *keyinfo,
437
 
                   unsigned char *key, unsigned char *buff, unsigned char *key_buff,
438
 
                   bool insert_last_key)
 
589
                   uchar *key, uchar *buff, uchar *key_buff,
 
590
                   my_bool insert_last_key)
439
591
{
440
 
  uint32_t length,a_length,key_ref_length,t_length,nod_flag,key_length;
441
 
  unsigned char *key_pos,*pos, *after_key= NULL;
 
592
  uint length,a_length,key_ref_length,t_length,nod_flag,key_length;
 
593
  uchar *key_pos,*pos, *after_key= NULL;
442
594
  my_off_t new_pos;
443
595
  MI_KEY_PARAM s_temp;
 
596
  DBUG_ENTER("mi_split_page");
 
597
  DBUG_DUMP("buff",(uchar*) buff,mi_getint(buff));
444
598
 
445
599
  if (info->s->keyinfo+info->lastinx == keyinfo)
446
600
    info->page_changed=1;                       /* Info->buff is used */
453
607
    key_pos=_mi_find_half_pos(nod_flag,keyinfo,buff,key_buff, &key_length,
454
608
                              &after_key);
455
609
  if (!key_pos)
456
 
    return(-1);
 
610
    DBUG_RETURN(-1);
457
611
 
458
612
  length=(uint) (key_pos-buff);
459
613
  a_length=mi_getint(buff);
462
616
  key_pos=after_key;
463
617
  if (nod_flag)
464
618
  {
 
619
    DBUG_PRINT("test",("Splitting nod"));
465
620
    pos=key_pos-nod_flag;
466
 
    memcpy(info->buff + 2, pos, nod_flag);
 
621
    memcpy((uchar*) info->buff+2,(uchar*) pos,(size_t) nod_flag);
467
622
  }
468
623
 
469
624
        /* Move middle item to key and pointer to new page */
470
625
  if ((new_pos=_mi_new(info,keyinfo,DFLT_INIT_HITS)) == HA_OFFSET_ERROR)
471
 
    return(-1);
 
626
    DBUG_RETURN(-1);
472
627
  _mi_kpointer(info,_mi_move_key(keyinfo,key,key_buff),new_pos);
473
628
 
474
629
        /* Store new page */
475
630
  if (!(*keyinfo->get_key)(keyinfo,nod_flag,&key_pos,key_buff))
476
 
    return(-1);
 
631
    DBUG_RETURN(-1);
477
632
 
478
 
  t_length=(*keyinfo->pack_key)(keyinfo,nod_flag,(unsigned char *) 0,
479
 
                                (unsigned char*) 0, (unsigned char*) 0,
 
633
  t_length=(*keyinfo->pack_key)(keyinfo,nod_flag,(uchar *) 0,
 
634
                                (uchar*) 0, (uchar*) 0,
480
635
                                key_buff, &s_temp);
481
636
  length=(uint) ((buff+a_length)-key_pos);
482
 
  memcpy(info->buff+key_ref_length+t_length, key_pos, length);
 
637
  memcpy((uchar*) info->buff+key_ref_length+t_length,(uchar*) key_pos,
 
638
         (size_t) length);
483
639
  (*keyinfo->store_key)(keyinfo,info->buff+key_ref_length,&s_temp);
484
640
  mi_putint(info->buff,length+t_length+key_ref_length,nod_flag);
485
641
 
486
642
  if (_mi_write_keypage(info,keyinfo,new_pos,DFLT_INIT_HITS,info->buff))
487
 
    return(-1);
488
 
  return(2);                            /* Middle key up */
 
643
    DBUG_RETURN(-1);
 
644
  DBUG_DUMP("key",(uchar*) key,_mi_keylength(keyinfo,key));
 
645
  DBUG_RETURN(2);                               /* Middle key up */
489
646
} /* _mi_split_page */
490
647
 
491
648
 
497
654
          after_key will contain the position to where the next key starts
498
655
        */
499
656
 
500
 
unsigned char *_mi_find_half_pos(uint32_t nod_flag, MI_KEYDEF *keyinfo, unsigned char *page,
501
 
                         unsigned char *key, uint32_t *return_key_length,
502
 
                         unsigned char **after_key)
 
657
uchar *_mi_find_half_pos(uint nod_flag, MI_KEYDEF *keyinfo, uchar *page,
 
658
                         uchar *key, uint *return_key_length,
 
659
                         uchar **after_key)
503
660
{
504
 
  uint32_t keys,length,key_ref_length;
505
 
  unsigned char *end,*lastpos;
 
661
  uint keys,length,key_ref_length;
 
662
  uchar *end,*lastpos;
 
663
  DBUG_ENTER("_mi_find_half_pos");
506
664
 
507
665
  key_ref_length=2+nod_flag;
508
666
  length=mi_getint(page)-key_ref_length;
517
675
    end=page+keys*key_ref_length;
518
676
    *after_key=end+key_ref_length;
519
677
    memcpy(key,end,key_ref_length);
520
 
    return(end);
 
678
    DBUG_RETURN(end);
521
679
  }
522
680
 
523
681
  end=page+length/2-key_ref_length;             /* This is aprox. half */
526
684
  {
527
685
    lastpos=page;
528
686
    if (!(length=(*keyinfo->get_key)(keyinfo,nod_flag,&page,key)))
529
 
      return(0);
 
687
      DBUG_RETURN(0);
530
688
  } while (page < end);
531
689
  *return_key_length=length;
532
690
  *after_key=page;
533
 
  return(lastpos);
 
691
  DBUG_PRINT("exit",("returns: 0x%lx  page: 0x%lx  half: 0x%lx",
 
692
                     (long) lastpos, (long) page, (long) end));
 
693
  DBUG_RETURN(lastpos);
534
694
} /* _mi_find_half_pos */
535
695
 
536
696
 
540
700
          key will contain the last key
541
701
        */
542
702
 
543
 
static unsigned char *_mi_find_last_pos(MI_KEYDEF *keyinfo, unsigned char *page,
544
 
                                unsigned char *key, uint32_t *return_key_length,
545
 
                                unsigned char **after_key)
 
703
static uchar *_mi_find_last_pos(MI_KEYDEF *keyinfo, uchar *page,
 
704
                                uchar *key, uint *return_key_length,
 
705
                                uchar **after_key)
546
706
{
547
 
  uint32_t keys;
548
 
  uint32_t length;
549
 
  uint32_t last_length= 0;
550
 
  uint32_t key_ref_length;
551
 
  unsigned char *end, *lastpos, *prevpos= NULL;
552
 
  unsigned char key_buff[MI_MAX_KEY_BUFF];
 
707
  uint keys, length, last_length, key_ref_length;
 
708
  uchar *end, *lastpos, *prevpos= NULL;
 
709
  uchar key_buff[MI_MAX_KEY_BUFF];
 
710
  DBUG_ENTER("_mi_find_last_pos");
553
711
 
554
712
  key_ref_length=2;
555
713
  length=mi_getint(page)-key_ref_length;
563
721
    end=page+keys*length;
564
722
    *after_key=end+length;
565
723
    memcpy(key,end,length);
566
 
    return(end);
 
724
    DBUG_RETURN(end);
567
725
  }
568
726
 
569
727
  end= page + length - key_ref_length;
579
737
    {
580
738
      mi_print_error(keyinfo->share, HA_ERR_CRASHED);
581
739
      my_errno=HA_ERR_CRASHED;
582
 
      return(0);
 
740
      DBUG_RETURN(0);
583
741
    }
584
742
  }
585
743
  *return_key_length=last_length;
586
744
  *after_key=lastpos;
587
 
  return(prevpos);
 
745
  DBUG_PRINT("exit",("returns: 0x%lx  page: 0x%lx  end: 0x%lx",
 
746
                     (long) prevpos,(long) page,(long) end));
 
747
  DBUG_RETURN(prevpos);
588
748
} /* _mi_find_last_pos */
589
749
 
590
750
 
592
752
        /* returns 0 if balance was done */
593
753
 
594
754
static int _mi_balance_page(register MI_INFO *info, MI_KEYDEF *keyinfo,
595
 
                            unsigned char *key, unsigned char *curr_buff, unsigned char *father_buff,
596
 
                            unsigned char *father_key_pos, my_off_t father_page)
 
755
                            uchar *key, uchar *curr_buff, uchar *father_buff,
 
756
                            uchar *father_key_pos, my_off_t father_page)
597
757
{
598
 
  bool right;
599
 
  uint32_t k_length,father_length,father_keylength,nod_flag,curr_keylength,
 
758
  my_bool right;
 
759
  uint k_length,father_length,father_keylength,nod_flag,curr_keylength,
600
760
       right_length,left_length,new_right_length,new_left_length,extra_length,
601
761
       length,keys;
602
 
  unsigned char *pos,*buff,*extra_buff;
 
762
  uchar *pos,*buff,*extra_buff;
603
763
  my_off_t next_page,new_pos;
604
 
  unsigned char tmp_part_key[MI_MAX_KEY_BUFF];
 
764
  uchar tmp_part_key[MI_MAX_KEY_BUFF];
 
765
  DBUG_ENTER("_mi_balance_page");
605
766
 
606
767
  k_length=keyinfo->keylength;
607
768
  father_length=mi_getint(father_buff);
618
779
    next_page= _mi_kpos(info->s->base.key_reflength,
619
780
                        father_key_pos+father_keylength);
620
781
    buff=info->buff;
 
782
    DBUG_PRINT("test",("use right page: %lu", (ulong) next_page));
621
783
  }
622
784
  else
623
785
  {
626
788
    next_page= _mi_kpos(info->s->base.key_reflength,father_key_pos);
627
789
                                        /* Fix that curr_buff is to left */
628
790
    buff=curr_buff; curr_buff=info->buff;
 
791
    DBUG_PRINT("test",("use left page: %lu", (ulong) next_page));
629
792
  }                                     /* father_key_pos ptr to parting key */
630
793
 
631
794
  if (!_mi_fetch_keypage(info,keyinfo,next_page,DFLT_INIT_HITS,info->buff,0))
632
795
    goto err;
 
796
  DBUG_DUMP("next",(uchar*) info->buff,mi_getint(info->buff));
633
797
 
634
798
        /* Test if there is room to share keys */
635
799
 
648
812
    if (left_length < new_left_length)
649
813
    {                                           /* Move keys buff -> leaf */
650
814
      pos=curr_buff+left_length;
651
 
      memcpy(pos, father_key_pos, k_length);
652
 
      length= new_left_length - left_length - k_length;
653
 
      memcpy(pos+k_length, buff+2, length);
 
815
      memcpy((uchar*) pos,(uchar*) father_key_pos, (size_t) k_length);
 
816
      memcpy((uchar*) pos+k_length, (uchar*) buff+2,
 
817
             (size_t) (length=new_left_length - left_length - k_length));
654
818
      pos=buff+2+length;
655
 
      memcpy(father_key_pos, pos, k_length);
656
 
      memcpy(buff+2, pos+k_length, new_right_length);
 
819
      memcpy((uchar*) father_key_pos,(uchar*) pos,(size_t) k_length);
 
820
      bmove((uchar*) buff+2,(uchar*) pos+k_length,new_right_length);
657
821
    }
658
822
    else
659
823
    {                                           /* Move keys -> buff */
660
824
 
661
 
      bmove_upp((unsigned char*) buff+new_right_length,(unsigned char*) buff+right_length,
 
825
      bmove_upp((uchar*) buff+new_right_length,(uchar*) buff+right_length,
662
826
                right_length-2);
663
827
      length=new_right_length-right_length-k_length;
664
 
      memcpy(buff+2+length,father_key_pos, k_length);
 
828
      memcpy((uchar*) buff+2+length,father_key_pos,(size_t) k_length);
665
829
      pos=curr_buff+new_left_length;
666
 
      memcpy(father_key_pos, pos, k_length);
667
 
      memcpy(buff+2, pos+k_length, length);
 
830
      memcpy((uchar*) father_key_pos,(uchar*) pos,(size_t) k_length);
 
831
      memcpy((uchar*) buff+2,(uchar*) pos+k_length,(size_t) length);
668
832
    }
669
833
 
670
834
    if (_mi_write_keypage(info,keyinfo,next_page,DFLT_INIT_HITS,info->buff) ||
671
835
        _mi_write_keypage(info,keyinfo,father_page,DFLT_INIT_HITS,father_buff))
672
836
      goto err;
673
 
    return(0);
 
837
    DBUG_RETURN(0);
674
838
  }
675
839
 
676
840
        /* curr_buff[] and buff[] are full, lets split and make new nod */
681
845
    new_left_length-=curr_keylength;
682
846
  extra_length=nod_flag+left_length+right_length-
683
847
    new_left_length-new_right_length-curr_keylength;
 
848
  DBUG_PRINT("info",("left_length: %d  right_length: %d  new_left_length: %d  new_right_length: %d  extra_length: %d",
 
849
                     left_length, right_length,
 
850
                     new_left_length, new_right_length,
 
851
                     extra_length));
684
852
  mi_putint(curr_buff,new_left_length,nod_flag);
685
853
  mi_putint(buff,new_right_length,nod_flag);
686
854
  mi_putint(extra_buff,extra_length+2,nod_flag);
687
855
 
688
856
  /* move first largest keys to new page  */
689
857
  pos=buff+right_length-extra_length;
690
 
  memcpy(extra_buff+2, pos, extra_length);
 
858
  memcpy((uchar*) extra_buff+2,pos,(size_t) extra_length);
691
859
  /* Save new parting key */
692
860
  memcpy(tmp_part_key, pos-k_length,k_length);
693
861
  /* Make place for new keys */
694
 
  bmove_upp((unsigned char*) buff+new_right_length,(unsigned char*) pos-k_length,
 
862
  bmove_upp((uchar*) buff+new_right_length,(uchar*) pos-k_length,
695
863
            right_length-extra_length-k_length-2);
696
864
  /* Copy keys from left page */
697
865
  pos= curr_buff+new_left_length;
698
 
  length= left_length - new_left_length - k_length;
699
 
  memcpy(buff+2, pos+k_length, length);
 
866
  memcpy((uchar*) buff+2,(uchar*) pos+k_length,
 
867
         (size_t) (length=left_length-new_left_length-k_length));
700
868
  /* Copy old parting key */
701
 
  memcpy(buff+2+length, father_key_pos, k_length);
 
869
  memcpy((uchar*) buff+2+length,father_key_pos,(size_t) k_length);
702
870
 
703
871
  /* Move new parting keys up to caller */
704
 
  memcpy((right ? key : father_key_pos), pos, k_length);
705
 
  memcpy((right ? father_key_pos : key), tmp_part_key, k_length);
 
872
  memcpy((uchar*) (right ? key : father_key_pos),pos,(size_t) k_length);
 
873
  memcpy((uchar*) (right ? father_key_pos : key),tmp_part_key, k_length);
706
874
 
707
875
  if ((new_pos=_mi_new(info,keyinfo,DFLT_INIT_HITS)) == HA_OFFSET_ERROR)
708
876
    goto err;
713
881
                        DFLT_INIT_HITS,extra_buff))
714
882
    goto err;
715
883
 
716
 
  return(1);                            /* Middle key up */
 
884
  DBUG_RETURN(1);                               /* Middle key up */
717
885
 
718
886
err:
719
 
  return(-1);
 
887
  DBUG_RETURN(-1);
720
888
} /* _mi_balance_page */
721
889
 
722
890
/**********************************************************************
725
893
 
726
894
typedef struct {
727
895
  MI_INFO *info;
728
 
  uint32_t keynr;
 
896
  uint keynr;
729
897
} bulk_insert_param;
730
898
 
731
 
int _mi_ck_write_tree(register MI_INFO *info, uint32_t keynr, unsigned char *key,
732
 
                      uint32_t key_length)
 
899
int _mi_ck_write_tree(register MI_INFO *info, uint keynr, uchar *key,
 
900
                      uint key_length)
733
901
{
734
902
  int error;
 
903
  DBUG_ENTER("_mi_ck_write_tree");
735
904
 
736
905
  error= tree_insert(&info->bulk_insert[keynr], key,
737
906
         key_length + info->s->rec_reflength,
738
907
         info->bulk_insert[keynr].custom_arg) ? 0 : HA_ERR_OUT_OF_MEM ;
739
908
 
740
 
  return(error);
 
909
  DBUG_RETURN(error);
741
910
} /* _mi_ck_write_tree */
742
911
 
743
912
 
744
913
/* typeof(_mi_keys_compare)=qsort_cmp2 */
745
914
 
746
 
static int keys_compare(bulk_insert_param *param, unsigned char *key1, unsigned char *key2)
 
915
static int keys_compare(bulk_insert_param *param, uchar *key1, uchar *key2)
747
916
{
748
 
  uint32_t not_used[2];
 
917
  uint not_used[2];
749
918
  return ha_key_cmp(param->info->s->keyinfo[param->keynr].seg,
750
919
                    key1, key2, USE_WHOLE_KEY, SEARCH_SAME,
751
920
                    not_used);
752
921
}
753
922
 
754
923
 
755
 
static int keys_free(unsigned char *key, TREE_FREE mode, bulk_insert_param *param)
 
924
static int keys_free(uchar *key, TREE_FREE mode, bulk_insert_param *param)
756
925
{
757
926
  /*
758
927
    Probably I can use info->lastkey here, but I'm not sure,
759
928
    and to be safe I'd better use local lastkey.
760
929
  */
761
 
  unsigned char lastkey[MI_MAX_KEY_BUFF];
762
 
  uint32_t keylen;
 
930
  uchar lastkey[MI_MAX_KEY_BUFF];
 
931
  uint keylen;
763
932
  MI_KEYDEF *keyinfo;
764
933
 
765
934
  switch (mode) {
785
954
}
786
955
 
787
956
 
788
 
int mi_init_bulk_insert(MI_INFO *info, uint32_t cache_size, ha_rows rows)
 
957
int mi_init_bulk_insert(MI_INFO *info, ulong cache_size, ha_rows rows)
789
958
{
790
959
  MYISAM_SHARE *share=info->s;
791
960
  MI_KEYDEF *key=share->keyinfo;
792
961
  bulk_insert_param *params;
793
 
  uint32_t i, num_keys, total_keylength;
794
 
  uint64_t key_map;
 
962
  uint i, num_keys, total_keylength;
 
963
  ulonglong key_map;
 
964
  DBUG_ENTER("_mi_init_bulk_insert");
 
965
  DBUG_PRINT("enter",("cache_size: %lu", cache_size));
795
966
 
796
 
  assert(!info->bulk_insert &&
 
967
  DBUG_ASSERT(!info->bulk_insert &&
797
968
              (!rows || rows >= MI_MIN_ROWS_TO_USE_BULK_INSERT));
798
969
 
799
970
  mi_clear_all_keys_active(key_map);
810
981
 
811
982
  if (num_keys==0 ||
812
983
      num_keys * MI_MIN_SIZE_BULK_INSERT_TREE > cache_size)
813
 
    return(0);
 
984
    DBUG_RETURN(0);
814
985
 
815
986
  if (rows && rows*total_keylength < cache_size)
816
 
    cache_size= (uint32_t)rows;
 
987
    cache_size= (ulong)rows;
817
988
  else
818
989
    cache_size/=total_keylength*16;
819
990
 
822
993
               sizeof(bulk_insert_param)*num_keys),MYF(0));
823
994
 
824
995
  if (!info->bulk_insert)
825
 
    return(HA_ERR_OUT_OF_MEM);
 
996
    DBUG_RETURN(HA_ERR_OUT_OF_MEM);
826
997
 
827
998
  params=(bulk_insert_param *)(info->bulk_insert+share->base.keys);
828
999
  for (i=0 ; i < share->base.keys ; i++)
842
1013
     info->bulk_insert[i].root=0;
843
1014
  }
844
1015
 
845
 
  return(0);
 
1016
  DBUG_RETURN(0);
846
1017
}
847
1018
 
848
 
void mi_flush_bulk_insert(MI_INFO *info, uint32_t inx)
 
1019
void mi_flush_bulk_insert(MI_INFO *info, uint inx)
849
1020
{
850
1021
  if (info->bulk_insert)
851
1022
  {
858
1029
{
859
1030
  if (info->bulk_insert)
860
1031
  {
861
 
    uint32_t i;
 
1032
    uint i;
862
1033
    for (i=0 ; i < info->s->base.keys ; i++)
863
1034
    {
864
1035
      if (is_tree_inited(& info->bulk_insert[i]))
866
1037
        delete_tree(& info->bulk_insert[i]);
867
1038
      }
868
1039
    }
869
 
    free((void *)info->bulk_insert);
 
1040
    my_free((void *)info->bulk_insert, MYF(0));
870
1041
    info->bulk_insert=0;
871
1042
  }
872
1043
}