← Back to branch summary

~drizzle-trunk/drizzle/development

« back to all changes in this revision

Viewing changes to include/myisam.h

  • Committer: Brian Aker
  • Date: 2008-07-14 22:40:46 UTC
  • Revision ID: brian@tangent.org-20080714224046-x183907w9wp1txwv
Removed sql_manager. Ever heard of just setting up the OS to sync when you
want it to?

Show diffs side-by-side

added added

removed removed

Lines of Context:
include/myisam.h
21
21
extern "C" {
22
22
#endif
23
23
 
24
 
#include <drizzled/base.h>
 
24
#ifndef _my_base_h
 
25
#include <my_base.h>
 
26
#endif
25
27
#ifndef _m_ctype_h
26
 
#include <mystrings/m_ctype.h>
 
28
#include <m_ctype.h>
27
29
#endif
28
30
#ifndef _keycache_h
29
31
#include "keycache.h"
30
32
#endif
31
 
#include <mysys/my_handler.h>
32
 
#include <mysys/iocache.h>
33
 
#include <drizzled/plugin.h>
 
33
#include "my_handler.h"
 
34
#include <mysql/plugin.h>
34
35
 
35
36
/*
36
37
  Limit max keys according to HA_MAX_POSSIBLE_KEY
70
71
  This means that clearing of high keys is ignored, setting one high key
71
72
  sets all high keys.
72
73
*/
73
 
#define MI_KEYMAP_BITS      (64)
74
 
#define MI_KEYMAP_HIGH_MASK (1UL << (MI_KEYMAP_BITS - 1))
 
74
#define MI_KEYMAP_BITS      (8 * SIZEOF_LONG_LONG)
 
75
#define MI_KEYMAP_HIGH_MASK (1ULL << (MI_KEYMAP_BITS - 1))
75
76
#define mi_get_mask_all_keys_active(_keys_) \
76
77
                            (((_keys_) < MI_KEYMAP_BITS) ? \
77
 
                             ((1UL << (_keys_)) - 1UL) : \
78
 
                             (~ 0UL))
 
78
                             ((1ULL << (_keys_)) - 1ULL) : \
 
79
                             (~ 0ULL))
79
80
 
80
81
#if MI_MAX_KEY > MI_KEYMAP_BITS
81
82
 
82
83
#define mi_is_key_active(_keymap_,_keyno_) \
83
84
                            (((_keyno_) < MI_KEYMAP_BITS) ? \
84
 
                             test((_keymap_) & (1UL << (_keyno_))) : \
 
85
                             test((_keymap_) & (1ULL << (_keyno_))) : \
85
86
                             test((_keymap_) & MI_KEYMAP_HIGH_MASK))
86
87
#define mi_set_key_active(_keymap_,_keyno_) \
87
88
                            (_keymap_)|= (((_keyno_) < MI_KEYMAP_BITS) ? \
88
 
                                          (1UL << (_keyno_)) : \
 
89
                                          (1ULL << (_keyno_)) : \
89
90
                                          MI_KEYMAP_HIGH_MASK)
90
91
#define mi_clear_key_active(_keymap_,_keyno_) \
91
92
                            (_keymap_)&= (((_keyno_) < MI_KEYMAP_BITS) ? \
92
 
                                          (~ (1UL << (_keyno_))) : \
93
 
                                          (~ (0UL)) /*ignore*/ )
 
93
                                          (~ (1ULL << (_keyno_))) : \
 
94
                                          (~ (0ULL)) /*ignore*/ )
94
95
 
95
96
#else
96
97
 
97
98
#define mi_is_key_active(_keymap_,_keyno_) \
98
 
                            test((_keymap_) & (1UL << (_keyno_)))
 
99
                            test((_keymap_) & (1ULL << (_keyno_)))
99
100
#define mi_set_key_active(_keymap_,_keyno_) \
100
 
                            (_keymap_)|= (1UL << (_keyno_))
 
101
                            (_keymap_)|= (1ULL << (_keyno_))
101
102
#define mi_clear_key_active(_keymap_,_keyno_) \
102
 
                            (_keymap_)&= (~ (1UL << (_keyno_)))
 
103
                            (_keymap_)&= (~ (1ULL << (_keyno_)))
103
104
 
104
105
#endif
105
106
 
139
140
  uint64_t auto_increment;
140
141
  uint64_t key_map;                     /* Which keys are used */
141
142
  char  *data_file_name, *index_file_name;
142
 
  uint32_t  keys;                               /* Number of keys in use */
 
143
  uint  keys;                           /* Number of keys in use */
143
144
  uint  options;                        /* HA_OPTION_... used */
144
145
  int   errkey,                         /* With key was dupplicated on err */
145
146
        sortkey;                        /* clustered by this key */
147
148
  time_t create_time;                   /* When table was created */
148
149
  time_t check_time;
149
150
  time_t update_time;
150
 
  uint32_t  reflength;
 
151
  uint  reflength;
151
152
  ulong record_offset;
152
153
  ulong *rec_per_key;                   /* for sql optimizing */
153
154
} MI_ISAMINFO;
161
162
  uint64_t auto_increment;
162
163
  uint64_t data_file_length;
163
164
  uint64_t key_file_length;
164
 
  uint32_t old_options;
165
 
  uint8_t language;
166
 
  bool with_auto_increment;
 
165
  uint old_options;
 
166
  uint8 language;
 
167
  my_bool with_auto_increment;
167
168
} MI_CREATE_INFO;
168
169
 
169
170
struct st_myisam_info;                  /* For referense */
174
175
typedef struct st_mi_keydef             /* Key definition with open & info */
175
176
{
176
177
  struct st_mi_isam_share *share;       /* Pointer to base (set in mi_open) */
177
 
  uint16_t keysegs;                     /* Number of key-segment */
178
 
  uint16_t flag;                                /* NOSAME, PACK_USED */
 
178
  uint16 keysegs;                       /* Number of key-segment */
 
179
  uint16 flag;                          /* NOSAME, PACK_USED */
179
180
 
180
 
  uint8_t  key_alg;                     /* BTREE, RTREE */
181
 
  uint16_t block_length;                        /* Length of keyblock (auto) */
182
 
  uint16_t underflow_block_length;      /* When to execute underflow */
183
 
  uint16_t keylength;                   /* Tot length of keyparts (auto) */
184
 
  uint16_t minlength;                   /* min length of (packed) key (auto) */
185
 
  uint16_t maxlength;                   /* max length of (packed) key (auto) */
186
 
  uint16_t block_size_index;            /* block_size (auto) */
187
 
  uint32_t version;                     /* For concurrent read/write */
 
181
  uint8  key_alg;                       /* BTREE, RTREE */
 
182
  uint16 block_length;                  /* Length of keyblock (auto) */
 
183
  uint16 underflow_block_length;        /* When to execute underflow */
 
184
  uint16 keylength;                     /* Tot length of keyparts (auto) */
 
185
  uint16 minlength;                     /* min length of (packed) key (auto) */
 
186
  uint16 maxlength;                     /* max length of (packed) key (auto) */
 
187
  uint16 block_size_index;              /* block_size (auto) */
 
188
  uint32 version;                       /* For concurrent read/write */
 
189
  uint32 ftparser_nr;                   /* distinct ftparser number */
188
190
 
189
191
  HA_KEYSEG *seg,*end;
190
 
 
 
192
  struct st_mysql_ftparser *parser;     /* Fulltext [pre]parser */
191
193
  int (*bin_search)(struct st_myisam_info *info,struct st_mi_keydef *keyinfo,
192
 
                    unsigned char *page,unsigned char *key,
193
 
                    uint32_t key_len,uint32_t comp_flag,unsigned char * *ret_pos,
194
 
                    unsigned char *buff, bool *was_last_key);
195
 
  uint32_t (*get_key)(struct st_mi_keydef *keyinfo,uint32_t nod_flag,unsigned char * *page,
196
 
                  unsigned char *key);
197
 
  int (*pack_key)(struct st_mi_keydef *keyinfo,uint32_t nod_flag,unsigned char *next_key,
198
 
                  unsigned char *org_key, unsigned char *prev_key, unsigned char *key,
 
194
                    uchar *page,uchar *key,
 
195
                    uint key_len,uint comp_flag,uchar * *ret_pos,
 
196
                    uchar *buff, my_bool *was_last_key);
 
197
  uint (*get_key)(struct st_mi_keydef *keyinfo,uint nod_flag,uchar * *page,
 
198
                  uchar *key);
 
199
  int (*pack_key)(struct st_mi_keydef *keyinfo,uint nod_flag,uchar *next_key,
 
200
                  uchar *org_key, uchar *prev_key, uchar *key,
199
201
                  struct st_mi_s_param *s_temp);
200
 
  void (*store_key)(struct st_mi_keydef *keyinfo, unsigned char *key_pos,
 
202
  void (*store_key)(struct st_mi_keydef *keyinfo, uchar *key_pos,
201
203
                    struct st_mi_s_param *s_temp);
202
 
  int (*ck_insert)(struct st_myisam_info *inf, uint32_t k_nr, unsigned char *k, uint32_t klen);
203
 
  int (*ck_delete)(struct st_myisam_info *inf, uint32_t k_nr, unsigned char *k, uint32_t klen);
 
204
  int (*ck_insert)(struct st_myisam_info *inf, uint k_nr, uchar *k, uint klen);
 
205
  int (*ck_delete)(struct st_myisam_info *inf, uint k_nr, uchar *k, uint klen);
204
206
} MI_KEYDEF;
205
207
 
206
208
 
208
210
 
209
211
typedef struct st_unique_def            /* Segment definition of unique */
210
212
{
211
 
  uint16_t keysegs;                     /* Number of key-segment */
212
 
  unsigned char key;                            /* Mapped to which key */
213
 
  uint8_t null_are_equal;
 
213
  uint16 keysegs;                       /* Number of key-segment */
 
214
  uchar key;                            /* Mapped to which key */
 
215
  uint8 null_are_equal;
214
216
  HA_KEYSEG *seg,*end;
215
217
} MI_UNIQUEDEF;
216
218
 
217
219
typedef struct st_mi_decode_tree        /* Decode huff-table */
218
220
{
219
 
  uint16_t *table;
 
221
  uint16 *table;
220
222
  uint   quick_table_bits;
221
 
  unsigned char  *intervalls;
 
223
  uchar  *intervalls;
222
224
} MI_DECODE_TREE;
223
225
 
224
226
 
232
234
 
233
235
typedef struct st_columndef             /* column information */
234
236
{
235
 
  int16_t  type;                                /* en_fieldtype */
236
 
  uint16_t length;                      /* length of field */
237
 
  uint32_t offset;                      /* Offset to position in row */
238
 
  uint8_t  null_bit;                    /* If column may be 0 */
239
 
  uint16_t null_pos;                    /* position for null marker */
 
237
  int16  type;                          /* en_fieldtype */
 
238
  uint16 length;                        /* length of field */
 
239
  uint32 offset;                        /* Offset to position in row */
 
240
  uint8  null_bit;                      /* If column may be 0 */
 
241
  uint16 null_pos;                      /* position for null marker */
240
242
 
241
243
#ifndef NOT_PACKED_DATABASES
242
244
  void (*unpack)(struct st_columndef *rec,struct st_mi_bit_buff *buff,
243
 
                 unsigned char *start,unsigned char *end);
 
245
                 uchar *start,uchar *end);
244
246
  enum en_fieldtype base_type;
245
 
  uint32_t space_length_bits,pack_type;
 
247
  uint space_length_bits,pack_type;
246
248
  MI_DECODE_TREE *huff_tree;
247
249
#endif
248
250
} MI_COLUMNDEF;
249
251
 
250
252
 
251
253
extern char * myisam_log_filename;              /* Name of logfile */
252
 
extern uint32_t myisam_block_size;
253
 
extern uint32_t myisam_concurrent_insert;
 
254
extern ulong myisam_block_size;
 
255
extern ulong myisam_concurrent_insert;
254
256
extern bool myisam_flush,myisam_delay_key_write,myisam_single_user;
255
257
extern my_off_t myisam_max_temp_length;
256
 
extern uint32_t myisam_bulk_insert_tree_size, myisam_data_pointer_size;
 
258
extern ulong myisam_bulk_insert_tree_size, myisam_data_pointer_size;
257
259
 
258
260
        /* Prototypes for myisam-functions */
259
261
 
260
262
extern int mi_close(struct st_myisam_info *file);
261
 
extern int mi_delete(struct st_myisam_info *file,const unsigned char *buff);
 
263
extern int mi_delete(struct st_myisam_info *file,const uchar *buff);
262
264
extern struct st_myisam_info *mi_open(const char *name,int mode,
263
 
                                      uint32_t wait_if_locked);
 
265
                                      uint wait_if_locked);
264
266
extern int mi_panic(enum ha_panic_function function);
265
 
extern int mi_rfirst(struct st_myisam_info *file,unsigned char *buf,int inx);
266
 
extern int mi_rkey(MI_INFO *info, unsigned char *buf, int inx, const unsigned char *key,
 
267
extern int mi_rfirst(struct st_myisam_info *file,uchar *buf,int inx);
 
268
extern int mi_rkey(MI_INFO *info, uchar *buf, int inx, const uchar *key,
267
269
                   key_part_map keypart_map, enum ha_rkey_function search_flag);
268
 
extern int mi_rlast(struct st_myisam_info *file,unsigned char *buf,int inx);
269
 
extern int mi_rnext(struct st_myisam_info *file,unsigned char *buf,int inx);
270
 
extern int mi_rnext_same(struct st_myisam_info *info, unsigned char *buf);
271
 
extern int mi_rprev(struct st_myisam_info *file,unsigned char *buf,int inx);
272
 
extern int mi_rrnd(struct st_myisam_info *file,unsigned char *buf, my_off_t pos);
 
270
extern int mi_rlast(struct st_myisam_info *file,uchar *buf,int inx);
 
271
extern int mi_rnext(struct st_myisam_info *file,uchar *buf,int inx);
 
272
extern int mi_rnext_same(struct st_myisam_info *info, uchar *buf);
 
273
extern int mi_rprev(struct st_myisam_info *file,uchar *buf,int inx);
 
274
extern int mi_rrnd(struct st_myisam_info *file,uchar *buf, my_off_t pos);
273
275
extern int mi_scan_init(struct st_myisam_info *file);
274
 
extern int mi_scan(struct st_myisam_info *file,unsigned char *buf);
275
 
extern int mi_rsame(struct st_myisam_info *file,unsigned char *record,int inx);
276
 
extern int mi_rsame_with_pos(struct st_myisam_info *file,unsigned char *record,
 
276
extern int mi_scan(struct st_myisam_info *file,uchar *buf);
 
277
extern int mi_rsame(struct st_myisam_info *file,uchar *record,int inx);
 
278
extern int mi_rsame_with_pos(struct st_myisam_info *file,uchar *record,
277
279
                             int inx, my_off_t pos);
278
 
extern int mi_update(struct st_myisam_info *file,const unsigned char *old,
279
 
                     unsigned char *new_record);
280
 
extern int mi_write(struct st_myisam_info *file,unsigned char *buff);
 
280
extern int mi_update(struct st_myisam_info *file,const uchar *old,
 
281
                     uchar *new_record);
 
282
extern int mi_write(struct st_myisam_info *file,uchar *buff);
281
283
extern my_off_t mi_position(struct st_myisam_info *file);
282
 
extern int mi_status(struct st_myisam_info *info, MI_ISAMINFO *x, uint32_t flag);
 
284
extern int mi_status(struct st_myisam_info *info, MI_ISAMINFO *x, uint flag);
283
285
extern int mi_lock_database(struct st_myisam_info *file,int lock_type);
284
 
extern int mi_create(const char *name,uint32_t keys,MI_KEYDEF *keydef,
285
 
                     uint32_t columns, MI_COLUMNDEF *columndef,
286
 
                     uint32_t uniques, MI_UNIQUEDEF *uniquedef,
287
 
                     MI_CREATE_INFO *create_info, uint32_t flags);
 
286
extern int mi_create(const char *name,uint keys,MI_KEYDEF *keydef,
 
287
                     uint columns, MI_COLUMNDEF *columndef,
 
288
                     uint uniques, MI_UNIQUEDEF *uniquedef,
 
289
                     MI_CREATE_INFO *create_info, uint flags);
288
290
extern int mi_delete_table(const char *name);
289
291
extern int mi_rename(const char *from, const char *to);
290
292
extern int mi_extra(struct st_myisam_info *file,
296
298
extern int mi_log(int activate_log);
297
299
extern int mi_is_changed(struct st_myisam_info *info);
298
300
extern int mi_delete_all_rows(struct st_myisam_info *info);
299
 
extern ulong _mi_calc_blob_length(uint32_t length , const unsigned char *pos);
300
 
extern uint32_t mi_get_pointer_length(uint64_t file_length, uint32_t def);
 
301
extern ulong _mi_calc_blob_length(uint length , const uchar *pos);
 
302
extern uint mi_get_pointer_length(uint64_t file_length, uint def);
301
303
 
302
304
/* this is used to pass to mysql_myisamchk_table */
303
305
 
365
367
 
366
368
typedef struct st_sort_key_blocks               /* Used when sorting */
367
369
{
368
 
  unsigned char *buff,*end_pos;
369
 
  unsigned char lastkey[MI_MAX_POSSIBLE_KEY_BUFF];
370
 
  uint32_t last_length;
 
370
  uchar *buff,*end_pos;
 
371
  uchar lastkey[MI_MAX_POSSIBLE_KEY_BUFF];
 
372
  uint last_length;
371
373
  int inited;
372
374
} SORT_KEY_BLOCKS;
373
375
 
401
403
  ha_checksum record_checksum,glob_crc;
402
404
  ulong use_buffers,read_buffer_length,write_buffer_length,
403
405
        sort_buffer_length,sort_key_blocks;
404
 
  uint32_t out_flag,warning_printed,error_printed,verbose;
405
 
  uint32_t opt_sort_key,total_files,max_level;
406
 
  uint32_t testflag, key_cache_block_size;
407
 
  uint8_t language;
408
 
  bool using_global_keycache, opt_lock_memory, opt_follow_links;
409
 
  bool retry_repair, force_sort;
 
406
  uint out_flag,warning_printed,error_printed,verbose;
 
407
  uint opt_sort_key,total_files,max_level;
 
408
  uint testflag, key_cache_block_size;
 
409
  uint8 language;
 
410
  my_bool using_global_keycache, opt_lock_memory, opt_follow_links;
 
411
  my_bool retry_repair, force_sort;
410
412
  char temp_filename[FN_REFLEN],*isam_file_name;
411
413
  MY_TMPDIR *tmpdir;
412
414
  int tmpfile_createflag;
428
430
  enum_mi_stats_method stats_method;
429
431
} MI_CHECK;
430
432
 
 
433
typedef struct st_sort_ft_buf
 
434
{
 
435
  uchar *buf, *end;
 
436
  int   count;
 
437
  uchar lastkey[MI_MAX_KEY_BUFF];
 
438
} SORT_FT_BUF;
 
439
 
431
440
typedef struct st_sort_info
432
441
{
433
442
  my_off_t filelength,dupp,buff_length;
434
443
  ha_rows max_records;
435
 
  uint32_t current_key, total_keys;
 
444
  uint current_key, total_keys;
436
445
  myf myf_rw;
437
446
  enum data_file_type new_data_file_type;
438
447
  MI_INFO *info;
439
448
  MI_CHECK *param;
440
 
  unsigned char *buff;
 
449
  uchar *buff;
441
450
  SORT_KEY_BLOCKS *key_block,*key_block_end;
 
451
  SORT_FT_BUF *ft_buf;
442
452
  /* sync things */
443
 
  uint32_t got_error, threads_running;
 
453
  uint got_error, threads_running;
444
454
  pthread_mutex_t mutex;
445
455
  pthread_cond_t  cond;
446
456
} SORT_INFO;
448
458
/* functions in mi_check */
449
459
void myisamchk_init(MI_CHECK *param);
450
460
int chk_status(MI_CHECK *param, MI_INFO *info);
451
 
int chk_del(MI_CHECK *param, register MI_INFO *info, uint32_t test_flag);
 
461
int chk_del(MI_CHECK *param, register MI_INFO *info, uint test_flag);
452
462
int chk_size(MI_CHECK *param, MI_INFO *info);
453
463
int chk_key(MI_CHECK *param, MI_INFO *info);
454
464
int chk_data_link(MI_CHECK *param, MI_INFO *info,int extend);
460
470
int mi_repair_parallel(MI_CHECK *param, register MI_INFO *info,
461
471
                      const char * name, int rep_quick);
462
472
int change_to_newfile(const char * filename, const char * old_ext,
463
 
                      const char * new_ext, uint32_t raid_chunks,
 
473
                      const char * new_ext, uint raid_chunks,
464
474
                      myf myflags);
465
475
void lock_memory(MI_CHECK *param);
466
476
void update_auto_increment_key(MI_CHECK *param, MI_INFO *info,
467
 
                               bool repair);
468
 
int update_state_info(MI_CHECK *param, MI_INFO *info,uint32_t update);
 
477
                               my_bool repair);
 
478
int update_state_info(MI_CHECK *param, MI_INFO *info,uint update);
469
479
void update_key_parts(MI_KEYDEF *keyinfo, ulong *rec_per_key_part,
470
480
                      uint64_t *unique, uint64_t *notnull, 
471
481
                      uint64_t records);
472
482
int filecopy(MI_CHECK *param, File to,File from,my_off_t start,
473
483
             my_off_t length, const char *type);
474
 
int movepoint(MI_INFO *info,unsigned char *record,my_off_t oldpos,
475
 
              my_off_t newpos, uint32_t prot_key);
476
 
int write_data_suffix(SORT_INFO *sort_info, bool fix_datafile);
 
484
int movepoint(MI_INFO *info,uchar *record,my_off_t oldpos,
 
485
              my_off_t newpos, uint prot_key);
 
486
int write_data_suffix(SORT_INFO *sort_info, my_bool fix_datafile);
477
487
int test_if_almost_full(MI_INFO *info);
478
488
int recreate_table(MI_CHECK *param, MI_INFO **org_info, char *filename);
479
 
bool mi_test_if_sort_rep(MI_INFO *info, ha_rows rows, uint64_t key_map,
480
 
                            bool force);
 
489
my_bool mi_test_if_sort_rep(MI_INFO *info, ha_rows rows, uint64_t key_map,
 
490
                            my_bool force);
481
491
 
482
 
int mi_init_bulk_insert(MI_INFO *info, uint32_t cache_size, ha_rows rows);
483
 
void mi_flush_bulk_insert(MI_INFO *info, uint32_t inx);
 
492
int mi_init_bulk_insert(MI_INFO *info, ulong cache_size, ha_rows rows);
 
493
void mi_flush_bulk_insert(MI_INFO *info, uint inx);
484
494
void mi_end_bulk_insert(MI_INFO *info);
485
495
int mi_assign_to_key_cache(MI_INFO *info, uint64_t key_map, 
486
496
                           KEY_CACHE *key_cache);
487
497
void mi_change_key_cache(KEY_CACHE *old_key_cache,
488
498
                         KEY_CACHE *new_key_cache);
489
 
int mi_preload(MI_INFO *info, uint64_t key_map, bool ignore_leaves);
 
499
int mi_preload(MI_INFO *info, uint64_t key_map, my_bool ignore_leaves);
490
500
 
491
501
#ifdef  __cplusplus
492
502
}