set resync_start in Incremental_container
[thirdparty/mdadm.git] / mdadm.h
1 /*
2  * mdadm - manage Linux "md" devices aka RAID arrays.
3  *
4  * Copyright (C) 2001-2006 Neil Brown <neilb@suse.de>
5  *
6  *
7  *    This program is free software; you can redistribute it and/or modify
8  *    it under the terms of the GNU General Public License as published by
9  *    the Free Software Foundation; either version 2 of the License, or
10  *    (at your option) any later version.
11  *
12  *    This program is distributed in the hope that it will be useful,
13  *    but WITHOUT ANY WARRANTY; without even the implied warranty of
14  *    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
15  *    GNU General Public License for more details.
16  *
17  *    You should have received a copy of the GNU General Public License
18  *    along with this program; if not, write to the Free Software
19  *    Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
20  *
21  *    Author: Neil Brown
22  *    Email: <neilb@cse.unsw.edu.au>
23  *    Paper: Neil Brown
24  *           School of Computer Science and Engineering
25  *           The University of New South Wales
26  *           Sydney, 2052
27  *           Australia
28  */
29
30 #define _GNU_SOURCE
31 #define _FILE_OFFSET_BITS 64
32 #include        <unistd.h>
33 #if !defined(__dietlibc__) && !defined(__KLIBC__)
34 extern __off64_t lseek64 __P ((int __fd, __off64_t __offset, int __whence));
35 #else
36 # if defined(__NO_STAT64) || __WORDSIZE != 32
37 # define lseek64 lseek
38 # endif
39 #endif
40
41 #include        <sys/types.h>
42 #include        <sys/stat.h>
43 #include        <stdlib.h>
44 #include        <time.h>
45 #include        <sys/time.h>
46 #include        <getopt.h>
47 #include        <fcntl.h>
48 #include        <stdio.h>
49 #include        <errno.h>
50 #include        <string.h>
51 #include        <syslog.h>
52 #ifdef __dietlibc__
53 #include        <strings.h>
54 /* dietlibc has deprecated random and srandom!! */
55 #define random rand
56 #define srandom srand
57 #endif
58
59
60 #include        <linux/kdev_t.h>
61 /*#include      <linux/fs.h> */
62 #include        <sys/mount.h>
63 #include        <asm/types.h>
64 #include        <sys/ioctl.h>
65 #define MD_MAJOR 9
66 #define MdpMinorShift 6
67
68 #ifndef BLKGETSIZE64
69 #define BLKGETSIZE64 _IOR(0x12,114,size_t) /* return device size in bytes (u64 *arg) */
70 #endif
71
72 #define DEFAULT_BITMAP_CHUNK 4096
73 #define DEFAULT_BITMAP_DELAY 5
74 #define DEFAULT_MAX_WRITE_BEHIND 256
75
76 #include        "md_u.h"
77 #include        "md_p.h"
78 #include        "bitmap.h"
79
80 #include <endian.h>
81 /* Redhat don't like to #include <asm/byteorder.h>, and
82  * some time include <linux/byteorder/xxx_endian.h> isn't enough,
83  * and there is no standard conversion function so... */
84 /* And dietlibc doesn't think byteswap is ok, so.. */
85 /*  #include <byteswap.h> */
86 #define bswap_16(x) (((x) & 0x00ffU) << 8 | \
87                      ((x) & 0xff00U) >> 8)
88 #define bswap_32(x) (((x) & 0x000000ffU) << 24 | \
89                      ((x) & 0xff000000U) >> 24 | \
90                      ((x) & 0x0000ff00U) << 8  | \
91                      ((x) & 0x00ff0000U) >> 8)
92 #define bswap_64(x) (((x) & 0x00000000000000ffULL) << 56 | \
93                      ((x) & 0xff00000000000000ULL) >> 56 | \
94                      ((x) & 0x000000000000ff00ULL) << 40 | \
95                      ((x) & 0x00ff000000000000ULL) >> 40 | \
96                      ((x) & 0x0000000000ff0000ULL) << 24 | \
97                      ((x) & 0x0000ff0000000000ULL) >> 24 | \
98                      ((x) & 0x00000000ff000000ULL) << 8 | \
99                      ((x) & 0x000000ff00000000ULL) >> 8)
100
101 #if !defined(__KLIBC__)
102 #if BYTE_ORDER == LITTLE_ENDIAN
103 #define __cpu_to_le16(_x) (_x)
104 #define __cpu_to_le32(_x) (_x)
105 #define __cpu_to_le64(_x) (_x)
106 #define __le16_to_cpu(_x) (_x)
107 #define __le32_to_cpu(_x) (_x)
108 #define __le64_to_cpu(_x) (_x)
109
110 #define __cpu_to_be16(_x) bswap_16(_x)
111 #define __cpu_to_be32(_x) bswap_32(_x)
112 #define __cpu_to_be64(_x) bswap_64(_x)
113 #define __be16_to_cpu(_x) bswap_16(_x)
114 #define __be32_to_cpu(_x) bswap_32(_x)
115 #define __be64_to_cpu(_x) bswap_64(_x)
116 #elif BYTE_ORDER == BIG_ENDIAN
117 #define __cpu_to_le16(_x) bswap_16(_x)
118 #define __cpu_to_le32(_x) bswap_32(_x)
119 #define __cpu_to_le64(_x) bswap_64(_x)
120 #define __le16_to_cpu(_x) bswap_16(_x)
121 #define __le32_to_cpu(_x) bswap_32(_x)
122 #define __le64_to_cpu(_x) bswap_64(_x)
123
124 #define __cpu_to_be16(_x) (_x)
125 #define __cpu_to_be32(_x) (_x)
126 #define __cpu_to_be64(_x) (_x)
127 #define __be16_to_cpu(_x) (_x)
128 #define __be32_to_cpu(_x) (_x)
129 #define __be64_to_cpu(_x) (_x)
130 #else
131 #  error "unknown endianness."
132 #endif
133 #endif /* __KLIBC__ */
134
135
136
137 /* general information that might be extracted from a superblock */
138 struct mdinfo {
139         mdu_array_info_t        array;
140         mdu_disk_info_t         disk;
141         __u64                   events;
142         int                     uuid[4];
143         char                    name[33];
144         unsigned long long      data_offset;
145         unsigned long long      component_size; /* same as array.size, except in
146                                                  * sectors and up to 64bits.
147                                                  */
148         int                     reshape_active;
149         unsigned long long      reshape_progress;
150         unsigned long long      resync_start;
151         int                     new_level, delta_disks, new_layout, new_chunk;
152         int                     errors;
153         int                     cache_size; /* size of raid456 stripe cache*/
154         int                     mismatch_cnt;
155         char                    text_version[50];
156         int container_member; /* for assembling external-metatdata arrays */
157
158         char            sys_name[20];
159         struct mdinfo *devs;
160         struct mdinfo *next;
161 };
162
163 struct createinfo {
164         int     uid;
165         int     gid;
166         int     autof;
167         int     mode;
168         int     symlinks;
169         struct supertype *supertype;
170 };
171
172 #define Name "mdadm"
173
174 enum mode {
175         ASSEMBLE=1,
176         BUILD,
177         CREATE,
178         MANAGE,
179         MISC,
180         MONITOR,
181         GROW,
182         INCREMENTAL,
183         AUTODETECT,
184 };
185
186 extern char short_options[];
187 extern char short_bitmap_options[];
188 extern char short_bitmap_auto_options[];
189 extern struct option long_options[];
190 extern char Version[], Usage[], Help[], OptionHelp[],
191         Help_create[], Help_build[], Help_assemble[], Help_grow[],
192         Help_incr[],
193         Help_manage[], Help_misc[], Help_monitor[], Help_config[];
194
195 /* for option that don't have short equivilents, we assign arbitrary
196  * small numbers.  '1' means an undecorated option, so we start at '2'.
197  */
198 enum special_options {
199         AssumeClean = 2,
200         BitmapChunk,
201         WriteBehind,
202         ReAdd,
203         NoDegraded,
204         Sparc22,
205         BackupFile,
206         HomeHost,
207         AutoHomeHost,
208         Symlinks,
209         AutoDetect,
210 };
211
212 /* structures read from config file */
213 /* List of mddevice names and identifiers
214  * Identifiers can be:
215  *    uuid=128-hex-uuid
216  *    super-minor=decimal-minor-number-from-superblock
217  *    devices=comma,separated,list,of,device,names,with,wildcards
218  *
219  * If multiple fields are present, the intersection of all matching
220  * devices is considered
221  */
222 #define UnSet (0xfffe)
223 typedef struct mddev_ident_s {
224         char    *devname;
225
226         int     uuid_set;
227         int     uuid[4];
228         char    name[33];
229
230         unsigned int super_minor;
231
232         char    *devices;       /* comma separated list of device
233                                  * names with wild cards
234                                  */
235         int     level;
236         unsigned int raid_disks;
237         unsigned int spare_disks;
238         struct supertype *st;
239         int     autof;          /* 1 for normal, 2 for partitioned */
240         char    *spare_group;
241         char    *bitmap_file;
242         int     bitmap_fd;
243
244         struct mddev_ident_s *next;
245 } *mddev_ident_t;
246
247 /* List of device names - wildcards expanded */
248 typedef struct mddev_dev_s {
249         char *devname;
250         char disposition;       /* 'a' for add, 'r' for remove, 'f' for fail.
251                                  * Not set for names read from .config
252                                  */
253         char writemostly;
254         char re_add;
255         char used;              /* set when used */
256         struct mddev_dev_s *next;
257 } *mddev_dev_t;
258
259 typedef struct mapping {
260         char *name;
261         int num;
262 } mapping_t;
263
264
265 struct mdstat_ent {
266         char            *dev;
267         int             devnum;
268         int             active;
269         char            *level;
270         char            *pattern; /* U or up, _ for down */
271         int             percent; /* -1 if no resync */
272         int             resync; /* 1 if resync, 0 if recovery */
273         struct mdstat_ent *next;
274 };
275
276 extern struct mdstat_ent *mdstat_read(int hold, int start);
277 extern void free_mdstat(struct mdstat_ent *ms);
278 extern void mdstat_wait(int seconds);
279 extern int mddev_busy(int devnum);
280
281 struct map_ent {
282         struct map_ent *next;
283         int     devnum;
284         int     major,minor;
285         int     uuid[4];
286         char    *path;
287 };
288 extern int map_update(struct map_ent **mpp, int devnum, int major, int minor,
289                       int uuid[4], char *path);
290 extern struct map_ent *map_by_uuid(struct map_ent **map, int uuid[4]);
291 extern void map_read(struct map_ent **melp);
292 extern int map_write(struct map_ent *mel);
293 extern void map_delete(struct map_ent **mapp, int devnum);
294 extern void map_free(struct map_ent *map);
295 extern void map_add(struct map_ent **melp,
296                     int devnum, int major, int minor, int uuid[4], char *path);
297
298 /* various details can be requested */
299 #define GET_LEVEL       1
300 #define GET_LAYOUT      2
301 #define GET_COMPONENT   4
302 #define GET_CHUNK       8
303 #define GET_CACHE       16
304 #define GET_MISMATCH    32
305 #define GET_VERSION     64
306
307 #define GET_DEVS        1024 /* gets role, major, minor */
308 #define GET_OFFSET      2048
309 #define GET_SIZE        4096
310 #define GET_STATE       8192
311 #define GET_ERROR       16384
312
313 /* If fd >= 0, get the array it is open on,
314  * else use devnum. >=0 -> major9. <0.....
315  */
316 extern void sysfs_free(struct mdinfo *sra);
317 extern struct mdinfo *sysfs_read(int fd, int devnum, unsigned long options);
318 extern int sysfs_set_str(struct mdinfo *sra, struct mdinfo *dev,
319                          char *name, char *val);
320 extern int sysfs_set_num(struct mdinfo *sra, struct mdinfo *dev,
321                          char *name, unsigned long long val);
322 extern int sysfs_get_ll(struct mdinfo *sra, struct mdinfo *dev,
323                         char *name, unsigned long long *val);
324 extern int sysfs_set_array(struct mdinfo *sra,
325                            struct mdinfo *info);
326 extern int sysfs_add_disk(struct mdinfo *sra, int fd, struct mdinfo *sd);
327
328
329
330
331 extern int save_stripes(int *source, unsigned long long *offsets,
332                         int raid_disks, int chunk_size, int level, int layout,
333                         int nwrites, int *dest,
334                         unsigned long long start, unsigned long long length);
335 extern int restore_stripes(int *dest, unsigned long long *offsets,
336                            int raid_disks, int chunk_size, int level, int layout,
337                            int source, unsigned long long read_offset,
338                            unsigned long long start, unsigned long long length);
339
340 #ifndef Sendmail
341 #define Sendmail "/usr/lib/sendmail -t"
342 #endif
343
344 #define SYSLOG_FACILITY LOG_DAEMON
345
346 extern char *map_num(mapping_t *map, int num);
347 extern int map_name(mapping_t *map, char *name);
348 extern mapping_t r5layout[], pers[], modes[], faultylayout[];
349
350 extern char *map_dev(int major, int minor, int create);
351
352
353 extern struct superswitch {
354         void (*examine_super)(struct supertype *st, char *homehost);
355         void (*brief_examine_super)(struct supertype *st);
356         void (*export_examine_super)(struct supertype *st);
357         void (*detail_super)(struct supertype *st, char *homehost);
358         void (*brief_detail_super)(struct supertype *st);
359         void (*export_detail_super)(struct supertype *st);
360         void (*uuid_from_super)(struct supertype *st, int uuid[4]);
361         void (*getinfo_super)(struct supertype *st, struct mdinfo *info);
362         void (*getinfo_super_n)(struct supertype *st, struct mdinfo *info);
363         int (*match_home)(struct supertype *st, char *homehost);
364         int (*update_super)(struct supertype *st, struct mdinfo *info,
365                             char *update,
366                             char *devname, int verbose,
367                             int uuid_set, char *homehost);
368         int (*init_super)(struct supertype *st, mdu_array_info_t *info,
369                           unsigned long long size, char *name,
370                           char *homehost, int *uuid);
371         void (*add_to_super)(struct supertype *st, mdu_disk_info_t *dinfo,
372                              int fd, char *devname);
373         int (*store_super)(struct supertype *st, int fd);
374         int (*write_init_super)(struct supertype *st);
375         int (*compare_super)(struct supertype *st, struct supertype *tst);
376         int (*load_super)(struct supertype *st, int fd, char *devname);
377         struct supertype * (*match_metadata_desc)(char *arg);
378         __u64 (*avail_size)(struct supertype *st, __u64 size);
379         int (*add_internal_bitmap)(struct supertype *st, int *chunkp,
380                                    int delay, int write_behind,
381                                    unsigned long long size, int may_change, int major);
382         void (*locate_bitmap)(struct supertype *st, int fd);
383         int (*write_bitmap)(struct supertype *st, int fd);
384         void (*free_super)(struct supertype *st);
385         int (*validate_geometry)(struct supertype *st, int level, int layout,
386                                  int raiddisks,
387                                  int chunk, unsigned long long size,
388                                  char *subdev, unsigned long long *freesize);
389
390         struct mdinfo *(*container_content)(struct supertype *st);
391
392         int major;
393         char *text_version;
394         int swapuuid; /* true if uuid is bigending rather than hostendian */
395         int external;
396 } super0, super1, super_ddf, super_ddf_bvd, super_ddf_svd, *superlist[];
397
398 extern struct superswitch super_imsm, super_imsm_raid;
399
400 struct supertype {
401         struct superswitch *ss;
402         int minor_version;
403         int max_devs;
404         int container_dev;    /* devnum of container */
405         int container_member; /* numerical position in container */
406         void *sb;
407         void *info;
408 };
409
410 extern struct supertype *super_by_fd(int fd);
411 extern struct supertype *guess_super(int fd);
412 extern struct supertype *dup_super(struct supertype *st);
413 extern int get_dev_size(int fd, char *dname, unsigned long long *sizep);
414 extern void get_one_disk(int mdfd, mdu_array_info_t *ainf,
415                          mdu_disk_info_t *disk);
416
417 #if __GNUC__ < 3
418 struct stat64;
419 #endif
420
421 #define HAVE_NFTW  we assume
422 #define HAVE_FTW
423
424 #ifdef UCLIBC
425 # include <features.h>
426 # ifndef  __UCLIBC_HAS_FTW__
427 #  undef HAVE_FTW
428 #  undef HAVE_NFTW
429 # endif
430 #endif
431
432 #ifdef __dietlibc__
433 # undef HAVE_NFTW
434 #endif
435
436 #if defined(__KLIBC__)
437 # undef HAVE_NFTW
438 # undef HAVE_FTW
439 #endif
440
441 #ifndef HAVE_NFTW
442 # define FTW_PHYS 1
443 # ifndef HAVE_FTW
444   struct FTW {};
445 # endif
446 #endif
447
448 #ifdef HAVE_FTW
449 # include <ftw.h>
450 #endif
451
452 extern int add_dev(const char *name, const struct stat *stb, int flag, struct FTW *s);
453
454
455 extern int Manage_ro(char *devname, int fd, int readonly);
456 extern int Manage_runstop(char *devname, int fd, int runstop, int quiet);
457 extern int Manage_resize(char *devname, int fd, long long size, int raid_disks);
458 extern int Manage_reconfig(char *devname, int fd, int layout);
459 extern int Manage_subdevs(char *devname, int fd,
460                           mddev_dev_t devlist, int verbose);
461 extern int autodetect(void);
462 extern int Grow_Add_device(char *devname, int fd, char *newdev);
463 extern int Grow_addbitmap(char *devname, int fd, char *file, int chunk, int delay, int write_behind, int force);
464 extern int Grow_reshape(char *devname, int fd, int quiet, char *backup_file,
465                         long long size,
466                         int level, int layout, int chunksize, int raid_disks);
467 extern int Grow_restart(struct supertype *st, struct mdinfo *info,
468                         int *fdlist, int cnt, char *backup_file);
469
470
471 extern int Assemble(struct supertype *st, char *mddev, int mdfd,
472                     mddev_ident_t ident,
473                     mddev_dev_t devlist, char *backup_file,
474                     int readonly, int runstop,
475                     char *update, char *homehost,
476                     int verbose, int force);
477
478 extern int Build(char *mddev, int mdfd, int chunk, int level, int layout,
479                  int raiddisks,
480                  mddev_dev_t devlist, int assume_clean,
481                  char *bitmap_file, int bitmap_chunk, int write_behind, int delay, int verbose);
482
483
484 extern int Create(struct supertype *st, char *mddev, int mdfd,
485                   int chunk, int level, int layout, unsigned long long size, int raiddisks, int sparedisks,
486                   char *name, char *homehost, int *uuid,
487                   int subdevs, mddev_dev_t devlist,
488                   int runstop, int verbose, int force, int assume_clean,
489                   char *bitmap_file, int bitmap_chunk, int write_behind, int delay);
490
491 extern int Detail(char *dev, int brief, int export, int test, char *homehost);
492 extern int Query(char *dev);
493 extern int Examine(mddev_dev_t devlist, int brief, int export, int scan,
494                    int SparcAdjust, struct supertype *forcest, char *homehost);
495 extern int Monitor(mddev_dev_t devlist,
496                    char *mailaddr, char *alert_cmd,
497                    int period, int daemonise, int scan, int oneshot,
498                    int dosyslog, int test, char *pidfile);
499
500 extern int Kill(char *dev, int force, int quiet, int noexcl);
501 extern int Wait(char *dev);
502
503 extern int Incremental(char *devname, int verbose, int runstop,
504                        struct supertype *st, char *homehost, int autof);
505 extern int Incremental_container(struct supertype *st, char *devname,
506                                  int verbose, int runstop, int autof);
507 extern void RebuildMap(void);
508 extern int IncrementalScan(int verbose);
509
510 extern int CreateBitmap(char *filename, int force, char uuid[16],
511                         unsigned long chunksize, unsigned long daemon_sleep,
512                         unsigned long write_behind,
513                         unsigned long long array_size,
514                         int major);
515 extern int ExamineBitmap(char *filename, int brief, struct supertype *st);
516 extern int bitmap_update_uuid(int fd, int *uuid, int swap);
517
518 extern int md_get_version(int fd);
519 extern int get_linux_version(void);
520 extern int parse_uuid(char *str, int uuid[4]);
521 extern int check_ext2(int fd, char *name);
522 extern int check_reiser(int fd, char *name);
523 extern int check_raid(int fd, char *name);
524
525 extern int get_mdp_major(void);
526 extern int dev_open(char *dev, int flags);
527 extern int is_standard(char *dev, int *nump);
528
529 extern int parse_auto(char *str, char *msg, int config);
530 extern mddev_ident_t conf_get_ident(char *dev);
531 extern mddev_dev_t conf_get_devs(void);
532 extern int conf_test_dev(char *devname);
533 extern struct createinfo *conf_get_create_info(void);
534 extern void set_conffile(char *file);
535 extern char *conf_get_mailaddr(void);
536 extern char *conf_get_mailfrom(void);
537 extern char *conf_get_program(void);
538 extern char *conf_get_homehost(void);
539 extern char *conf_line(FILE *file);
540 extern char *conf_word(FILE *file, int allow_key);
541 extern void free_line(char *line);
542 extern int match_oneof(char *devices, char *devname);
543 extern void uuid_from_super(int uuid[4], mdp_super_t *super);
544 extern int same_uuid(int a[4], int b[4], int swapuuid);
545 extern void copy_uuid(void *a, int b[4], int swapuuid);
546 extern unsigned long calc_csum(void *super, int bytes);
547 extern int enough(int level, int raid_disks, int layout, int clean,
548                    char *avail, int avail_disks);
549 extern int ask(char *mesg);
550 extern unsigned long long get_component_size(int fd);
551 extern void remove_partitions(int fd);
552 extern unsigned long long calc_array_size(int level, int raid_disks, int layout,
553                                    int chunksize, unsigned long long devsize);
554
555
556 extern char *human_size(long long bytes);
557 char *human_size_brief(long long bytes);
558
559 #define NoMdDev (1<<23)
560 extern int find_free_devnum(int use_partitions);
561
562 extern void put_md_name(char *name);
563 extern char *get_md_name(int dev);
564
565 extern char DefaultConfFile[];
566
567 extern int open_mddev(char *dev, int autof);
568 extern int open_mddev_devnum(char *devname, int devnum, char *name,
569                              char *chosen_name, int parts);
570 extern int open_container(int fd);
571
572 extern char *devnum2devname(int num);
573 extern int fd2devnum(int fd);
574
575 #define LEVEL_MULTIPATH         (-4)
576 #define LEVEL_LINEAR            (-1)
577 #define LEVEL_FAULTY            (-5)
578
579 /* kernel module doesn't know about these */
580 #define LEVEL_CONTAINER         (-100)
581 #define LEVEL_UNSUPPORTED       (-200)
582
583
584 /* faulty stuff */
585
586 #define WriteTransient  0
587 #define ReadTransient   1
588 #define WritePersistent 2
589 #define ReadPersistent  3
590 #define WriteAll        4 /* doesn't go to device */
591 #define ReadFixable     5
592 #define Modes   6
593
594 #define ClearErrors     31
595 #define ClearFaults     30
596
597 #define AllPersist      100 /* internal use only */
598 #define NoPersist       101
599
600 #define ModeMask        0x1f
601 #define ModeShift       5
602
603
604 #ifdef __TINYC__
605 #undef minor
606 #undef major
607 #undef makedev
608 #define minor(x) ((x)&0xff)
609 #define major(x) (((x)>>8)&0xff)
610 #define makedev(M,m) (((M)<<8) | (m))
611 #endif
612
613 /* for raid5 */
614 #define ALGORITHM_LEFT_ASYMMETRIC       0
615 #define ALGORITHM_RIGHT_ASYMMETRIC      1
616 #define ALGORITHM_LEFT_SYMMETRIC        2
617 #define ALGORITHM_RIGHT_SYMMETRIC       3