2  * Copyright (C) 2001, 2002 Sistina Software (UK) Limited.
 
   3  * Copyright (C) 2004 - 2006 Red Hat, Inc. All rights reserved.
 
   5  * This file is released under the GPL.
 
  10 #include <linux/module.h>
 
  11 #include <linux/vmalloc.h>
 
  12 #include <linux/miscdevice.h>
 
  13 #include <linux/init.h>
 
  14 #include <linux/wait.h>
 
  15 #include <linux/slab.h>
 
  16 #include <linux/dm-ioctl.h>
 
  17 #include <linux/hdreg.h>
 
  18 #include <linux/compat.h>
 
  20 #include <asm/uaccess.h>
 
  22 #define DM_MSG_PREFIX "ioctl"
 
  23 #define DM_DRIVER_EMAIL "dm-devel@redhat.com"
 
  25 /*-----------------------------------------------------------------
 
  26  * The ioctl interface needs to be able to look up devices by
 
  28  *---------------------------------------------------------------*/
 
  30         struct list_head name_list;
 
  31         struct list_head uuid_list;
 
  35         struct mapped_device *md;
 
  36         struct dm_table *new_map;
 
  41     struct dm_target_versions *vers, *old_vers;
 
  47 #define NUM_BUCKETS 64
 
  48 #define MASK_BUCKETS (NUM_BUCKETS - 1)
 
  49 static struct list_head _name_buckets[NUM_BUCKETS];
 
  50 static struct list_head _uuid_buckets[NUM_BUCKETS];
 
  52 static void dm_hash_remove_all(int keep_open_devices);
 
  55  * Guards access to both hash tables.
 
  57 static DECLARE_RWSEM(_hash_lock);
 
  59 static void init_buckets(struct list_head *buckets)
 
  63         for (i = 0; i < NUM_BUCKETS; i++)
 
  64                 INIT_LIST_HEAD(buckets + i);
 
  67 static int dm_hash_init(void)
 
  69         init_buckets(_name_buckets);
 
  70         init_buckets(_uuid_buckets);
 
  74 static void dm_hash_exit(void)
 
  76         dm_hash_remove_all(0);
 
  79 /*-----------------------------------------------------------------
 
  81  * We're not really concerned with the str hash function being
 
  82  * fast since it's only used by the ioctl interface.
 
  83  *---------------------------------------------------------------*/
 
  84 static unsigned int hash_str(const char *str)
 
  86         const unsigned int hash_mult = 2654435387U;
 
  90                 h = (h + (unsigned int) *str++) * hash_mult;
 
  92         return h & MASK_BUCKETS;
 
  95 /*-----------------------------------------------------------------
 
  96  * Code for looking up a device by name
 
  97  *---------------------------------------------------------------*/
 
  98 static struct hash_cell *__get_name_cell(const char *str)
 
 100         struct hash_cell *hc;
 
 101         unsigned int h = hash_str(str);
 
 103         list_for_each_entry (hc, _name_buckets + h, name_list)
 
 104                 if (!strcmp(hc->name, str)) {
 
 112 static struct hash_cell *__get_uuid_cell(const char *str)
 
 114         struct hash_cell *hc;
 
 115         unsigned int h = hash_str(str);
 
 117         list_for_each_entry (hc, _uuid_buckets + h, uuid_list)
 
 118                 if (!strcmp(hc->uuid, str)) {
 
 126 /*-----------------------------------------------------------------
 
 127  * Inserting, removing and renaming a device.
 
 128  *---------------------------------------------------------------*/
 
 129 static struct hash_cell *alloc_cell(const char *name, const char *uuid,
 
 130                                     struct mapped_device *md)
 
 132         struct hash_cell *hc;
 
 134         hc = kmalloc(sizeof(*hc), GFP_KERNEL);
 
 138         hc->name = kstrdup(name, GFP_KERNEL);
 
 148                 hc->uuid = kstrdup(uuid, GFP_KERNEL);
 
 156         INIT_LIST_HEAD(&hc->name_list);
 
 157         INIT_LIST_HEAD(&hc->uuid_list);
 
 163 static void free_cell(struct hash_cell *hc)
 
 173  * The kdev_t and uuid of a device can never change once it is
 
 174  * initially inserted.
 
 176 static int dm_hash_insert(const char *name, const char *uuid, struct mapped_device *md)
 
 178         struct hash_cell *cell, *hc;
 
 181          * Allocate the new cells.
 
 183         cell = alloc_cell(name, uuid, md);
 
 188          * Insert the cell into both hash tables.
 
 190         down_write(&_hash_lock);
 
 191         hc = __get_name_cell(name);
 
 197         list_add(&cell->name_list, _name_buckets + hash_str(name));
 
 200                 hc = __get_uuid_cell(uuid);
 
 202                         list_del(&cell->name_list);
 
 206                 list_add(&cell->uuid_list, _uuid_buckets + hash_str(uuid));
 
 209         dm_set_mdptr(md, cell);
 
 210         up_write(&_hash_lock);
 
 215         up_write(&_hash_lock);
 
 220 static void __hash_remove(struct hash_cell *hc)
 
 222         struct dm_table *table;
 
 224         /* remove from the dev hash */
 
 225         list_del(&hc->uuid_list);
 
 226         list_del(&hc->name_list);
 
 227         dm_set_mdptr(hc->md, NULL);
 
 229         table = dm_get_table(hc->md);
 
 231                 dm_table_event(table);
 
 236                 dm_table_put(hc->new_map);
 
 241 static void dm_hash_remove_all(int keep_open_devices)
 
 243         int i, dev_skipped, dev_removed;
 
 244         struct hash_cell *hc;
 
 245         struct list_head *tmp, *n;
 
 247         down_write(&_hash_lock);
 
 250         dev_skipped = dev_removed = 0;
 
 251         for (i = 0; i < NUM_BUCKETS; i++) {
 
 252                 list_for_each_safe (tmp, n, _name_buckets + i) {
 
 253                         hc = list_entry(tmp, struct hash_cell, name_list);
 
 255                         if (keep_open_devices &&
 
 256                             dm_lock_for_deletion(hc->md)) {
 
 266          * Some mapped devices may be using other mapped devices, so if any
 
 267          * still exist, repeat until we make no further progress.
 
 273                 DMWARN("remove_all left %d open device(s)", dev_skipped);
 
 276         up_write(&_hash_lock);
 
 279 static int dm_hash_rename(const char *old, const char *new)
 
 281         char *new_name, *old_name;
 
 282         struct hash_cell *hc;
 
 283         struct dm_table *table;
 
 288         new_name = kstrdup(new, GFP_KERNEL);
 
 292         down_write(&_hash_lock);
 
 297         hc = __get_name_cell(new);
 
 299                 DMWARN("asked to rename to an already existing name %s -> %s",
 
 302                 up_write(&_hash_lock);
 
 308          * Is there such a device as 'old' ?
 
 310         hc = __get_name_cell(old);
 
 312                 DMWARN("asked to rename a non existent device %s -> %s",
 
 314                 up_write(&_hash_lock);
 
 320          * rename and move the name cell.
 
 322         list_del(&hc->name_list);
 
 325         list_add(&hc->name_list, _name_buckets + hash_str(new_name));
 
 328          * Wake up any dm event waiters.
 
 330         table = dm_get_table(hc->md);
 
 332                 dm_table_event(table);
 
 336         dm_kobject_uevent(hc->md);
 
 339         up_write(&_hash_lock);
 
 344 /*-----------------------------------------------------------------
 
 345  * Implementation of the ioctl commands
 
 346  *---------------------------------------------------------------*/
 
 348  * All the ioctl commands get dispatched to functions with this
 
 351 typedef int (*ioctl_fn)(struct dm_ioctl *param, size_t param_size);
 
 353 static int remove_all(struct dm_ioctl *param, size_t param_size)
 
 355         dm_hash_remove_all(1);
 
 356         param->data_size = 0;
 
 361  * Round up the ptr to an 8-byte boundary.
 
 364 static inline void *align_ptr(void *ptr)
 
 366         return (void *) (((size_t) (ptr + ALIGN_MASK)) & ~ALIGN_MASK);
 
 370  * Retrieves the data payload buffer from an already allocated
 
 373 static void *get_result_buffer(struct dm_ioctl *param, size_t param_size,
 
 376         param->data_start = align_ptr(param + 1) - (void *) param;
 
 378         if (param->data_start < param_size)
 
 379                 *len = param_size - param->data_start;
 
 383         return ((void *) param) + param->data_start;
 
 386 static int list_devices(struct dm_ioctl *param, size_t param_size)
 
 389         struct hash_cell *hc;
 
 390         size_t len, needed = 0;
 
 391         struct gendisk *disk;
 
 392         struct dm_name_list *nl, *old_nl = NULL;
 
 394         down_write(&_hash_lock);
 
 397          * Loop through all the devices working out how much
 
 400         for (i = 0; i < NUM_BUCKETS; i++) {
 
 401                 list_for_each_entry (hc, _name_buckets + i, name_list) {
 
 402                         needed += sizeof(struct dm_name_list);
 
 403                         needed += strlen(hc->name) + 1;
 
 404                         needed += ALIGN_MASK;
 
 409          * Grab our output buffer.
 
 411         nl = get_result_buffer(param, param_size, &len);
 
 413                 param->flags |= DM_BUFFER_FULL_FLAG;
 
 416         param->data_size = param->data_start + needed;
 
 418         nl->dev = 0;    /* Flags no data */
 
 421          * Now loop through filling out the names.
 
 423         for (i = 0; i < NUM_BUCKETS; i++) {
 
 424                 list_for_each_entry (hc, _name_buckets + i, name_list) {
 
 426                                 old_nl->next = (uint32_t) ((void *) nl -
 
 428                         disk = dm_disk(hc->md);
 
 429                         nl->dev = huge_encode_dev(disk_devt(disk));
 
 431                         strcpy(nl->name, hc->name);
 
 434                         nl = align_ptr(((void *) ++nl) + strlen(hc->name) + 1);
 
 439         up_write(&_hash_lock);
 
 443 static void list_version_get_needed(struct target_type *tt, void *needed_param)
 
 445     size_t *needed = needed_param;
 
 447     *needed += sizeof(struct dm_target_versions);
 
 448     *needed += strlen(tt->name);
 
 449     *needed += ALIGN_MASK;
 
 452 static void list_version_get_info(struct target_type *tt, void *param)
 
 454     struct vers_iter *info = param;
 
 456     /* Check space - it might have changed since the first iteration */
 
 457     if ((char *)info->vers + sizeof(tt->version) + strlen(tt->name) + 1 >
 
 460         info->flags = DM_BUFFER_FULL_FLAG;
 
 465         info->old_vers->next = (uint32_t) ((void *)info->vers -
 
 466                                            (void *)info->old_vers);
 
 467     info->vers->version[0] = tt->version[0];
 
 468     info->vers->version[1] = tt->version[1];
 
 469     info->vers->version[2] = tt->version[2];
 
 470     info->vers->next = 0;
 
 471     strcpy(info->vers->name, tt->name);
 
 473     info->old_vers = info->vers;
 
 474     info->vers = align_ptr(((void *) ++info->vers) + strlen(tt->name) + 1);
 
 477 static int list_versions(struct dm_ioctl *param, size_t param_size)
 
 479         size_t len, needed = 0;
 
 480         struct dm_target_versions *vers;
 
 481         struct vers_iter iter_info;
 
 484          * Loop through all the devices working out how much
 
 487         dm_target_iterate(list_version_get_needed, &needed);
 
 490          * Grab our output buffer.
 
 492         vers = get_result_buffer(param, param_size, &len);
 
 494                 param->flags |= DM_BUFFER_FULL_FLAG;
 
 497         param->data_size = param->data_start + needed;
 
 499         iter_info.param_size = param_size;
 
 500         iter_info.old_vers = NULL;
 
 501         iter_info.vers = vers;
 
 503         iter_info.end = (char *)vers+len;
 
 506          * Now loop through filling out the names & versions.
 
 508         dm_target_iterate(list_version_get_info, &iter_info);
 
 509         param->flags |= iter_info.flags;
 
 517 static int check_name(const char *name)
 
 519         if (strchr(name, '/')) {
 
 520                 DMWARN("invalid device name");
 
 528  * Fills in a dm_ioctl structure, ready for sending back to
 
 531 static int __dev_status(struct mapped_device *md, struct dm_ioctl *param)
 
 533         struct gendisk *disk = dm_disk(md);
 
 534         struct dm_table *table;
 
 536         param->flags &= ~(DM_SUSPEND_FLAG | DM_READONLY_FLAG |
 
 537                           DM_ACTIVE_PRESENT_FLAG);
 
 539         if (dm_suspended(md))
 
 540                 param->flags |= DM_SUSPEND_FLAG;
 
 542         param->dev = huge_encode_dev(disk_devt(disk));
 
 545          * Yes, this will be out of date by the time it gets back
 
 546          * to userland, but it is still very useful for
 
 549         param->open_count = dm_open_count(md);
 
 551         if (get_disk_ro(disk))
 
 552                 param->flags |= DM_READONLY_FLAG;
 
 554         param->event_nr = dm_get_event_nr(md);
 
 556         table = dm_get_table(md);
 
 558                 param->flags |= DM_ACTIVE_PRESENT_FLAG;
 
 559                 param->target_count = dm_table_get_num_targets(table);
 
 562                 param->target_count = 0;
 
 567 static int dev_create(struct dm_ioctl *param, size_t param_size)
 
 569         int r, m = DM_ANY_MINOR;
 
 570         struct mapped_device *md;
 
 572         r = check_name(param->name);
 
 576         if (param->flags & DM_PERSISTENT_DEV_FLAG)
 
 577                 m = MINOR(huge_decode_dev(param->dev));
 
 579         r = dm_create(m, &md);
 
 583         r = dm_hash_insert(param->name, *param->uuid ? param->uuid : NULL, md);
 
 589         param->flags &= ~DM_INACTIVE_PRESENT_FLAG;
 
 591         r = __dev_status(md, param);
 
 598  * Always use UUID for lookups if it's present, otherwise use name or dev.
 
 600 static struct hash_cell *__find_device_hash_cell(struct dm_ioctl *param)
 
 602         struct mapped_device *md;
 
 606                 return __get_uuid_cell(param->uuid);
 
 609                 return __get_name_cell(param->name);
 
 611         md = dm_get_md(huge_decode_dev(param->dev));
 
 615         mdptr = dm_get_mdptr(md);
 
 623 static struct mapped_device *find_device(struct dm_ioctl *param)
 
 625         struct hash_cell *hc;
 
 626         struct mapped_device *md = NULL;
 
 628         down_read(&_hash_lock);
 
 629         hc = __find_device_hash_cell(param);
 
 634                  * Sneakily write in both the name and the uuid
 
 635                  * while we have the cell.
 
 637                 strncpy(param->name, hc->name, sizeof(param->name));
 
 639                         strncpy(param->uuid, hc->uuid, sizeof(param->uuid)-1);
 
 641                         param->uuid[0] = '\0';
 
 644                         param->flags |= DM_INACTIVE_PRESENT_FLAG;
 
 646                         param->flags &= ~DM_INACTIVE_PRESENT_FLAG;
 
 648         up_read(&_hash_lock);
 
 653 static int dev_remove(struct dm_ioctl *param, size_t param_size)
 
 655         struct hash_cell *hc;
 
 656         struct mapped_device *md;
 
 659         down_write(&_hash_lock);
 
 660         hc = __find_device_hash_cell(param);
 
 663                 DMWARN("device doesn't appear to be in the dev hash table.");
 
 664                 up_write(&_hash_lock);
 
 671          * Ensure the device is not open and nothing further can open it.
 
 673         r = dm_lock_for_deletion(md);
 
 675                 DMWARN("unable to remove open device %s", hc->name);
 
 676                 up_write(&_hash_lock);
 
 682         up_write(&_hash_lock);
 
 684         param->data_size = 0;
 
 689  * Check a string doesn't overrun the chunk of
 
 690  * memory we copied from userland.
 
 692 static int invalid_str(char *str, void *end)
 
 694         while ((void *) str < end)
 
 701 static int dev_rename(struct dm_ioctl *param, size_t param_size)
 
 704         char *new_name = (char *) param + param->data_start;
 
 706         if (new_name < param->data ||
 
 707             invalid_str(new_name, (void *) param + param_size)) {
 
 708                 DMWARN("Invalid new logical volume name supplied.");
 
 712         r = check_name(new_name);
 
 716         param->data_size = 0;
 
 717         return dm_hash_rename(param->name, new_name);
 
 720 static int dev_set_geometry(struct dm_ioctl *param, size_t param_size)
 
 723         struct mapped_device *md;
 
 724         struct hd_geometry geometry;
 
 725         unsigned long indata[4];
 
 726         char *geostr = (char *) param + param->data_start;
 
 728         md = find_device(param);
 
 732         if (geostr < param->data ||
 
 733             invalid_str(geostr, (void *) param + param_size)) {
 
 734                 DMWARN("Invalid geometry supplied.");
 
 738         x = sscanf(geostr, "%lu %lu %lu %lu", indata,
 
 739                    indata + 1, indata + 2, indata + 3);
 
 742                 DMWARN("Unable to interpret geometry settings.");
 
 746         if (indata[0] > 65535 || indata[1] > 255 ||
 
 747             indata[2] > 255 || indata[3] > ULONG_MAX) {
 
 748                 DMWARN("Geometry exceeds range limits.");
 
 752         geometry.cylinders = indata[0];
 
 753         geometry.heads = indata[1];
 
 754         geometry.sectors = indata[2];
 
 755         geometry.start = indata[3];
 
 757         r = dm_set_geometry(md, &geometry);
 
 759                 r = __dev_status(md, param);
 
 761         param->data_size = 0;
 
 768 static int do_suspend(struct dm_ioctl *param)
 
 771         unsigned suspend_flags = DM_SUSPEND_LOCKFS_FLAG;
 
 772         struct mapped_device *md;
 
 774         md = find_device(param);
 
 778         if (param->flags & DM_SKIP_LOCKFS_FLAG)
 
 779                 suspend_flags &= ~DM_SUSPEND_LOCKFS_FLAG;
 
 780         if (param->flags & DM_NOFLUSH_FLAG)
 
 781                 suspend_flags |= DM_SUSPEND_NOFLUSH_FLAG;
 
 783         if (!dm_suspended(md))
 
 784                 r = dm_suspend(md, suspend_flags);
 
 787                 r = __dev_status(md, param);
 
 793 static int do_resume(struct dm_ioctl *param)
 
 796         unsigned suspend_flags = DM_SUSPEND_LOCKFS_FLAG;
 
 797         struct hash_cell *hc;
 
 798         struct mapped_device *md;
 
 799         struct dm_table *new_map;
 
 801         down_write(&_hash_lock);
 
 803         hc = __find_device_hash_cell(param);
 
 805                 DMWARN("device doesn't appear to be in the dev hash table.");
 
 806                 up_write(&_hash_lock);
 
 812         new_map = hc->new_map;
 
 814         param->flags &= ~DM_INACTIVE_PRESENT_FLAG;
 
 816         up_write(&_hash_lock);
 
 818         /* Do we need to load a new map ? */
 
 820                 /* Suspend if it isn't already suspended */
 
 821                 if (param->flags & DM_SKIP_LOCKFS_FLAG)
 
 822                         suspend_flags &= ~DM_SUSPEND_LOCKFS_FLAG;
 
 823                 if (param->flags & DM_NOFLUSH_FLAG)
 
 824                         suspend_flags |= DM_SUSPEND_NOFLUSH_FLAG;
 
 825                 if (!dm_suspended(md))
 
 826                         dm_suspend(md, suspend_flags);
 
 828                 r = dm_swap_table(md, new_map);
 
 831                         dm_table_put(new_map);
 
 835                 if (dm_table_get_mode(new_map) & FMODE_WRITE)
 
 836                         set_disk_ro(dm_disk(md), 0);
 
 838                         set_disk_ro(dm_disk(md), 1);
 
 840                 dm_table_put(new_map);
 
 843         if (dm_suspended(md))
 
 847                 r = __dev_status(md, param);
 
 854  * Set or unset the suspension state of a device.
 
 855  * If the device already is in the requested state we just return its status.
 
 857 static int dev_suspend(struct dm_ioctl *param, size_t param_size)
 
 859         if (param->flags & DM_SUSPEND_FLAG)
 
 860                 return do_suspend(param);
 
 862         return do_resume(param);
 
 866  * Copies device info back to user space, used by
 
 867  * the create and info ioctls.
 
 869 static int dev_status(struct dm_ioctl *param, size_t param_size)
 
 872         struct mapped_device *md;
 
 874         md = find_device(param);
 
 878         r = __dev_status(md, param);
 
 884  * Build up the status struct for each target
 
 886 static void retrieve_status(struct dm_table *table,
 
 887                             struct dm_ioctl *param, size_t param_size)
 
 889         unsigned int i, num_targets;
 
 890         struct dm_target_spec *spec;
 
 891         char *outbuf, *outptr;
 
 893         size_t remaining, len, used = 0;
 
 895         outptr = outbuf = get_result_buffer(param, param_size, &len);
 
 897         if (param->flags & DM_STATUS_TABLE_FLAG)
 
 898                 type = STATUSTYPE_TABLE;
 
 900                 type = STATUSTYPE_INFO;
 
 902         /* Get all the target info */
 
 903         num_targets = dm_table_get_num_targets(table);
 
 904         for (i = 0; i < num_targets; i++) {
 
 905                 struct dm_target *ti = dm_table_get_target(table, i);
 
 907                 remaining = len - (outptr - outbuf);
 
 908                 if (remaining <= sizeof(struct dm_target_spec)) {
 
 909                         param->flags |= DM_BUFFER_FULL_FLAG;
 
 913                 spec = (struct dm_target_spec *) outptr;
 
 916                 spec->sector_start = ti->begin;
 
 917                 spec->length = ti->len;
 
 918                 strncpy(spec->target_type, ti->type->name,
 
 919                         sizeof(spec->target_type));
 
 921                 outptr += sizeof(struct dm_target_spec);
 
 922                 remaining = len - (outptr - outbuf);
 
 923                 if (remaining <= 0) {
 
 924                         param->flags |= DM_BUFFER_FULL_FLAG;
 
 928                 /* Get the status/table string from the target driver */
 
 929                 if (ti->type->status) {
 
 930                         if (ti->type->status(ti, type, outptr, remaining)) {
 
 931                                 param->flags |= DM_BUFFER_FULL_FLAG;
 
 937                 outptr += strlen(outptr) + 1;
 
 938                 used = param->data_start + (outptr - outbuf);
 
 940                 outptr = align_ptr(outptr);
 
 941                 spec->next = outptr - outbuf;
 
 945                 param->data_size = used;
 
 947         param->target_count = num_targets;
 
 951  * Wait for a device to report an event
 
 953 static int dev_wait(struct dm_ioctl *param, size_t param_size)
 
 956         struct mapped_device *md;
 
 957         struct dm_table *table;
 
 959         md = find_device(param);
 
 964          * Wait for a notification event
 
 966         if (dm_wait_event(md, param->event_nr)) {
 
 972          * The userland program is going to want to know what
 
 973          * changed to trigger the event, so we may as well tell
 
 974          * him and save an ioctl.
 
 976         r = __dev_status(md, param);
 
 980         table = dm_get_table(md);
 
 982                 retrieve_status(table, param, param_size);
 
 991 static inline int get_mode(struct dm_ioctl *param)
 
 993         int mode = FMODE_READ | FMODE_WRITE;
 
 995         if (param->flags & DM_READONLY_FLAG)
 
1001 static int next_target(struct dm_target_spec *last, uint32_t next, void *end,
 
1002                        struct dm_target_spec **spec, char **target_params)
 
1004         *spec = (struct dm_target_spec *) ((unsigned char *) last + next);
 
1005         *target_params = (char *) (*spec + 1);
 
1007         if (*spec < (last + 1))
 
1010         return invalid_str(*target_params, end);
 
1013 static int populate_table(struct dm_table *table,
 
1014                           struct dm_ioctl *param, size_t param_size)
 
1018         struct dm_target_spec *spec = (struct dm_target_spec *) param;
 
1019         uint32_t next = param->data_start;
 
1020         void *end = (void *) param + param_size;
 
1021         char *target_params;
 
1023         if (!param->target_count) {
 
1024                 DMWARN("populate_table: no targets specified");
 
1028         for (i = 0; i < param->target_count; i++) {
 
1030                 r = next_target(spec, next, end, &spec, &target_params);
 
1032                         DMWARN("unable to find target");
 
1036                 r = dm_table_add_target(table, spec->target_type,
 
1037                                         (sector_t) spec->sector_start,
 
1038                                         (sector_t) spec->length,
 
1041                         DMWARN("error adding target to table");
 
1048         return dm_table_complete(table);
 
1051 static int table_load(struct dm_ioctl *param, size_t param_size)
 
1054         struct hash_cell *hc;
 
1056         struct mapped_device *md;
 
1058         md = find_device(param);
 
1062         r = dm_table_create(&t, get_mode(param), param->target_count, md);
 
1066         r = populate_table(t, param, param_size);
 
1072         down_write(&_hash_lock);
 
1073         hc = dm_get_mdptr(md);
 
1074         if (!hc || hc->md != md) {
 
1075                 DMWARN("device has been removed from the dev hash table.");
 
1077                 up_write(&_hash_lock);
 
1083                 dm_table_put(hc->new_map);
 
1085         up_write(&_hash_lock);
 
1087         param->flags |= DM_INACTIVE_PRESENT_FLAG;
 
1088         r = __dev_status(md, param);
 
1096 static int table_clear(struct dm_ioctl *param, size_t param_size)
 
1099         struct hash_cell *hc;
 
1100         struct mapped_device *md;
 
1102         down_write(&_hash_lock);
 
1104         hc = __find_device_hash_cell(param);
 
1106                 DMWARN("device doesn't appear to be in the dev hash table.");
 
1107                 up_write(&_hash_lock);
 
1112                 dm_table_put(hc->new_map);
 
1116         param->flags &= ~DM_INACTIVE_PRESENT_FLAG;
 
1118         r = __dev_status(hc->md, param);
 
1120         up_write(&_hash_lock);
 
1126  * Retrieves a list of devices used by a particular dm device.
 
1128 static void retrieve_deps(struct dm_table *table,
 
1129                           struct dm_ioctl *param, size_t param_size)
 
1131         unsigned int count = 0;
 
1132         struct list_head *tmp;
 
1134         struct dm_dev_internal *dd;
 
1135         struct dm_target_deps *deps;
 
1137         deps = get_result_buffer(param, param_size, &len);
 
1140          * Count the devices.
 
1142         list_for_each (tmp, dm_table_get_devices(table))
 
1146          * Check we have enough space.
 
1148         needed = sizeof(*deps) + (sizeof(*deps->dev) * count);
 
1150                 param->flags |= DM_BUFFER_FULL_FLAG;
 
1155          * Fill in the devices.
 
1157         deps->count = count;
 
1159         list_for_each_entry (dd, dm_table_get_devices(table), list)
 
1160                 deps->dev[count++] = huge_encode_dev(dd->dm_dev.bdev->bd_dev);
 
1162         param->data_size = param->data_start + needed;
 
1165 static int table_deps(struct dm_ioctl *param, size_t param_size)
 
1168         struct mapped_device *md;
 
1169         struct dm_table *table;
 
1171         md = find_device(param);
 
1175         r = __dev_status(md, param);
 
1179         table = dm_get_table(md);
 
1181                 retrieve_deps(table, param, param_size);
 
1182                 dm_table_put(table);
 
1191  * Return the status of a device as a text string for each
 
1194 static int table_status(struct dm_ioctl *param, size_t param_size)
 
1197         struct mapped_device *md;
 
1198         struct dm_table *table;
 
1200         md = find_device(param);
 
1204         r = __dev_status(md, param);
 
1208         table = dm_get_table(md);
 
1210                 retrieve_status(table, param, param_size);
 
1211                 dm_table_put(table);
 
1220  * Pass a message to the target that's at the supplied device offset.
 
1222 static int target_message(struct dm_ioctl *param, size_t param_size)
 
1226         struct mapped_device *md;
 
1227         struct dm_table *table;
 
1228         struct dm_target *ti;
 
1229         struct dm_target_msg *tmsg = (void *) param + param->data_start;
 
1231         md = find_device(param);
 
1235         r = __dev_status(md, param);
 
1239         if (tmsg < (struct dm_target_msg *) param->data ||
 
1240             invalid_str(tmsg->message, (void *) param + param_size)) {
 
1241                 DMWARN("Invalid target message parameters.");
 
1246         r = dm_split_args(&argc, &argv, tmsg->message);
 
1248                 DMWARN("Failed to split target message parameters");
 
1252         table = dm_get_table(md);
 
1256         ti = dm_table_find_target(table, tmsg->sector);
 
1257         if (!dm_target_is_valid(ti)) {
 
1258                 DMWARN("Target message sector outside device.");
 
1260         } else if (ti->type->message)
 
1261                 r = ti->type->message(ti, argc, argv);
 
1263                 DMWARN("Target type does not support messages");
 
1267         dm_table_put(table);
 
1271         param->data_size = 0;
 
1276 /*-----------------------------------------------------------------
 
1277  * Implementation of open/close/ioctl on the special char
 
1279  *---------------------------------------------------------------*/
 
1280 static ioctl_fn lookup_ioctl(unsigned int cmd)
 
1286                 {DM_VERSION_CMD, NULL}, /* version is dealt with elsewhere */
 
1287                 {DM_REMOVE_ALL_CMD, remove_all},
 
1288                 {DM_LIST_DEVICES_CMD, list_devices},
 
1290                 {DM_DEV_CREATE_CMD, dev_create},
 
1291                 {DM_DEV_REMOVE_CMD, dev_remove},
 
1292                 {DM_DEV_RENAME_CMD, dev_rename},
 
1293                 {DM_DEV_SUSPEND_CMD, dev_suspend},
 
1294                 {DM_DEV_STATUS_CMD, dev_status},
 
1295                 {DM_DEV_WAIT_CMD, dev_wait},
 
1297                 {DM_TABLE_LOAD_CMD, table_load},
 
1298                 {DM_TABLE_CLEAR_CMD, table_clear},
 
1299                 {DM_TABLE_DEPS_CMD, table_deps},
 
1300                 {DM_TABLE_STATUS_CMD, table_status},
 
1302                 {DM_LIST_VERSIONS_CMD, list_versions},
 
1304                 {DM_TARGET_MSG_CMD, target_message},
 
1305                 {DM_DEV_SET_GEOMETRY_CMD, dev_set_geometry}
 
1308         return (cmd >= ARRAY_SIZE(_ioctls)) ? NULL : _ioctls[cmd].fn;
 
1312  * As well as checking the version compatibility this always
 
1313  * copies the kernel interface version out.
 
1315 static int check_version(unsigned int cmd, struct dm_ioctl __user *user)
 
1317         uint32_t version[3];
 
1320         if (copy_from_user(version, user->version, sizeof(version)))
 
1323         if ((DM_VERSION_MAJOR != version[0]) ||
 
1324             (DM_VERSION_MINOR < version[1])) {
 
1325                 DMWARN("ioctl interface mismatch: "
 
1326                        "kernel(%u.%u.%u), user(%u.%u.%u), cmd(%d)",
 
1327                        DM_VERSION_MAJOR, DM_VERSION_MINOR,
 
1328                        DM_VERSION_PATCHLEVEL,
 
1329                        version[0], version[1], version[2], cmd);
 
1334          * Fill in the kernel version.
 
1336         version[0] = DM_VERSION_MAJOR;
 
1337         version[1] = DM_VERSION_MINOR;
 
1338         version[2] = DM_VERSION_PATCHLEVEL;
 
1339         if (copy_to_user(user->version, version, sizeof(version)))
 
1345 static void free_params(struct dm_ioctl *param)
 
1350 static int copy_params(struct dm_ioctl __user *user, struct dm_ioctl **param)
 
1352         struct dm_ioctl tmp, *dmi;
 
1354         if (copy_from_user(&tmp, user, sizeof(tmp) - sizeof(tmp.data)))
 
1357         if (tmp.data_size < (sizeof(tmp) - sizeof(tmp.data)))
 
1360         dmi = vmalloc(tmp.data_size);
 
1364         if (copy_from_user(dmi, user, tmp.data_size)) {
 
1373 static int validate_params(uint cmd, struct dm_ioctl *param)
 
1375         /* Always clear this flag */
 
1376         param->flags &= ~DM_BUFFER_FULL_FLAG;
 
1378         /* Ignores parameters */
 
1379         if (cmd == DM_REMOVE_ALL_CMD ||
 
1380             cmd == DM_LIST_DEVICES_CMD ||
 
1381             cmd == DM_LIST_VERSIONS_CMD)
 
1384         if ((cmd == DM_DEV_CREATE_CMD)) {
 
1385                 if (!*param->name) {
 
1386                         DMWARN("name not supplied when creating device");
 
1389         } else if ((*param->uuid && *param->name)) {
 
1390                 DMWARN("only supply one of name or uuid, cmd(%u)", cmd);
 
1394         /* Ensure strings are terminated */
 
1395         param->name[DM_NAME_LEN - 1] = '\0';
 
1396         param->uuid[DM_UUID_LEN - 1] = '\0';
 
1401 static int ctl_ioctl(uint command, struct dm_ioctl __user *user)
 
1405         struct dm_ioctl *uninitialized_var(param);
 
1409         /* only root can play with this */
 
1410         if (!capable(CAP_SYS_ADMIN))
 
1413         if (_IOC_TYPE(command) != DM_IOCTL)
 
1416         cmd = _IOC_NR(command);
 
1419          * Check the interface version passed in.  This also
 
1420          * writes out the kernel's interface version.
 
1422         r = check_version(cmd, user);
 
1427          * Nothing more to do for the version command.
 
1429         if (cmd == DM_VERSION_CMD)
 
1432         fn = lookup_ioctl(cmd);
 
1434                 DMWARN("dm_ctl_ioctl: unknown command 0x%x", command);
 
1439          * Trying to avoid low memory issues when a device is
 
1442         current->flags |= PF_MEMALLOC;
 
1445          * Copy the parameters into kernel space.
 
1447         r = copy_params(user, ¶m);
 
1449         current->flags &= ~PF_MEMALLOC;
 
1454         r = validate_params(cmd, param);
 
1458         param_size = param->data_size;
 
1459         param->data_size = sizeof(*param);
 
1460         r = fn(param, param_size);
 
1463          * Copy the results back to userland.
 
1465         if (!r && copy_to_user(user, param, param->data_size))
 
1473 static long dm_ctl_ioctl(struct file *file, uint command, ulong u)
 
1475         return (long)ctl_ioctl(command, (struct dm_ioctl __user *)u);
 
1478 #ifdef CONFIG_COMPAT
 
1479 static long dm_compat_ctl_ioctl(struct file *file, uint command, ulong u)
 
1481         return (long)dm_ctl_ioctl(file, command, (ulong) compat_ptr(u));
 
1484 #define dm_compat_ctl_ioctl NULL
 
1487 static const struct file_operations _ctl_fops = {
 
1488         .unlocked_ioctl  = dm_ctl_ioctl,
 
1489         .compat_ioctl = dm_compat_ctl_ioctl,
 
1490         .owner   = THIS_MODULE,
 
1493 static struct miscdevice _dm_misc = {
 
1494         .minor          = MISC_DYNAMIC_MINOR,
 
1500  * Create misc character device and link to DM_DIR/control.
 
1502 int __init dm_interface_init(void)
 
1510         r = misc_register(&_dm_misc);
 
1512                 DMERR("misc_register failed for control device");
 
1517         DMINFO("%d.%d.%d%s initialised: %s", DM_VERSION_MAJOR,
 
1518                DM_VERSION_MINOR, DM_VERSION_PATCHLEVEL, DM_VERSION_EXTRA,
 
1523 void dm_interface_exit(void)
 
1525         if (misc_deregister(&_dm_misc) < 0)
 
1526                 DMERR("misc_deregister failed for control device");
 
1532  * dm_copy_name_and_uuid - Copy mapped device name & uuid into supplied buffers
 
1533  * @md: Pointer to mapped_device
 
1534  * @name: Buffer (size DM_NAME_LEN) for name
 
1535  * @uuid: Buffer (size DM_UUID_LEN) for uuid or empty string if uuid not defined
 
1537 int dm_copy_name_and_uuid(struct mapped_device *md, char *name, char *uuid)
 
1540         struct hash_cell *hc;
 
1546         down_read(&_hash_lock);
 
1547         hc = dm_get_mdptr(md);
 
1548         if (!hc || hc->md != md) {
 
1553         strcpy(name, hc->name);
 
1554         strcpy(uuid, hc->uuid ? : "");
 
1557         up_read(&_hash_lock);