Merge with /usr/src/ntfs-2.6.git
[linux-2.6] / fs / ntfs / attrib.c
1 /**
2  * attrib.c - NTFS attribute operations.  Part of the Linux-NTFS project.
3  *
4  * Copyright (c) 2001-2005 Anton Altaparmakov
5  * Copyright (c) 2002 Richard Russon
6  *
7  * This program/include file is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU General Public License as published
9  * by the Free Software Foundation; either version 2 of the License, or
10  * (at your option) any later version.
11  *
12  * This program/include file is distributed in the hope that it will be
13  * useful, but WITHOUT ANY WARRANTY; without even the implied warranty
14  * of MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
15  * GNU General Public License for more details.
16  *
17  * You should have received a copy of the GNU General Public License
18  * along with this program (in the main directory of the Linux-NTFS
19  * distribution in the file COPYING); if not, write to the Free Software
20  * Foundation,Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
21  */
22
23 #include <linux/buffer_head.h>
24 #include <linux/swap.h>
25
26 #include "attrib.h"
27 #include "debug.h"
28 #include "layout.h"
29 #include "lcnalloc.h"
30 #include "malloc.h"
31 #include "mft.h"
32 #include "ntfs.h"
33 #include "types.h"
34
35 /**
36  * ntfs_map_runlist_nolock - map (a part of) a runlist of an ntfs inode
37  * @ni:         ntfs inode for which to map (part of) a runlist
38  * @vcn:        map runlist part containing this vcn
39  *
40  * Map the part of a runlist containing the @vcn of the ntfs inode @ni.
41  *
42  * Return 0 on success and -errno on error.
43  *
44  * Locking: - The runlist must be locked for writing.
45  *          - This function modifies the runlist.
46  */
47 int ntfs_map_runlist_nolock(ntfs_inode *ni, VCN vcn)
48 {
49         ntfs_inode *base_ni;
50         MFT_RECORD *mrec;
51         ntfs_attr_search_ctx *ctx;
52         runlist_element *rl;
53         int err = 0;
54
55         ntfs_debug("Mapping runlist part containing vcn 0x%llx.",
56                         (unsigned long long)vcn);
57         if (!NInoAttr(ni))
58                 base_ni = ni;
59         else
60                 base_ni = ni->ext.base_ntfs_ino;
61         mrec = map_mft_record(base_ni);
62         if (IS_ERR(mrec))
63                 return PTR_ERR(mrec);
64         ctx = ntfs_attr_get_search_ctx(base_ni, mrec);
65         if (unlikely(!ctx)) {
66                 err = -ENOMEM;
67                 goto err_out;
68         }
69         err = ntfs_attr_lookup(ni->type, ni->name, ni->name_len,
70                         CASE_SENSITIVE, vcn, NULL, 0, ctx);
71         if (likely(!err)) {
72                 rl = ntfs_mapping_pairs_decompress(ni->vol, ctx->attr,
73                                 ni->runlist.rl);
74                 if (IS_ERR(rl))
75                         err = PTR_ERR(rl);
76                 else
77                         ni->runlist.rl = rl;
78         }
79         ntfs_attr_put_search_ctx(ctx);
80 err_out:
81         unmap_mft_record(base_ni);
82         return err;
83 }
84
85 /**
86  * ntfs_map_runlist - map (a part of) a runlist of an ntfs inode
87  * @ni:         ntfs inode for which to map (part of) a runlist
88  * @vcn:        map runlist part containing this vcn
89  *
90  * Map the part of a runlist containing the @vcn of the ntfs inode @ni.
91  *
92  * Return 0 on success and -errno on error.
93  *
94  * Locking: - The runlist must be unlocked on entry and is unlocked on return.
95  *          - This function takes the runlist lock for writing and modifies the
96  *            runlist.
97  */
98 int ntfs_map_runlist(ntfs_inode *ni, VCN vcn)
99 {
100         int err = 0;
101
102         down_write(&ni->runlist.lock);
103         /* Make sure someone else didn't do the work while we were sleeping. */
104         if (likely(ntfs_rl_vcn_to_lcn(ni->runlist.rl, vcn) <=
105                         LCN_RL_NOT_MAPPED))
106                 err = ntfs_map_runlist_nolock(ni, vcn);
107         up_write(&ni->runlist.lock);
108         return err;
109 }
110
111 /**
112  * ntfs_attr_vcn_to_lcn_nolock - convert a vcn into a lcn given an ntfs inode
113  * @ni:                 ntfs inode of the attribute whose runlist to search
114  * @vcn:                vcn to convert
115  * @write_locked:       true if the runlist is locked for writing
116  *
117  * Find the virtual cluster number @vcn in the runlist of the ntfs attribute
118  * described by the ntfs inode @ni and return the corresponding logical cluster
119  * number (lcn).
120  *
121  * If the @vcn is not mapped yet, the attempt is made to map the attribute
122  * extent containing the @vcn and the vcn to lcn conversion is retried.
123  *
124  * If @write_locked is true the caller has locked the runlist for writing and
125  * if false for reading.
126  *
127  * Since lcns must be >= 0, we use negative return codes with special meaning:
128  *
129  * Return code  Meaning / Description
130  * ==========================================
131  *  LCN_HOLE    Hole / not allocated on disk.
132  *  LCN_ENOENT  There is no such vcn in the runlist, i.e. @vcn is out of bounds.
133  *  LCN_ENOMEM  Not enough memory to map runlist.
134  *  LCN_EIO     Critical error (runlist/file is corrupt, i/o error, etc).
135  *
136  * Locking: - The runlist must be locked on entry and is left locked on return.
137  *          - If @write_locked is FALSE, i.e. the runlist is locked for reading,
138  *            the lock may be dropped inside the function so you cannot rely on
139  *            the runlist still being the same when this function returns.
140  */
141 LCN ntfs_attr_vcn_to_lcn_nolock(ntfs_inode *ni, const VCN vcn,
142                 const BOOL write_locked)
143 {
144         LCN lcn;
145         BOOL is_retry = FALSE;
146
147         ntfs_debug("Entering for i_ino 0x%lx, vcn 0x%llx, %s_locked.",
148                         ni->mft_no, (unsigned long long)vcn,
149                         write_locked ? "write" : "read");
150         BUG_ON(!ni);
151         BUG_ON(!NInoNonResident(ni));
152         BUG_ON(vcn < 0);
153 retry_remap:
154         /* Convert vcn to lcn.  If that fails map the runlist and retry once. */
155         lcn = ntfs_rl_vcn_to_lcn(ni->runlist.rl, vcn);
156         if (likely(lcn >= LCN_HOLE)) {
157                 ntfs_debug("Done, lcn 0x%llx.", (long long)lcn);
158                 return lcn;
159         }
160         if (lcn != LCN_RL_NOT_MAPPED) {
161                 if (lcn != LCN_ENOENT)
162                         lcn = LCN_EIO;
163         } else if (!is_retry) {
164                 int err;
165
166                 if (!write_locked) {
167                         up_read(&ni->runlist.lock);
168                         down_write(&ni->runlist.lock);
169                         if (unlikely(ntfs_rl_vcn_to_lcn(ni->runlist.rl, vcn) !=
170                                         LCN_RL_NOT_MAPPED)) {
171                                 up_write(&ni->runlist.lock);
172                                 down_read(&ni->runlist.lock);
173                                 goto retry_remap;
174                         }
175                 }
176                 err = ntfs_map_runlist_nolock(ni, vcn);
177                 if (!write_locked) {
178                         up_write(&ni->runlist.lock);
179                         down_read(&ni->runlist.lock);
180                 }
181                 if (likely(!err)) {
182                         is_retry = TRUE;
183                         goto retry_remap;
184                 }
185                 if (err == -ENOENT)
186                         lcn = LCN_ENOENT;
187                 else if (err == -ENOMEM)
188                         lcn = LCN_ENOMEM;
189                 else
190                         lcn = LCN_EIO;
191         }
192         if (lcn != LCN_ENOENT)
193                 ntfs_error(ni->vol->sb, "Failed with error code %lli.",
194                                 (long long)lcn);
195         return lcn;
196 }
197
198 /**
199  * ntfs_attr_find_vcn_nolock - find a vcn in the runlist of an ntfs inode
200  * @ni:                 ntfs inode describing the runlist to search
201  * @vcn:                vcn to find
202  * @write_locked:       true if the runlist is locked for writing
203  *
204  * Find the virtual cluster number @vcn in the runlist described by the ntfs
205  * inode @ni and return the address of the runlist element containing the @vcn.
206  *
207  * If the @vcn is not mapped yet, the attempt is made to map the attribute
208  * extent containing the @vcn and the vcn to lcn conversion is retried.
209  *
210  * If @write_locked is true the caller has locked the runlist for writing and
211  * if false for reading.
212  *
213  * Note you need to distinguish between the lcn of the returned runlist element
214  * being >= 0 and LCN_HOLE.  In the later case you have to return zeroes on
215  * read and allocate clusters on write.
216  *
217  * Return the runlist element containing the @vcn on success and
218  * ERR_PTR(-errno) on error.  You need to test the return value with IS_ERR()
219  * to decide if the return is success or failure and PTR_ERR() to get to the
220  * error code if IS_ERR() is true.
221  *
222  * The possible error return codes are:
223  *      -ENOENT - No such vcn in the runlist, i.e. @vcn is out of bounds.
224  *      -ENOMEM - Not enough memory to map runlist.
225  *      -EIO    - Critical error (runlist/file is corrupt, i/o error, etc).
226  *
227  * Locking: - The runlist must be locked on entry and is left locked on return.
228  *          - If @write_locked is FALSE, i.e. the runlist is locked for reading,
229  *            the lock may be dropped inside the function so you cannot rely on
230  *            the runlist still being the same when this function returns.
231  */
232 runlist_element *ntfs_attr_find_vcn_nolock(ntfs_inode *ni, const VCN vcn,
233                 const BOOL write_locked)
234 {
235         runlist_element *rl;
236         int err = 0;
237         BOOL is_retry = FALSE;
238
239         ntfs_debug("Entering for i_ino 0x%lx, vcn 0x%llx, %s_locked.",
240                         ni->mft_no, (unsigned long long)vcn,
241                         write_locked ? "write" : "read");
242         BUG_ON(!ni);
243         BUG_ON(!NInoNonResident(ni));
244         BUG_ON(vcn < 0);
245 retry_remap:
246         rl = ni->runlist.rl;
247         if (likely(rl && vcn >= rl[0].vcn)) {
248                 while (likely(rl->length)) {
249                         if (unlikely(vcn < rl[1].vcn)) {
250                                 if (likely(rl->lcn >= LCN_HOLE)) {
251                                         ntfs_debug("Done.");
252                                         return rl;
253                                 }
254                                 break;
255                         }
256                         rl++;
257                 }
258                 if (likely(rl->lcn != LCN_RL_NOT_MAPPED)) {
259                         if (likely(rl->lcn == LCN_ENOENT))
260                                 err = -ENOENT;
261                         else
262                                 err = -EIO;
263                 }
264         }
265         if (!err && !is_retry) {
266                 /*
267                  * The @vcn is in an unmapped region, map the runlist and
268                  * retry.
269                  */
270                 if (!write_locked) {
271                         up_read(&ni->runlist.lock);
272                         down_write(&ni->runlist.lock);
273                         if (unlikely(ntfs_rl_vcn_to_lcn(ni->runlist.rl, vcn) !=
274                                         LCN_RL_NOT_MAPPED)) {
275                                 up_write(&ni->runlist.lock);
276                                 down_read(&ni->runlist.lock);
277                                 goto retry_remap;
278                         }
279                 }
280                 err = ntfs_map_runlist_nolock(ni, vcn);
281                 if (!write_locked) {
282                         up_write(&ni->runlist.lock);
283                         down_read(&ni->runlist.lock);
284                 }
285                 if (likely(!err)) {
286                         is_retry = TRUE;
287                         goto retry_remap;
288                 }
289                 /*
290                  * -EINVAL and -ENOENT coming from a failed mapping attempt are
291                  * equivalent to i/o errors for us as they should not happen in
292                  * our code paths.
293                  */
294                 if (err == -EINVAL || err == -ENOENT)
295                         err = -EIO;
296         } else if (!err)
297                 err = -EIO;
298         if (err != -ENOENT)
299                 ntfs_error(ni->vol->sb, "Failed with error code %i.", err);
300         return ERR_PTR(err);
301 }
302
303 /**
304  * ntfs_attr_find - find (next) attribute in mft record
305  * @type:       attribute type to find
306  * @name:       attribute name to find (optional, i.e. NULL means don't care)
307  * @name_len:   attribute name length (only needed if @name present)
308  * @ic:         IGNORE_CASE or CASE_SENSITIVE (ignored if @name not present)
309  * @val:        attribute value to find (optional, resident attributes only)
310  * @val_len:    attribute value length
311  * @ctx:        search context with mft record and attribute to search from
312  *
313  * You should not need to call this function directly.  Use ntfs_attr_lookup()
314  * instead.
315  *
316  * ntfs_attr_find() takes a search context @ctx as parameter and searches the
317  * mft record specified by @ctx->mrec, beginning at @ctx->attr, for an
318  * attribute of @type, optionally @name and @val.
319  *
320  * If the attribute is found, ntfs_attr_find() returns 0 and @ctx->attr will
321  * point to the found attribute.
322  *
323  * If the attribute is not found, ntfs_attr_find() returns -ENOENT and
324  * @ctx->attr will point to the attribute before which the attribute being
325  * searched for would need to be inserted if such an action were to be desired.
326  *
327  * On actual error, ntfs_attr_find() returns -EIO.  In this case @ctx->attr is
328  * undefined and in particular do not rely on it not changing.
329  *
330  * If @ctx->is_first is TRUE, the search begins with @ctx->attr itself.  If it
331  * is FALSE, the search begins after @ctx->attr.
332  *
333  * If @ic is IGNORE_CASE, the @name comparisson is not case sensitive and
334  * @ctx->ntfs_ino must be set to the ntfs inode to which the mft record
335  * @ctx->mrec belongs.  This is so we can get at the ntfs volume and hence at
336  * the upcase table.  If @ic is CASE_SENSITIVE, the comparison is case
337  * sensitive.  When @name is present, @name_len is the @name length in Unicode
338  * characters.
339  *
340  * If @name is not present (NULL), we assume that the unnamed attribute is
341  * being searched for.
342  *
343  * Finally, the resident attribute value @val is looked for, if present.  If
344  * @val is not present (NULL), @val_len is ignored.
345  *
346  * ntfs_attr_find() only searches the specified mft record and it ignores the
347  * presence of an attribute list attribute (unless it is the one being searched
348  * for, obviously).  If you need to take attribute lists into consideration,
349  * use ntfs_attr_lookup() instead (see below).  This also means that you cannot
350  * use ntfs_attr_find() to search for extent records of non-resident
351  * attributes, as extents with lowest_vcn != 0 are usually described by the
352  * attribute list attribute only. - Note that it is possible that the first
353  * extent is only in the attribute list while the last extent is in the base
354  * mft record, so do not rely on being able to find the first extent in the
355  * base mft record.
356  *
357  * Warning: Never use @val when looking for attribute types which can be
358  *          non-resident as this most likely will result in a crash!
359  */
360 static int ntfs_attr_find(const ATTR_TYPE type, const ntfschar *name,
361                 const u32 name_len, const IGNORE_CASE_BOOL ic,
362                 const u8 *val, const u32 val_len, ntfs_attr_search_ctx *ctx)
363 {
364         ATTR_RECORD *a;
365         ntfs_volume *vol = ctx->ntfs_ino->vol;
366         ntfschar *upcase = vol->upcase;
367         u32 upcase_len = vol->upcase_len;
368
369         /*
370          * Iterate over attributes in mft record starting at @ctx->attr, or the
371          * attribute following that, if @ctx->is_first is TRUE.
372          */
373         if (ctx->is_first) {
374                 a = ctx->attr;
375                 ctx->is_first = FALSE;
376         } else
377                 a = (ATTR_RECORD*)((u8*)ctx->attr +
378                                 le32_to_cpu(ctx->attr->length));
379         for (;; a = (ATTR_RECORD*)((u8*)a + le32_to_cpu(a->length))) {
380                 if ((u8*)a < (u8*)ctx->mrec || (u8*)a > (u8*)ctx->mrec +
381                                 le32_to_cpu(ctx->mrec->bytes_allocated))
382                         break;
383                 ctx->attr = a;
384                 if (unlikely(le32_to_cpu(a->type) > le32_to_cpu(type) ||
385                                 a->type == AT_END))
386                         return -ENOENT;
387                 if (unlikely(!a->length))
388                         break;
389                 if (a->type != type)
390                         continue;
391                 /*
392                  * If @name is present, compare the two names.  If @name is
393                  * missing, assume we want an unnamed attribute.
394                  */
395                 if (!name) {
396                         /* The search failed if the found attribute is named. */
397                         if (a->name_length)
398                                 return -ENOENT;
399                 } else if (!ntfs_are_names_equal(name, name_len,
400                             (ntfschar*)((u8*)a + le16_to_cpu(a->name_offset)),
401                             a->name_length, ic, upcase, upcase_len)) {
402                         register int rc;
403
404                         rc = ntfs_collate_names(name, name_len,
405                                         (ntfschar*)((u8*)a +
406                                         le16_to_cpu(a->name_offset)),
407                                         a->name_length, 1, IGNORE_CASE,
408                                         upcase, upcase_len);
409                         /*
410                          * If @name collates before a->name, there is no
411                          * matching attribute.
412                          */
413                         if (rc == -1)
414                                 return -ENOENT;
415                         /* If the strings are not equal, continue search. */
416                         if (rc)
417                                 continue;
418                         rc = ntfs_collate_names(name, name_len,
419                                         (ntfschar*)((u8*)a +
420                                         le16_to_cpu(a->name_offset)),
421                                         a->name_length, 1, CASE_SENSITIVE,
422                                         upcase, upcase_len);
423                         if (rc == -1)
424                                 return -ENOENT;
425                         if (rc)
426                                 continue;
427                 }
428                 /*
429                  * The names match or @name not present and attribute is
430                  * unnamed.  If no @val specified, we have found the attribute
431                  * and are done.
432                  */
433                 if (!val)
434                         return 0;
435                 /* @val is present; compare values. */
436                 else {
437                         register int rc;
438
439                         rc = memcmp(val, (u8*)a + le16_to_cpu(
440                                         a->data.resident.value_offset),
441                                         min_t(u32, val_len, le32_to_cpu(
442                                         a->data.resident.value_length)));
443                         /*
444                          * If @val collates before the current attribute's
445                          * value, there is no matching attribute.
446                          */
447                         if (!rc) {
448                                 register u32 avl;
449
450                                 avl = le32_to_cpu(
451                                                 a->data.resident.value_length);
452                                 if (val_len == avl)
453                                         return 0;
454                                 if (val_len < avl)
455                                         return -ENOENT;
456                         } else if (rc < 0)
457                                 return -ENOENT;
458                 }
459         }
460         ntfs_error(vol->sb, "Inode is corrupt.  Run chkdsk.");
461         NVolSetErrors(vol);
462         return -EIO;
463 }
464
465 /**
466  * load_attribute_list - load an attribute list into memory
467  * @vol:                ntfs volume from which to read
468  * @runlist:            runlist of the attribute list
469  * @al_start:           destination buffer
470  * @size:               size of the destination buffer in bytes
471  * @initialized_size:   initialized size of the attribute list
472  *
473  * Walk the runlist @runlist and load all clusters from it copying them into
474  * the linear buffer @al. The maximum number of bytes copied to @al is @size
475  * bytes. Note, @size does not need to be a multiple of the cluster size. If
476  * @initialized_size is less than @size, the region in @al between
477  * @initialized_size and @size will be zeroed and not read from disk.
478  *
479  * Return 0 on success or -errno on error.
480  */
481 int load_attribute_list(ntfs_volume *vol, runlist *runlist, u8 *al_start,
482                 const s64 size, const s64 initialized_size)
483 {
484         LCN lcn;
485         u8 *al = al_start;
486         u8 *al_end = al + initialized_size;
487         runlist_element *rl;
488         struct buffer_head *bh;
489         struct super_block *sb;
490         unsigned long block_size;
491         unsigned long block, max_block;
492         int err = 0;
493         unsigned char block_size_bits;
494
495         ntfs_debug("Entering.");
496         if (!vol || !runlist || !al || size <= 0 || initialized_size < 0 ||
497                         initialized_size > size)
498                 return -EINVAL;
499         if (!initialized_size) {
500                 memset(al, 0, size);
501                 return 0;
502         }
503         sb = vol->sb;
504         block_size = sb->s_blocksize;
505         block_size_bits = sb->s_blocksize_bits;
506         down_read(&runlist->lock);
507         rl = runlist->rl;
508         /* Read all clusters specified by the runlist one run at a time. */
509         while (rl->length) {
510                 lcn = ntfs_rl_vcn_to_lcn(rl, rl->vcn);
511                 ntfs_debug("Reading vcn = 0x%llx, lcn = 0x%llx.",
512                                 (unsigned long long)rl->vcn,
513                                 (unsigned long long)lcn);
514                 /* The attribute list cannot be sparse. */
515                 if (lcn < 0) {
516                         ntfs_error(sb, "ntfs_rl_vcn_to_lcn() failed.  Cannot "
517                                         "read attribute list.");
518                         goto err_out;
519                 }
520                 block = lcn << vol->cluster_size_bits >> block_size_bits;
521                 /* Read the run from device in chunks of block_size bytes. */
522                 max_block = block + (rl->length << vol->cluster_size_bits >>
523                                 block_size_bits);
524                 ntfs_debug("max_block = 0x%lx.", max_block);
525                 do {
526                         ntfs_debug("Reading block = 0x%lx.", block);
527                         bh = sb_bread(sb, block);
528                         if (!bh) {
529                                 ntfs_error(sb, "sb_bread() failed. Cannot "
530                                                 "read attribute list.");
531                                 goto err_out;
532                         }
533                         if (al + block_size >= al_end)
534                                 goto do_final;
535                         memcpy(al, bh->b_data, block_size);
536                         brelse(bh);
537                         al += block_size;
538                 } while (++block < max_block);
539                 rl++;
540         }
541         if (initialized_size < size) {
542 initialize:
543                 memset(al_start + initialized_size, 0, size - initialized_size);
544         }
545 done:
546         up_read(&runlist->lock);
547         return err;
548 do_final:
549         if (al < al_end) {
550                 /*
551                  * Partial block.
552                  *
553                  * Note: The attribute list can be smaller than its allocation
554                  * by multiple clusters.  This has been encountered by at least
555                  * two people running Windows XP, thus we cannot do any
556                  * truncation sanity checking here. (AIA)
557                  */
558                 memcpy(al, bh->b_data, al_end - al);
559                 brelse(bh);
560                 if (initialized_size < size)
561                         goto initialize;
562                 goto done;
563         }
564         brelse(bh);
565         /* Real overflow! */
566         ntfs_error(sb, "Attribute list buffer overflow. Read attribute list "
567                         "is truncated.");
568 err_out:
569         err = -EIO;
570         goto done;
571 }
572
573 /**
574  * ntfs_external_attr_find - find an attribute in the attribute list of an inode
575  * @type:       attribute type to find
576  * @name:       attribute name to find (optional, i.e. NULL means don't care)
577  * @name_len:   attribute name length (only needed if @name present)
578  * @ic:         IGNORE_CASE or CASE_SENSITIVE (ignored if @name not present)
579  * @lowest_vcn: lowest vcn to find (optional, non-resident attributes only)
580  * @val:        attribute value to find (optional, resident attributes only)
581  * @val_len:    attribute value length
582  * @ctx:        search context with mft record and attribute to search from
583  *
584  * You should not need to call this function directly.  Use ntfs_attr_lookup()
585  * instead.
586  *
587  * Find an attribute by searching the attribute list for the corresponding
588  * attribute list entry.  Having found the entry, map the mft record if the
589  * attribute is in a different mft record/inode, ntfs_attr_find() the attribute
590  * in there and return it.
591  *
592  * On first search @ctx->ntfs_ino must be the base mft record and @ctx must
593  * have been obtained from a call to ntfs_attr_get_search_ctx().  On subsequent
594  * calls @ctx->ntfs_ino can be any extent inode, too (@ctx->base_ntfs_ino is
595  * then the base inode).
596  *
597  * After finishing with the attribute/mft record you need to call
598  * ntfs_attr_put_search_ctx() to cleanup the search context (unmapping any
599  * mapped inodes, etc).
600  *
601  * If the attribute is found, ntfs_external_attr_find() returns 0 and
602  * @ctx->attr will point to the found attribute.  @ctx->mrec will point to the
603  * mft record in which @ctx->attr is located and @ctx->al_entry will point to
604  * the attribute list entry for the attribute.
605  *
606  * If the attribute is not found, ntfs_external_attr_find() returns -ENOENT and
607  * @ctx->attr will point to the attribute in the base mft record before which
608  * the attribute being searched for would need to be inserted if such an action
609  * were to be desired.  @ctx->mrec will point to the mft record in which
610  * @ctx->attr is located and @ctx->al_entry will point to the attribute list
611  * entry of the attribute before which the attribute being searched for would
612  * need to be inserted if such an action were to be desired.
613  *
614  * Thus to insert the not found attribute, one wants to add the attribute to
615  * @ctx->mrec (the base mft record) and if there is not enough space, the
616  * attribute should be placed in a newly allocated extent mft record.  The
617  * attribute list entry for the inserted attribute should be inserted in the
618  * attribute list attribute at @ctx->al_entry.
619  *
620  * On actual error, ntfs_external_attr_find() returns -EIO.  In this case
621  * @ctx->attr is undefined and in particular do not rely on it not changing.
622  */
623 static int ntfs_external_attr_find(const ATTR_TYPE type,
624                 const ntfschar *name, const u32 name_len,
625                 const IGNORE_CASE_BOOL ic, const VCN lowest_vcn,
626                 const u8 *val, const u32 val_len, ntfs_attr_search_ctx *ctx)
627 {
628         ntfs_inode *base_ni, *ni;
629         ntfs_volume *vol;
630         ATTR_LIST_ENTRY *al_entry, *next_al_entry;
631         u8 *al_start, *al_end;
632         ATTR_RECORD *a;
633         ntfschar *al_name;
634         u32 al_name_len;
635         int err = 0;
636         static const char *es = " Unmount and run chkdsk.";
637
638         ni = ctx->ntfs_ino;
639         base_ni = ctx->base_ntfs_ino;
640         ntfs_debug("Entering for inode 0x%lx, type 0x%x.", ni->mft_no, type);
641         if (!base_ni) {
642                 /* First call happens with the base mft record. */
643                 base_ni = ctx->base_ntfs_ino = ctx->ntfs_ino;
644                 ctx->base_mrec = ctx->mrec;
645         }
646         if (ni == base_ni)
647                 ctx->base_attr = ctx->attr;
648         if (type == AT_END)
649                 goto not_found;
650         vol = base_ni->vol;
651         al_start = base_ni->attr_list;
652         al_end = al_start + base_ni->attr_list_size;
653         if (!ctx->al_entry)
654                 ctx->al_entry = (ATTR_LIST_ENTRY*)al_start;
655         /*
656          * Iterate over entries in attribute list starting at @ctx->al_entry,
657          * or the entry following that, if @ctx->is_first is TRUE.
658          */
659         if (ctx->is_first) {
660                 al_entry = ctx->al_entry;
661                 ctx->is_first = FALSE;
662         } else
663                 al_entry = (ATTR_LIST_ENTRY*)((u8*)ctx->al_entry +
664                                 le16_to_cpu(ctx->al_entry->length));
665         for (;; al_entry = next_al_entry) {
666                 /* Out of bounds check. */
667                 if ((u8*)al_entry < base_ni->attr_list ||
668                                 (u8*)al_entry > al_end)
669                         break;  /* Inode is corrupt. */
670                 ctx->al_entry = al_entry;
671                 /* Catch the end of the attribute list. */
672                 if ((u8*)al_entry == al_end)
673                         goto not_found;
674                 if (!al_entry->length)
675                         break;
676                 if ((u8*)al_entry + 6 > al_end || (u8*)al_entry +
677                                 le16_to_cpu(al_entry->length) > al_end)
678                         break;
679                 next_al_entry = (ATTR_LIST_ENTRY*)((u8*)al_entry +
680                                 le16_to_cpu(al_entry->length));
681                 if (le32_to_cpu(al_entry->type) > le32_to_cpu(type))
682                         goto not_found;
683                 if (type != al_entry->type)
684                         continue;
685                 /*
686                  * If @name is present, compare the two names.  If @name is
687                  * missing, assume we want an unnamed attribute.
688                  */
689                 al_name_len = al_entry->name_length;
690                 al_name = (ntfschar*)((u8*)al_entry + al_entry->name_offset);
691                 if (!name) {
692                         if (al_name_len)
693                                 goto not_found;
694                 } else if (!ntfs_are_names_equal(al_name, al_name_len, name,
695                                 name_len, ic, vol->upcase, vol->upcase_len)) {
696                         register int rc;
697
698                         rc = ntfs_collate_names(name, name_len, al_name,
699                                         al_name_len, 1, IGNORE_CASE,
700                                         vol->upcase, vol->upcase_len);
701                         /*
702                          * If @name collates before al_name, there is no
703                          * matching attribute.
704                          */
705                         if (rc == -1)
706                                 goto not_found;
707                         /* If the strings are not equal, continue search. */
708                         if (rc)
709                                 continue;
710                         /*
711                          * FIXME: Reverse engineering showed 0, IGNORE_CASE but
712                          * that is inconsistent with ntfs_attr_find().  The
713                          * subsequent rc checks were also different.  Perhaps I
714                          * made a mistake in one of the two.  Need to recheck
715                          * which is correct or at least see what is going on...
716                          * (AIA)
717                          */
718                         rc = ntfs_collate_names(name, name_len, al_name,
719                                         al_name_len, 1, CASE_SENSITIVE,
720                                         vol->upcase, vol->upcase_len);
721                         if (rc == -1)
722                                 goto not_found;
723                         if (rc)
724                                 continue;
725                 }
726                 /*
727                  * The names match or @name not present and attribute is
728                  * unnamed.  Now check @lowest_vcn.  Continue search if the
729                  * next attribute list entry still fits @lowest_vcn.  Otherwise
730                  * we have reached the right one or the search has failed.
731                  */
732                 if (lowest_vcn && (u8*)next_al_entry >= al_start            &&
733                                 (u8*)next_al_entry + 6 < al_end             &&
734                                 (u8*)next_al_entry + le16_to_cpu(
735                                         next_al_entry->length) <= al_end    &&
736                                 sle64_to_cpu(next_al_entry->lowest_vcn) <=
737                                         lowest_vcn                          &&
738                                 next_al_entry->type == al_entry->type       &&
739                                 next_al_entry->name_length == al_name_len   &&
740                                 ntfs_are_names_equal((ntfschar*)((u8*)
741                                         next_al_entry +
742                                         next_al_entry->name_offset),
743                                         next_al_entry->name_length,
744                                         al_name, al_name_len, CASE_SENSITIVE,
745                                         vol->upcase, vol->upcase_len))
746                         continue;
747                 if (MREF_LE(al_entry->mft_reference) == ni->mft_no) {
748                         if (MSEQNO_LE(al_entry->mft_reference) != ni->seq_no) {
749                                 ntfs_error(vol->sb, "Found stale mft "
750                                                 "reference in attribute list "
751                                                 "of base inode 0x%lx.%s",
752                                                 base_ni->mft_no, es);
753                                 err = -EIO;
754                                 break;
755                         }
756                 } else { /* Mft references do not match. */
757                         /* If there is a mapped record unmap it first. */
758                         if (ni != base_ni)
759                                 unmap_extent_mft_record(ni);
760                         /* Do we want the base record back? */
761                         if (MREF_LE(al_entry->mft_reference) ==
762                                         base_ni->mft_no) {
763                                 ni = ctx->ntfs_ino = base_ni;
764                                 ctx->mrec = ctx->base_mrec;
765                         } else {
766                                 /* We want an extent record. */
767                                 ctx->mrec = map_extent_mft_record(base_ni,
768                                                 le64_to_cpu(
769                                                 al_entry->mft_reference), &ni);
770                                 if (IS_ERR(ctx->mrec)) {
771                                         ntfs_error(vol->sb, "Failed to map "
772                                                         "extent mft record "
773                                                         "0x%lx of base inode "
774                                                         "0x%lx.%s",
775                                                         MREF_LE(al_entry->
776                                                         mft_reference),
777                                                         base_ni->mft_no, es);
778                                         err = PTR_ERR(ctx->mrec);
779                                         if (err == -ENOENT)
780                                                 err = -EIO;
781                                         /* Cause @ctx to be sanitized below. */
782                                         ni = NULL;
783                                         break;
784                                 }
785                                 ctx->ntfs_ino = ni;
786                         }
787                         ctx->attr = (ATTR_RECORD*)((u8*)ctx->mrec +
788                                         le16_to_cpu(ctx->mrec->attrs_offset));
789                 }
790                 /*
791                  * ctx->vfs_ino, ctx->mrec, and ctx->attr now point to the
792                  * mft record containing the attribute represented by the
793                  * current al_entry.
794                  */
795                 /*
796                  * We could call into ntfs_attr_find() to find the right
797                  * attribute in this mft record but this would be less
798                  * efficient and not quite accurate as ntfs_attr_find() ignores
799                  * the attribute instance numbers for example which become
800                  * important when one plays with attribute lists.  Also,
801                  * because a proper match has been found in the attribute list
802                  * entry above, the comparison can now be optimized.  So it is
803                  * worth re-implementing a simplified ntfs_attr_find() here.
804                  */
805                 a = ctx->attr;
806                 /*
807                  * Use a manual loop so we can still use break and continue
808                  * with the same meanings as above.
809                  */
810 do_next_attr_loop:
811                 if ((u8*)a < (u8*)ctx->mrec || (u8*)a > (u8*)ctx->mrec +
812                                 le32_to_cpu(ctx->mrec->bytes_allocated))
813                         break;
814                 if (a->type == AT_END)
815                         continue;
816                 if (!a->length)
817                         break;
818                 if (al_entry->instance != a->instance)
819                         goto do_next_attr;
820                 /*
821                  * If the type and/or the name are mismatched between the
822                  * attribute list entry and the attribute record, there is
823                  * corruption so we break and return error EIO.
824                  */
825                 if (al_entry->type != a->type)
826                         break;
827                 if (!ntfs_are_names_equal((ntfschar*)((u8*)a +
828                                 le16_to_cpu(a->name_offset)), a->name_length,
829                                 al_name, al_name_len, CASE_SENSITIVE,
830                                 vol->upcase, vol->upcase_len))
831                         break;
832                 ctx->attr = a;
833                 /*
834                  * If no @val specified or @val specified and it matches, we
835                  * have found it!
836                  */
837                 if (!val || (!a->non_resident && le32_to_cpu(
838                                 a->data.resident.value_length) == val_len &&
839                                 !memcmp((u8*)a +
840                                 le16_to_cpu(a->data.resident.value_offset),
841                                 val, val_len))) {
842                         ntfs_debug("Done, found.");
843                         return 0;
844                 }
845 do_next_attr:
846                 /* Proceed to the next attribute in the current mft record. */
847                 a = (ATTR_RECORD*)((u8*)a + le32_to_cpu(a->length));
848                 goto do_next_attr_loop;
849         }
850         if (!err) {
851                 ntfs_error(vol->sb, "Base inode 0x%lx contains corrupt "
852                                 "attribute list attribute.%s", base_ni->mft_no,
853                                 es);
854                 err = -EIO;
855         }
856         if (ni != base_ni) {
857                 if (ni)
858                         unmap_extent_mft_record(ni);
859                 ctx->ntfs_ino = base_ni;
860                 ctx->mrec = ctx->base_mrec;
861                 ctx->attr = ctx->base_attr;
862         }
863         if (err != -ENOMEM)
864                 NVolSetErrors(vol);
865         return err;
866 not_found:
867         /*
868          * If we were looking for AT_END, we reset the search context @ctx and
869          * use ntfs_attr_find() to seek to the end of the base mft record.
870          */
871         if (type == AT_END) {
872                 ntfs_attr_reinit_search_ctx(ctx);
873                 return ntfs_attr_find(AT_END, name, name_len, ic, val, val_len,
874                                 ctx);
875         }
876         /*
877          * The attribute was not found.  Before we return, we want to ensure
878          * @ctx->mrec and @ctx->attr indicate the position at which the
879          * attribute should be inserted in the base mft record.  Since we also
880          * want to preserve @ctx->al_entry we cannot reinitialize the search
881          * context using ntfs_attr_reinit_search_ctx() as this would set
882          * @ctx->al_entry to NULL.  Thus we do the necessary bits manually (see
883          * ntfs_attr_init_search_ctx() below).  Note, we _only_ preserve
884          * @ctx->al_entry as the remaining fields (base_*) are identical to
885          * their non base_ counterparts and we cannot set @ctx->base_attr
886          * correctly yet as we do not know what @ctx->attr will be set to by
887          * the call to ntfs_attr_find() below.
888          */
889         if (ni != base_ni)
890                 unmap_extent_mft_record(ni);
891         ctx->mrec = ctx->base_mrec;
892         ctx->attr = (ATTR_RECORD*)((u8*)ctx->mrec +
893                         le16_to_cpu(ctx->mrec->attrs_offset));
894         ctx->is_first = TRUE;
895         ctx->ntfs_ino = base_ni;
896         ctx->base_ntfs_ino = NULL;
897         ctx->base_mrec = NULL;
898         ctx->base_attr = NULL;
899         /*
900          * In case there are multiple matches in the base mft record, need to
901          * keep enumerating until we get an attribute not found response (or
902          * another error), otherwise we would keep returning the same attribute
903          * over and over again and all programs using us for enumeration would
904          * lock up in a tight loop.
905          */
906         do {
907                 err = ntfs_attr_find(type, name, name_len, ic, val, val_len,
908                                 ctx);
909         } while (!err);
910         ntfs_debug("Done, not found.");
911         return err;
912 }
913
914 /**
915  * ntfs_attr_lookup - find an attribute in an ntfs inode
916  * @type:       attribute type to find
917  * @name:       attribute name to find (optional, i.e. NULL means don't care)
918  * @name_len:   attribute name length (only needed if @name present)
919  * @ic:         IGNORE_CASE or CASE_SENSITIVE (ignored if @name not present)
920  * @lowest_vcn: lowest vcn to find (optional, non-resident attributes only)
921  * @val:        attribute value to find (optional, resident attributes only)
922  * @val_len:    attribute value length
923  * @ctx:        search context with mft record and attribute to search from
924  *
925  * Find an attribute in an ntfs inode.  On first search @ctx->ntfs_ino must
926  * be the base mft record and @ctx must have been obtained from a call to
927  * ntfs_attr_get_search_ctx().
928  *
929  * This function transparently handles attribute lists and @ctx is used to
930  * continue searches where they were left off at.
931  *
932  * After finishing with the attribute/mft record you need to call
933  * ntfs_attr_put_search_ctx() to cleanup the search context (unmapping any
934  * mapped inodes, etc).
935  *
936  * Return 0 if the search was successful and -errno if not.
937  *
938  * When 0, @ctx->attr is the found attribute and it is in mft record
939  * @ctx->mrec.  If an attribute list attribute is present, @ctx->al_entry is
940  * the attribute list entry of the found attribute.
941  *
942  * When -ENOENT, @ctx->attr is the attribute which collates just after the
943  * attribute being searched for, i.e. if one wants to add the attribute to the
944  * mft record this is the correct place to insert it into.  If an attribute
945  * list attribute is present, @ctx->al_entry is the attribute list entry which
946  * collates just after the attribute list entry of the attribute being searched
947  * for, i.e. if one wants to add the attribute to the mft record this is the
948  * correct place to insert its attribute list entry into.
949  *
950  * When -errno != -ENOENT, an error occured during the lookup.  @ctx->attr is
951  * then undefined and in particular you should not rely on it not changing.
952  */
953 int ntfs_attr_lookup(const ATTR_TYPE type, const ntfschar *name,
954                 const u32 name_len, const IGNORE_CASE_BOOL ic,
955                 const VCN lowest_vcn, const u8 *val, const u32 val_len,
956                 ntfs_attr_search_ctx *ctx)
957 {
958         ntfs_inode *base_ni;
959
960         ntfs_debug("Entering.");
961         if (ctx->base_ntfs_ino)
962                 base_ni = ctx->base_ntfs_ino;
963         else
964                 base_ni = ctx->ntfs_ino;
965         /* Sanity check, just for debugging really. */
966         BUG_ON(!base_ni);
967         if (!NInoAttrList(base_ni) || type == AT_ATTRIBUTE_LIST)
968                 return ntfs_attr_find(type, name, name_len, ic, val, val_len,
969                                 ctx);
970         return ntfs_external_attr_find(type, name, name_len, ic, lowest_vcn,
971                         val, val_len, ctx);
972 }
973
974 /**
975  * ntfs_attr_init_search_ctx - initialize an attribute search context
976  * @ctx:        attribute search context to initialize
977  * @ni:         ntfs inode with which to initialize the search context
978  * @mrec:       mft record with which to initialize the search context
979  *
980  * Initialize the attribute search context @ctx with @ni and @mrec.
981  */
982 static inline void ntfs_attr_init_search_ctx(ntfs_attr_search_ctx *ctx,
983                 ntfs_inode *ni, MFT_RECORD *mrec)
984 {
985         ctx->mrec = mrec;
986         /* Sanity checks are performed elsewhere. */
987         ctx->attr = (ATTR_RECORD*)((u8*)mrec + le16_to_cpu(mrec->attrs_offset));
988         ctx->is_first = TRUE;
989         ctx->ntfs_ino = ni;
990         ctx->al_entry = NULL;
991         ctx->base_ntfs_ino = NULL;
992         ctx->base_mrec = NULL;
993         ctx->base_attr = NULL;
994 }
995
996 /**
997  * ntfs_attr_reinit_search_ctx - reinitialize an attribute search context
998  * @ctx:        attribute search context to reinitialize
999  *
1000  * Reinitialize the attribute search context @ctx, unmapping an associated
1001  * extent mft record if present, and initialize the search context again.
1002  *
1003  * This is used when a search for a new attribute is being started to reset
1004  * the search context to the beginning.
1005  */
1006 void ntfs_attr_reinit_search_ctx(ntfs_attr_search_ctx *ctx)
1007 {
1008         if (likely(!ctx->base_ntfs_ino)) {
1009                 /* No attribute list. */
1010                 ctx->is_first = TRUE;
1011                 /* Sanity checks are performed elsewhere. */
1012                 ctx->attr = (ATTR_RECORD*)((u8*)ctx->mrec +
1013                                 le16_to_cpu(ctx->mrec->attrs_offset));
1014                 /*
1015                  * This needs resetting due to ntfs_external_attr_find() which
1016                  * can leave it set despite having zeroed ctx->base_ntfs_ino.
1017                  */
1018                 ctx->al_entry = NULL;
1019                 return;
1020         } /* Attribute list. */
1021         if (ctx->ntfs_ino != ctx->base_ntfs_ino)
1022                 unmap_extent_mft_record(ctx->ntfs_ino);
1023         ntfs_attr_init_search_ctx(ctx, ctx->base_ntfs_ino, ctx->base_mrec);
1024         return;
1025 }
1026
1027 /**
1028  * ntfs_attr_get_search_ctx - allocate/initialize a new attribute search context
1029  * @ni:         ntfs inode with which to initialize the search context
1030  * @mrec:       mft record with which to initialize the search context
1031  *
1032  * Allocate a new attribute search context, initialize it with @ni and @mrec,
1033  * and return it. Return NULL if allocation failed.
1034  */
1035 ntfs_attr_search_ctx *ntfs_attr_get_search_ctx(ntfs_inode *ni, MFT_RECORD *mrec)
1036 {
1037         ntfs_attr_search_ctx *ctx;
1038
1039         ctx = kmem_cache_alloc(ntfs_attr_ctx_cache, SLAB_NOFS);
1040         if (ctx)
1041                 ntfs_attr_init_search_ctx(ctx, ni, mrec);
1042         return ctx;
1043 }
1044
1045 /**
1046  * ntfs_attr_put_search_ctx - release an attribute search context
1047  * @ctx:        attribute search context to free
1048  *
1049  * Release the attribute search context @ctx, unmapping an associated extent
1050  * mft record if present.
1051  */
1052 void ntfs_attr_put_search_ctx(ntfs_attr_search_ctx *ctx)
1053 {
1054         if (ctx->base_ntfs_ino && ctx->ntfs_ino != ctx->base_ntfs_ino)
1055                 unmap_extent_mft_record(ctx->ntfs_ino);
1056         kmem_cache_free(ntfs_attr_ctx_cache, ctx);
1057         return;
1058 }
1059
1060 #ifdef NTFS_RW
1061
1062 /**
1063  * ntfs_attr_find_in_attrdef - find an attribute in the $AttrDef system file
1064  * @vol:        ntfs volume to which the attribute belongs
1065  * @type:       attribute type which to find
1066  *
1067  * Search for the attribute definition record corresponding to the attribute
1068  * @type in the $AttrDef system file.
1069  *
1070  * Return the attribute type definition record if found and NULL if not found.
1071  */
1072 static ATTR_DEF *ntfs_attr_find_in_attrdef(const ntfs_volume *vol,
1073                 const ATTR_TYPE type)
1074 {
1075         ATTR_DEF *ad;
1076
1077         BUG_ON(!vol->attrdef);
1078         BUG_ON(!type);
1079         for (ad = vol->attrdef; (u8*)ad - (u8*)vol->attrdef <
1080                         vol->attrdef_size && ad->type; ++ad) {
1081                 /* We have not found it yet, carry on searching. */
1082                 if (likely(le32_to_cpu(ad->type) < le32_to_cpu(type)))
1083                         continue;
1084                 /* We found the attribute; return it. */
1085                 if (likely(ad->type == type))
1086                         return ad;
1087                 /* We have gone too far already.  No point in continuing. */
1088                 break;
1089         }
1090         /* Attribute not found. */
1091         ntfs_debug("Attribute type 0x%x not found in $AttrDef.",
1092                         le32_to_cpu(type));
1093         return NULL;
1094 }
1095
1096 /**
1097  * ntfs_attr_size_bounds_check - check a size of an attribute type for validity
1098  * @vol:        ntfs volume to which the attribute belongs
1099  * @type:       attribute type which to check
1100  * @size:       size which to check
1101  *
1102  * Check whether the @size in bytes is valid for an attribute of @type on the
1103  * ntfs volume @vol.  This information is obtained from $AttrDef system file.
1104  *
1105  * Return 0 if valid, -ERANGE if not valid, or -ENOENT if the attribute is not
1106  * listed in $AttrDef.
1107  */
1108 int ntfs_attr_size_bounds_check(const ntfs_volume *vol, const ATTR_TYPE type,
1109                 const s64 size)
1110 {
1111         ATTR_DEF *ad;
1112
1113         BUG_ON(size < 0);
1114         /*
1115          * $ATTRIBUTE_LIST has a maximum size of 256kiB, but this is not
1116          * listed in $AttrDef.
1117          */
1118         if (unlikely(type == AT_ATTRIBUTE_LIST && size > 256 * 1024))
1119                 return -ERANGE;
1120         /* Get the $AttrDef entry for the attribute @type. */
1121         ad = ntfs_attr_find_in_attrdef(vol, type);
1122         if (unlikely(!ad))
1123                 return -ENOENT;
1124         /* Do the bounds check. */
1125         if (((sle64_to_cpu(ad->min_size) > 0) &&
1126                         size < sle64_to_cpu(ad->min_size)) ||
1127                         ((sle64_to_cpu(ad->max_size) > 0) && size >
1128                         sle64_to_cpu(ad->max_size)))
1129                 return -ERANGE;
1130         return 0;
1131 }
1132
1133 /**
1134  * ntfs_attr_can_be_non_resident - check if an attribute can be non-resident
1135  * @vol:        ntfs volume to which the attribute belongs
1136  * @type:       attribute type which to check
1137  *
1138  * Check whether the attribute of @type on the ntfs volume @vol is allowed to
1139  * be non-resident.  This information is obtained from $AttrDef system file.
1140  *
1141  * Return 0 if the attribute is allowed to be non-resident, -EPERM if not, and
1142  * -ENOENT if the attribute is not listed in $AttrDef.
1143  */
1144 int ntfs_attr_can_be_non_resident(const ntfs_volume *vol, const ATTR_TYPE type)
1145 {
1146         ATTR_DEF *ad;
1147
1148         /* Find the attribute definition record in $AttrDef. */
1149         ad = ntfs_attr_find_in_attrdef(vol, type);
1150         if (unlikely(!ad))
1151                 return -ENOENT;
1152         /* Check the flags and return the result. */
1153         if (ad->flags & ATTR_DEF_RESIDENT)
1154                 return -EPERM;
1155         return 0;
1156 }
1157
1158 /**
1159  * ntfs_attr_can_be_resident - check if an attribute can be resident
1160  * @vol:        ntfs volume to which the attribute belongs
1161  * @type:       attribute type which to check
1162  *
1163  * Check whether the attribute of @type on the ntfs volume @vol is allowed to
1164  * be resident.  This information is derived from our ntfs knowledge and may
1165  * not be completely accurate, especially when user defined attributes are
1166  * present.  Basically we allow everything to be resident except for index
1167  * allocation and $EA attributes.
1168  *
1169  * Return 0 if the attribute is allowed to be non-resident and -EPERM if not.
1170  *
1171  * Warning: In the system file $MFT the attribute $Bitmap must be non-resident
1172  *          otherwise windows will not boot (blue screen of death)!  We cannot
1173  *          check for this here as we do not know which inode's $Bitmap is
1174  *          being asked about so the caller needs to special case this.
1175  */
1176 int ntfs_attr_can_be_resident(const ntfs_volume *vol, const ATTR_TYPE type)
1177 {
1178         if (type == AT_INDEX_ALLOCATION || type == AT_EA)
1179                 return -EPERM;
1180         return 0;
1181 }
1182
1183 /**
1184  * ntfs_attr_record_resize - resize an attribute record
1185  * @m:          mft record containing attribute record
1186  * @a:          attribute record to resize
1187  * @new_size:   new size in bytes to which to resize the attribute record @a
1188  *
1189  * Resize the attribute record @a, i.e. the resident part of the attribute, in
1190  * the mft record @m to @new_size bytes.
1191  *
1192  * Return 0 on success and -errno on error.  The following error codes are
1193  * defined:
1194  *      -ENOSPC - Not enough space in the mft record @m to perform the resize.
1195  *
1196  * Note: On error, no modifications have been performed whatsoever.
1197  *
1198  * Warning: If you make a record smaller without having copied all the data you
1199  *          are interested in the data may be overwritten.
1200  */
1201 int ntfs_attr_record_resize(MFT_RECORD *m, ATTR_RECORD *a, u32 new_size)
1202 {
1203         ntfs_debug("Entering for new_size %u.", new_size);
1204         /* Align to 8 bytes if it is not already done. */
1205         if (new_size & 7)
1206                 new_size = (new_size + 7) & ~7;
1207         /* If the actual attribute length has changed, move things around. */
1208         if (new_size != le32_to_cpu(a->length)) {
1209                 u32 new_muse = le32_to_cpu(m->bytes_in_use) -
1210                                 le32_to_cpu(a->length) + new_size;
1211                 /* Not enough space in this mft record. */
1212                 if (new_muse > le32_to_cpu(m->bytes_allocated))
1213                         return -ENOSPC;
1214                 /* Move attributes following @a to their new location. */
1215                 memmove((u8*)a + new_size, (u8*)a + le32_to_cpu(a->length),
1216                                 le32_to_cpu(m->bytes_in_use) - ((u8*)a -
1217                                 (u8*)m) - le32_to_cpu(a->length));
1218                 /* Adjust @m to reflect the change in used space. */
1219                 m->bytes_in_use = cpu_to_le32(new_muse);
1220                 /* Adjust @a to reflect the new size. */
1221                 if (new_size >= offsetof(ATTR_REC, length) + sizeof(a->length))
1222                         a->length = cpu_to_le32(new_size);
1223         }
1224         return 0;
1225 }
1226
1227 /**
1228  * ntfs_attr_make_non_resident - convert a resident to a non-resident attribute
1229  * @ni:         ntfs inode describing the attribute to convert
1230  *
1231  * Convert the resident ntfs attribute described by the ntfs inode @ni to a
1232  * non-resident one.
1233  *
1234  * Return 0 on success and -errno on error.  The following error return codes
1235  * are defined:
1236  *      -EPERM  - The attribute is not allowed to be non-resident.
1237  *      -ENOMEM - Not enough memory.
1238  *      -ENOSPC - Not enough disk space.
1239  *      -EINVAL - Attribute not defined on the volume.
1240  *      -EIO    - I/o error or other error.
1241  * Note that -ENOSPC is also returned in the case that there is not enough
1242  * space in the mft record to do the conversion.  This can happen when the mft
1243  * record is already very full.  The caller is responsible for trying to make
1244  * space in the mft record and trying again.  FIXME: Do we need a separate
1245  * error return code for this kind of -ENOSPC or is it always worth trying
1246  * again in case the attribute may then fit in a resident state so no need to
1247  * make it non-resident at all?  Ho-hum...  (AIA)
1248  *
1249  * NOTE to self: No changes in the attribute list are required to move from
1250  *               a resident to a non-resident attribute.
1251  *
1252  * Locking: - The caller must hold i_sem on the inode.
1253  */
1254 int ntfs_attr_make_non_resident(ntfs_inode *ni)
1255 {
1256         s64 new_size;
1257         struct inode *vi = VFS_I(ni);
1258         ntfs_volume *vol = ni->vol;
1259         ntfs_inode *base_ni;
1260         MFT_RECORD *m;
1261         ATTR_RECORD *a;
1262         ntfs_attr_search_ctx *ctx;
1263         struct page *page;
1264         runlist_element *rl;
1265         u8 *kaddr;
1266         unsigned long flags;
1267         int mp_size, mp_ofs, name_ofs, arec_size, err, err2;
1268         u32 attr_size;
1269         u8 old_res_attr_flags;
1270
1271         /* Check that the attribute is allowed to be non-resident. */
1272         err = ntfs_attr_can_be_non_resident(vol, ni->type);
1273         if (unlikely(err)) {
1274                 if (err == -EPERM)
1275                         ntfs_debug("Attribute is not allowed to be "
1276                                         "non-resident.");
1277                 else
1278                         ntfs_debug("Attribute not defined on the NTFS "
1279                                         "volume!");
1280                 return err;
1281         }
1282         /*
1283          * The size needs to be aligned to a cluster boundary for allocation
1284          * purposes.
1285          */
1286         new_size = (i_size_read(vi) + vol->cluster_size - 1) &
1287                         ~(vol->cluster_size - 1);
1288         if (new_size > 0) {
1289                 /*
1290                  * Will need the page later and since the page lock nests
1291                  * outside all ntfs locks, we need to get the page now.
1292                  */
1293                 page = find_or_create_page(vi->i_mapping, 0,
1294                                 mapping_gfp_mask(vi->i_mapping));
1295                 if (unlikely(!page))
1296                         return -ENOMEM;
1297                 /* Start by allocating clusters to hold the attribute value. */
1298                 rl = ntfs_cluster_alloc(vol, 0, new_size >>
1299                                 vol->cluster_size_bits, -1, DATA_ZONE);
1300                 if (IS_ERR(rl)) {
1301                         err = PTR_ERR(rl);
1302                         ntfs_debug("Failed to allocate cluster%s, error code "
1303                                         "%i.\n", (new_size >>
1304                                         vol->cluster_size_bits) > 1 ? "s" : "",
1305                                         err);
1306                         goto page_err_out;
1307                 }
1308         } else {
1309                 rl = NULL;
1310                 page = NULL;
1311         }
1312         /* Determine the size of the mapping pairs array. */
1313         mp_size = ntfs_get_size_for_mapping_pairs(vol, rl, 0);
1314         if (unlikely(mp_size < 0)) {
1315                 err = mp_size;
1316                 ntfs_debug("Failed to get size for mapping pairs array, error "
1317                                 "code %i.", err);
1318                 goto rl_err_out;
1319         }
1320         down_write(&ni->runlist.lock);
1321         if (!NInoAttr(ni))
1322                 base_ni = ni;
1323         else
1324                 base_ni = ni->ext.base_ntfs_ino;
1325         m = map_mft_record(base_ni);
1326         if (IS_ERR(m)) {
1327                 err = PTR_ERR(m);
1328                 m = NULL;
1329                 ctx = NULL;
1330                 goto err_out;
1331         }
1332         ctx = ntfs_attr_get_search_ctx(base_ni, m);
1333         if (unlikely(!ctx)) {
1334                 err = -ENOMEM;
1335                 goto err_out;
1336         }
1337         err = ntfs_attr_lookup(ni->type, ni->name, ni->name_len,
1338                         CASE_SENSITIVE, 0, NULL, 0, ctx);
1339         if (unlikely(err)) {
1340                 if (err == -ENOENT)
1341                         err = -EIO;
1342                 goto err_out;
1343         }
1344         m = ctx->mrec;
1345         a = ctx->attr;
1346         BUG_ON(NInoNonResident(ni));
1347         BUG_ON(a->non_resident);
1348         /*
1349          * Calculate new offsets for the name and the mapping pairs array.
1350          * We assume the attribute is not compressed or sparse.
1351          */
1352         name_ofs = (offsetof(ATTR_REC,
1353                         data.non_resident.compressed_size) + 7) & ~7;
1354         mp_ofs = (name_ofs + a->name_length * sizeof(ntfschar) + 7) & ~7;
1355         /*
1356          * Determine the size of the resident part of the now non-resident
1357          * attribute record.
1358          */
1359         arec_size = (mp_ofs + mp_size + 7) & ~7;
1360         /*
1361          * If the page is not uptodate bring it uptodate by copying from the
1362          * attribute value.
1363          */
1364         attr_size = le32_to_cpu(a->data.resident.value_length);
1365         BUG_ON(attr_size != i_size_read(vi));
1366         if (page && !PageUptodate(page)) {
1367                 kaddr = kmap_atomic(page, KM_USER0);
1368                 memcpy(kaddr, (u8*)a +
1369                                 le16_to_cpu(a->data.resident.value_offset),
1370                                 attr_size);
1371                 memset(kaddr + attr_size, 0, PAGE_CACHE_SIZE - attr_size);
1372                 kunmap_atomic(kaddr, KM_USER0);
1373                 flush_dcache_page(page);
1374                 SetPageUptodate(page);
1375         }
1376         /* Backup the attribute flag. */
1377         old_res_attr_flags = a->data.resident.flags;
1378         /* Resize the resident part of the attribute record. */
1379         err = ntfs_attr_record_resize(m, a, arec_size);
1380         if (unlikely(err))
1381                 goto err_out;
1382         /*
1383          * Convert the resident part of the attribute record to describe a
1384          * non-resident attribute.
1385          */
1386         a->non_resident = 1;
1387         /* Move the attribute name if it exists and update the offset. */
1388         if (a->name_length)
1389                 memmove((u8*)a + name_ofs, (u8*)a + le16_to_cpu(a->name_offset),
1390                                 a->name_length * sizeof(ntfschar));
1391         a->name_offset = cpu_to_le16(name_ofs);
1392         /*
1393          * FIXME: For now just clear all of these as we do not support them
1394          * when writing.
1395          */
1396         a->flags &= cpu_to_le16(0xffff & ~le16_to_cpu(ATTR_IS_SPARSE |
1397                         ATTR_IS_ENCRYPTED | ATTR_COMPRESSION_MASK));
1398         /* Setup the fields specific to non-resident attributes. */
1399         a->data.non_resident.lowest_vcn = 0;
1400         a->data.non_resident.highest_vcn = cpu_to_sle64((new_size - 1) >>
1401                         vol->cluster_size_bits);
1402         a->data.non_resident.mapping_pairs_offset = cpu_to_le16(mp_ofs);
1403         a->data.non_resident.compression_unit = 0;
1404         memset(&a->data.non_resident.reserved, 0,
1405                         sizeof(a->data.non_resident.reserved));
1406         a->data.non_resident.allocated_size = cpu_to_sle64(new_size);
1407         a->data.non_resident.data_size =
1408                         a->data.non_resident.initialized_size =
1409                         cpu_to_sle64(attr_size);
1410         /* Generate the mapping pairs array into the attribute record. */
1411         err = ntfs_mapping_pairs_build(vol, (u8*)a + mp_ofs,
1412                         arec_size - mp_ofs, rl, 0, NULL);
1413         if (unlikely(err)) {
1414                 ntfs_debug("Failed to build mapping pairs, error code %i.",
1415                                 err);
1416                 goto undo_err_out;
1417         }
1418         /* Setup the in-memory attribute structure to be non-resident. */
1419         /*
1420          * FIXME: For now just clear all of these as we do not support them
1421          * when writing.
1422          */
1423         NInoClearSparse(ni);
1424         NInoClearEncrypted(ni);
1425         NInoClearCompressed(ni);
1426         ni->runlist.rl = rl;
1427         write_lock_irqsave(&ni->size_lock, flags);
1428         ni->allocated_size = new_size;
1429         write_unlock_irqrestore(&ni->size_lock, flags);
1430         /*
1431          * This needs to be last since the address space operations ->readpage
1432          * and ->writepage can run concurrently with us as they are not
1433          * serialized on i_sem.  Note, we are not allowed to fail once we flip
1434          * this switch, which is another reason to do this last.
1435          */
1436         NInoSetNonResident(ni);
1437         /* Mark the mft record dirty, so it gets written back. */
1438         flush_dcache_mft_record_page(ctx->ntfs_ino);
1439         mark_mft_record_dirty(ctx->ntfs_ino);
1440         ntfs_attr_put_search_ctx(ctx);
1441         unmap_mft_record(base_ni);
1442         up_write(&ni->runlist.lock);
1443         if (page) {
1444                 set_page_dirty(page);
1445                 unlock_page(page);
1446                 mark_page_accessed(page);
1447                 page_cache_release(page);
1448         }
1449         ntfs_debug("Done.");
1450         return 0;
1451 undo_err_out:
1452         /* Convert the attribute back into a resident attribute. */
1453         a->non_resident = 0;
1454         /* Move the attribute name if it exists and update the offset. */
1455         name_ofs = (offsetof(ATTR_RECORD, data.resident.reserved) +
1456                         sizeof(a->data.resident.reserved) + 7) & ~7;
1457         if (a->name_length)
1458                 memmove((u8*)a + name_ofs, (u8*)a + le16_to_cpu(a->name_offset),
1459                                 a->name_length * sizeof(ntfschar));
1460         mp_ofs = (name_ofs + a->name_length * sizeof(ntfschar) + 7) & ~7;
1461         a->name_offset = cpu_to_le16(name_ofs);
1462         arec_size = (mp_ofs + attr_size + 7) & ~7;
1463         /* Resize the resident part of the attribute record. */
1464         err2 = ntfs_attr_record_resize(m, a, arec_size);
1465         if (unlikely(err2)) {
1466                 /*
1467                  * This cannot happen (well if memory corruption is at work it
1468                  * could happen in theory), but deal with it as well as we can.
1469                  * If the old size is too small, truncate the attribute,
1470                  * otherwise simply give it a larger allocated size.
1471                  * FIXME: Should check whether chkdsk complains when the
1472                  * allocated size is much bigger than the resident value size.
1473                  */
1474                 arec_size = le32_to_cpu(a->length);
1475                 if ((mp_ofs + attr_size) > arec_size) {
1476                         err2 = attr_size;
1477                         attr_size = arec_size - mp_ofs;
1478                         ntfs_error(vol->sb, "Failed to undo partial resident "
1479                                         "to non-resident attribute "
1480                                         "conversion.  Truncating inode 0x%lx, "
1481                                         "attribute type 0x%x from %i bytes to "
1482                                         "%i bytes to maintain metadata "
1483                                         "consistency.  THIS MEANS YOU ARE "
1484                                         "LOSING %i BYTES DATA FROM THIS %s.",
1485                                         vi->i_ino,
1486                                         (unsigned)le32_to_cpu(ni->type),
1487                                         err2, attr_size, err2 - attr_size,
1488                                         ((ni->type == AT_DATA) &&
1489                                         !ni->name_len) ? "FILE": "ATTRIBUTE");
1490                         write_lock_irqsave(&ni->size_lock, flags);
1491                         ni->initialized_size = attr_size;
1492                         i_size_write(vi, attr_size);
1493                         write_unlock_irqrestore(&ni->size_lock, flags);
1494                 }
1495         }
1496         /* Setup the fields specific to resident attributes. */
1497         a->data.resident.value_length = cpu_to_le32(attr_size);
1498         a->data.resident.value_offset = cpu_to_le16(mp_ofs);
1499         a->data.resident.flags = old_res_attr_flags;
1500         memset(&a->data.resident.reserved, 0,
1501                         sizeof(a->data.resident.reserved));
1502         /* Copy the data from the page back to the attribute value. */
1503         if (page) {
1504                 kaddr = kmap_atomic(page, KM_USER0);
1505                 memcpy((u8*)a + mp_ofs, kaddr, attr_size);
1506                 kunmap_atomic(kaddr, KM_USER0);
1507         }
1508         /* Setup the allocated size in the ntfs inode in case it changed. */
1509         write_lock_irqsave(&ni->size_lock, flags);
1510         ni->allocated_size = arec_size - mp_ofs;
1511         write_unlock_irqrestore(&ni->size_lock, flags);
1512         /* Mark the mft record dirty, so it gets written back. */
1513         flush_dcache_mft_record_page(ctx->ntfs_ino);
1514         mark_mft_record_dirty(ctx->ntfs_ino);
1515 err_out:
1516         if (ctx)
1517                 ntfs_attr_put_search_ctx(ctx);
1518         if (m)
1519                 unmap_mft_record(base_ni);
1520         ni->runlist.rl = NULL;
1521         up_write(&ni->runlist.lock);
1522 rl_err_out:
1523         if (rl) {
1524                 if (ntfs_cluster_free_from_rl(vol, rl) < 0) {
1525                         ntfs_error(vol->sb, "Failed to release allocated "
1526                                         "cluster(s) in error code path.  Run "
1527                                         "chkdsk to recover the lost "
1528                                         "cluster(s).");
1529                         NVolSetErrors(vol);
1530                 }
1531                 ntfs_free(rl);
1532 page_err_out:
1533                 unlock_page(page);
1534                 page_cache_release(page);
1535         }
1536         if (err == -EINVAL)
1537                 err = -EIO;
1538         return err;
1539 }
1540
1541 /**
1542  * ntfs_attr_set - fill (a part of) an attribute with a byte
1543  * @ni:         ntfs inode describing the attribute to fill
1544  * @ofs:        offset inside the attribute at which to start to fill
1545  * @cnt:        number of bytes to fill
1546  * @val:        the unsigned 8-bit value with which to fill the attribute
1547  *
1548  * Fill @cnt bytes of the attribute described by the ntfs inode @ni starting at
1549  * byte offset @ofs inside the attribute with the constant byte @val.
1550  *
1551  * This function is effectively like memset() applied to an ntfs attribute.
1552  * Note thie function actually only operates on the page cache pages belonging
1553  * to the ntfs attribute and it marks them dirty after doing the memset().
1554  * Thus it relies on the vm dirty page write code paths to cause the modified
1555  * pages to be written to the mft record/disk.
1556  *
1557  * Return 0 on success and -errno on error.  An error code of -ESPIPE means
1558  * that @ofs + @cnt were outside the end of the attribute and no write was
1559  * performed.
1560  */
1561 int ntfs_attr_set(ntfs_inode *ni, const s64 ofs, const s64 cnt, const u8 val)
1562 {
1563         ntfs_volume *vol = ni->vol;
1564         struct address_space *mapping;
1565         struct page *page;
1566         u8 *kaddr;
1567         pgoff_t idx, end;
1568         unsigned int start_ofs, end_ofs, size;
1569
1570         ntfs_debug("Entering for ofs 0x%llx, cnt 0x%llx, val 0x%hx.",
1571                         (long long)ofs, (long long)cnt, val);
1572         BUG_ON(ofs < 0);
1573         BUG_ON(cnt < 0);
1574         if (!cnt)
1575                 goto done;
1576         mapping = VFS_I(ni)->i_mapping;
1577         /* Work out the starting index and page offset. */
1578         idx = ofs >> PAGE_CACHE_SHIFT;
1579         start_ofs = ofs & ~PAGE_CACHE_MASK;
1580         /* Work out the ending index and page offset. */
1581         end = ofs + cnt;
1582         end_ofs = end & ~PAGE_CACHE_MASK;
1583         /* If the end is outside the inode size return -ESPIPE. */
1584         if (unlikely(end > i_size_read(VFS_I(ni)))) {
1585                 ntfs_error(vol->sb, "Request exceeds end of attribute.");
1586                 return -ESPIPE;
1587         }
1588         end >>= PAGE_CACHE_SHIFT;
1589         /* If there is a first partial page, need to do it the slow way. */
1590         if (start_ofs) {
1591                 page = read_cache_page(mapping, idx,
1592                                 (filler_t*)mapping->a_ops->readpage, NULL);
1593                 if (IS_ERR(page)) {
1594                         ntfs_error(vol->sb, "Failed to read first partial "
1595                                         "page (sync error, index 0x%lx).", idx);
1596                         return PTR_ERR(page);
1597                 }
1598                 wait_on_page_locked(page);
1599                 if (unlikely(!PageUptodate(page))) {
1600                         ntfs_error(vol->sb, "Failed to read first partial page "
1601                                         "(async error, index 0x%lx).", idx);
1602                         page_cache_release(page);
1603                         return PTR_ERR(page);
1604                 }
1605                 /*
1606                  * If the last page is the same as the first page, need to
1607                  * limit the write to the end offset.
1608                  */
1609                 size = PAGE_CACHE_SIZE;
1610                 if (idx == end)
1611                         size = end_ofs;
1612                 kaddr = kmap_atomic(page, KM_USER0);
1613                 memset(kaddr + start_ofs, val, size - start_ofs);
1614                 flush_dcache_page(page);
1615                 kunmap_atomic(kaddr, KM_USER0);
1616                 set_page_dirty(page);
1617                 page_cache_release(page);
1618                 if (idx == end)
1619                         goto done;
1620                 idx++;
1621         }
1622         /* Do the whole pages the fast way. */
1623         for (; idx < end; idx++) {
1624                 /* Find or create the current page.  (The page is locked.) */
1625                 page = grab_cache_page(mapping, idx);
1626                 if (unlikely(!page)) {
1627                         ntfs_error(vol->sb, "Insufficient memory to grab "
1628                                         "page (index 0x%lx).", idx);
1629                         return -ENOMEM;
1630                 }
1631                 kaddr = kmap_atomic(page, KM_USER0);
1632                 memset(kaddr, val, PAGE_CACHE_SIZE);
1633                 flush_dcache_page(page);
1634                 kunmap_atomic(kaddr, KM_USER0);
1635                 /*
1636                  * If the page has buffers, mark them uptodate since buffer
1637                  * state and not page state is definitive in 2.6 kernels.
1638                  */
1639                 if (page_has_buffers(page)) {
1640                         struct buffer_head *bh, *head;
1641
1642                         bh = head = page_buffers(page);
1643                         do {
1644                                 set_buffer_uptodate(bh);
1645                         } while ((bh = bh->b_this_page) != head);
1646                 }
1647                 /* Now that buffers are uptodate, set the page uptodate, too. */
1648                 SetPageUptodate(page);
1649                 /*
1650                  * Set the page and all its buffers dirty and mark the inode
1651                  * dirty, too.  The VM will write the page later on.
1652                  */
1653                 set_page_dirty(page);
1654                 /* Finally unlock and release the page. */
1655                 unlock_page(page);
1656                 page_cache_release(page);
1657         }
1658         /* If there is a last partial page, need to do it the slow way. */
1659         if (end_ofs) {
1660                 page = read_cache_page(mapping, idx,
1661                                 (filler_t*)mapping->a_ops->readpage, NULL);
1662                 if (IS_ERR(page)) {
1663                         ntfs_error(vol->sb, "Failed to read last partial page "
1664                                         "(sync error, index 0x%lx).", idx);
1665                         return PTR_ERR(page);
1666                 }
1667                 wait_on_page_locked(page);
1668                 if (unlikely(!PageUptodate(page))) {
1669                         ntfs_error(vol->sb, "Failed to read last partial page "
1670                                         "(async error, index 0x%lx).", idx);
1671                         page_cache_release(page);
1672                         return PTR_ERR(page);
1673                 }
1674                 kaddr = kmap_atomic(page, KM_USER0);
1675                 memset(kaddr, val, end_ofs);
1676                 flush_dcache_page(page);
1677                 kunmap_atomic(kaddr, KM_USER0);
1678                 set_page_dirty(page);
1679                 page_cache_release(page);
1680         }
1681 done:
1682         ntfs_debug("Done.");
1683         return 0;
1684 }
1685
1686 #endif /* NTFS_RW */