msi: Also register components without a key path.
[wine] / dlls / msi / table.c
1 /*
2  * Implementation of the Microsoft Installer (msi.dll)
3  *
4  * Copyright 2002-2005 Mike McCormack for CodeWeavers
5  *
6  * This library is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU Lesser General Public
8  * License as published by the Free Software Foundation; either
9  * version 2.1 of the License, or (at your option) any later version.
10  *
11  * This library is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public
17  * License along with this library; if not, write to the Free Software
18  * Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA 02110-1301, USA
19  */
20
21 #include <stdarg.h>
22 #include <assert.h>
23
24 #define COBJMACROS
25 #define NONAMELESSUNION
26 #define NONAMELESSSTRUCT
27
28 #include "windef.h"
29 #include "winbase.h"
30 #include "winerror.h"
31 #include "msi.h"
32 #include "msiquery.h"
33 #include "objbase.h"
34 #include "objidl.h"
35 #include "winnls.h"
36 #include "msipriv.h"
37 #include "query.h"
38
39 #include "wine/debug.h"
40 #include "wine/unicode.h"
41
42 WINE_DEFAULT_DEBUG_CHANNEL(msidb);
43
44 #define MSITABLE_HASH_TABLE_SIZE 37
45
46 typedef struct tagMSICOLUMNHASHENTRY
47 {
48     struct tagMSICOLUMNHASHENTRY *next;
49     UINT value;
50     UINT row;
51 } MSICOLUMNHASHENTRY;
52
53 typedef struct tagMSICOLUMNINFO
54 {
55     LPWSTR tablename;
56     UINT   number;
57     LPWSTR colname;
58     UINT   type;
59     UINT   offset;
60     INT    ref_count;
61     BOOL   temporary;
62     MSICOLUMNHASHENTRY **hash_table;
63 } MSICOLUMNINFO;
64
65 typedef struct tagMSIORDERINFO
66 {
67     UINT *reorder;
68     UINT num_cols;
69     UINT cols[1];
70 } MSIORDERINFO;
71
72 struct tagMSITABLE
73 {
74     BYTE **data;
75     BOOL *data_persistent;
76     UINT row_count;
77     struct list entry;
78     MSICOLUMNINFO *colinfo;
79     UINT col_count;
80     MSICONDITION persistent;
81     INT ref_count;
82     WCHAR name[1];
83 };
84
85 static const WCHAR szStringData[] = {
86     '_','S','t','r','i','n','g','D','a','t','a',0 };
87 static const WCHAR szStringPool[] = {
88     '_','S','t','r','i','n','g','P','o','o','l',0 };
89
90 /* information for default tables */
91 static WCHAR szTables[]  = { '_','T','a','b','l','e','s',0 };
92 static WCHAR szTable[]  = { 'T','a','b','l','e',0 };
93 static WCHAR szName[]    = { 'N','a','m','e',0 };
94 static WCHAR szColumns[] = { '_','C','o','l','u','m','n','s',0 };
95 static WCHAR szNumber[]  = { 'N','u','m','b','e','r',0 };
96 static WCHAR szType[]    = { 'T','y','p','e',0 };
97
98 static const MSICOLUMNINFO _Columns_cols[4] = {
99     { szColumns, 1, szTable,  MSITYPE_VALID | MSITYPE_STRING | MSITYPE_KEY | 64, 0, 0, 0, NULL },
100     { szColumns, 2, szNumber, MSITYPE_VALID | MSITYPE_KEY | 2,     2, 0, 0, NULL },
101     { szColumns, 3, szName,   MSITYPE_VALID | MSITYPE_STRING | 64, 4, 0, 0, NULL },
102     { szColumns, 4, szType,   MSITYPE_VALID | 2,                   6, 0, 0, NULL },
103 };
104
105 static const MSICOLUMNINFO _Tables_cols[1] = {
106     { szTables,  1, szName,   MSITYPE_VALID | MSITYPE_STRING | MSITYPE_KEY | 64, 0, 0, 0, NULL },
107 };
108
109 #define MAX_STREAM_NAME 0x1f
110
111 static UINT table_get_column_info( MSIDATABASE *db, LPCWSTR name,
112        MSICOLUMNINFO **pcols, UINT *pcount );
113 static void table_calc_column_offsets( MSIDATABASE *db, MSICOLUMNINFO *colinfo,
114        DWORD count );
115 static UINT get_tablecolumns( MSIDATABASE *db,
116        LPCWSTR szTableName, MSICOLUMNINFO *colinfo, UINT *sz);
117 static void msi_free_colinfo( MSICOLUMNINFO *colinfo, UINT count );
118
119 static inline UINT bytes_per_column( MSIDATABASE *db, const MSICOLUMNINFO *col, UINT bytes_per_strref )
120 {
121     if( MSITYPE_IS_BINARY(col->type) )
122         return 2;
123
124     if( col->type & MSITYPE_STRING )
125         return bytes_per_strref;
126
127     if( (col->type & 0xff) <= 2)
128         return 2;
129
130     if( (col->type & 0xff) != 4 )
131         ERR("Invalid column size!\n");
132
133     return 4;
134 }
135
136 static int utf2mime(int x)
137 {
138     if( (x>='0') && (x<='9') )
139         return x-'0';
140     if( (x>='A') && (x<='Z') )
141         return x-'A'+10;
142     if( (x>='a') && (x<='z') )
143         return x-'a'+10+26;
144     if( x=='.' )
145         return 10+26+26;
146     if( x=='_' )
147         return 10+26+26+1;
148     return -1;
149 }
150
151 LPWSTR encode_streamname(BOOL bTable, LPCWSTR in)
152 {
153     DWORD count = MAX_STREAM_NAME;
154     DWORD ch, next;
155     LPWSTR out, p;
156
157     if( !bTable )
158         count = lstrlenW( in )+2;
159     if (!(out = msi_alloc( count*sizeof(WCHAR) ))) return NULL;
160     p = out;
161
162     if( bTable )
163     {
164          *p++ = 0x4840;
165          count --;
166     }
167     while( count -- ) 
168     {
169         ch = *in++;
170         if( !ch )
171         {
172             *p = ch;
173             return out;
174         }
175         if( ( ch < 0x80 ) && ( utf2mime(ch) >= 0 ) )
176         {
177             ch = utf2mime(ch) + 0x4800;
178             next = *in;
179             if( next && (next<0x80) )
180             {
181                 next = utf2mime(next);
182                 if( next != -1 )
183                 {
184                      next += 0x3ffffc0;
185                      ch += (next<<6);
186                      in++;
187                 }
188             }
189         }
190         *p++ = ch;
191     }
192     ERR("Failed to encode stream name (%s)\n",debugstr_w(in));
193     msi_free( out );
194     return NULL;
195 }
196
197 static int mime2utf(int x)
198 {
199     if( x<10 )
200         return x + '0';
201     if( x<(10+26))
202         return x - 10 + 'A';
203     if( x<(10+26+26))
204         return x - 10 - 26 + 'a';
205     if( x == (10+26+26) )
206         return '.';
207     return '_';
208 }
209
210 BOOL decode_streamname(LPCWSTR in, LPWSTR out)
211 {
212     WCHAR ch;
213     DWORD count = 0;
214
215     while ( (ch = *in++) )
216     {
217         if( (ch >= 0x3800 ) && (ch < 0x4840 ) )
218         {
219             if( ch >= 0x4800 )
220                 ch = mime2utf(ch-0x4800);
221             else
222             {
223                 ch -= 0x3800;
224                 *out++ = mime2utf(ch&0x3f);
225                 count++;
226                 ch = mime2utf((ch>>6)&0x3f);
227             }
228         }
229         *out++ = ch;
230         count++;
231     }
232     *out = 0;
233     return count;
234 }
235
236 void enum_stream_names( IStorage *stg )
237 {
238     IEnumSTATSTG *stgenum = NULL;
239     HRESULT r;
240     STATSTG stat;
241     ULONG n, count;
242     WCHAR name[0x40];
243
244     r = IStorage_EnumElements( stg, 0, NULL, 0, &stgenum );
245     if( FAILED( r ) )
246         return;
247
248     n = 0;
249     while( 1 )
250     {
251         count = 0;
252         r = IEnumSTATSTG_Next( stgenum, 1, &stat, &count );
253         if( FAILED( r ) || !count )
254             break;
255         decode_streamname( stat.pwcsName, name );
256         TRACE("stream %2d -> %s %s\n", n,
257               debugstr_w(stat.pwcsName), debugstr_w(name) );
258         CoTaskMemFree( stat.pwcsName );
259         n++;
260     }
261
262     IEnumSTATSTG_Release( stgenum );
263 }
264
265 UINT read_stream_data( IStorage *stg, LPCWSTR stname, BOOL table,
266                        BYTE **pdata, UINT *psz )
267 {
268     HRESULT r;
269     UINT ret = ERROR_FUNCTION_FAILED;
270     VOID *data;
271     ULONG sz, count;
272     IStream *stm = NULL;
273     STATSTG stat;
274     LPWSTR encname;
275
276     encname = encode_streamname(table, stname);
277
278     TRACE("%s -> %s\n",debugstr_w(stname),debugstr_w(encname));
279
280     r = IStorage_OpenStream(stg, encname, NULL, 
281             STGM_READ | STGM_SHARE_EXCLUSIVE, 0, &stm);
282     msi_free( encname );
283     if( FAILED( r ) )
284     {
285         WARN("open stream failed r = %08x - empty table?\n", r);
286         return ret;
287     }
288
289     r = IStream_Stat(stm, &stat, STATFLAG_NONAME );
290     if( FAILED( r ) )
291     {
292         WARN("open stream failed r = %08x!\n", r);
293         goto end;
294     }
295
296     if( stat.cbSize.QuadPart >> 32 )
297     {
298         WARN("Too big!\n");
299         goto end;
300     }
301         
302     sz = stat.cbSize.QuadPart;
303     data = msi_alloc( sz );
304     if( !data )
305     {
306         WARN("couldn't allocate memory r=%08x!\n", r);
307         ret = ERROR_NOT_ENOUGH_MEMORY;
308         goto end;
309     }
310         
311     r = IStream_Read(stm, data, sz, &count );
312     if( FAILED( r ) || ( count != sz ) )
313     {
314         msi_free( data );
315         WARN("read stream failed r = %08x!\n", r);
316         goto end;
317     }
318
319     *pdata = data;
320     *psz = sz;
321     ret = ERROR_SUCCESS;
322
323 end:
324     IStream_Release( stm );
325
326     return ret;
327 }
328
329 UINT write_stream_data( IStorage *stg, LPCWSTR stname,
330                         LPCVOID data, UINT sz, BOOL bTable )
331 {
332     HRESULT r;
333     UINT ret = ERROR_FUNCTION_FAILED;
334     ULONG count;
335     IStream *stm = NULL;
336     ULARGE_INTEGER size;
337     LARGE_INTEGER pos;
338     LPWSTR encname;
339
340     encname = encode_streamname(bTable, stname );
341     r = IStorage_OpenStream( stg, encname, NULL, 
342             STGM_WRITE | STGM_SHARE_EXCLUSIVE, 0, &stm);
343     if( FAILED(r) )
344     {
345         r = IStorage_CreateStream( stg, encname,
346                 STGM_WRITE | STGM_SHARE_EXCLUSIVE, 0, 0, &stm);
347     }
348     msi_free( encname );
349     if( FAILED( r ) )
350     {
351         WARN("open stream failed r = %08x\n", r);
352         return ret;
353     }
354
355     size.QuadPart = sz;
356     r = IStream_SetSize( stm, size );
357     if( FAILED( r ) )
358     {
359         WARN("Failed to SetSize\n");
360         goto end;
361     }
362
363     pos.QuadPart = 0;
364     r = IStream_Seek( stm, pos, STREAM_SEEK_SET, NULL );
365     if( FAILED( r ) )
366     {
367         WARN("Failed to Seek\n");
368         goto end;
369     }
370
371     if (sz)
372     {
373         r = IStream_Write(stm, data, sz, &count );
374         if( FAILED( r ) || ( count != sz ) )
375         {
376             WARN("Failed to Write\n");
377             goto end;
378         }
379     }
380
381     ret = ERROR_SUCCESS;
382
383 end:
384     IStream_Release( stm );
385
386     return ret;
387 }
388
389 static void free_table( MSITABLE *table )
390 {
391     UINT i;
392     for( i=0; i<table->row_count; i++ )
393         msi_free( table->data[i] );
394     msi_free( table->data );
395     msi_free( table->data_persistent );
396     msi_free_colinfo( table->colinfo, table->col_count );
397     msi_free( table->colinfo );
398     msi_free( table );
399 }
400
401 static UINT msi_table_get_row_size( MSIDATABASE *db, const MSICOLUMNINFO *cols, UINT count, UINT bytes_per_strref )
402 {
403     const MSICOLUMNINFO *last_col;
404
405     if (!count)
406         return 0;
407
408     if (bytes_per_strref != LONG_STR_BYTES)
409     {
410         UINT i, size = 0;
411         for (i = 0; i < count; i++) size += bytes_per_column( db, &cols[i], bytes_per_strref );
412         return size;
413     }
414     last_col = &cols[count - 1];
415     return last_col->offset + bytes_per_column( db, last_col, bytes_per_strref );
416 }
417
418 /* add this table to the list of cached tables in the database */
419 static UINT read_table_from_storage( MSIDATABASE *db, MSITABLE *t, IStorage *stg )
420 {
421     BYTE *rawdata = NULL;
422     UINT rawsize = 0, i, j, row_size, row_size_mem;
423
424     TRACE("%s\n",debugstr_w(t->name));
425
426     row_size = msi_table_get_row_size( db, t->colinfo, t->col_count, db->bytes_per_strref );
427     row_size_mem = msi_table_get_row_size( db, t->colinfo, t->col_count, LONG_STR_BYTES );
428
429     /* if we can't read the table, just assume that it's empty */
430     read_stream_data( stg, t->name, TRUE, &rawdata, &rawsize );
431     if( !rawdata )
432         return ERROR_SUCCESS;
433
434     TRACE("Read %d bytes\n", rawsize );
435
436     if( rawsize % row_size )
437     {
438         WARN("Table size is invalid %d/%d\n", rawsize, row_size );
439         goto err;
440     }
441
442     t->row_count = rawsize / row_size;
443     t->data = msi_alloc_zero( t->row_count * sizeof (USHORT*) );
444     if( !t->data )
445         goto err;
446     t->data_persistent = msi_alloc_zero( t->row_count * sizeof(BOOL));
447     if ( !t->data_persistent )
448         goto err;
449
450     /* transpose all the data */
451     TRACE("Transposing data from %d rows\n", t->row_count );
452     for (i = 0; i < t->row_count; i++)
453     {
454         UINT ofs = 0, ofs_mem = 0;
455
456         t->data[i] = msi_alloc( row_size_mem );
457         if( !t->data[i] )
458             goto err;
459         t->data_persistent[i] = TRUE;
460
461         for (j = 0; j < t->col_count; j++)
462         {
463             UINT m = bytes_per_column( db, &t->colinfo[j], LONG_STR_BYTES );
464             UINT n = bytes_per_column( db, &t->colinfo[j], db->bytes_per_strref );
465             UINT k;
466
467             if ( n != 2 && n != 3 && n != 4 )
468             {
469                 ERR("oops - unknown column width %d\n", n);
470                 goto err;
471             }
472             if (t->colinfo[j].type & MSITYPE_STRING && n < m)
473             {
474                 for (k = 0; k < m; k++)
475                 {
476                     if (k < n)
477                         t->data[i][ofs_mem + k] = rawdata[ofs * t->row_count + i * n + k];
478                     else
479                         t->data[i][ofs_mem + k] = 0;
480                 }
481             }
482             else
483             {
484                 for (k = 0; k < n; k++)
485                     t->data[i][ofs_mem + k] = rawdata[ofs * t->row_count + i * n + k];
486             }
487             ofs_mem += m;
488             ofs += n;
489         }
490     }
491
492     msi_free( rawdata );
493     return ERROR_SUCCESS;
494 err:
495     msi_free( rawdata );
496     return ERROR_FUNCTION_FAILED;
497 }
498
499 void free_cached_tables( MSIDATABASE *db )
500 {
501     while( !list_empty( &db->tables ) )
502     {
503         MSITABLE *t = LIST_ENTRY( list_head( &db->tables ), MSITABLE, entry );
504
505         list_remove( &t->entry );
506         free_table( t );
507     }
508 }
509
510 static MSITABLE *find_cached_table( MSIDATABASE *db, LPCWSTR name )
511 {
512     MSITABLE *t;
513
514     LIST_FOR_EACH_ENTRY( t, &db->tables, MSITABLE, entry )
515         if( !strcmpW( name, t->name ) )
516             return t;
517
518     return NULL;
519 }
520
521 static UINT table_get_column_info( MSIDATABASE *db, LPCWSTR name, MSICOLUMNINFO **pcols, UINT *pcount )
522 {
523     UINT r, column_count = 0;
524     MSICOLUMNINFO *columns;
525
526     /* get the number of columns in this table */
527     column_count = 0;
528     r = get_tablecolumns( db, name, NULL, &column_count );
529     if( r != ERROR_SUCCESS )
530         return r;
531
532     *pcount = column_count;
533
534     /* if there's no columns, there's no table */
535     if( column_count == 0 )
536         return ERROR_INVALID_PARAMETER;
537
538     TRACE("Table %s found\n", debugstr_w(name) );
539
540     columns = msi_alloc( column_count*sizeof (MSICOLUMNINFO) );
541     if( !columns )
542         return ERROR_FUNCTION_FAILED;
543
544     r = get_tablecolumns( db, name, columns, &column_count );
545     if( r != ERROR_SUCCESS )
546     {
547         msi_free( columns );
548         return ERROR_FUNCTION_FAILED;
549     }
550
551     *pcols = columns;
552
553     return r;
554 }
555
556 UINT msi_create_table( MSIDATABASE *db, LPCWSTR name, column_info *col_info,
557                        MSICONDITION persistent, MSITABLE **table_ret)
558 {
559     UINT r, nField;
560     MSIVIEW *tv = NULL;
561     MSIRECORD *rec = NULL;
562     column_info *col;
563     MSITABLE *table;
564     UINT i;
565
566     /* only add tables that don't exist already */
567     if( TABLE_Exists(db, name ) )
568     {
569         WARN("table %s exists\n", debugstr_w(name));
570         return ERROR_BAD_QUERY_SYNTAX;
571     }
572
573     table = msi_alloc( sizeof (MSITABLE) + lstrlenW(name)*sizeof (WCHAR) );
574     if( !table )
575         return ERROR_FUNCTION_FAILED;
576
577     table->ref_count = 1;
578     table->row_count = 0;
579     table->data = NULL;
580     table->data_persistent = NULL;
581     table->colinfo = NULL;
582     table->col_count = 0;
583     table->persistent = persistent;
584     lstrcpyW( table->name, name );
585
586     for( col = col_info; col; col = col->next )
587         table->col_count++;
588
589     table->colinfo = msi_alloc( table->col_count * sizeof(MSICOLUMNINFO) );
590     if (!table->colinfo)
591     {
592         free_table( table );
593         return ERROR_FUNCTION_FAILED;
594     }
595
596     for( i = 0, col = col_info; col; i++, col = col->next )
597     {
598         table->colinfo[ i ].tablename = strdupW( col->table );
599         table->colinfo[ i ].number = i + 1;
600         table->colinfo[ i ].colname = strdupW( col->column );
601         table->colinfo[ i ].type = col->type;
602         table->colinfo[ i ].offset = 0;
603         table->colinfo[ i ].ref_count = 0;
604         table->colinfo[ i ].hash_table = NULL;
605         table->colinfo[ i ].temporary = col->temporary;
606     }
607     table_calc_column_offsets( db, table->colinfo, table->col_count);
608
609     r = TABLE_CreateView( db, szTables, &tv );
610     TRACE("CreateView returned %x\n", r);
611     if( r )
612     {
613         free_table( table );
614         return r;
615     }
616
617     r = tv->ops->execute( tv, 0 );
618     TRACE("tv execute returned %x\n", r);
619     if( r )
620         goto err;
621
622     rec = MSI_CreateRecord( 1 );
623     if( !rec )
624         goto err;
625
626     r = MSI_RecordSetStringW( rec, 1, name );
627     if( r )
628         goto err;
629
630     r = tv->ops->insert_row( tv, rec, -1, persistent == MSICONDITION_FALSE );
631     TRACE("insert_row returned %x\n", r);
632     if( r )
633         goto err;
634
635     tv->ops->delete( tv );
636     tv = NULL;
637
638     msiobj_release( &rec->hdr );
639     rec = NULL;
640
641     if( persistent != MSICONDITION_FALSE )
642     {
643         /* add each column to the _Columns table */
644         r = TABLE_CreateView( db, szColumns, &tv );
645         if( r )
646             return r;
647
648         r = tv->ops->execute( tv, 0 );
649         TRACE("tv execute returned %x\n", r);
650         if( r )
651             goto err;
652
653         rec = MSI_CreateRecord( 4 );
654         if( !rec )
655             goto err;
656
657         r = MSI_RecordSetStringW( rec, 1, name );
658         if( r )
659             goto err;
660
661         /*
662          * need to set the table, column number, col name and type
663          * for each column we enter in the table
664          */
665         nField = 1;
666         for( col = col_info; col; col = col->next )
667         {
668             r = MSI_RecordSetInteger( rec, 2, nField );
669             if( r )
670                 goto err;
671
672             r = MSI_RecordSetStringW( rec, 3, col->column );
673             if( r )
674                 goto err;
675
676             r = MSI_RecordSetInteger( rec, 4, col->type );
677             if( r )
678                 goto err;
679
680             r = tv->ops->insert_row( tv, rec, -1, FALSE );
681             if( r )
682                 goto err;
683
684             nField++;
685         }
686         if( !col )
687             r = ERROR_SUCCESS;
688     }
689
690 err:
691     if (rec)
692         msiobj_release( &rec->hdr );
693     /* FIXME: remove values from the string table on error */
694     if( tv )
695         tv->ops->delete( tv );
696
697     if (r == ERROR_SUCCESS)
698     {
699         list_add_head( &db->tables, &table->entry );
700         *table_ret = table;
701     }
702     else
703         free_table( table );
704
705     return r;
706 }
707
708 static UINT get_table( MSIDATABASE *db, LPCWSTR name, MSITABLE **table_ret )
709 {
710     MSITABLE *table;
711     UINT r;
712
713     /* first, see if the table is cached */
714     table = find_cached_table( db, name );
715     if( table )
716     {
717         *table_ret = table;
718         return ERROR_SUCCESS;
719     }
720
721     /* nonexistent tables should be interpreted as empty tables */
722     table = msi_alloc( sizeof (MSITABLE) + lstrlenW(name)*sizeof (WCHAR) );
723     if( !table )
724         return ERROR_FUNCTION_FAILED;
725
726     table->row_count = 0;
727     table->data = NULL;
728     table->data_persistent = NULL;
729     table->colinfo = NULL;
730     table->col_count = 0;
731     table->persistent = MSICONDITION_TRUE;
732     lstrcpyW( table->name, name );
733
734     if ( !strcmpW( name, szTables ) || !strcmpW( name, szColumns ) )
735         table->persistent = MSICONDITION_NONE;
736
737     r = table_get_column_info( db, name, &table->colinfo, &table->col_count);
738     if (r != ERROR_SUCCESS)
739     {
740         free_table ( table );
741         return r;
742     }
743
744     r = read_table_from_storage( db, table, db->storage );
745     if( r != ERROR_SUCCESS )
746     {
747         free_table( table );
748         return r;
749     }
750
751     list_add_head( &db->tables, &table->entry );
752     *table_ret = table;
753     return ERROR_SUCCESS;
754 }
755
756 static UINT read_table_int(BYTE *const *data, UINT row, UINT col, UINT bytes)
757 {
758     UINT ret = 0, i;
759
760     for (i = 0; i < bytes; i++)
761         ret += data[row][col + i] << i * 8;
762
763     return ret;
764 }
765
766 static UINT save_table( MSIDATABASE *db, const MSITABLE *t, UINT bytes_per_strref )
767 {
768     BYTE *rawdata = NULL;
769     UINT rawsize, i, j, row_size, row_count;
770     UINT r = ERROR_FUNCTION_FAILED;
771
772     /* Nothing to do for non-persistent tables */
773     if( t->persistent == MSICONDITION_FALSE )
774         return ERROR_SUCCESS;
775
776     TRACE("Saving %s\n", debugstr_w( t->name ) );
777
778     row_size = msi_table_get_row_size( db, t->colinfo, t->col_count, bytes_per_strref );
779     row_count = t->row_count;
780     for (i = 0; i < t->row_count; i++)
781     {
782         if (!t->data_persistent[i])
783         {
784             row_count = 1; /* yes, this is bizarre */
785             break;
786         }
787     }
788     rawsize = row_count * row_size;
789     rawdata = msi_alloc_zero( rawsize );
790     if( !rawdata )
791     {
792         r = ERROR_NOT_ENOUGH_MEMORY;
793         goto err;
794     }
795
796     rawsize = 0;
797     for (i = 0; i < t->row_count; i++)
798     {
799         UINT ofs = 0, ofs_mem = 0;
800
801         if (!t->data_persistent[i]) break;
802
803         for (j = 0; j < t->col_count; j++)
804         {
805             UINT m = bytes_per_column( db, &t->colinfo[j], LONG_STR_BYTES );
806             UINT n = bytes_per_column( db, &t->colinfo[j], bytes_per_strref );
807             UINT k;
808
809             if (n != 2 && n != 3 && n != 4)
810             {
811                 ERR("oops - unknown column width %d\n", n);
812                 goto err;
813             }
814             if (t->colinfo[j].type & MSITYPE_STRING && n < m)
815             {
816                 UINT id = read_table_int( t->data, i, ofs_mem, LONG_STR_BYTES );
817                 if (id > 1 << bytes_per_strref * 8)
818                 {
819                     ERR("string id %u out of range\n", id);
820                     goto err;
821                 }
822             }
823             for (k = 0; k < n; k++)
824             {
825                 rawdata[ofs * row_count + i * n + k] = t->data[i][ofs_mem + k];
826             }
827             ofs_mem += m;
828             ofs += n;
829         }
830         rawsize += row_size;
831     }
832
833     TRACE("writing %d bytes\n", rawsize);
834     r = write_stream_data( db->storage, t->name, rawdata, rawsize, TRUE );
835
836 err:
837     msi_free( rawdata );
838     return r;
839 }
840
841 static void table_calc_column_offsets( MSIDATABASE *db, MSICOLUMNINFO *colinfo, DWORD count )
842 {
843     DWORD i;
844
845     for( i=0; colinfo && (i<count); i++ )
846     {
847          assert( (i+1) == colinfo[ i ].number );
848          if (i)
849              colinfo[i].offset = colinfo[ i - 1 ].offset
850                                + bytes_per_column( db, &colinfo[ i - 1 ], LONG_STR_BYTES );
851          else
852              colinfo[i].offset = 0;
853          TRACE("column %d is [%s] with type %08x ofs %d\n",
854                colinfo[i].number, debugstr_w(colinfo[i].colname),
855                colinfo[i].type, colinfo[i].offset);
856     }
857 }
858
859 static UINT get_defaulttablecolumns( MSIDATABASE *db, LPCWSTR name,
860                                      MSICOLUMNINFO *colinfo, UINT *sz)
861 {
862     const MSICOLUMNINFO *p;
863     DWORD i, n;
864
865     TRACE("%s\n", debugstr_w(name));
866
867     if (!strcmpW( name, szTables ))
868     {
869         p = _Tables_cols;
870         n = 1;
871     }
872     else if (!strcmpW( name, szColumns ))
873     {
874         p = _Columns_cols;
875         n = 4;
876     }
877     else
878         return ERROR_FUNCTION_FAILED;
879
880     /* duplicate the string data so we can free it in msi_free_colinfo */
881     for (i=0; i<n; i++)
882     {
883         if (colinfo && (i < *sz) )
884         {
885             colinfo[i] = p[i];
886             colinfo[i].tablename = strdupW( p[i].tablename );
887             colinfo[i].colname = strdupW( p[i].colname );
888         }
889         if( colinfo && (i >= *sz) )
890             break;
891     }
892     table_calc_column_offsets( db, colinfo, n );
893     *sz = n;
894     return ERROR_SUCCESS;
895 }
896
897 static void msi_free_colinfo( MSICOLUMNINFO *colinfo, UINT count )
898 {
899     UINT i;
900
901     for( i=0; i<count; i++ )
902     {
903         msi_free( colinfo[i].tablename );
904         msi_free( colinfo[i].colname );
905         msi_free( colinfo[i].hash_table );
906     }
907 }
908
909 static LPWSTR msi_makestring( const MSIDATABASE *db, UINT stringid)
910 {
911     return strdupW(msi_string_lookup_id( db->strings, stringid ));
912 }
913
914 static UINT get_tablecolumns( MSIDATABASE *db,
915        LPCWSTR szTableName, MSICOLUMNINFO *colinfo, UINT *sz)
916 {
917     UINT r, i, n=0, table_id, count, maxcount = *sz;
918     MSITABLE *table = NULL;
919
920     TRACE("%s\n", debugstr_w(szTableName));
921
922     /* first check if there is a default table with that name */
923     r = get_defaulttablecolumns( db, szTableName, colinfo, sz );
924     if( ( r == ERROR_SUCCESS ) && *sz )
925         return r;
926
927     r = get_table( db, szColumns, &table );
928     if( r != ERROR_SUCCESS )
929     {
930         ERR("couldn't load _Columns table\n");
931         return ERROR_FUNCTION_FAILED;
932     }
933
934     /* convert table and column names to IDs from the string table */
935     r = msi_string2idW( db->strings, szTableName, &table_id );
936     if( r != ERROR_SUCCESS )
937     {
938         WARN("Couldn't find id for %s\n", debugstr_w(szTableName));
939         return r;
940     }
941
942     TRACE("Table id is %d, row count is %d\n", table_id, table->row_count);
943
944     /* Note: _Columns table doesn't have non-persistent data */
945
946     /* if maxcount is non-zero, assume it's exactly right for this table */
947     memset( colinfo, 0, maxcount*sizeof(*colinfo) );
948     count = table->row_count;
949     for( i=0; i<count; i++ )
950     {
951         if( read_table_int(table->data, i, 0, LONG_STR_BYTES) != table_id )
952             continue;
953         if( colinfo )
954         {
955             UINT id = read_table_int(table->data, i, table->colinfo[2].offset, LONG_STR_BYTES);
956             UINT col = read_table_int(table->data, i, table->colinfo[1].offset, sizeof(USHORT)) - (1<<15);
957
958             /* check the column number is in range */
959             if (col<1 || col>maxcount)
960             {
961                 ERR("column %d out of range\n", col);
962                 continue;
963             }
964
965             /* check if this column was already set */
966             if (colinfo[ col - 1 ].number)
967             {
968                 ERR("duplicate column %d\n", col);
969                 continue;
970             }
971
972             colinfo[ col - 1 ].tablename = msi_makestring( db, table_id );
973             colinfo[ col - 1 ].number = col;
974             colinfo[ col - 1 ].colname = msi_makestring( db, id );
975             colinfo[ col - 1 ].type = read_table_int(table->data, i,
976                                                      table->colinfo[3].offset,
977                                                      sizeof(USHORT)) - (1<<15);
978             colinfo[ col - 1 ].offset = 0;
979             colinfo[ col - 1 ].ref_count = 0;
980             colinfo[ col - 1 ].hash_table = NULL;
981         }
982         n++;
983     }
984
985     TRACE("%s has %d columns\n", debugstr_w(szTableName), n);
986
987     if (colinfo && n != maxcount)
988     {
989         ERR("missing column in table %s\n", debugstr_w(szTableName));
990         msi_free_colinfo(colinfo, maxcount );
991         return ERROR_FUNCTION_FAILED;
992     }
993
994     table_calc_column_offsets( db, colinfo, n );
995     *sz = n;
996
997     return ERROR_SUCCESS;
998 }
999
1000 static void msi_update_table_columns( MSIDATABASE *db, LPCWSTR name )
1001 {
1002     MSITABLE *table;
1003     LPWSTR tablename;
1004     UINT size, offset, old_count;
1005     UINT n;
1006
1007     /* We may free name in msi_free_colinfo. */
1008     tablename = strdupW( name );
1009
1010     table = find_cached_table( db, tablename );
1011     old_count = table->col_count;
1012     msi_free_colinfo( table->colinfo, table->col_count );
1013     msi_free( table->colinfo );
1014     table->colinfo = NULL;
1015
1016     table_get_column_info( db, tablename, &table->colinfo, &table->col_count );
1017     if (!table->col_count)
1018         goto done;
1019
1020     size = msi_table_get_row_size( db, table->colinfo, table->col_count, LONG_STR_BYTES );
1021     offset = table->colinfo[table->col_count - 1].offset;
1022
1023     for ( n = 0; n < table->row_count; n++ )
1024     {
1025         table->data[n] = msi_realloc( table->data[n], size );
1026         if (old_count < table->col_count)
1027             memset( &table->data[n][offset], 0, size - offset );
1028     }
1029
1030 done:
1031     msi_free(tablename);
1032 }
1033
1034 /* try to find the table name in the _Tables table */
1035 BOOL TABLE_Exists( MSIDATABASE *db, LPCWSTR name )
1036 {
1037     UINT r, table_id, i;
1038     MSITABLE *table;
1039
1040     if( !strcmpW( name, szTables ) || !strcmpW( name, szColumns ) ||
1041         !strcmpW( name, szStreams ) || !strcmpW( name, szStorages ) )
1042         return TRUE;
1043
1044     r = msi_string2idW( db->strings, name, &table_id );
1045     if( r != ERROR_SUCCESS )
1046     {
1047         TRACE("Couldn't find id for %s\n", debugstr_w(name));
1048         return FALSE;
1049     }
1050
1051     r = get_table( db, szTables, &table );
1052     if( r != ERROR_SUCCESS )
1053     {
1054         ERR("table %s not available\n", debugstr_w(szTables));
1055         return FALSE;
1056     }
1057
1058     for( i = 0; i < table->row_count; i++ )
1059     {
1060         if( read_table_int( table->data, i, 0, LONG_STR_BYTES ) == table_id )
1061             return TRUE;
1062     }
1063
1064     return FALSE;
1065 }
1066
1067 /* below is the query interface to a table */
1068
1069 typedef struct tagMSITABLEVIEW
1070 {
1071     MSIVIEW        view;
1072     MSIDATABASE   *db;
1073     MSITABLE      *table;
1074     MSICOLUMNINFO *columns;
1075     MSIORDERINFO  *order;
1076     UINT           num_cols;
1077     UINT           row_size;
1078     WCHAR          name[1];
1079 } MSITABLEVIEW;
1080
1081 static UINT TABLE_fetch_int( struct tagMSIVIEW *view, UINT row, UINT col, UINT *val )
1082 {
1083     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1084     UINT offset, n;
1085
1086     if( !tv->table )
1087         return ERROR_INVALID_PARAMETER;
1088
1089     if( (col==0) || (col>tv->num_cols) )
1090         return ERROR_INVALID_PARAMETER;
1091
1092     /* how many rows are there ? */
1093     if( row >= tv->table->row_count )
1094         return ERROR_NO_MORE_ITEMS;
1095
1096     if( tv->columns[col-1].offset >= tv->row_size )
1097     {
1098         ERR("Stuffed up %d >= %d\n", tv->columns[col-1].offset, tv->row_size );
1099         ERR("%p %p\n", tv, tv->columns );
1100         return ERROR_FUNCTION_FAILED;
1101     }
1102
1103     if (tv->order)
1104         row = tv->order->reorder[row];
1105
1106     n = bytes_per_column( tv->db, &tv->columns[col - 1], LONG_STR_BYTES );
1107     if (n != 2 && n != 3 && n != 4)
1108     {
1109         ERR("oops! what is %d bytes per column?\n", n );
1110         return ERROR_FUNCTION_FAILED;
1111     }
1112
1113     offset = tv->columns[col-1].offset;
1114     *val = read_table_int(tv->table->data, row, offset, n);
1115
1116     /* TRACE("Data [%d][%d] = %d\n", row, col, *val ); */
1117
1118     return ERROR_SUCCESS;
1119 }
1120
1121 static UINT msi_stream_name( const MSITABLEVIEW *tv, UINT row, LPWSTR *pstname )
1122 {
1123     LPWSTR p, stname = NULL;
1124     UINT i, r, type, ival;
1125     DWORD len;
1126     LPCWSTR sval;
1127     MSIVIEW *view = (MSIVIEW *) tv;
1128
1129     TRACE("%p %d\n", tv, row);
1130
1131     len = lstrlenW( tv->name ) + 1;
1132     stname = msi_alloc( len*sizeof(WCHAR) );
1133     if ( !stname )
1134     {
1135        r = ERROR_OUTOFMEMORY;
1136        goto err;
1137     }
1138
1139     lstrcpyW( stname, tv->name );
1140
1141     for ( i = 0; i < tv->num_cols; i++ )
1142     {
1143         type = tv->columns[i].type;
1144         if ( type & MSITYPE_KEY )
1145         {
1146             WCHAR number[0x20];
1147
1148             r = TABLE_fetch_int( view, row, i+1, &ival );
1149             if ( r != ERROR_SUCCESS )
1150                 goto err;
1151
1152             if ( tv->columns[i].type & MSITYPE_STRING )
1153             {
1154                 sval = msi_string_lookup_id( tv->db->strings, ival );
1155                 if ( !sval )
1156                 {
1157                     r = ERROR_INVALID_PARAMETER;
1158                     goto err;
1159                 }
1160             }
1161             else
1162             {
1163                 static const WCHAR fmt[] = { '%','d',0 };
1164                 UINT n = bytes_per_column( tv->db, &tv->columns[i], LONG_STR_BYTES );
1165
1166                 switch( n )
1167                 {
1168                 case 2:
1169                     sprintfW( number, fmt, ival-0x8000 );
1170                     break;
1171                 case 4:
1172                     sprintfW( number, fmt, ival^0x80000000 );
1173                     break;
1174                 default:
1175                     ERR( "oops - unknown column width %d\n", n );
1176                     r = ERROR_FUNCTION_FAILED;
1177                     goto err;
1178                 }
1179                 sval = number;
1180             }
1181
1182             len += lstrlenW( szDot ) + lstrlenW( sval );
1183             p = msi_realloc ( stname, len*sizeof(WCHAR) );
1184             if ( !p )
1185             {
1186                 r = ERROR_OUTOFMEMORY;
1187                 goto err;
1188             }
1189             stname = p;
1190
1191             lstrcatW( stname, szDot );
1192             lstrcatW( stname, sval );
1193         }
1194         else
1195            continue;
1196     }
1197
1198     *pstname = stname;
1199     return ERROR_SUCCESS;
1200
1201 err:
1202     msi_free( stname );
1203     *pstname = NULL;
1204     return r;
1205 }
1206
1207 /*
1208  * We need a special case for streams, as we need to reference column with
1209  * the name of the stream in the same table, and the table name
1210  * which may not be available at higher levels of the query
1211  */
1212 static UINT TABLE_fetch_stream( struct tagMSIVIEW *view, UINT row, UINT col, IStream **stm )
1213 {
1214     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1215     UINT r;
1216     LPWSTR encname, full_name = NULL;
1217
1218     if( !view->ops->fetch_int )
1219         return ERROR_INVALID_PARAMETER;
1220
1221     r = msi_stream_name( tv, row, &full_name );
1222     if ( r != ERROR_SUCCESS )
1223     {
1224         ERR("fetching stream, error = %d\n", r);
1225         return r;
1226     }
1227
1228     encname = encode_streamname( FALSE, full_name );
1229     r = db_get_raw_stream( tv->db, encname, stm );
1230     if( r )
1231         ERR("fetching stream %s, error = %d\n",debugstr_w(full_name), r);
1232
1233     msi_free( full_name );
1234     msi_free( encname );
1235     return r;
1236 }
1237
1238 static UINT TABLE_set_int( MSITABLEVIEW *tv, UINT row, UINT col, UINT val )
1239 {
1240     UINT offset, n, i;
1241
1242     if( !tv->table )
1243         return ERROR_INVALID_PARAMETER;
1244
1245     if( (col==0) || (col>tv->num_cols) )
1246         return ERROR_INVALID_PARAMETER;
1247
1248     if( row >= tv->table->row_count )
1249         return ERROR_INVALID_PARAMETER;
1250
1251     if( tv->columns[col-1].offset >= tv->row_size )
1252     {
1253         ERR("Stuffed up %d >= %d\n", tv->columns[col-1].offset, tv->row_size );
1254         ERR("%p %p\n", tv, tv->columns );
1255         return ERROR_FUNCTION_FAILED;
1256     }
1257
1258     msi_free( tv->columns[col-1].hash_table );
1259     tv->columns[col-1].hash_table = NULL;
1260
1261     n = bytes_per_column( tv->db, &tv->columns[col - 1], LONG_STR_BYTES );
1262     if ( n != 2 && n != 3 && n != 4 )
1263     {
1264         ERR("oops! what is %d bytes per column?\n", n );
1265         return ERROR_FUNCTION_FAILED;
1266     }
1267
1268     offset = tv->columns[col-1].offset;
1269     for ( i = 0; i < n; i++ )
1270         tv->table->data[row][offset + i] = (val >> i * 8) & 0xff;
1271
1272     return ERROR_SUCCESS;
1273 }
1274
1275 static UINT TABLE_get_row( struct tagMSIVIEW *view, UINT row, MSIRECORD **rec )
1276 {
1277     MSITABLEVIEW *tv = (MSITABLEVIEW *)view;
1278
1279     if (!tv->table)
1280         return ERROR_INVALID_PARAMETER;
1281
1282     if (tv->order)
1283         row = tv->order->reorder[row];
1284
1285     return msi_view_get_row(tv->db, view, row, rec);
1286 }
1287
1288 static UINT msi_addstreamW( MSIDATABASE *db, LPCWSTR name, IStream *data )
1289 {
1290     UINT r;
1291     MSIQUERY *query = NULL;
1292     MSIRECORD *rec = NULL;
1293
1294     static const WCHAR insert[] = {
1295        'I','N','S','E','R','T',' ','I','N','T','O',' ',
1296           '`','_','S','t','r','e','a','m','s','`',' ',
1297          '(','`','N','a','m','e','`',',',
1298              '`','D','a','t','a','`',')',' ',
1299          'V','A','L','U','E','S',' ','(','?',',','?',')',0};
1300
1301     TRACE("%p %s %p\n", db, debugstr_w(name), data);
1302
1303     rec = MSI_CreateRecord( 2 );
1304     if ( !rec )
1305         return ERROR_OUTOFMEMORY;
1306
1307     r = MSI_RecordSetStringW( rec, 1, name );
1308     if ( r != ERROR_SUCCESS )
1309        goto err;
1310
1311     r = MSI_RecordSetIStream( rec, 2, data );
1312     if ( r != ERROR_SUCCESS )
1313        goto err;
1314
1315     r = MSI_DatabaseOpenViewW( db, insert, &query );
1316     if ( r != ERROR_SUCCESS )
1317        goto err;
1318
1319     r = MSI_ViewExecute( query, rec );
1320
1321 err:
1322     msiobj_release( &query->hdr );
1323     msiobj_release( &rec->hdr );
1324
1325     return r;
1326 }
1327
1328 static UINT get_table_value_from_record( MSITABLEVIEW *tv, MSIRECORD *rec, UINT iField, UINT *pvalue )
1329 {
1330     MSICOLUMNINFO columninfo;
1331     UINT r;
1332
1333     if ( (iField <= 0) ||
1334          (iField > tv->num_cols) ||
1335           MSI_RecordIsNull( rec, iField ) )
1336         return ERROR_FUNCTION_FAILED;
1337
1338     columninfo = tv->columns[ iField - 1 ];
1339
1340     if ( MSITYPE_IS_BINARY(columninfo.type) )
1341     {
1342         *pvalue = 1; /* refers to the first key column */
1343     }
1344     else if ( columninfo.type & MSITYPE_STRING )
1345     {
1346         LPCWSTR sval = MSI_RecordGetString( rec, iField );
1347         if (sval)
1348         {
1349             r = msi_string2idW(tv->db->strings, sval, pvalue);
1350             if (r != ERROR_SUCCESS)
1351                 return ERROR_NOT_FOUND;
1352         }
1353         else *pvalue = 0;
1354     }
1355     else if ( bytes_per_column( tv->db, &columninfo, LONG_STR_BYTES ) == 2 )
1356     {
1357         *pvalue = 0x8000 + MSI_RecordGetInteger( rec, iField );
1358         if ( *pvalue & 0xffff0000 )
1359         {
1360             ERR("field %u value %d out of range\n", iField, *pvalue - 0x8000);
1361             return ERROR_FUNCTION_FAILED;
1362         }
1363     }
1364     else
1365     {
1366         INT ival = MSI_RecordGetInteger( rec, iField );
1367         *pvalue = ival ^ 0x80000000;
1368     }
1369
1370     return ERROR_SUCCESS;
1371 }
1372
1373 static UINT TABLE_set_row( struct tagMSIVIEW *view, UINT row, MSIRECORD *rec, UINT mask )
1374 {
1375     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1376     UINT i, val, r = ERROR_SUCCESS;
1377
1378     if ( !tv->table )
1379         return ERROR_INVALID_PARAMETER;
1380
1381     /* test if any of the mask bits are invalid */
1382     if ( mask >= (1<<tv->num_cols) )
1383         return ERROR_INVALID_PARAMETER;
1384
1385     for ( i = 0; i < tv->num_cols; i++ )
1386     {
1387         BOOL persistent;
1388
1389         /* only update the fields specified in the mask */
1390         if ( !(mask&(1<<i)) )
1391             continue;
1392
1393         persistent = (tv->table->persistent != MSICONDITION_FALSE) &&
1394                      (tv->table->data_persistent[row]);
1395         /* FIXME: should we allow updating keys? */
1396
1397         val = 0;
1398         if ( !MSI_RecordIsNull( rec, i + 1 ) )
1399         {
1400             r = get_table_value_from_record (tv, rec, i + 1, &val);
1401             if ( MSITYPE_IS_BINARY(tv->columns[ i ].type) )
1402             {
1403                 IStream *stm;
1404                 LPWSTR stname;
1405
1406                 if ( r != ERROR_SUCCESS )
1407                     return ERROR_FUNCTION_FAILED;
1408
1409                 r = MSI_RecordGetIStream( rec, i + 1, &stm );
1410                 if ( r != ERROR_SUCCESS )
1411                     return r;
1412
1413                 r = msi_stream_name( tv, row, &stname );
1414                 if ( r != ERROR_SUCCESS )
1415                 {
1416                     IStream_Release( stm );
1417                     return r;
1418                 }
1419
1420                 r = msi_addstreamW( tv->db, stname, stm );
1421                 IStream_Release( stm );
1422                 msi_free ( stname );
1423
1424                 if ( r != ERROR_SUCCESS )
1425                     return r;
1426             }
1427             else if ( tv->columns[i].type & MSITYPE_STRING )
1428             {
1429                 UINT x;
1430
1431                 if ( r != ERROR_SUCCESS )
1432                 {
1433                     LPCWSTR sval = MSI_RecordGetString( rec, i + 1 );
1434                     val = msi_addstringW( tv->db->strings, sval, -1, 1,
1435                       persistent ? StringPersistent : StringNonPersistent );
1436                 }
1437                 else
1438                 {
1439                     TABLE_fetch_int(&tv->view, row, i + 1, &x);
1440                     if (val == x)
1441                         continue;
1442                 }
1443             }
1444             else
1445             {
1446                 if ( r != ERROR_SUCCESS )
1447                     return ERROR_FUNCTION_FAILED;
1448             }
1449         }
1450
1451         r = TABLE_set_int( tv, row, i+1, val );
1452         if ( r != ERROR_SUCCESS )
1453             break;
1454     }
1455     return r;
1456 }
1457
1458 static UINT table_create_new_row( struct tagMSIVIEW *view, UINT *num, BOOL temporary )
1459 {
1460     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1461     BYTE **p, *row;
1462     BOOL *b;
1463     UINT sz;
1464     BYTE ***data_ptr;
1465     BOOL **data_persist_ptr;
1466     UINT *row_count;
1467
1468     TRACE("%p %s\n", view, temporary ? "TRUE" : "FALSE");
1469
1470     if( !tv->table )
1471         return ERROR_INVALID_PARAMETER;
1472
1473     row = msi_alloc_zero( tv->row_size );
1474     if( !row )
1475         return ERROR_NOT_ENOUGH_MEMORY;
1476
1477     row_count = &tv->table->row_count;
1478     data_ptr = &tv->table->data;
1479     data_persist_ptr = &tv->table->data_persistent;
1480     if (*num == -1)
1481         *num = tv->table->row_count;
1482
1483     sz = (*row_count + 1) * sizeof (BYTE*);
1484     if( *data_ptr )
1485         p = msi_realloc( *data_ptr, sz );
1486     else
1487         p = msi_alloc( sz );
1488     if( !p )
1489     {
1490         msi_free( row );
1491         return ERROR_NOT_ENOUGH_MEMORY;
1492     }
1493
1494     sz = (*row_count + 1) * sizeof (BOOL);
1495     if( *data_persist_ptr )
1496         b = msi_realloc( *data_persist_ptr, sz );
1497     else
1498         b = msi_alloc( sz );
1499     if( !b )
1500     {
1501         msi_free( row );
1502         msi_free( p );
1503         return ERROR_NOT_ENOUGH_MEMORY;
1504     }
1505
1506     *data_ptr = p;
1507     (*data_ptr)[*row_count] = row;
1508
1509     *data_persist_ptr = b;
1510     (*data_persist_ptr)[*row_count] = !temporary;
1511
1512     (*row_count)++;
1513
1514     return ERROR_SUCCESS;
1515 }
1516
1517 static UINT TABLE_execute( struct tagMSIVIEW *view, MSIRECORD *record )
1518 {
1519     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1520
1521     TRACE("%p %p\n", tv, record);
1522
1523     TRACE("There are %d columns\n", tv->num_cols );
1524
1525     return ERROR_SUCCESS;
1526 }
1527
1528 static UINT TABLE_close( struct tagMSIVIEW *view )
1529 {
1530     TRACE("%p\n", view );
1531     
1532     return ERROR_SUCCESS;
1533 }
1534
1535 static UINT TABLE_get_dimensions( struct tagMSIVIEW *view, UINT *rows, UINT *cols)
1536 {
1537     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1538
1539     TRACE("%p %p %p\n", view, rows, cols );
1540
1541     if( cols )
1542         *cols = tv->num_cols;
1543     if( rows )
1544     {
1545         if( !tv->table )
1546             return ERROR_INVALID_PARAMETER;
1547         *rows = tv->table->row_count;
1548     }
1549
1550     return ERROR_SUCCESS;
1551 }
1552
1553 static UINT TABLE_get_column_info( struct tagMSIVIEW *view,
1554                 UINT n, LPWSTR *name, UINT *type, BOOL *temporary,
1555                 LPWSTR *table_name )
1556 {
1557     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1558
1559     TRACE("%p %d %p %p\n", tv, n, name, type );
1560
1561     if( ( n == 0 ) || ( n > tv->num_cols ) )
1562         return ERROR_INVALID_PARAMETER;
1563
1564     if( name )
1565     {
1566         *name = strdupW( tv->columns[n-1].colname );
1567         if( !*name )
1568             return ERROR_FUNCTION_FAILED;
1569     }
1570
1571     if( table_name )
1572     {
1573         *table_name = strdupW( tv->columns[n-1].tablename );
1574         if( !*table_name )
1575             return ERROR_FUNCTION_FAILED;
1576     }
1577
1578     if( type )
1579         *type = tv->columns[n-1].type;
1580
1581     if( temporary )
1582         *temporary = tv->columns[n-1].temporary;
1583
1584     return ERROR_SUCCESS;
1585 }
1586
1587 static UINT msi_table_find_row( MSITABLEVIEW *tv, MSIRECORD *rec, UINT *row );
1588
1589 static UINT table_validate_new( MSITABLEVIEW *tv, MSIRECORD *rec )
1590 {
1591     UINT r, row, i;
1592
1593     /* check there's no null values where they're not allowed */
1594     for( i = 0; i < tv->num_cols; i++ )
1595     {
1596         if ( tv->columns[i].type & MSITYPE_NULLABLE )
1597             continue;
1598
1599         if ( MSITYPE_IS_BINARY(tv->columns[i].type) )
1600             TRACE("skipping binary column\n");
1601         else if ( tv->columns[i].type & MSITYPE_STRING )
1602         {
1603             LPCWSTR str;
1604
1605             str = MSI_RecordGetString( rec, i+1 );
1606             if (str == NULL || str[0] == 0)
1607                 return ERROR_INVALID_DATA;
1608         }
1609         else
1610         {
1611             UINT n;
1612
1613             n = MSI_RecordGetInteger( rec, i+1 );
1614             if (n == MSI_NULL_INTEGER)
1615                 return ERROR_INVALID_DATA;
1616         }
1617     }
1618
1619     /* check there's no duplicate keys */
1620     r = msi_table_find_row( tv, rec, &row );
1621     if (r == ERROR_SUCCESS)
1622         return ERROR_FUNCTION_FAILED;
1623
1624     return ERROR_SUCCESS;
1625 }
1626
1627 static int compare_record( MSITABLEVIEW *tv, UINT row, MSIRECORD *rec )
1628 {
1629     UINT r, i, ivalue, x;
1630
1631     for (i = 0; i < tv->num_cols; i++ )
1632     {
1633         if (!(tv->columns[i].type & MSITYPE_KEY)) continue;
1634
1635         r = get_table_value_from_record( tv, rec, i + 1, &ivalue );
1636         if (r != ERROR_SUCCESS)
1637             return 1;
1638
1639         r = TABLE_fetch_int( &tv->view, row, i + 1, &x );
1640         if (r != ERROR_SUCCESS)
1641         {
1642             WARN("TABLE_fetch_int should not fail here %u\n", r);
1643             return -1;
1644         }
1645         if (ivalue > x)
1646         {
1647             return 1;
1648         }
1649         else if (ivalue == x)
1650         {
1651             if (i < tv->num_cols - 1) continue;
1652             return 0;
1653         }
1654         else
1655             return -1;
1656     }
1657     return 1;
1658 }
1659
1660 static int find_insert_index( MSITABLEVIEW *tv, MSIRECORD *rec )
1661 {
1662     int idx, c, low = 0, high = tv->table->row_count - 1;
1663
1664     TRACE("%p %p\n", tv, rec);
1665
1666     while (low <= high)
1667     {
1668         idx = (low + high) / 2;
1669         c = compare_record( tv, idx, rec );
1670
1671         if (c < 0)
1672             high = idx - 1;
1673         else if (c > 0)
1674             low = idx + 1;
1675         else
1676         {
1677             TRACE("found %u\n", idx);
1678             return idx;
1679         }
1680     }
1681     TRACE("found %u\n", high + 1);
1682     return high + 1;
1683 }
1684
1685 static UINT TABLE_insert_row( struct tagMSIVIEW *view, MSIRECORD *rec, UINT row, BOOL temporary )
1686 {
1687     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1688     UINT i, r;
1689
1690     TRACE("%p %p %s\n", tv, rec, temporary ? "TRUE" : "FALSE" );
1691
1692     /* check that the key is unique - can we find a matching row? */
1693     r = table_validate_new( tv, rec );
1694     if( r != ERROR_SUCCESS )
1695         return ERROR_FUNCTION_FAILED;
1696
1697     if (row == -1)
1698         row = find_insert_index( tv, rec );
1699
1700     r = table_create_new_row( view, &row, temporary );
1701     TRACE("insert_row returned %08x\n", r);
1702     if( r != ERROR_SUCCESS )
1703         return r;
1704
1705     /* shift the rows to make room for the new row */
1706     for (i = tv->table->row_count - 1; i > row; i--)
1707     {
1708         memmove(&(tv->table->data[i][0]),
1709                 &(tv->table->data[i - 1][0]), tv->row_size);
1710         tv->table->data_persistent[i] = tv->table->data_persistent[i - 1];
1711     }
1712
1713     /* Re-set the persistence flag */
1714     tv->table->data_persistent[row] = !temporary;
1715     return TABLE_set_row( view, row, rec, (1<<tv->num_cols) - 1 );
1716 }
1717
1718 static UINT TABLE_delete_row( struct tagMSIVIEW *view, UINT row )
1719 {
1720     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1721     UINT r, num_rows, num_cols, i;
1722
1723     TRACE("%p %d\n", tv, row);
1724
1725     if ( !tv->table )
1726         return ERROR_INVALID_PARAMETER;
1727
1728     r = TABLE_get_dimensions( view, &num_rows, &num_cols );
1729     if ( r != ERROR_SUCCESS )
1730         return r;
1731
1732     if ( row >= num_rows )
1733         return ERROR_FUNCTION_FAILED;
1734
1735     num_rows = tv->table->row_count;
1736     tv->table->row_count--;
1737
1738     /* reset the hash tables */
1739     for (i = 0; i < tv->num_cols; i++)
1740     {
1741         msi_free( tv->columns[i].hash_table );
1742         tv->columns[i].hash_table = NULL;
1743     }
1744
1745     for (i = row + 1; i < num_rows; i++)
1746     {
1747         memcpy(tv->table->data[i - 1], tv->table->data[i], tv->row_size);
1748         tv->table->data_persistent[i - 1] = tv->table->data_persistent[i];
1749     }
1750
1751     msi_free(tv->table->data[num_rows - 1]);
1752
1753     return ERROR_SUCCESS;
1754 }
1755
1756 static UINT msi_table_update(struct tagMSIVIEW *view, MSIRECORD *rec, UINT row)
1757 {
1758     MSITABLEVIEW *tv = (MSITABLEVIEW *)view;
1759     UINT r, new_row;
1760
1761     /* FIXME: MsiViewFetch should set rec index 0 to some ID that
1762      * sets the fetched record apart from other records
1763      */
1764
1765     if (!tv->table)
1766         return ERROR_INVALID_PARAMETER;
1767
1768     r = msi_table_find_row(tv, rec, &new_row);
1769     if (r != ERROR_SUCCESS)
1770     {
1771         ERR("can't find row to modify\n");
1772         return ERROR_FUNCTION_FAILED;
1773     }
1774
1775     /* the row cannot be changed */
1776     if (row != new_row + 1)
1777         return ERROR_FUNCTION_FAILED;
1778
1779     return TABLE_set_row(view, new_row, rec, (1 << tv->num_cols) - 1);
1780 }
1781
1782 static UINT msi_table_assign(struct tagMSIVIEW *view, MSIRECORD *rec)
1783 {
1784     MSITABLEVIEW *tv = (MSITABLEVIEW *)view;
1785     UINT r, row;
1786
1787     if (!tv->table)
1788         return ERROR_INVALID_PARAMETER;
1789
1790     r = msi_table_find_row(tv, rec, &row);
1791     if (r == ERROR_SUCCESS)
1792         return TABLE_set_row(view, row, rec, (1 << tv->num_cols) - 1);
1793     else
1794         return TABLE_insert_row( view, rec, -1, FALSE );
1795 }
1796
1797 static UINT modify_delete_row( struct tagMSIVIEW *view, MSIRECORD *rec )
1798 {
1799     MSITABLEVIEW *tv = (MSITABLEVIEW *)view;
1800     UINT row, r;
1801
1802     r = msi_table_find_row(tv, rec, &row);
1803     if (r != ERROR_SUCCESS)
1804         return r;
1805
1806     return TABLE_delete_row(view, row);
1807 }
1808
1809 static UINT msi_refresh_record( struct tagMSIVIEW *view, MSIRECORD *rec, UINT row )
1810 {
1811     MSIRECORD *curr;
1812     UINT r, i, count;
1813
1814     r = TABLE_get_row(view, row - 1, &curr);
1815     if (r != ERROR_SUCCESS)
1816         return r;
1817
1818     /* Close the original record */
1819     MSI_CloseRecord(&rec->hdr);
1820
1821     count = MSI_RecordGetFieldCount(rec);
1822     for (i = 0; i < count; i++)
1823         MSI_RecordCopyField(curr, i + 1, rec, i + 1);
1824
1825     msiobj_release(&curr->hdr);
1826     return ERROR_SUCCESS;
1827 }
1828
1829 static UINT TABLE_modify( struct tagMSIVIEW *view, MSIMODIFY eModifyMode,
1830                           MSIRECORD *rec, UINT row)
1831 {
1832     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1833     UINT r;
1834
1835     TRACE("%p %d %p\n", view, eModifyMode, rec );
1836
1837     switch (eModifyMode)
1838     {
1839     case MSIMODIFY_DELETE:
1840         r = modify_delete_row( view, rec );
1841         break;
1842     case MSIMODIFY_VALIDATE_NEW:
1843         r = table_validate_new( tv, rec );
1844         break;
1845
1846     case MSIMODIFY_INSERT:
1847         r = table_validate_new( tv, rec );
1848         if (r != ERROR_SUCCESS)
1849             break;
1850         r = TABLE_insert_row( view, rec, -1, FALSE );
1851         break;
1852
1853     case MSIMODIFY_INSERT_TEMPORARY:
1854         r = table_validate_new( tv, rec );
1855         if (r != ERROR_SUCCESS)
1856             break;
1857         r = TABLE_insert_row( view, rec, -1, TRUE );
1858         break;
1859
1860     case MSIMODIFY_REFRESH:
1861         r = msi_refresh_record( view, rec, row );
1862         break;
1863
1864     case MSIMODIFY_UPDATE:
1865         r = msi_table_update( view, rec, row );
1866         break;
1867
1868     case MSIMODIFY_ASSIGN:
1869         r = msi_table_assign( view, rec );
1870         break;
1871
1872     case MSIMODIFY_REPLACE:
1873     case MSIMODIFY_MERGE:
1874     case MSIMODIFY_VALIDATE:
1875     case MSIMODIFY_VALIDATE_FIELD:
1876     case MSIMODIFY_VALIDATE_DELETE:
1877         FIXME("%p %d %p - mode not implemented\n", view, eModifyMode, rec );
1878         r = ERROR_CALL_NOT_IMPLEMENTED;
1879         break;
1880
1881     default:
1882         r = ERROR_INVALID_DATA;
1883     }
1884
1885     return r;
1886 }
1887
1888 static UINT TABLE_delete( struct tagMSIVIEW *view )
1889 {
1890     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1891
1892     TRACE("%p\n", view );
1893
1894     tv->table = NULL;
1895     tv->columns = NULL;
1896
1897     if (tv->order)
1898     {
1899         msi_free( tv->order->reorder );
1900         msi_free( tv->order );
1901         tv->order = NULL;
1902     }
1903
1904     msi_free( tv );
1905
1906     return ERROR_SUCCESS;
1907 }
1908
1909 static UINT TABLE_find_matching_rows( struct tagMSIVIEW *view, UINT col,
1910     UINT val, UINT *row, MSIITERHANDLE *handle )
1911 {
1912     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1913     const MSICOLUMNHASHENTRY *entry;
1914
1915     TRACE("%p, %d, %u, %p\n", view, col, val, *handle);
1916
1917     if( !tv->table )
1918         return ERROR_INVALID_PARAMETER;
1919
1920     if( (col==0) || (col > tv->num_cols) )
1921         return ERROR_INVALID_PARAMETER;
1922
1923     if( !tv->columns[col-1].hash_table )
1924     {
1925         UINT i;
1926         UINT num_rows = tv->table->row_count;
1927         MSICOLUMNHASHENTRY **hash_table;
1928         MSICOLUMNHASHENTRY *new_entry;
1929
1930         if( tv->columns[col-1].offset >= tv->row_size )
1931         {
1932             ERR("Stuffed up %d >= %d\n", tv->columns[col-1].offset, tv->row_size );
1933             ERR("%p %p\n", tv, tv->columns );
1934             return ERROR_FUNCTION_FAILED;
1935         }
1936
1937         /* allocate contiguous memory for the table and its entries so we
1938          * don't have to do an expensive cleanup */
1939         hash_table = msi_alloc(MSITABLE_HASH_TABLE_SIZE * sizeof(MSICOLUMNHASHENTRY*) +
1940             num_rows * sizeof(MSICOLUMNHASHENTRY));
1941         if (!hash_table)
1942             return ERROR_OUTOFMEMORY;
1943
1944         memset(hash_table, 0, MSITABLE_HASH_TABLE_SIZE * sizeof(MSICOLUMNHASHENTRY*));
1945         tv->columns[col-1].hash_table = hash_table;
1946
1947         new_entry = (MSICOLUMNHASHENTRY *)(hash_table + MSITABLE_HASH_TABLE_SIZE);
1948
1949         for (i = 0; i < num_rows; i++, new_entry++)
1950         {
1951             UINT row_value;
1952
1953             if (view->ops->fetch_int( view, i, col, &row_value ) != ERROR_SUCCESS)
1954                 continue;
1955
1956             new_entry->next = NULL;
1957             new_entry->value = row_value;
1958             new_entry->row = i;
1959             if (hash_table[row_value % MSITABLE_HASH_TABLE_SIZE])
1960             {
1961                 MSICOLUMNHASHENTRY *prev_entry = hash_table[row_value % MSITABLE_HASH_TABLE_SIZE];
1962                 while (prev_entry->next)
1963                     prev_entry = prev_entry->next;
1964                 prev_entry->next = new_entry;
1965             }
1966             else
1967                 hash_table[row_value % MSITABLE_HASH_TABLE_SIZE] = new_entry;
1968         }
1969     }
1970
1971     if( !*handle )
1972         entry = tv->columns[col-1].hash_table[val % MSITABLE_HASH_TABLE_SIZE];
1973     else
1974         entry = (*handle)->next;
1975
1976     while (entry && entry->value != val)
1977         entry = entry->next;
1978
1979     *handle = entry;
1980     if (!entry)
1981         return ERROR_NO_MORE_ITEMS;
1982
1983     *row = entry->row;
1984
1985     return ERROR_SUCCESS;
1986 }
1987
1988 static UINT TABLE_add_ref(struct tagMSIVIEW *view)
1989 {
1990     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1991     UINT i;
1992
1993     TRACE("%p %d\n", view, tv->table->ref_count);
1994
1995     for (i = 0; i < tv->table->col_count; i++)
1996     {
1997         if (tv->table->colinfo[i].type & MSITYPE_TEMPORARY)
1998             InterlockedIncrement(&tv->table->colinfo[i].ref_count);
1999     }
2000
2001     return InterlockedIncrement(&tv->table->ref_count);
2002 }
2003
2004 static UINT TABLE_remove_column(struct tagMSIVIEW *view, LPCWSTR table, UINT number)
2005 {
2006     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
2007     MSIRECORD *rec = NULL;
2008     MSIVIEW *columns = NULL;
2009     UINT row, r;
2010
2011     rec = MSI_CreateRecord(2);
2012     if (!rec)
2013         return ERROR_OUTOFMEMORY;
2014
2015     MSI_RecordSetStringW(rec, 1, table);
2016     MSI_RecordSetInteger(rec, 2, number);
2017
2018     r = TABLE_CreateView(tv->db, szColumns, &columns);
2019     if (r != ERROR_SUCCESS)
2020         return r;
2021
2022     r = msi_table_find_row((MSITABLEVIEW *)columns, rec, &row);
2023     if (r != ERROR_SUCCESS)
2024         goto done;
2025
2026     r = TABLE_delete_row(columns, row);
2027     if (r != ERROR_SUCCESS)
2028         goto done;
2029
2030     msi_update_table_columns(tv->db, table);
2031
2032 done:
2033     msiobj_release(&rec->hdr);
2034     columns->ops->delete(columns);
2035     return r;
2036 }
2037
2038 static UINT TABLE_release(struct tagMSIVIEW *view)
2039 {
2040     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
2041     INT ref = tv->table->ref_count;
2042     UINT i, r;
2043
2044     TRACE("%p %d\n", view, ref);
2045
2046     for (i = 0; i < tv->table->col_count; i++)
2047     {
2048         if (tv->table->colinfo[i].type & MSITYPE_TEMPORARY)
2049         {
2050             ref = InterlockedDecrement(&tv->table->colinfo[i].ref_count);
2051             if (ref == 0)
2052             {
2053                 r = TABLE_remove_column(view, tv->table->colinfo[i].tablename,
2054                                         tv->table->colinfo[i].number);
2055                 if (r != ERROR_SUCCESS)
2056                     break;
2057             }
2058         }
2059     }
2060
2061     ref = InterlockedDecrement(&tv->table->ref_count);
2062     if (ref == 0)
2063     {
2064         if (!tv->table->row_count)
2065         {
2066             list_remove(&tv->table->entry);
2067             free_table(tv->table);
2068             TABLE_delete(view);
2069         }
2070     }
2071
2072     return ref;
2073 }
2074
2075 static UINT TABLE_add_column(struct tagMSIVIEW *view, LPCWSTR table, UINT number,
2076                              LPCWSTR column, UINT type, BOOL hold)
2077 {
2078     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
2079     MSITABLE *msitable;
2080     MSIRECORD *rec;
2081     UINT r, i;
2082
2083     rec = MSI_CreateRecord(4);
2084     if (!rec)
2085         return ERROR_OUTOFMEMORY;
2086
2087     MSI_RecordSetStringW(rec, 1, table);
2088     MSI_RecordSetInteger(rec, 2, number);
2089     MSI_RecordSetStringW(rec, 3, column);
2090     MSI_RecordSetInteger(rec, 4, type);
2091
2092     r = TABLE_insert_row(&tv->view, rec, -1, FALSE);
2093     if (r != ERROR_SUCCESS)
2094         goto done;
2095
2096     msi_update_table_columns(tv->db, table);
2097
2098     if (!hold)
2099         goto done;
2100
2101     msitable = find_cached_table(tv->db, table);
2102     for (i = 0; i < msitable->col_count; i++)
2103     {
2104         if (!strcmpW( msitable->colinfo[i].colname, column ))
2105         {
2106             InterlockedIncrement(&msitable->colinfo[i].ref_count);
2107             break;
2108         }
2109     }
2110
2111 done:
2112     msiobj_release(&rec->hdr);
2113     return r;
2114 }
2115
2116 static UINT order_add_column(struct tagMSIVIEW *view, MSIORDERINFO *order, LPCWSTR name)
2117 {
2118     UINT n, r, count;
2119     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
2120
2121     r = TABLE_get_dimensions(view, NULL, &count);
2122     if (r != ERROR_SUCCESS)
2123         return r;
2124
2125     if (order->num_cols >= count)
2126         return ERROR_FUNCTION_FAILED;
2127
2128     r = VIEW_find_column(view, name, tv->name, &n);
2129     if (r != ERROR_SUCCESS)
2130         return r;
2131
2132     order->cols[order->num_cols] = n;
2133     TRACE("Ordering by column %s (%d)\n", debugstr_w(name), n);
2134
2135     order->num_cols++;
2136
2137     return ERROR_SUCCESS;
2138 }
2139
2140 static UINT order_compare(struct tagMSIVIEW *view, MSIORDERINFO *order,
2141                           UINT a, UINT b, UINT *swap)
2142 {
2143     UINT r, i, a_val = 0, b_val = 0;
2144
2145     *swap = 0;
2146     for (i = 0; i < order->num_cols; i++)
2147     {
2148         r = TABLE_fetch_int(view, a, order->cols[i], &a_val);
2149         if (r != ERROR_SUCCESS)
2150             return r;
2151
2152         r = TABLE_fetch_int(view, b, order->cols[i], &b_val);
2153         if (r != ERROR_SUCCESS)
2154             return r;
2155
2156         if (a_val != b_val)
2157         {
2158             if (a_val > b_val)
2159                 *swap = 1;
2160             break;
2161         }
2162     }
2163
2164     return ERROR_SUCCESS;
2165 }
2166
2167 static UINT order_mergesort(struct tagMSIVIEW *view, MSIORDERINFO *order,
2168                             UINT left, UINT right)
2169 {
2170     UINT r, i, j, temp;
2171     UINT swap = 0, center = (left + right) / 2;
2172     UINT *array = order->reorder;
2173
2174     if (left == right)
2175         return ERROR_SUCCESS;
2176
2177     /* sort the left half */
2178     r = order_mergesort(view, order, left, center);
2179     if (r != ERROR_SUCCESS)
2180         return r;
2181
2182     /* sort the right half */
2183     r = order_mergesort(view, order, center + 1, right);
2184     if (r != ERROR_SUCCESS)
2185         return r;
2186
2187     for (i = left, j = center + 1; (i <= center) && (j <= right); i++)
2188     {
2189         r = order_compare(view, order, array[i], array[j], &swap);
2190         if (r != ERROR_SUCCESS)
2191             return r;
2192
2193         if (swap)
2194         {
2195             temp = array[j];
2196             memmove(&array[i + 1], &array[i], (j - i) * sizeof(UINT));
2197             array[i] = temp;
2198             j++;
2199             center++;
2200         }
2201     }
2202
2203     return ERROR_SUCCESS;
2204 }
2205
2206 static UINT order_verify(struct tagMSIVIEW *view, MSIORDERINFO *order, UINT num_rows)
2207 {
2208     UINT i, swap, r;
2209
2210     for (i = 1; i < num_rows; i++)
2211     {
2212         r = order_compare(view, order, order->reorder[i - 1],
2213                           order->reorder[i], &swap);
2214         if (r != ERROR_SUCCESS)
2215             return r;
2216
2217         if (!swap)
2218             continue;
2219
2220         ERR("Bad order! %d\n", i);
2221         return ERROR_FUNCTION_FAILED;
2222     }
2223
2224     return ERROR_SUCCESS;
2225 }
2226
2227 static UINT TABLE_sort(struct tagMSIVIEW *view, column_info *columns)
2228 {
2229     MSITABLEVIEW *tv = (MSITABLEVIEW *)view;
2230     MSIORDERINFO *order;
2231     column_info *ptr;
2232     UINT r, i;
2233     UINT rows, cols;
2234
2235     TRACE("sorting table %s\n", debugstr_w(tv->name));
2236
2237     r = TABLE_get_dimensions(view, &rows, &cols);
2238     if (r != ERROR_SUCCESS)
2239         return r;
2240
2241     if (rows == 0)
2242         return ERROR_SUCCESS;
2243
2244     order = msi_alloc_zero(sizeof(MSIORDERINFO) + sizeof(UINT) * cols);
2245     if (!order)
2246         return ERROR_OUTOFMEMORY;
2247
2248     for (ptr = columns; ptr; ptr = ptr->next)
2249         order_add_column(view, order, ptr->column);
2250
2251     order->reorder = msi_alloc(rows * sizeof(UINT));
2252     if (!order->reorder)
2253         return ERROR_OUTOFMEMORY;
2254
2255     for (i = 0; i < rows; i++)
2256         order->reorder[i] = i;
2257
2258     r = order_mergesort(view, order, 0, rows - 1);
2259     if (r != ERROR_SUCCESS)
2260         return r;
2261
2262     r = order_verify(view, order, rows);
2263     if (r != ERROR_SUCCESS)
2264         return r;
2265
2266     tv->order = order;
2267
2268     return ERROR_SUCCESS;
2269 }
2270
2271 static UINT TABLE_drop(struct tagMSIVIEW *view)
2272 {
2273     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
2274     MSIVIEW *tables = NULL;
2275     MSIRECORD *rec = NULL;
2276     UINT r, row;
2277     INT i;
2278
2279     TRACE("dropping table %s\n", debugstr_w(tv->name));
2280
2281     for (i = tv->table->col_count - 1; i >= 0; i--)
2282     {
2283         r = TABLE_remove_column(view, tv->table->colinfo[i].tablename,
2284                                 tv->table->colinfo[i].number);
2285         if (r != ERROR_SUCCESS)
2286             return r;
2287     }
2288
2289     rec = MSI_CreateRecord(1);
2290     if (!rec)
2291         return ERROR_OUTOFMEMORY;
2292
2293     MSI_RecordSetStringW(rec, 1, tv->name);
2294
2295     r = TABLE_CreateView(tv->db, szTables, &tables);
2296     if (r != ERROR_SUCCESS)
2297         return r;
2298
2299     r = msi_table_find_row((MSITABLEVIEW *)tables, rec, &row);
2300     if (r != ERROR_SUCCESS)
2301         goto done;
2302
2303     r = TABLE_delete_row(tables, row);
2304     if (r != ERROR_SUCCESS)
2305         goto done;
2306
2307     list_remove(&tv->table->entry);
2308     free_table(tv->table);
2309
2310 done:
2311     msiobj_release(&rec->hdr);
2312     tables->ops->delete(tables);
2313
2314     return r;
2315 }
2316
2317 static const MSIVIEWOPS table_ops =
2318 {
2319     TABLE_fetch_int,
2320     TABLE_fetch_stream,
2321     TABLE_get_row,
2322     TABLE_set_row,
2323     TABLE_insert_row,
2324     TABLE_delete_row,
2325     TABLE_execute,
2326     TABLE_close,
2327     TABLE_get_dimensions,
2328     TABLE_get_column_info,
2329     TABLE_modify,
2330     TABLE_delete,
2331     TABLE_find_matching_rows,
2332     TABLE_add_ref,
2333     TABLE_release,
2334     TABLE_add_column,
2335     TABLE_remove_column,
2336     TABLE_sort,
2337     TABLE_drop,
2338 };
2339
2340 UINT TABLE_CreateView( MSIDATABASE *db, LPCWSTR name, MSIVIEW **view )
2341 {
2342     MSITABLEVIEW *tv ;
2343     UINT r, sz;
2344
2345     TRACE("%p %s %p\n", db, debugstr_w(name), view );
2346
2347     if ( !strcmpW( name, szStreams ) )
2348         return STREAMS_CreateView( db, view );
2349     else if ( !strcmpW( name, szStorages ) )
2350         return STORAGES_CreateView( db, view );
2351
2352     sz = sizeof *tv + lstrlenW(name)*sizeof name[0] ;
2353     tv = msi_alloc_zero( sz );
2354     if( !tv )
2355         return ERROR_FUNCTION_FAILED;
2356
2357     r = get_table( db, name, &tv->table );
2358     if( r != ERROR_SUCCESS )
2359     {
2360         msi_free( tv );
2361         WARN("table not found\n");
2362         return r;
2363     }
2364
2365     TRACE("table %p found with %d columns\n", tv->table, tv->table->col_count);
2366
2367     /* fill the structure */
2368     tv->view.ops = &table_ops;
2369     tv->db = db;
2370     tv->columns = tv->table->colinfo;
2371     tv->num_cols = tv->table->col_count;
2372     tv->row_size = msi_table_get_row_size( db, tv->table->colinfo, tv->table->col_count, LONG_STR_BYTES );
2373
2374     TRACE("%s one row is %d bytes\n", debugstr_w(name), tv->row_size );
2375
2376     *view = (MSIVIEW*) tv;
2377     lstrcpyW( tv->name, name );
2378
2379     return ERROR_SUCCESS;
2380 }
2381
2382 UINT MSI_CommitTables( MSIDATABASE *db )
2383 {
2384     UINT r, bytes_per_strref;
2385     HRESULT hr;
2386     MSITABLE *table = NULL;
2387
2388     TRACE("%p\n",db);
2389
2390     r = msi_save_string_table( db->strings, db->storage, &bytes_per_strref );
2391     if( r != ERROR_SUCCESS )
2392     {
2393         WARN("failed to save string table r=%08x\n",r);
2394         return r;
2395     }
2396
2397     LIST_FOR_EACH_ENTRY( table, &db->tables, MSITABLE, entry )
2398     {
2399         r = save_table( db, table, bytes_per_strref );
2400         if( r != ERROR_SUCCESS )
2401         {
2402             WARN("failed to save table %s (r=%08x)\n",
2403                   debugstr_w(table->name), r);
2404             return r;
2405         }
2406     }
2407
2408     /* force everything to reload next time */
2409     free_cached_tables( db );
2410
2411     hr = IStorage_Commit( db->storage, 0 );
2412     if (FAILED( hr ))
2413     {
2414         WARN("failed to commit changes 0x%08x\n", hr);
2415         r = ERROR_FUNCTION_FAILED;
2416     }
2417     return r;
2418 }
2419
2420 MSICONDITION MSI_DatabaseIsTablePersistent( MSIDATABASE *db, LPCWSTR table )
2421 {
2422     MSITABLE *t;
2423     UINT r;
2424
2425     TRACE("%p %s\n", db, debugstr_w(table));
2426
2427     if (!table)
2428         return MSICONDITION_ERROR;
2429
2430     r = get_table( db, table, &t );
2431     if (r != ERROR_SUCCESS)
2432         return MSICONDITION_NONE;
2433
2434     return t->persistent;
2435 }
2436
2437 static UINT read_raw_int(const BYTE *data, UINT col, UINT bytes)
2438 {
2439     UINT ret = 0, i;
2440
2441     for (i = 0; i < bytes; i++)
2442         ret += (data[col + i] << i * 8);
2443
2444     return ret;
2445 }
2446
2447 static UINT msi_record_encoded_stream_name( const MSITABLEVIEW *tv, MSIRECORD *rec, LPWSTR *pstname )
2448 {
2449     LPWSTR stname = NULL, sval, p;
2450     DWORD len;
2451     UINT i, r;
2452
2453     TRACE("%p %p\n", tv, rec);
2454
2455     len = lstrlenW( tv->name ) + 1;
2456     stname = msi_alloc( len*sizeof(WCHAR) );
2457     if ( !stname )
2458     {
2459        r = ERROR_OUTOFMEMORY;
2460        goto err;
2461     }
2462
2463     lstrcpyW( stname, tv->name );
2464
2465     for ( i = 0; i < tv->num_cols; i++ )
2466     {
2467         if ( tv->columns[i].type & MSITYPE_KEY )
2468         {
2469             sval = msi_dup_record_field( rec, i + 1 );
2470             if ( !sval )
2471             {
2472                 r = ERROR_OUTOFMEMORY;
2473                 goto err;
2474             }
2475
2476             len += lstrlenW( szDot ) + lstrlenW ( sval );
2477             p = msi_realloc ( stname, len*sizeof(WCHAR) );
2478             if ( !p )
2479             {
2480                 r = ERROR_OUTOFMEMORY;
2481                 goto err;
2482             }
2483             stname = p;
2484
2485             lstrcatW( stname, szDot );
2486             lstrcatW( stname, sval );
2487
2488             msi_free( sval );
2489         }
2490         else
2491             continue;
2492     }
2493
2494     *pstname = encode_streamname( FALSE, stname );
2495     msi_free( stname );
2496
2497     return ERROR_SUCCESS;
2498
2499 err:
2500     msi_free ( stname );
2501     *pstname = NULL;
2502     return r;
2503 }
2504
2505 static MSIRECORD *msi_get_transform_record( const MSITABLEVIEW *tv, const string_table *st,
2506                                             IStorage *stg,
2507                                             const BYTE *rawdata, UINT bytes_per_strref )
2508 {
2509     UINT i, val, ofs = 0;
2510     USHORT mask;
2511     MSICOLUMNINFO *columns = tv->columns;
2512     MSIRECORD *rec;
2513
2514     mask = rawdata[0] | (rawdata[1] << 8);
2515     rawdata += 2;
2516
2517     rec = MSI_CreateRecord( tv->num_cols );
2518     if( !rec )
2519         return rec;
2520
2521     TRACE("row ->\n");
2522     for( i=0; i<tv->num_cols; i++ )
2523     {
2524         if ( (mask&1) && (i>=(mask>>8)) )
2525             break;
2526         /* all keys must be present */
2527         if ( (~mask&1) && (~columns[i].type & MSITYPE_KEY) && ((1<<i) & ~mask) )
2528             continue;
2529
2530         if( MSITYPE_IS_BINARY(tv->columns[i].type) )
2531         {
2532             LPWSTR encname;
2533             IStream *stm = NULL;
2534             UINT r;
2535
2536             ofs += bytes_per_column( tv->db, &columns[i], bytes_per_strref );
2537
2538             r = msi_record_encoded_stream_name( tv, rec, &encname );
2539             if ( r != ERROR_SUCCESS )
2540                 return NULL;
2541
2542             r = IStorage_OpenStream( stg, encname, NULL,
2543                      STGM_READ | STGM_SHARE_EXCLUSIVE, 0, &stm );
2544             msi_free( encname );
2545             if ( r != ERROR_SUCCESS )
2546                 return NULL;
2547
2548             MSI_RecordSetStream( rec, i+1, stm );
2549             TRACE(" field %d [%s]\n", i+1, debugstr_w(encname));
2550         }
2551         else if( columns[i].type & MSITYPE_STRING )
2552         {
2553             LPCWSTR sval;
2554
2555             val = read_raw_int(rawdata, ofs, bytes_per_strref);
2556             sval = msi_string_lookup_id( st, val );
2557             MSI_RecordSetStringW( rec, i+1, sval );
2558             TRACE(" field %d [%s]\n", i+1, debugstr_w(sval));
2559             ofs += bytes_per_strref;
2560         }
2561         else
2562         {
2563             UINT n = bytes_per_column( tv->db, &columns[i], bytes_per_strref );
2564             switch( n )
2565             {
2566             case 2:
2567                 val = read_raw_int(rawdata, ofs, n);
2568                 if (val)
2569                     MSI_RecordSetInteger( rec, i+1, val-0x8000 );
2570                 TRACE(" field %d [0x%04x]\n", i+1, val );
2571                 break;
2572             case 4:
2573                 val = read_raw_int(rawdata, ofs, n);
2574                 if (val)
2575                     MSI_RecordSetInteger( rec, i+1, val^0x80000000 );
2576                 TRACE(" field %d [0x%08x]\n", i+1, val );
2577                 break;
2578             default:
2579                 ERR("oops - unknown column width %d\n", n);
2580                 break;
2581             }
2582             ofs += n;
2583         }
2584     }
2585     return rec;
2586 }
2587
2588 static void dump_record( MSIRECORD *rec )
2589 {
2590     UINT i, n;
2591
2592     n = MSI_RecordGetFieldCount( rec );
2593     for( i=1; i<=n; i++ )
2594     {
2595         LPCWSTR sval = MSI_RecordGetString( rec, i );
2596
2597         if( MSI_RecordIsNull( rec, i ) )
2598             TRACE("row -> []\n");
2599         else if( (sval = MSI_RecordGetString( rec, i )) )
2600             TRACE("row -> [%s]\n", debugstr_w(sval));
2601         else
2602             TRACE("row -> [0x%08x]\n", MSI_RecordGetInteger( rec, i ) );
2603     }
2604 }
2605
2606 static void dump_table( const string_table *st, const USHORT *rawdata, UINT rawsize )
2607 {
2608     LPCWSTR sval;
2609     UINT i;
2610
2611     for( i=0; i<(rawsize/2); i++ )
2612     {
2613         sval = msi_string_lookup_id( st, rawdata[i] );
2614         MESSAGE(" %04x %s\n", rawdata[i], debugstr_w(sval) );
2615     }
2616 }
2617
2618 static UINT* msi_record_to_row( const MSITABLEVIEW *tv, MSIRECORD *rec )
2619 {
2620     LPCWSTR str;
2621     UINT i, r, *data;
2622
2623     data = msi_alloc( tv->num_cols *sizeof (UINT) );
2624     for( i=0; i<tv->num_cols; i++ )
2625     {
2626         data[i] = 0;
2627
2628         if ( ~tv->columns[i].type & MSITYPE_KEY )
2629             continue;
2630
2631         /* turn the transform column value into a row value */
2632         if ( ( tv->columns[i].type & MSITYPE_STRING ) &&
2633              ! MSITYPE_IS_BINARY(tv->columns[i].type) )
2634         {
2635             str = MSI_RecordGetString( rec, i+1 );
2636             if (str)
2637             {
2638                 r = msi_string2idW( tv->db->strings, str, &data[i] );
2639
2640                 /* if there's no matching string in the string table,
2641                    these keys can't match any record, so fail now. */
2642                 if (r != ERROR_SUCCESS)
2643                 {
2644                     msi_free( data );
2645                     return NULL;
2646                 }
2647             }
2648             else data[i] = 0;
2649         }
2650         else
2651         {
2652             data[i] = MSI_RecordGetInteger( rec, i+1 );
2653
2654             if (data[i] == MSI_NULL_INTEGER)
2655                 data[i] = 0;
2656             else if ((tv->columns[i].type&0xff) == 2)
2657                 data[i] += 0x8000;
2658             else
2659                 data[i] += 0x80000000;
2660         }
2661     }
2662     return data;
2663 }
2664
2665 static UINT msi_row_matches( MSITABLEVIEW *tv, UINT row, const UINT *data )
2666 {
2667     UINT i, r, x, ret = ERROR_FUNCTION_FAILED;
2668
2669     for( i=0; i<tv->num_cols; i++ )
2670     {
2671         if ( ~tv->columns[i].type & MSITYPE_KEY )
2672             continue;
2673
2674         /* turn the transform column value into a row value */
2675         r = TABLE_fetch_int( &tv->view, row, i+1, &x );
2676         if ( r != ERROR_SUCCESS )
2677         {
2678             ERR("TABLE_fetch_int shouldn't fail here\n");
2679             break;
2680         }
2681
2682         /* if this key matches, move to the next column */
2683         if ( x != data[i] )
2684         {
2685             ret = ERROR_FUNCTION_FAILED;
2686             break;
2687         }
2688
2689         ret = ERROR_SUCCESS;
2690     }
2691
2692     return ret;
2693 }
2694
2695 static UINT msi_table_find_row( MSITABLEVIEW *tv, MSIRECORD *rec, UINT *row )
2696 {
2697     UINT i, r = ERROR_FUNCTION_FAILED, *data;
2698
2699     data = msi_record_to_row( tv, rec );
2700     if( !data )
2701         return r;
2702     for( i = 0; i < tv->table->row_count; i++ )
2703     {
2704         r = msi_row_matches( tv, i, data );
2705         if( r == ERROR_SUCCESS )
2706         {
2707             *row = i;
2708             break;
2709         }
2710     }
2711     msi_free( data );
2712     return r;
2713 }
2714
2715 typedef struct
2716 {
2717     struct list entry;
2718     LPWSTR name;
2719 } TRANSFORMDATA;
2720
2721 static UINT msi_table_load_transform( MSIDATABASE *db, IStorage *stg,
2722                                       string_table *st, TRANSFORMDATA *transform,
2723                                       UINT bytes_per_strref )
2724 {
2725     UINT rawsize = 0;
2726     BYTE *rawdata = NULL;
2727     MSITABLEVIEW *tv = NULL;
2728     UINT r, n, sz, i, mask;
2729     MSIRECORD *rec = NULL;
2730     UINT colcol = 0;
2731     WCHAR coltable[32];
2732     LPWSTR name;
2733
2734     if (!transform)
2735         return ERROR_SUCCESS;
2736
2737     name = transform->name;
2738
2739     coltable[0] = 0;
2740     TRACE("%p %p %p %s\n", db, stg, st, debugstr_w(name) );
2741
2742     /* read the transform data */
2743     read_stream_data( stg, name, TRUE, &rawdata, &rawsize );
2744     if ( !rawdata )
2745     {
2746         TRACE("table %s empty\n", debugstr_w(name) );
2747         return ERROR_INVALID_TABLE;
2748     }
2749
2750     /* create a table view */
2751     r = TABLE_CreateView( db, name, (MSIVIEW**) &tv );
2752     if( r != ERROR_SUCCESS )
2753         goto err;
2754
2755     r = tv->view.ops->execute( &tv->view, NULL );
2756     if( r != ERROR_SUCCESS )
2757         goto err;
2758
2759     TRACE("name = %s columns = %u row_size = %u raw size = %u\n",
2760           debugstr_w(name), tv->num_cols, tv->row_size, rawsize );
2761
2762     /* interpret the data */
2763     r = ERROR_SUCCESS;
2764     for( n=0; n < rawsize;  )
2765     {
2766         mask = rawdata[n] | (rawdata[n+1] << 8);
2767
2768         if (mask&1)
2769         {
2770             /*
2771              * if the low bit is set, columns are continuous and
2772              * the number of columns is specified in the high byte
2773              */
2774             sz = 2;
2775             for( i=0; i<tv->num_cols; i++ )
2776             {
2777                 if( (tv->columns[i].type & MSITYPE_STRING) &&
2778                     ! MSITYPE_IS_BINARY(tv->columns[i].type) )
2779                     sz += bytes_per_strref;
2780                 else
2781                     sz += bytes_per_column( tv->db, &tv->columns[i], bytes_per_strref );
2782             }
2783         }
2784         else
2785         {
2786             /*
2787              * If the low bit is not set, mask is a bitmask.
2788              * Excepting for key fields, which are always present,
2789              *  each bit indicates that a field is present in the transform record.
2790              *
2791              * mask == 0 is a special case ... only the keys will be present
2792              * and it means that this row should be deleted.
2793              */
2794             sz = 2;
2795             for( i=0; i<tv->num_cols; i++ )
2796             {
2797                 if( (tv->columns[i].type & MSITYPE_KEY) || ((1<<i)&mask))
2798                 {
2799                     if( (tv->columns[i].type & MSITYPE_STRING) &&
2800                         ! MSITYPE_IS_BINARY(tv->columns[i].type) )
2801                         sz += bytes_per_strref;
2802                     else
2803                         sz += bytes_per_column( tv->db, &tv->columns[i], bytes_per_strref );
2804                 }
2805             }
2806         }
2807
2808         /* check we didn't run of the end of the table */
2809         if ( (n+sz) > rawsize )
2810         {
2811             ERR("borked.\n");
2812             dump_table( st, (USHORT *)rawdata, rawsize );
2813             break;
2814         }
2815
2816         rec = msi_get_transform_record( tv, st, stg, &rawdata[n], bytes_per_strref );
2817         if (rec)
2818         {
2819             WCHAR table[32];
2820             DWORD sz = 32;
2821             UINT number = MSI_NULL_INTEGER;
2822             UINT row = 0;
2823
2824             if (!strcmpW( name, szColumns ))
2825             {
2826                 MSI_RecordGetStringW( rec, 1, table, &sz );
2827                 number = MSI_RecordGetInteger( rec, 2 );
2828
2829                 /*
2830                  * Native msi seems writes nul into the Number (2nd) column of
2831                  * the _Columns table, only when the columns are from a new table
2832                  */
2833                 if ( number == MSI_NULL_INTEGER )
2834                 {
2835                     /* reset the column number on a new table */
2836                     if (strcmpW( coltable, table ))
2837                     {
2838                         colcol = 0;
2839                         lstrcpyW( coltable, table );
2840                     }
2841
2842                     /* fix nul column numbers */
2843                     MSI_RecordSetInteger( rec, 2, ++colcol );
2844                 }
2845             }
2846
2847             if (TRACE_ON(msidb)) dump_record( rec );
2848
2849             r = msi_table_find_row( tv, rec, &row );
2850             if (r == ERROR_SUCCESS)
2851             {
2852                 if (!mask)
2853                 {
2854                     TRACE("deleting row [%d]:\n", row);
2855                     r = TABLE_delete_row( &tv->view, row );
2856                     if (r != ERROR_SUCCESS)
2857                         WARN("failed to delete row %u\n", r);
2858                 }
2859                 else if (mask & 1)
2860                 {
2861                     TRACE("modifying full row [%d]:\n", row);
2862                     r = TABLE_set_row( &tv->view, row, rec, (1 << tv->num_cols) - 1 );
2863                     if (r != ERROR_SUCCESS)
2864                         WARN("failed to modify row %u\n", r);
2865                 }
2866                 else
2867                 {
2868                     TRACE("modifying masked row [%d]:\n", row);
2869                     r = TABLE_set_row( &tv->view, row, rec, mask );
2870                     if (r != ERROR_SUCCESS)
2871                         WARN("failed to modify row %u\n", r);
2872                 }
2873             }
2874             else
2875             {
2876                 TRACE("inserting row\n");
2877                 r = TABLE_insert_row( &tv->view, rec, -1, FALSE );
2878                 if (r != ERROR_SUCCESS)
2879                     WARN("failed to insert row %u\n", r);
2880             }
2881
2882             if (number != MSI_NULL_INTEGER && !strcmpW( name, szColumns ))
2883                 msi_update_table_columns( db, table );
2884
2885             msiobj_release( &rec->hdr );
2886         }
2887
2888         n += sz;
2889     }
2890
2891 err:
2892     /* no need to free the table, it's associated with the database */
2893     msi_free( rawdata );
2894     if( tv )
2895         tv->view.ops->delete( &tv->view );
2896
2897     return ERROR_SUCCESS;
2898 }
2899
2900 /*
2901  * msi_table_apply_transform
2902  *
2903  * Enumerate the table transforms in a transform storage and apply each one.
2904  */
2905 UINT msi_table_apply_transform( MSIDATABASE *db, IStorage *stg )
2906 {
2907     struct list transforms;
2908     IEnumSTATSTG *stgenum = NULL;
2909     TRANSFORMDATA *transform;
2910     TRANSFORMDATA *tables = NULL, *columns = NULL;
2911     HRESULT r;
2912     STATSTG stat;
2913     string_table *strings;
2914     UINT ret = ERROR_FUNCTION_FAILED;
2915     UINT bytes_per_strref;
2916
2917     TRACE("%p %p\n", db, stg );
2918
2919     strings = msi_load_string_table( stg, &bytes_per_strref );
2920     if( !strings )
2921         goto end;
2922
2923     r = IStorage_EnumElements( stg, 0, NULL, 0, &stgenum );
2924     if( FAILED( r ) )
2925         goto end;
2926
2927     list_init(&transforms);
2928
2929     while ( TRUE )
2930     {
2931         MSITABLEVIEW *tv = NULL;
2932         WCHAR name[0x40];
2933         ULONG count = 0;
2934
2935         r = IEnumSTATSTG_Next( stgenum, 1, &stat, &count );
2936         if ( FAILED( r ) || !count )
2937             break;
2938
2939         decode_streamname( stat.pwcsName, name );
2940         CoTaskMemFree( stat.pwcsName );
2941         if ( name[0] != 0x4840 )
2942             continue;
2943
2944         if ( !strcmpW( name+1, szStringPool ) ||
2945              !strcmpW( name+1, szStringData ) )
2946             continue;
2947
2948         transform = msi_alloc_zero( sizeof(TRANSFORMDATA) );
2949         if ( !transform )
2950             break;
2951
2952         list_add_tail( &transforms, &transform->entry );
2953
2954         transform->name = strdupW( name + 1 );
2955
2956         if ( !strcmpW( transform->name, szTables ) )
2957             tables = transform;
2958         else if (!strcmpW( transform->name, szColumns ) )
2959             columns = transform;
2960
2961         TRACE("transform contains stream %s\n", debugstr_w(name));
2962
2963         /* load the table */
2964         r = TABLE_CreateView( db, transform->name, (MSIVIEW**) &tv );
2965         if( r != ERROR_SUCCESS )
2966             continue;
2967
2968         r = tv->view.ops->execute( &tv->view, NULL );
2969         if( r != ERROR_SUCCESS )
2970         {
2971             tv->view.ops->delete( &tv->view );
2972             continue;
2973         }
2974
2975         tv->view.ops->delete( &tv->view );
2976     }
2977
2978     /*
2979      * Apply _Tables and _Columns transforms first so that
2980      * the table metadata is correct, and empty tables exist.
2981      */
2982     ret = msi_table_load_transform( db, stg, strings, tables, bytes_per_strref );
2983     if (ret != ERROR_SUCCESS && ret != ERROR_INVALID_TABLE)
2984         goto end;
2985
2986     ret = msi_table_load_transform( db, stg, strings, columns, bytes_per_strref );
2987     if (ret != ERROR_SUCCESS && ret != ERROR_INVALID_TABLE)
2988         goto end;
2989
2990     ret = ERROR_SUCCESS;
2991
2992     while ( !list_empty( &transforms ) )
2993     {
2994         transform = LIST_ENTRY( list_head( &transforms ), TRANSFORMDATA, entry );
2995
2996         if ( strcmpW( transform->name, szColumns ) &&
2997              strcmpW( transform->name, szTables ) &&
2998              ret == ERROR_SUCCESS )
2999         {
3000             ret = msi_table_load_transform( db, stg, strings, transform, bytes_per_strref );
3001         }
3002
3003         list_remove( &transform->entry );
3004         msi_free( transform->name );
3005         msi_free( transform );
3006     }
3007
3008     if ( ret == ERROR_SUCCESS )
3009         append_storage_to_db( db, stg );
3010
3011 end:
3012     if ( stgenum )
3013         IEnumSTATSTG_Release( stgenum );
3014     if ( strings )
3015         msi_destroy_stringtable( strings );
3016
3017     return ret;
3018 }