git.oblomov.eu Git - wine/blob - dlls/msi/table.c

   1 /*
   2  * Implementation of the Microsoft Installer (msi.dll)
   3  *
   4  * Copyright 2002-2005 Mike McCormack for CodeWeavers
   5  *
   6  * This library is free software; you can redistribute it and/or
   7  * modify it under the terms of the GNU Lesser General Public
   8  * License as published by the Free Software Foundation; either
   9  * version 2.1 of the License, or (at your option) any later version.
  10  *
  11  * This library is distributed in the hope that it will be useful,
  12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  14  * Lesser General Public License for more details.
  15  *
  16  * You should have received a copy of the GNU Lesser General Public
  17  * License along with this library; if not, write to the Free Software
  18  * Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA 02110-1301, USA
  19  */
  20
  21 #include <stdarg.h>
  22 #include <assert.h>
  23
  24 #define COBJMACROS
  25 #define NONAMELESSUNION
  26 #define NONAMELESSSTRUCT
  27
  28 #include "windef.h"
  29 #include "winbase.h"
  30 #include "winerror.h"
  31 #include "msi.h"
  32 #include "msiquery.h"
  33 #include "objbase.h"
  34 #include "objidl.h"
  35 #include "winnls.h"
  36 #include "msipriv.h"
  37 #include "query.h"
  38
  39 #include "wine/debug.h"
  40 #include "wine/unicode.h"
  41
  42 WINE_DEFAULT_DEBUG_CHANNEL(msidb);
  43
  44 #define MSITABLE_HASH_TABLE_SIZE 37
  45 #define LONG_STR_BYTES 3
  46
  47 typedef struct tagMSICOLUMNHASHENTRY
  48 {
  49     struct tagMSICOLUMNHASHENTRY *next;
  50     UINT value;
  51     UINT row;
  52 } MSICOLUMNHASHENTRY;
  53
  54 typedef struct tagMSICOLUMNINFO
  55 {
  56     LPWSTR tablename;
  57     UINT   number;
  58     LPWSTR colname;
  59     UINT   type;
  60     UINT   offset;
  61     INT    ref_count;
  62     BOOL   temporary;
  63     MSICOLUMNHASHENTRY **hash_table;
  64 } MSICOLUMNINFO;
  65
  66 typedef struct tagMSIORDERINFO
  67 {
  68     UINT *reorder;
  69     UINT num_cols;
  70     UINT cols[1];
  71 } MSIORDERINFO;
  72
  73 struct tagMSITABLE
  74 {
  75     BYTE **data;
  76     BOOL *data_persistent;
  77     UINT row_count;
  78     struct list entry;
  79     MSICOLUMNINFO *colinfo;
  80     UINT col_count;
  81     MSICONDITION persistent;
  82     INT ref_count;
  83     WCHAR name[1];
  84 };
  85
  86 typedef struct tagMSITRANSFORM {
  87     struct list entry;
  88     IStorage *stg;
  89 } MSITRANSFORM;
  90
  91 static const WCHAR szStringData[] = {
  92     '_','S','t','r','i','n','g','D','a','t','a',0 };
  93 static const WCHAR szStringPool[] = {
  94     '_','S','t','r','i','n','g','P','o','o','l',0 };
  95
  96 /* information for default tables */
  97 static WCHAR szTables[]  = { '_','T','a','b','l','e','s',0 };
  98 static WCHAR szTable[]  = { 'T','a','b','l','e',0 };
  99 static WCHAR szName[]    = { 'N','a','m','e',0 };
 100 static WCHAR szColumns[] = { '_','C','o','l','u','m','n','s',0 };
 101 static WCHAR szNumber[]  = { 'N','u','m','b','e','r',0 };
 102 static WCHAR szType[]    = { 'T','y','p','e',0 };
 103
 104 static const MSICOLUMNINFO _Columns_cols[4] = {
 105     { szColumns, 1, szTable,  MSITYPE_VALID | MSITYPE_STRING | MSITYPE_KEY | 64, 0, 0, 0, NULL },
 106     { szColumns, 2, szNumber, MSITYPE_VALID | MSITYPE_KEY | 2,     2, 0, 0, NULL },
 107     { szColumns, 3, szName,   MSITYPE_VALID | MSITYPE_STRING | 64, 4, 0, 0, NULL },
 108     { szColumns, 4, szType,   MSITYPE_VALID | 2,                   6, 0, 0, NULL },
 109 };
 110
 111 static const MSICOLUMNINFO _Tables_cols[1] = {
 112     { szTables,  1, szName,   MSITYPE_VALID | MSITYPE_STRING | MSITYPE_KEY | 64, 0, 0, 0, NULL },
 113 };
 114
 115 #define MAX_STREAM_NAME 0x1f
 116
 117 static UINT table_get_column_info( MSIDATABASE *db, LPCWSTR name,
 118        MSICOLUMNINFO **pcols, UINT *pcount );
 119 static void table_calc_column_offsets( MSIDATABASE *db, MSICOLUMNINFO *colinfo,
 120        DWORD count );
 121 static UINT get_tablecolumns( MSIDATABASE *db,
 122        LPCWSTR szTableName, MSICOLUMNINFO *colinfo, UINT *sz);
 123 static void msi_free_colinfo( MSICOLUMNINFO *colinfo, UINT count );
 124
 125 static inline UINT bytes_per_column( MSIDATABASE *db, const MSICOLUMNINFO *col )
 126 {
 127     if( MSITYPE_IS_BINARY(col->type) )
 128         return 2;
 129
 130     if( col->type & MSITYPE_STRING )
 131         return db->bytes_per_strref;
 132
 133     if( (col->type & 0xff) <= 2)
 134         return 2;
 135
 136     if( (col->type & 0xff) != 4 )
 137         ERR("Invalid column size!\n");
 138
 139     return 4;
 140 }
 141
 142 static int utf2mime(int x)
 143 {
 144     if( (x>='0') && (x<='9') )
 145         return x-'0';
 146     if( (x>='A') && (x<='Z') )
 147         return x-'A'+10;
 148     if( (x>='a') && (x<='z') )
 149         return x-'a'+10+26;
 150     if( x=='.' )
 151         return 10+26+26;
 152     if( x=='_' )
 153         return 10+26+26+1;
 154     return -1;
 155 }
 156
 157 static LPWSTR encode_streamname(BOOL bTable, LPCWSTR in)
 158 {
 159     DWORD count = MAX_STREAM_NAME;
 160     DWORD ch, next;
 161     LPWSTR out, p;
 162
 163     if( !bTable )
 164         count = lstrlenW( in )+2;
 165     out = msi_alloc( count*sizeof(WCHAR) );
 166     p = out;
 167
 168     if( bTable )
 169     {
 170          *p++ = 0x4840;
 171          count --;
 172     }
 173     while( count -- )
 174     {
 175         ch = *in++;
 176         if( !ch )
 177         {
 178             *p = ch;
 179             return out;
 180         }
 181         if( ( ch < 0x80 ) && ( utf2mime(ch) >= 0 ) )
 182         {
 183             ch = utf2mime(ch) + 0x4800;
 184             next = *in;
 185             if( next && (next<0x80) )
 186             {
 187                 next = utf2mime(next);
 188                 if( next != -1 )
 189                 {
 190                      next += 0x3ffffc0;
 191                      ch += (next<<6);
 192                      in++;
 193                 }
 194             }
 195         }
 196         *p++ = ch;
 197     }
 198     ERR("Failed to encode stream name (%s)\n",debugstr_w(in));
 199     msi_free( out );
 200     return NULL;
 201 }
 202
 203 static int mime2utf(int x)
 204 {
 205     if( x<10 )
 206         return x + '0';
 207     if( x<(10+26))
 208         return x - 10 + 'A';
 209     if( x<(10+26+26))
 210         return x - 10 - 26 + 'a';
 211     if( x == (10+26+26) )
 212         return '.';
 213     return '_';
 214 }
 215
 216 BOOL decode_streamname(LPCWSTR in, LPWSTR out)
 217 {
 218     WCHAR ch;
 219     DWORD count = 0;
 220
 221     while ( (ch = *in++) )
 222     {
 223         if( (ch >= 0x3800 ) && (ch < 0x4840 ) )
 224         {
 225             if( ch >= 0x4800 )
 226                 ch = mime2utf(ch-0x4800);
 227             else
 228             {
 229                 ch -= 0x3800;
 230                 *out++ = mime2utf(ch&0x3f);
 231                 count++;
 232                 ch = mime2utf((ch>>6)&0x3f);
 233             }
 234         }
 235         *out++ = ch;
 236         count++;
 237     }
 238     *out = 0;
 239     return count;
 240 }
 241
 242 void enum_stream_names( IStorage *stg )
 243 {
 244     IEnumSTATSTG *stgenum = NULL;
 245     HRESULT r;
 246     STATSTG stat;
 247     ULONG n, count;
 248     WCHAR name[0x40];
 249
 250     r = IStorage_EnumElements( stg, 0, NULL, 0, &stgenum );
 251     if( FAILED( r ) )
 252         return;
 253
 254     n = 0;
 255     while( 1 )
 256     {
 257         count = 0;
 258         r = IEnumSTATSTG_Next( stgenum, 1, &stat, &count );
 259         if( FAILED( r ) || !count )
 260             break;
 261         decode_streamname( stat.pwcsName, name );
 262         TRACE("stream %2d -> %s %s\n", n,
 263               debugstr_w(stat.pwcsName), debugstr_w(name) );
 264         CoTaskMemFree( stat.pwcsName );
 265         n++;
 266     }
 267
 268     IEnumSTATSTG_Release( stgenum );
 269 }
 270
 271 UINT read_stream_data( IStorage *stg, LPCWSTR stname, BOOL table,
 272                        BYTE **pdata, UINT *psz )
 273 {
 274     HRESULT r;
 275     UINT ret = ERROR_FUNCTION_FAILED;
 276     VOID *data;
 277     ULONG sz, count;
 278     IStream *stm = NULL;
 279     STATSTG stat;
 280     LPWSTR encname;
 281
 282     encname = encode_streamname(table, stname);
 283
 284     TRACE("%s -> %s\n",debugstr_w(stname),debugstr_w(encname));
 285
 286     r = IStorage_OpenStream(stg, encname, NULL,
 287             STGM_READ | STGM_SHARE_EXCLUSIVE, 0, &stm);
 288     msi_free( encname );
 289     if( FAILED( r ) )
 290     {
 291         WARN("open stream failed r = %08x - empty table?\n", r);
 292         return ret;
 293     }
 294
 295     r = IStream_Stat(stm, &stat, STATFLAG_NONAME );
 296     if( FAILED( r ) )
 297     {
 298         WARN("open stream failed r = %08x!\n", r);
 299         goto end;
 300     }
 301
 302     if( stat.cbSize.QuadPart >> 32 )
 303     {
 304         WARN("Too big!\n");
 305         goto end;
 306     }
 307
 308     sz = stat.cbSize.QuadPart;
 309     data = msi_alloc( sz );
 310     if( !data )
 311     {
 312         WARN("couldn't allocate memory r=%08x!\n", r);
 313         ret = ERROR_NOT_ENOUGH_MEMORY;
 314         goto end;
 315     }
 316
 317     r = IStream_Read(stm, data, sz, &count );
 318     if( FAILED( r ) || ( count != sz ) )
 319     {
 320         msi_free( data );
 321         WARN("read stream failed r = %08x!\n", r);
 322         goto end;
 323     }
 324
 325     *pdata = data;
 326     *psz = sz;
 327     ret = ERROR_SUCCESS;
 328
 329 end:
 330     IStream_Release( stm );
 331
 332     return ret;
 333 }
 334
 335 static UINT db_get_raw_stream( MSIDATABASE *db, LPCWSTR stname, IStream **stm )
 336 {
 337     LPWSTR encname;
 338     HRESULT r;
 339
 340     encname = encode_streamname(FALSE, stname);
 341
 342     TRACE("%s -> %s\n",debugstr_w(stname),debugstr_w(encname));
 343
 344     r = IStorage_OpenStream(db->storage, encname, NULL,
 345             STGM_READ | STGM_SHARE_EXCLUSIVE, 0, stm);
 346     if( FAILED( r ) )
 347     {
 348         MSITRANSFORM *transform;
 349
 350         LIST_FOR_EACH_ENTRY( transform, &db->transforms, MSITRANSFORM, entry )
 351         {
 352             TRACE("looking for %s in transform storage\n", debugstr_w(stname) );
 353             r = IStorage_OpenStream( transform->stg, encname, NULL,
 354                     STGM_READ | STGM_SHARE_EXCLUSIVE, 0, stm );
 355             if (SUCCEEDED(r))
 356                 break;
 357         }
 358     }
 359
 360     msi_free( encname );
 361
 362     return SUCCEEDED(r) ? ERROR_SUCCESS : ERROR_FUNCTION_FAILED;
 363 }
 364
 365 UINT read_raw_stream_data( MSIDATABASE *db, LPCWSTR stname,
 366                               USHORT **pdata, UINT *psz )
 367 {
 368     HRESULT r;
 369     UINT ret = ERROR_FUNCTION_FAILED;
 370     VOID *data;
 371     ULONG sz, count;
 372     IStream *stm = NULL;
 373     STATSTG stat;
 374
 375     r = db_get_raw_stream( db, stname, &stm );
 376     if( r != ERROR_SUCCESS)
 377         return ret;
 378     r = IStream_Stat(stm, &stat, STATFLAG_NONAME );
 379     if( FAILED( r ) )
 380     {
 381         WARN("open stream failed r = %08x!\n", r);
 382         goto end;
 383     }
 384
 385     if( stat.cbSize.QuadPart >> 32 )
 386     {
 387         WARN("Too big!\n");
 388         goto end;
 389     }
 390
 391     sz = stat.cbSize.QuadPart;
 392     data = msi_alloc( sz );
 393     if( !data )
 394     {
 395         WARN("couldn't allocate memory r=%08x!\n", r);
 396         ret = ERROR_NOT_ENOUGH_MEMORY;
 397         goto end;
 398     }
 399
 400     r = IStream_Read(stm, data, sz, &count );
 401     if( FAILED( r ) || ( count != sz ) )
 402     {
 403         msi_free( data );
 404         WARN("read stream failed r = %08x!\n", r);
 405         goto end;
 406     }
 407
 408     *pdata = data;
 409     *psz = sz;
 410     ret = ERROR_SUCCESS;
 411
 412 end:
 413     IStream_Release( stm );
 414
 415     return ret;
 416 }
 417
 418 UINT write_stream_data( IStorage *stg, LPCWSTR stname,
 419                         LPCVOID data, UINT sz, BOOL bTable )
 420 {
 421     HRESULT r;
 422     UINT ret = ERROR_FUNCTION_FAILED;
 423     ULONG count;
 424     IStream *stm = NULL;
 425     ULARGE_INTEGER size;
 426     LARGE_INTEGER pos;
 427     LPWSTR encname;
 428
 429     encname = encode_streamname(bTable, stname );
 430     r = IStorage_OpenStream( stg, encname, NULL,
 431             STGM_WRITE | STGM_SHARE_EXCLUSIVE, 0, &stm);
 432     if( FAILED(r) )
 433     {
 434         r = IStorage_CreateStream( stg, encname,
 435                 STGM_WRITE | STGM_SHARE_EXCLUSIVE, 0, 0, &stm);
 436     }
 437     msi_free( encname );
 438     if( FAILED( r ) )
 439     {
 440         WARN("open stream failed r = %08x\n", r);
 441         return ret;
 442     }
 443
 444     size.QuadPart = sz;
 445     r = IStream_SetSize( stm, size );
 446     if( FAILED( r ) )
 447     {
 448         WARN("Failed to SetSize\n");
 449         goto end;
 450     }
 451
 452     pos.QuadPart = 0;
 453     r = IStream_Seek( stm, pos, STREAM_SEEK_SET, NULL );
 454     if( FAILED( r ) )
 455     {
 456         WARN("Failed to Seek\n");
 457         goto end;
 458     }
 459
 460     if (sz)
 461     {
 462         r = IStream_Write(stm, data, sz, &count );
 463         if( FAILED( r ) || ( count != sz ) )
 464         {
 465             WARN("Failed to Write\n");
 466             goto end;
 467         }
 468     }
 469
 470     ret = ERROR_SUCCESS;
 471
 472 end:
 473     IStream_Release( stm );
 474
 475     return ret;
 476 }
 477
 478 static void free_table( MSITABLE *table )
 479 {
 480     UINT i;
 481     for( i=0; i<table->row_count; i++ )
 482         msi_free( table->data[i] );
 483     msi_free( table->data );
 484     msi_free( table->data_persistent );
 485     msi_free_colinfo( table->colinfo, table->col_count );
 486     msi_free( table->colinfo );
 487     msi_free( table );
 488 }
 489
 490 static UINT msi_table_get_row_size( MSIDATABASE *db,const MSICOLUMNINFO *cols,
 491                                     UINT count )
 492 {
 493     const MSICOLUMNINFO *last_col = &cols[count-1];
 494     if (!count)
 495         return 0;
 496     return last_col->offset + bytes_per_column( db, last_col );
 497 }
 498
 499 /* add this table to the list of cached tables in the database */
 500 static UINT read_table_from_storage( MSIDATABASE *db, MSITABLE *t, IStorage *stg )
 501 {
 502     BYTE *rawdata = NULL;
 503     UINT rawsize = 0, i, j, row_size = 0;
 504
 505     TRACE("%s\n",debugstr_w(t->name));
 506
 507     row_size = msi_table_get_row_size( db, t->colinfo, t->col_count );
 508
 509     /* if we can't read the table, just assume that it's empty */
 510     read_stream_data( stg, t->name, TRUE, &rawdata, &rawsize );
 511     if( !rawdata )
 512         return ERROR_SUCCESS;
 513
 514     TRACE("Read %d bytes\n", rawsize );
 515
 516     if( rawsize % row_size )
 517     {
 518         WARN("Table size is invalid %d/%d\n", rawsize, row_size );
 519         goto err;
 520     }
 521
 522     t->row_count = rawsize / row_size;
 523     t->data = msi_alloc_zero( t->row_count * sizeof (USHORT*) );
 524     if( !t->data )
 525         goto err;
 526     t->data_persistent = msi_alloc_zero( t->row_count * sizeof(BOOL));
 527     if ( !t->data_persistent )
 528         goto err;
 529
 530     /* transpose all the data */
 531     TRACE("Transposing data from %d rows\n", t->row_count );
 532     for( i=0; i<t->row_count; i++ )
 533     {
 534         t->data[i] = msi_alloc( row_size );
 535         if( !t->data[i] )
 536             goto err;
 537         t->data_persistent[i] = TRUE;
 538
 539         for( j=0; j<t->col_count; j++ )
 540         {
 541             UINT ofs = t->colinfo[j].offset;
 542             UINT n = bytes_per_column( db, &t->colinfo[j] );
 543             UINT k;
 544
 545             if ( n != 2 && n != 3 && n != 4 )
 546             {
 547                 ERR("oops - unknown column width %d\n", n);
 548                 goto err;
 549             }
 550
 551             for ( k = 0; k < n; k++ )
 552                 t->data[i][ofs + k] = rawdata[ofs*t->row_count + i * n + k];
 553         }
 554     }
 555
 556     msi_free( rawdata );
 557     return ERROR_SUCCESS;
 558 err:
 559     msi_free( rawdata );
 560     return ERROR_FUNCTION_FAILED;
 561 }
 562
 563 void free_cached_tables( MSIDATABASE *db )
 564 {
 565     while( !list_empty( &db->tables ) )
 566     {
 567         MSITABLE *t = LIST_ENTRY( list_head( &db->tables ), MSITABLE, entry );
 568
 569         list_remove( &t->entry );
 570         free_table( t );
 571     }
 572 }
 573
 574 static MSITABLE *find_cached_table( MSIDATABASE *db, LPCWSTR name )
 575 {
 576     MSITABLE *t;
 577
 578     LIST_FOR_EACH_ENTRY( t, &db->tables, MSITABLE, entry )
 579         if( !lstrcmpW( name, t->name ) )
 580             return t;
 581
 582     return NULL;
 583 }
 584
 585 static UINT table_get_column_info( MSIDATABASE *db, LPCWSTR name, MSICOLUMNINFO **pcols, UINT *pcount )
 586 {
 587     UINT r, column_count = 0;
 588     MSICOLUMNINFO *columns;
 589
 590     /* get the number of columns in this table */
 591     column_count = 0;
 592     r = get_tablecolumns( db, name, NULL, &column_count );
 593     if( r != ERROR_SUCCESS )
 594         return r;
 595
 596     *pcount = column_count;
 597
 598     /* if there's no columns, there's no table */
 599     if( column_count == 0 )
 600         return ERROR_INVALID_PARAMETER;
 601
 602     TRACE("Table %s found\n", debugstr_w(name) );
 603
 604     columns = msi_alloc( column_count*sizeof (MSICOLUMNINFO) );
 605     if( !columns )
 606         return ERROR_FUNCTION_FAILED;
 607
 608     r = get_tablecolumns( db, name, columns, &column_count );
 609     if( r != ERROR_SUCCESS )
 610     {
 611         msi_free( columns );
 612         return ERROR_FUNCTION_FAILED;
 613     }
 614
 615     *pcols = columns;
 616
 617     return r;
 618 }
 619
 620 UINT msi_create_table( MSIDATABASE *db, LPCWSTR name, column_info *col_info,
 621                        MSICONDITION persistent, MSITABLE **table_ret)
 622 {
 623     UINT r, nField;
 624     MSIVIEW *tv = NULL;
 625     MSIRECORD *rec = NULL;
 626     column_info *col;
 627     MSITABLE *table;
 628     UINT i;
 629
 630     /* only add tables that don't exist already */
 631     if( TABLE_Exists(db, name ) )
 632     {
 633         WARN("table %s exists\n", debugstr_w(name));
 634         return ERROR_BAD_QUERY_SYNTAX;
 635     }
 636
 637     table = msi_alloc( sizeof (MSITABLE) + lstrlenW(name)*sizeof (WCHAR) );
 638     if( !table )
 639         return ERROR_FUNCTION_FAILED;
 640
 641     table->ref_count = 1;
 642     table->row_count = 0;
 643     table->data = NULL;
 644     table->data_persistent = NULL;
 645     table->colinfo = NULL;
 646     table->col_count = 0;
 647     table->persistent = persistent;
 648     lstrcpyW( table->name, name );
 649
 650     for( col = col_info; col; col = col->next )
 651         table->col_count++;
 652
 653     table->colinfo = msi_alloc( table->col_count * sizeof(MSICOLUMNINFO) );
 654     if (!table->colinfo)
 655     {
 656         free_table( table );
 657         return ERROR_FUNCTION_FAILED;
 658     }
 659
 660     for( i = 0, col = col_info; col; i++, col = col->next )
 661     {
 662         table->colinfo[ i ].tablename = strdupW( col->table );
 663         table->colinfo[ i ].number = i + 1;
 664         table->colinfo[ i ].colname = strdupW( col->column );
 665         table->colinfo[ i ].type = col->type;
 666         table->colinfo[ i ].offset = 0;
 667         table->colinfo[ i ].ref_count = 0;
 668         table->colinfo[ i ].hash_table = NULL;
 669         table->colinfo[ i ].temporary = col->temporary;
 670     }
 671     table_calc_column_offsets( db, table->colinfo, table->col_count);
 672
 673     r = TABLE_CreateView( db, szTables, &tv );
 674     TRACE("CreateView returned %x\n", r);
 675     if( r )
 676     {
 677         free_table( table );
 678         return r;
 679     }
 680
 681     r = tv->ops->execute( tv, 0 );
 682     TRACE("tv execute returned %x\n", r);
 683     if( r )
 684         goto err;
 685
 686     rec = MSI_CreateRecord( 1 );
 687     if( !rec )
 688         goto err;
 689
 690     r = MSI_RecordSetStringW( rec, 1, name );
 691     if( r )
 692         goto err;
 693
 694     r = tv->ops->insert_row( tv, rec, -1, persistent == MSICONDITION_FALSE );
 695     TRACE("insert_row returned %x\n", r);
 696     if( r )
 697         goto err;
 698
 699     tv->ops->delete( tv );
 700     tv = NULL;
 701
 702     msiobj_release( &rec->hdr );
 703     rec = NULL;
 704
 705     if( persistent != MSICONDITION_FALSE )
 706     {
 707         /* add each column to the _Columns table */
 708         r = TABLE_CreateView( db, szColumns, &tv );
 709         if( r )
 710             return r;
 711
 712         r = tv->ops->execute( tv, 0 );
 713         TRACE("tv execute returned %x\n", r);
 714         if( r )
 715             goto err;
 716
 717         rec = MSI_CreateRecord( 4 );
 718         if( !rec )
 719             goto err;
 720
 721         r = MSI_RecordSetStringW( rec, 1, name );
 722         if( r )
 723             goto err;
 724
 725         /*
 726          * need to set the table, column number, col name and type
 727          * for each column we enter in the table
 728          */
 729         nField = 1;
 730         for( col = col_info; col; col = col->next )
 731         {
 732             r = MSI_RecordSetInteger( rec, 2, nField );
 733             if( r )
 734                 goto err;
 735
 736             r = MSI_RecordSetStringW( rec, 3, col->column );
 737             if( r )
 738                 goto err;
 739
 740             r = MSI_RecordSetInteger( rec, 4, col->type );
 741             if( r )
 742                 goto err;
 743
 744             r = tv->ops->insert_row( tv, rec, -1, FALSE );
 745             if( r )
 746                 goto err;
 747
 748             nField++;
 749         }
 750         if( !col )
 751             r = ERROR_SUCCESS;
 752     }
 753
 754 err:
 755     if (rec)
 756         msiobj_release( &rec->hdr );
 757     /* FIXME: remove values from the string table on error */
 758     if( tv )
 759         tv->ops->delete( tv );
 760
 761     if (r == ERROR_SUCCESS)
 762     {
 763         list_add_head( &db->tables, &table->entry );
 764         *table_ret = table;
 765     }
 766     else
 767         free_table( table );
 768
 769     return r;
 770 }
 771
 772 static UINT get_table( MSIDATABASE *db, LPCWSTR name, MSITABLE **table_ret )
 773 {
 774     MSITABLE *table;
 775     UINT r;
 776
 777     /* first, see if the table is cached */
 778     table = find_cached_table( db, name );
 779     if( table )
 780     {
 781         *table_ret = table;
 782         return ERROR_SUCCESS;
 783     }
 784
 785     /* nonexistent tables should be interpreted as empty tables */
 786     table = msi_alloc( sizeof (MSITABLE) + lstrlenW(name)*sizeof (WCHAR) );
 787     if( !table )
 788         return ERROR_FUNCTION_FAILED;
 789
 790     table->row_count = 0;
 791     table->data = NULL;
 792     table->data_persistent = NULL;
 793     table->colinfo = NULL;
 794     table->col_count = 0;
 795     table->persistent = MSICONDITION_TRUE;
 796     lstrcpyW( table->name, name );
 797
 798     if ( !lstrcmpW(name, szTables) || !lstrcmpW(name, szColumns) )
 799         table->persistent = MSICONDITION_NONE;
 800
 801     r = table_get_column_info( db, name, &table->colinfo, &table->col_count);
 802     if (r != ERROR_SUCCESS)
 803     {
 804         free_table ( table );
 805         return r;
 806     }
 807
 808     r = read_table_from_storage( db, table, db->storage );
 809     if( r != ERROR_SUCCESS )
 810     {
 811         free_table( table );
 812         return r;
 813     }
 814
 815     list_add_head( &db->tables, &table->entry );
 816     *table_ret = table;
 817     return ERROR_SUCCESS;
 818 }
 819
 820 static UINT save_table( MSIDATABASE *db, const MSITABLE *t )
 821 {
 822     BYTE *rawdata = NULL, *p;
 823     UINT rawsize, r, i, j, row_size;
 824
 825     /* Nothing to do for non-persistent tables */
 826     if( t->persistent == MSICONDITION_FALSE )
 827         return ERROR_SUCCESS;
 828
 829     TRACE("Saving %s\n", debugstr_w( t->name ) );
 830
 831     row_size = msi_table_get_row_size( db, t->colinfo, t->col_count );
 832
 833     rawsize = t->row_count * row_size;
 834     rawdata = msi_alloc_zero( rawsize );
 835     if( !rawdata )
 836     {
 837         r = ERROR_NOT_ENOUGH_MEMORY;
 838         goto err;
 839     }
 840
 841     rawsize = 0;
 842     p = rawdata;
 843     for( i=0; i<t->col_count; i++ )
 844     {
 845         for( j=0; j<t->row_count; j++ )
 846         {
 847             UINT offset = t->colinfo[i].offset;
 848
 849             if (!t->data_persistent[j]) continue;
 850             if (i == 0)
 851                 rawsize += row_size;
 852
 853             *p++ = t->data[j][offset];
 854             *p++ = t->data[j][offset + 1];
 855             if( 4 == bytes_per_column( db, &t->colinfo[i] ) )
 856             {
 857                 *p++ = t->data[j][offset + 2];
 858                 *p++ = t->data[j][offset + 3];
 859             }
 860         }
 861     }
 862
 863     TRACE("writing %d bytes\n", rawsize);
 864     r = write_stream_data( db->storage, t->name, rawdata, rawsize, TRUE );
 865
 866 err:
 867     msi_free( rawdata );
 868
 869     return r;
 870 }
 871
 872 static void table_calc_column_offsets( MSIDATABASE *db, MSICOLUMNINFO *colinfo,
 873                                        DWORD count )
 874 {
 875     DWORD i;
 876
 877     for( i=0; colinfo && (i<count); i++ )
 878     {
 879          assert( (i+1) == colinfo[ i ].number );
 880          if (i)
 881              colinfo[i].offset = colinfo[ i - 1 ].offset
 882                                + bytes_per_column( db, &colinfo[ i - 1 ] );
 883          else
 884              colinfo[i].offset = 0;
 885          TRACE("column %d is [%s] with type %08x ofs %d\n",
 886                colinfo[i].number, debugstr_w(colinfo[i].colname),
 887                colinfo[i].type, colinfo[i].offset);
 888     }
 889 }
 890
 891 static UINT get_defaulttablecolumns( MSIDATABASE *db, LPCWSTR name,
 892                                      MSICOLUMNINFO *colinfo, UINT *sz)
 893 {
 894     const MSICOLUMNINFO *p;
 895     DWORD i, n;
 896
 897     TRACE("%s\n", debugstr_w(name));
 898
 899     if (!lstrcmpW( name, szTables ))
 900     {
 901         p = _Tables_cols;
 902         n = 1;
 903     }
 904     else if (!lstrcmpW( name, szColumns ))
 905     {
 906         p = _Columns_cols;
 907         n = 4;
 908     }
 909     else
 910         return ERROR_FUNCTION_FAILED;
 911
 912     /* duplicate the string data so we can free it in msi_free_colinfo */
 913     for (i=0; i<n; i++)
 914     {
 915         if (colinfo && (i < *sz) )
 916         {
 917             colinfo[i] = p[i];
 918             colinfo[i].tablename = strdupW( p[i].tablename );
 919             colinfo[i].colname = strdupW( p[i].colname );
 920         }
 921         if( colinfo && (i >= *sz) )
 922             break;
 923     }
 924     table_calc_column_offsets( db, colinfo, n );
 925     *sz = n;
 926     return ERROR_SUCCESS;
 927 }
 928
 929 static void msi_free_colinfo( MSICOLUMNINFO *colinfo, UINT count )
 930 {
 931     UINT i;
 932
 933     for( i=0; i<count; i++ )
 934     {
 935         msi_free( colinfo[i].tablename );
 936         msi_free( colinfo[i].colname );
 937         msi_free( colinfo[i].hash_table );
 938     }
 939 }
 940
 941 static LPWSTR msi_makestring( const MSIDATABASE *db, UINT stringid)
 942 {
 943     return strdupW(msi_string_lookup_id( db->strings, stringid ));
 944 }
 945
 946 static UINT read_table_int(BYTE *const *data, UINT row, UINT col, UINT bytes)
 947 {
 948     UINT ret = 0, i;
 949
 950     for (i = 0; i < bytes; i++)
 951         ret += (data[row][col + i] << i * 8);
 952
 953     return ret;
 954 }
 955
 956 static UINT get_tablecolumns( MSIDATABASE *db,
 957        LPCWSTR szTableName, MSICOLUMNINFO *colinfo, UINT *sz)
 958 {
 959     UINT r, i, n=0, table_id, count, maxcount = *sz;
 960     MSITABLE *table = NULL;
 961
 962     TRACE("%s\n", debugstr_w(szTableName));
 963
 964     /* first check if there is a default table with that name */
 965     r = get_defaulttablecolumns( db, szTableName, colinfo, sz );
 966     if( ( r == ERROR_SUCCESS ) && *sz )
 967         return r;
 968
 969     r = get_table( db, szColumns, &table );
 970     if( r != ERROR_SUCCESS )
 971     {
 972         ERR("couldn't load _Columns table\n");
 973         return ERROR_FUNCTION_FAILED;
 974     }
 975
 976     /* convert table and column names to IDs from the string table */
 977     r = msi_string2idW( db->strings, szTableName, &table_id );
 978     if( r != ERROR_SUCCESS )
 979     {
 980         WARN("Couldn't find id for %s\n", debugstr_w(szTableName));
 981         return r;
 982     }
 983
 984     TRACE("Table id is %d, row count is %d\n", table_id, table->row_count);
 985
 986     /* Note: _Columns table doesn't have non-persistent data */
 987
 988     /* if maxcount is non-zero, assume it's exactly right for this table */
 989     memset( colinfo, 0, maxcount*sizeof(*colinfo) );
 990     count = table->row_count;
 991     for( i=0; i<count; i++ )
 992     {
 993         if( read_table_int(table->data, i, 0, db->bytes_per_strref) != table_id )
 994             continue;
 995         if( colinfo )
 996         {
 997             UINT id = read_table_int(table->data, i, table->colinfo[2].offset, db->bytes_per_strref);
 998             UINT col = read_table_int(table->data, i, table->colinfo[1].offset, sizeof(USHORT)) - (1<<15);
 999
1000             /* check the column number is in range */
1001             if (col<1 || col>maxcount)
1002             {
1003                 ERR("column %d out of range\n", col);
1004                 continue;
1005             }
1006
1007             /* check if this column was already set */
1008             if (colinfo[ col - 1 ].number)
1009             {
1010                 ERR("duplicate column %d\n", col);
1011                 continue;
1012             }
1013
1014             colinfo[ col - 1 ].tablename = msi_makestring( db, table_id );
1015             colinfo[ col - 1 ].number = col;
1016             colinfo[ col - 1 ].colname = msi_makestring( db, id );
1017             colinfo[ col - 1 ].type = read_table_int(table->data, i,
1018                                                      table->colinfo[3].offset,
1019                                                      sizeof(USHORT)) - (1<<15);
1020             colinfo[ col - 1 ].offset = 0;
1021             colinfo[ col - 1 ].ref_count = 0;
1022             colinfo[ col - 1 ].hash_table = NULL;
1023         }
1024         n++;
1025     }
1026
1027     TRACE("%s has %d columns\n", debugstr_w(szTableName), n);
1028
1029     if (colinfo && n != maxcount)
1030     {
1031         ERR("missing column in table %s\n", debugstr_w(szTableName));
1032         msi_free_colinfo(colinfo, maxcount );
1033         return ERROR_FUNCTION_FAILED;
1034     }
1035
1036     table_calc_column_offsets( db, colinfo, n );
1037     *sz = n;
1038
1039     return ERROR_SUCCESS;
1040 }
1041
1042 static void msi_update_table_columns( MSIDATABASE *db, LPCWSTR name )
1043 {
1044     MSITABLE *table;
1045     UINT size, offset, old_count;
1046     UINT n;
1047
1048     table = find_cached_table( db, name );
1049     old_count = table->col_count;
1050     msi_free( table->colinfo );
1051     table->colinfo = NULL;
1052
1053     table_get_column_info( db, name, &table->colinfo, &table->col_count );
1054     if (!table->col_count)
1055         return;
1056
1057     size = msi_table_get_row_size( db, table->colinfo, table->col_count );
1058     offset = table->colinfo[table->col_count - 1].offset;
1059
1060     for ( n = 0; n < table->row_count; n++ )
1061     {
1062         table->data[n] = msi_realloc( table->data[n], size );
1063         if (old_count < table->col_count)
1064             memset( &table->data[n][offset], 0, size - offset );
1065     }
1066 }
1067
1068 /* try to find the table name in the _Tables table */
1069 BOOL TABLE_Exists( MSIDATABASE *db, LPCWSTR name )
1070 {
1071     UINT r, table_id = 0, i, count;
1072     MSITABLE *table = NULL;
1073
1074     static const WCHAR szStreams[] = {'_','S','t','r','e','a','m','s',0};
1075     static const WCHAR szStorages[] = {'_','S','t','o','r','a','g','e','s',0};
1076
1077     if( !lstrcmpW( name, szTables ) || !lstrcmpW( name, szColumns ) ||
1078         !lstrcmpW( name, szStreams ) || !lstrcmpW( name, szStorages ) )
1079         return TRUE;
1080
1081     r = msi_string2idW( db->strings, name, &table_id );
1082     if( r != ERROR_SUCCESS )
1083     {
1084         TRACE("Couldn't find id for %s\n", debugstr_w(name));
1085         return FALSE;
1086     }
1087
1088     r = get_table( db, szTables, &table );
1089     if( r != ERROR_SUCCESS )
1090     {
1091         ERR("table %s not available\n", debugstr_w(szTables));
1092         return FALSE;
1093     }
1094
1095     count = table->row_count;
1096     for( i=0; i<count; i++ )
1097         if( table->data[ i ][ 0 ] == table_id )
1098             return TRUE;
1099
1100     return FALSE;
1101 }
1102
1103 /* below is the query interface to a table */
1104
1105 typedef struct tagMSITABLEVIEW
1106 {
1107     MSIVIEW        view;
1108     MSIDATABASE   *db;
1109     MSITABLE      *table;
1110     MSICOLUMNINFO *columns;
1111     MSIORDERINFO  *order;
1112     UINT           num_cols;
1113     UINT           row_size;
1114     WCHAR          name[1];
1115 } MSITABLEVIEW;
1116
1117 static UINT TABLE_fetch_int( struct tagMSIVIEW *view, UINT row, UINT col, UINT *val )
1118 {
1119     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1120     UINT offset, n;
1121
1122     if( !tv->table )
1123         return ERROR_INVALID_PARAMETER;
1124
1125     if( (col==0) || (col>tv->num_cols) )
1126         return ERROR_INVALID_PARAMETER;
1127
1128     /* how many rows are there ? */
1129     if( row >= tv->table->row_count )
1130         return ERROR_NO_MORE_ITEMS;
1131
1132     if( tv->columns[col-1].offset >= tv->row_size )
1133     {
1134         ERR("Stuffed up %d >= %d\n", tv->columns[col-1].offset, tv->row_size );
1135         ERR("%p %p\n", tv, tv->columns );
1136         return ERROR_FUNCTION_FAILED;
1137     }
1138
1139     if (tv->order)
1140         row = tv->order->reorder[row];
1141
1142     n = bytes_per_column( tv->db, &tv->columns[col-1] );
1143     if (n != 2 && n != 3 && n != 4)
1144     {
1145         ERR("oops! what is %d bytes per column?\n", n );
1146         return ERROR_FUNCTION_FAILED;
1147     }
1148
1149     offset = tv->columns[col-1].offset;
1150     *val = read_table_int(tv->table->data, row, offset, n);
1151
1152     /* TRACE("Data [%d][%d] = %d\n", row, col, *val ); */
1153
1154     return ERROR_SUCCESS;
1155 }
1156
1157 static UINT msi_stream_name( const MSITABLEVIEW *tv, UINT row, LPWSTR *pstname )
1158 {
1159     LPWSTR p, stname = NULL;
1160     UINT i, r, type, ival;
1161     DWORD len;
1162     LPCWSTR sval;
1163     MSIVIEW *view = (MSIVIEW *) tv;
1164
1165     TRACE("%p %d\n", tv, row);
1166
1167     len = lstrlenW( tv->name ) + 1;
1168     stname = msi_alloc( len*sizeof(WCHAR) );
1169     if ( !stname )
1170     {
1171        r = ERROR_OUTOFMEMORY;
1172        goto err;
1173     }
1174
1175     lstrcpyW( stname, tv->name );
1176
1177     for ( i = 0; i < tv->num_cols; i++ )
1178     {
1179         type = tv->columns[i].type;
1180         if ( type & MSITYPE_KEY )
1181         {
1182             r = TABLE_fetch_int( view, row, i+1, &ival );
1183             if ( r != ERROR_SUCCESS )
1184                 goto err;
1185
1186             if ( tv->columns[i].type & MSITYPE_STRING )
1187             {
1188                 sval = msi_string_lookup_id( tv->db->strings, ival );
1189                 if ( !sval )
1190                 {
1191                     r = ERROR_INVALID_PARAMETER;
1192                     goto err;
1193                 }
1194             }
1195             else
1196             {
1197                 static const WCHAR fmt[] = { '%','d',0 };
1198                 WCHAR number[0x20];
1199                 UINT n = bytes_per_column( tv->db, &tv->columns[i] );
1200
1201                 switch( n )
1202                 {
1203                 case 2:
1204                     sprintfW( number, fmt, ival^0x8000 );
1205                     break;
1206                 case 4:
1207                     sprintfW( number, fmt, ival^0x80000000 );
1208                     break;
1209                 default:
1210                     ERR( "oops - unknown column width %d\n", n );
1211                     r = ERROR_FUNCTION_FAILED;
1212                     goto err;
1213                 }
1214                 sval = number;
1215             }
1216
1217             len += lstrlenW( szDot ) + lstrlenW( sval );
1218             p = msi_realloc ( stname, len*sizeof(WCHAR) );
1219             if ( !p )
1220             {
1221                 r = ERROR_OUTOFMEMORY;
1222                 goto err;
1223             }
1224             stname = p;
1225
1226             lstrcatW( stname, szDot );
1227             lstrcatW( stname, sval );
1228         }
1229         else
1230            continue;
1231     }
1232
1233     *pstname = stname;
1234     return ERROR_SUCCESS;
1235
1236 err:
1237     msi_free( stname );
1238     *pstname = NULL;
1239     return r;
1240 }
1241
1242 /*
1243  * We need a special case for streams, as we need to reference column with
1244  * the name of the stream in the same table, and the table name
1245  * which may not be available at higher levels of the query
1246  */
1247 static UINT TABLE_fetch_stream( struct tagMSIVIEW *view, UINT row, UINT col, IStream **stm )
1248 {
1249     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1250     UINT r;
1251     LPWSTR full_name = NULL;
1252
1253     if( !view->ops->fetch_int )
1254         return ERROR_INVALID_PARAMETER;
1255
1256     r = msi_stream_name( tv, row, &full_name );
1257     if ( r != ERROR_SUCCESS )
1258     {
1259         ERR("fetching stream, error = %d\n", r);
1260         return r;
1261     }
1262
1263     r = db_get_raw_stream( tv->db, full_name, stm );
1264     if( r )
1265         ERR("fetching stream %s, error = %d\n",debugstr_w(full_name), r);
1266     msi_free( full_name );
1267
1268     return r;
1269 }
1270
1271 static UINT TABLE_set_int( MSITABLEVIEW *tv, UINT row, UINT col, UINT val )
1272 {
1273     UINT offset, n, i;
1274
1275     if( !tv->table )
1276         return ERROR_INVALID_PARAMETER;
1277
1278     if( (col==0) || (col>tv->num_cols) )
1279         return ERROR_INVALID_PARAMETER;
1280
1281     if( row >= tv->table->row_count )
1282         return ERROR_INVALID_PARAMETER;
1283
1284     if( tv->columns[col-1].offset >= tv->row_size )
1285     {
1286         ERR("Stuffed up %d >= %d\n", tv->columns[col-1].offset, tv->row_size );
1287         ERR("%p %p\n", tv, tv->columns );
1288         return ERROR_FUNCTION_FAILED;
1289     }
1290
1291     msi_free( tv->columns[col-1].hash_table );
1292     tv->columns[col-1].hash_table = NULL;
1293
1294     n = bytes_per_column( tv->db, &tv->columns[col-1] );
1295     if ( n != 2 && n != 3 && n != 4 )
1296     {
1297         ERR("oops! what is %d bytes per column?\n", n );
1298         return ERROR_FUNCTION_FAILED;
1299     }
1300
1301     offset = tv->columns[col-1].offset;
1302     for ( i = 0; i < n; i++ )
1303         tv->table->data[row][offset + i] = (val >> i * 8) & 0xff;
1304
1305     return ERROR_SUCCESS;
1306 }
1307
1308 static UINT TABLE_get_row( struct tagMSIVIEW *view, UINT row, MSIRECORD **rec )
1309 {
1310     MSITABLEVIEW *tv = (MSITABLEVIEW *)view;
1311
1312     if (!tv->table)
1313         return ERROR_INVALID_PARAMETER;
1314
1315     if (tv->order)
1316         row = tv->order->reorder[row];
1317
1318     return msi_view_get_row(tv->db, view, row, rec);
1319 }
1320
1321 static UINT msi_addstreamW( MSIDATABASE *db, LPCWSTR name, IStream *data )
1322 {
1323     UINT r;
1324     MSIQUERY *query = NULL;
1325     MSIRECORD *rec = NULL;
1326
1327     static const WCHAR insert[] = {
1328        'I','N','S','E','R','T',' ','I','N','T','O',' ',
1329           '`','_','S','t','r','e','a','m','s','`',' ',
1330          '(','`','N','a','m','e','`',',',
1331              '`','D','a','t','a','`',')',' ',
1332          'V','A','L','U','E','S',' ','(','?',',','?',')',0};
1333
1334     TRACE("%p %s %p\n", db, debugstr_w(name), data);
1335
1336     rec = MSI_CreateRecord( 2 );
1337     if ( !rec )
1338         return ERROR_OUTOFMEMORY;
1339
1340     r = MSI_RecordSetStringW( rec, 1, name );
1341     if ( r != ERROR_SUCCESS )
1342        goto err;
1343
1344     r = MSI_RecordSetIStream( rec, 2, data );
1345     if ( r != ERROR_SUCCESS )
1346        goto err;
1347
1348     r = MSI_DatabaseOpenViewW( db, insert, &query );
1349     if ( r != ERROR_SUCCESS )
1350        goto err;
1351
1352     r = MSI_ViewExecute( query, rec );
1353
1354 err:
1355     msiobj_release( &query->hdr );
1356     msiobj_release( &rec->hdr );
1357
1358     return r;
1359 }
1360
1361 static UINT get_table_value_from_record( MSITABLEVIEW *tv, MSIRECORD *rec, UINT iField, UINT *pvalue )
1362 {
1363     MSICOLUMNINFO columninfo;
1364     UINT r;
1365
1366     if ( (iField <= 0) ||
1367          (iField > tv->num_cols) ||
1368           MSI_RecordIsNull( rec, iField ) )
1369         return ERROR_FUNCTION_FAILED;
1370
1371     columninfo = tv->columns[ iField - 1 ];
1372
1373     if ( MSITYPE_IS_BINARY(columninfo.type) )
1374     {
1375         *pvalue = 1; /* refers to the first key column */
1376     }
1377     else if ( columninfo.type & MSITYPE_STRING )
1378     {
1379         LPCWSTR sval = MSI_RecordGetString( rec, iField );
1380
1381         r = msi_string2idW(tv->db->strings, sval, pvalue);
1382         if (r != ERROR_SUCCESS)
1383            return ERROR_NOT_FOUND;
1384     }
1385     else if ( 2 == bytes_per_column( tv->db, &columninfo ) )
1386     {
1387         *pvalue = 0x8000 + MSI_RecordGetInteger( rec, iField );
1388         if ( *pvalue & 0xffff0000 )
1389         {
1390             ERR("field %u value %d out of range\n", iField, *pvalue - 0x8000);
1391             return ERROR_FUNCTION_FAILED;
1392         }
1393     }
1394     else
1395     {
1396         INT ival = MSI_RecordGetInteger( rec, iField );
1397         *pvalue = ival ^ 0x80000000;
1398     }
1399
1400     return ERROR_SUCCESS;
1401 }
1402
1403 static UINT TABLE_set_row( struct tagMSIVIEW *view, UINT row, MSIRECORD *rec, UINT mask )
1404 {
1405     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1406     UINT i, val, r = ERROR_SUCCESS;
1407
1408     if ( !tv->table )
1409         return ERROR_INVALID_PARAMETER;
1410
1411     /* test if any of the mask bits are invalid */
1412     if ( mask >= (1<<tv->num_cols) )
1413         return ERROR_INVALID_PARAMETER;
1414
1415     for ( i = 0; i < tv->num_cols; i++ )
1416     {
1417         BOOL persistent;
1418
1419         /* only update the fields specified in the mask */
1420         if ( !(mask&(1<<i)) )
1421             continue;
1422
1423         persistent = (tv->table->persistent != MSICONDITION_FALSE) &&
1424                      (tv->table->data_persistent[row]);
1425         /* FIXME: should we allow updating keys? */
1426
1427         val = 0;
1428         if ( !MSI_RecordIsNull( rec, i + 1 ) )
1429         {
1430             r = get_table_value_from_record (tv, rec, i + 1, &val);
1431             if ( MSITYPE_IS_BINARY(tv->columns[ i ].type) )
1432             {
1433                 IStream *stm;
1434                 LPWSTR stname;
1435
1436                 if ( r != ERROR_SUCCESS )
1437                     return ERROR_FUNCTION_FAILED;
1438
1439                 r = MSI_RecordGetIStream( rec, i + 1, &stm );
1440                 if ( r != ERROR_SUCCESS )
1441                     return r;
1442
1443                 r = msi_stream_name( tv, row, &stname );
1444                 if ( r != ERROR_SUCCESS )
1445                 {
1446                     IStream_Release( stm );
1447                     return r;
1448                 }
1449
1450                 r = msi_addstreamW( tv->db, stname, stm );
1451                 IStream_Release( stm );
1452                 msi_free ( stname );
1453
1454                 if ( r != ERROR_SUCCESS )
1455                     return r;
1456             }
1457             else if ( tv->columns[i].type & MSITYPE_STRING )
1458             {
1459                 UINT x;
1460
1461                 if ( r != ERROR_SUCCESS )
1462                 {
1463                     LPCWSTR sval = MSI_RecordGetString( rec, i + 1 );
1464                     val = msi_addstringW( tv->db->strings, 0, sval, -1, 1,
1465                       persistent ? StringPersistent : StringNonPersistent );
1466
1467                 }
1468                 else
1469                 {
1470                     TABLE_fetch_int(&tv->view, row, i + 1, &x);
1471                     if (val == x)
1472                         continue;
1473                 }
1474             }
1475             else
1476             {
1477                 if ( r != ERROR_SUCCESS )
1478                     return ERROR_FUNCTION_FAILED;
1479             }
1480         }
1481
1482         r = TABLE_set_int( tv, row, i+1, val );
1483         if ( r != ERROR_SUCCESS )
1484             break;
1485     }
1486     return r;
1487 }
1488
1489 static UINT table_create_new_row( struct tagMSIVIEW *view, UINT *num, BOOL temporary )
1490 {
1491     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1492     BYTE **p, *row;
1493     BOOL *b;
1494     UINT sz;
1495     BYTE ***data_ptr;
1496     BOOL **data_persist_ptr;
1497     UINT *row_count;
1498
1499     TRACE("%p %s\n", view, temporary ? "TRUE" : "FALSE");
1500
1501     if( !tv->table )
1502         return ERROR_INVALID_PARAMETER;
1503
1504     row = msi_alloc_zero( tv->row_size );
1505     if( !row )
1506         return ERROR_NOT_ENOUGH_MEMORY;
1507
1508     row_count = &tv->table->row_count;
1509     data_ptr = &tv->table->data;
1510     data_persist_ptr = &tv->table->data_persistent;
1511     if (*num == -1)
1512         *num = tv->table->row_count;
1513
1514     sz = (*row_count + 1) * sizeof (BYTE*);
1515     if( *data_ptr )
1516         p = msi_realloc( *data_ptr, sz );
1517     else
1518         p = msi_alloc( sz );
1519     if( !p )
1520     {
1521         msi_free( row );
1522         return ERROR_NOT_ENOUGH_MEMORY;
1523     }
1524
1525     sz = (*row_count + 1) * sizeof (BOOL);
1526     if( *data_persist_ptr )
1527         b = msi_realloc( *data_persist_ptr, sz );
1528     else
1529         b = msi_alloc( sz );
1530     if( !b )
1531     {
1532         msi_free( row );
1533         msi_free( p );
1534         return ERROR_NOT_ENOUGH_MEMORY;
1535     }
1536
1537     *data_ptr = p;
1538     (*data_ptr)[*row_count] = row;
1539
1540     *data_persist_ptr = b;
1541     (*data_persist_ptr)[*row_count] = !temporary;
1542
1543     (*row_count)++;
1544
1545     return ERROR_SUCCESS;
1546 }
1547
1548 static UINT TABLE_execute( struct tagMSIVIEW *view, MSIRECORD *record )
1549 {
1550     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1551
1552     TRACE("%p %p\n", tv, record);
1553
1554     TRACE("There are %d columns\n", tv->num_cols );
1555
1556     return ERROR_SUCCESS;
1557 }
1558
1559 static UINT TABLE_close( struct tagMSIVIEW *view )
1560 {
1561     TRACE("%p\n", view );
1562
1563     return ERROR_SUCCESS;
1564 }
1565
1566 static UINT TABLE_get_dimensions( struct tagMSIVIEW *view, UINT *rows, UINT *cols)
1567 {
1568     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1569
1570     TRACE("%p %p %p\n", view, rows, cols );
1571
1572     if( cols )
1573         *cols = tv->num_cols;
1574     if( rows )
1575     {
1576         if( !tv->table )
1577             return ERROR_INVALID_PARAMETER;
1578         *rows = tv->table->row_count;
1579     }
1580
1581     return ERROR_SUCCESS;
1582 }
1583
1584 static UINT TABLE_get_column_info( struct tagMSIVIEW *view,
1585                 UINT n, LPWSTR *name, UINT *type, BOOL *temporary )
1586 {
1587     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1588
1589     TRACE("%p %d %p %p\n", tv, n, name, type );
1590
1591     if( ( n == 0 ) || ( n > tv->num_cols ) )
1592         return ERROR_INVALID_PARAMETER;
1593
1594     if( name )
1595     {
1596         *name = strdupW( tv->columns[n-1].colname );
1597         if( !*name )
1598             return ERROR_FUNCTION_FAILED;
1599     }
1600
1601     if( type )
1602         *type = tv->columns[n-1].type;
1603
1604     if( temporary )
1605         *temporary = tv->columns[n-1].temporary;
1606
1607     return ERROR_SUCCESS;
1608 }
1609
1610 static UINT msi_table_find_row( MSITABLEVIEW *tv, MSIRECORD *rec, UINT *row );
1611
1612 static UINT table_validate_new( MSITABLEVIEW *tv, MSIRECORD *rec )
1613 {
1614     UINT r, row, i;
1615
1616     /* check there's no null values where they're not allowed */
1617     for( i = 0; i < tv->num_cols; i++ )
1618     {
1619         if ( tv->columns[i].type & MSITYPE_NULLABLE )
1620             continue;
1621
1622         if ( MSITYPE_IS_BINARY(tv->columns[i].type) )
1623             TRACE("skipping binary column\n");
1624         else if ( tv->columns[i].type & MSITYPE_STRING )
1625         {
1626             LPCWSTR str;
1627
1628             str = MSI_RecordGetString( rec, i+1 );
1629             if (str == NULL || str[0] == 0)
1630                 return ERROR_INVALID_DATA;
1631         }
1632         else
1633         {
1634             UINT n;
1635
1636             n = MSI_RecordGetInteger( rec, i+1 );
1637             if (n == MSI_NULL_INTEGER)
1638                 return ERROR_INVALID_DATA;
1639         }
1640     }
1641
1642     /* check there's no duplicate keys */
1643     r = msi_table_find_row( tv, rec, &row );
1644     if (r == ERROR_SUCCESS)
1645         return ERROR_FUNCTION_FAILED;
1646
1647     return ERROR_SUCCESS;
1648 }
1649
1650 static UINT find_insert_index( MSITABLEVIEW *tv, MSIRECORD *rec, UINT *pidx )
1651 {
1652     UINT r, idx, j, ivalue, x;
1653
1654     TRACE("%p %p %p\n", tv, rec, pidx);
1655
1656     for (idx = 0; idx < tv->table->row_count; idx++)
1657     {
1658         for (j = 0; j < tv->num_cols; j++ )
1659         {
1660             r = get_table_value_from_record (tv, rec, j+1, &ivalue);
1661             if (r != ERROR_SUCCESS)
1662                 break;
1663
1664             r = TABLE_fetch_int(&tv->view, idx, j + 1, &x);
1665             if (r != ERROR_SUCCESS)
1666                 return r;
1667
1668             if (ivalue > x)
1669                 break;
1670             else if (ivalue == x)
1671                 continue;
1672             else {
1673                 TRACE("Found %d.\n", idx);
1674                 *pidx = idx;
1675                 return ERROR_SUCCESS;
1676             }
1677         }
1678     }
1679
1680     TRACE("Found %d.\n", idx);
1681     *pidx = idx;
1682     return ERROR_SUCCESS;
1683 }
1684
1685 static UINT TABLE_insert_row( struct tagMSIVIEW *view, MSIRECORD *rec, UINT row, BOOL temporary )
1686 {
1687     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1688     UINT i, r;
1689
1690     TRACE("%p %p %s\n", tv, rec, temporary ? "TRUE" : "FALSE" );
1691
1692     /* check that the key is unique - can we find a matching row? */
1693     r = table_validate_new( tv, rec );
1694     if( r != ERROR_SUCCESS )
1695         return ERROR_FUNCTION_FAILED;
1696
1697     if (row == -1)
1698     {
1699         r = find_insert_index(tv, rec, &row);
1700         if( r != ERROR_SUCCESS )
1701             return ERROR_FUNCTION_FAILED;
1702     }
1703
1704     r = table_create_new_row( view, &row, temporary );
1705     TRACE("insert_row returned %08x\n", r);
1706     if( r != ERROR_SUCCESS )
1707         return r;
1708
1709     /* shift the rows to make room for the new row */
1710     for (i = tv->table->row_count - 1; i > row; i--)
1711     {
1712         memmove(&(tv->table->data[i][0]),
1713                 &(tv->table->data[i - 1][0]), tv->row_size);
1714         tv->table->data_persistent[i] = tv->table->data_persistent[i - 1];
1715     }
1716
1717     /* Re-set the persistence flag */
1718     tv->table->data_persistent[row] = !temporary;
1719     return TABLE_set_row( view, row, rec, (1<<tv->num_cols) - 1 );
1720 }
1721
1722 static UINT TABLE_delete_row( struct tagMSIVIEW *view, UINT row )
1723 {
1724     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1725     UINT r, num_rows, num_cols, i;
1726
1727     TRACE("%p %d\n", tv, row);
1728
1729     if ( !tv->table )
1730         return ERROR_INVALID_PARAMETER;
1731
1732     r = TABLE_get_dimensions( view, &num_rows, &num_cols );
1733     if ( r != ERROR_SUCCESS )
1734         return r;
1735
1736     if ( row >= num_rows )
1737         return ERROR_FUNCTION_FAILED;
1738
1739     num_rows = tv->table->row_count;
1740     tv->table->row_count--;
1741
1742     /* reset the hash tables */
1743     for (i = 0; i < tv->num_cols; i++)
1744     {
1745         msi_free( tv->columns[i].hash_table );
1746         tv->columns[i].hash_table = NULL;
1747     }
1748
1749     if ( row == num_rows - 1 )
1750         return ERROR_SUCCESS;
1751
1752     for (i = row + 1; i < num_rows; i++)
1753     {
1754         memcpy(tv->table->data[i - 1], tv->table->data[i], tv->row_size);
1755         tv->table->data_persistent[i - 1] = tv->table->data_persistent[i];
1756     }
1757
1758     return ERROR_SUCCESS;
1759 }
1760
1761 static UINT msi_table_update(struct tagMSIVIEW *view, MSIRECORD *rec, UINT row)
1762 {
1763     MSITABLEVIEW *tv = (MSITABLEVIEW *)view;
1764     UINT r, new_row;
1765
1766     /* FIXME: MsiViewFetch should set rec index 0 to some ID that
1767      * sets the fetched record apart from other records
1768      */
1769
1770     if (!tv->table)
1771         return ERROR_INVALID_PARAMETER;
1772
1773     r = msi_table_find_row(tv, rec, &new_row);
1774     if (r != ERROR_SUCCESS)
1775     {
1776         ERR("can't find row to modify\n");
1777         return ERROR_FUNCTION_FAILED;
1778     }
1779
1780     /* the row cannot be changed */
1781     if (row != new_row + 1)
1782         return ERROR_FUNCTION_FAILED;
1783
1784     return TABLE_set_row(view, new_row, rec, (1 << tv->num_cols) - 1);
1785 }
1786
1787 static UINT msi_table_assign(struct tagMSIVIEW *view, MSIRECORD *rec)
1788 {
1789     MSITABLEVIEW *tv = (MSITABLEVIEW *)view;
1790     UINT r, row;
1791
1792     if (!tv->table)
1793         return ERROR_INVALID_PARAMETER;
1794
1795     r = msi_table_find_row(tv, rec, &row);
1796     if (r == ERROR_SUCCESS)
1797         return TABLE_set_row(view, row, rec, (1 << tv->num_cols) - 1);
1798     else
1799         return TABLE_insert_row( view, rec, -1, FALSE );
1800 }
1801
1802 static UINT modify_delete_row( struct tagMSIVIEW *view, MSIRECORD *rec )
1803 {
1804     MSITABLEVIEW *tv = (MSITABLEVIEW *)view;
1805     UINT row, r;
1806
1807     r = msi_table_find_row(tv, rec, &row);
1808     if (r != ERROR_SUCCESS)
1809         return r;
1810
1811     return TABLE_delete_row(view, row);
1812 }
1813
1814 static UINT msi_refresh_record( struct tagMSIVIEW *view, MSIRECORD *rec, UINT row )
1815 {
1816     MSIRECORD *curr;
1817     UINT r, i, count;
1818
1819     r = TABLE_get_row(view, row - 1, &curr);
1820     if (r != ERROR_SUCCESS)
1821         return r;
1822
1823     count = MSI_RecordGetFieldCount(rec);
1824     for (i = 0; i < count; i++)
1825         MSI_RecordCopyField(curr, i + 1, rec, i + 1);
1826
1827     msiobj_release(&curr->hdr);
1828     return ERROR_SUCCESS;
1829 }
1830
1831 static UINT TABLE_modify( struct tagMSIVIEW *view, MSIMODIFY eModifyMode,
1832                           MSIRECORD *rec, UINT row)
1833 {
1834     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1835     UINT r;
1836
1837     TRACE("%p %d %p\n", view, eModifyMode, rec );
1838
1839     switch (eModifyMode)
1840     {
1841     case MSIMODIFY_DELETE:
1842         r = modify_delete_row( view, rec );
1843         break;
1844     case MSIMODIFY_VALIDATE_NEW:
1845         r = table_validate_new( tv, rec );
1846         break;
1847
1848     case MSIMODIFY_INSERT:
1849         r = table_validate_new( tv, rec );
1850         if (r != ERROR_SUCCESS)
1851             break;
1852         r = TABLE_insert_row( view, rec, -1, FALSE );
1853         break;
1854
1855     case MSIMODIFY_INSERT_TEMPORARY:
1856         r = table_validate_new( tv, rec );
1857         if (r != ERROR_SUCCESS)
1858             break;
1859         r = TABLE_insert_row( view, rec, -1, TRUE );
1860         break;
1861
1862     case MSIMODIFY_REFRESH:
1863         r = msi_refresh_record( view, rec, row );
1864         break;
1865
1866     case MSIMODIFY_UPDATE:
1867         r = msi_table_update( view, rec, row );
1868         break;
1869
1870     case MSIMODIFY_ASSIGN:
1871         r = msi_table_assign( view, rec );
1872         break;
1873
1874     case MSIMODIFY_REPLACE:
1875     case MSIMODIFY_MERGE:
1876     case MSIMODIFY_VALIDATE:
1877     case MSIMODIFY_VALIDATE_FIELD:
1878     case MSIMODIFY_VALIDATE_DELETE:
1879         FIXME("%p %d %p - mode not implemented\n", view, eModifyMode, rec );
1880         r = ERROR_CALL_NOT_IMPLEMENTED;
1881         break;
1882
1883     default:
1884         r = ERROR_INVALID_DATA;
1885     }
1886
1887     return r;
1888 }
1889
1890 static UINT TABLE_delete( struct tagMSIVIEW *view )
1891 {
1892     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1893
1894     TRACE("%p\n", view );
1895
1896     tv->table = NULL;
1897     tv->columns = NULL;
1898
1899     if (tv->order)
1900     {
1901         msi_free( tv->order->reorder );
1902         msi_free( tv->order );
1903         tv->order = NULL;
1904     }
1905
1906     msi_free( tv );
1907
1908     return ERROR_SUCCESS;
1909 }
1910
1911 static UINT TABLE_find_matching_rows( struct tagMSIVIEW *view, UINT col,
1912     UINT val, UINT *row, MSIITERHANDLE *handle )
1913 {
1914     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1915     const MSICOLUMNHASHENTRY *entry;
1916
1917     TRACE("%p, %d, %u, %p\n", view, col, val, *handle);
1918
1919     if( !tv->table )
1920         return ERROR_INVALID_PARAMETER;
1921
1922     if( (col==0) || (col > tv->num_cols) )
1923         return ERROR_INVALID_PARAMETER;
1924
1925     if( !tv->columns[col-1].hash_table )
1926     {
1927         UINT i;
1928         UINT num_rows = tv->table->row_count;
1929         MSICOLUMNHASHENTRY **hash_table;
1930         MSICOLUMNHASHENTRY *new_entry;
1931
1932         if( tv->columns[col-1].offset >= tv->row_size )
1933         {
1934             ERR("Stuffed up %d >= %d\n", tv->columns[col-1].offset, tv->row_size );
1935             ERR("%p %p\n", tv, tv->columns );
1936             return ERROR_FUNCTION_FAILED;
1937         }
1938
1939         /* allocate contiguous memory for the table and its entries so we
1940          * don't have to do an expensive cleanup */
1941         hash_table = msi_alloc(MSITABLE_HASH_TABLE_SIZE * sizeof(MSICOLUMNHASHENTRY*) +
1942             num_rows * sizeof(MSICOLUMNHASHENTRY));
1943         if (!hash_table)
1944             return ERROR_OUTOFMEMORY;
1945
1946         memset(hash_table, 0, MSITABLE_HASH_TABLE_SIZE * sizeof(MSICOLUMNHASHENTRY*));
1947         tv->columns[col-1].hash_table = hash_table;
1948
1949         new_entry = (MSICOLUMNHASHENTRY *)(hash_table + MSITABLE_HASH_TABLE_SIZE);
1950
1951         for (i = 0; i < num_rows; i++, new_entry++)
1952         {
1953             UINT row_value;
1954
1955             if (view->ops->fetch_int( view, i, col, &row_value ) != ERROR_SUCCESS)
1956                 continue;
1957
1958             new_entry->next = NULL;
1959             new_entry->value = row_value;
1960             new_entry->row = i;
1961             if (hash_table[row_value % MSITABLE_HASH_TABLE_SIZE])
1962             {
1963                 MSICOLUMNHASHENTRY *prev_entry = hash_table[row_value % MSITABLE_HASH_TABLE_SIZE];
1964                 while (prev_entry->next)
1965                     prev_entry = prev_entry->next;
1966                 prev_entry->next = new_entry;
1967             }
1968             else
1969                 hash_table[row_value % MSITABLE_HASH_TABLE_SIZE] = new_entry;
1970         }
1971     }
1972
1973     if( !*handle )
1974         entry = tv->columns[col-1].hash_table[val % MSITABLE_HASH_TABLE_SIZE];
1975     else
1976         entry = (*handle)->next;
1977
1978     while (entry && entry->value != val)
1979         entry = entry->next;
1980
1981     *handle = entry;
1982     if (!entry)
1983         return ERROR_NO_MORE_ITEMS;
1984
1985     *row = entry->row;
1986
1987     return ERROR_SUCCESS;
1988 }
1989
1990 static UINT TABLE_add_ref(struct tagMSIVIEW *view)
1991 {
1992     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
1993     UINT i;
1994
1995     TRACE("%p %d\n", view, tv->table->ref_count);
1996
1997     for (i = 0; i < tv->table->col_count; i++)
1998     {
1999         if (tv->table->colinfo[i].type & MSITYPE_TEMPORARY)
2000             InterlockedIncrement(&tv->table->colinfo[i].ref_count);
2001     }
2002
2003     return InterlockedIncrement(&tv->table->ref_count);
2004 }
2005
2006 static UINT TABLE_remove_column(struct tagMSIVIEW *view, LPCWSTR table, UINT number)
2007 {
2008     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
2009     MSIRECORD *rec = NULL;
2010     MSIVIEW *columns = NULL;
2011     UINT row, r;
2012
2013     rec = MSI_CreateRecord(2);
2014     if (!rec)
2015         return ERROR_OUTOFMEMORY;
2016
2017     MSI_RecordSetStringW(rec, 1, table);
2018     MSI_RecordSetInteger(rec, 2, number);
2019
2020     r = TABLE_CreateView(tv->db, szColumns, &columns);
2021     if (r != ERROR_SUCCESS)
2022         return r;
2023
2024     r = msi_table_find_row((MSITABLEVIEW *)columns, rec, &row);
2025     if (r != ERROR_SUCCESS)
2026         goto done;
2027
2028     r = TABLE_delete_row(columns, row);
2029     if (r != ERROR_SUCCESS)
2030         goto done;
2031
2032     msi_update_table_columns(tv->db, table);
2033
2034 done:
2035     msiobj_release(&rec->hdr);
2036     columns->ops->delete(columns);
2037     return r;
2038 }
2039
2040 static UINT TABLE_release(struct tagMSIVIEW *view)
2041 {
2042     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
2043     INT ref = tv->table->ref_count;
2044     UINT i, r;
2045
2046     TRACE("%p %d\n", view, ref);
2047
2048     for (i = 0; i < tv->table->col_count; i++)
2049     {
2050         if (tv->table->colinfo[i].type & MSITYPE_TEMPORARY)
2051         {
2052             ref = InterlockedDecrement(&tv->table->colinfo[i].ref_count);
2053             if (ref == 0)
2054             {
2055                 r = TABLE_remove_column(view, tv->table->colinfo[i].tablename,
2056                                         tv->table->colinfo[i].number);
2057                 if (r != ERROR_SUCCESS)
2058                     break;
2059             }
2060         }
2061     }
2062
2063     ref = InterlockedDecrement(&tv->table->ref_count);
2064     if (ref == 0)
2065     {
2066         if (!tv->table->row_count)
2067         {
2068             list_remove(&tv->table->entry);
2069             free_table(tv->table);
2070             TABLE_delete(view);
2071         }
2072     }
2073
2074     return ref;
2075 }
2076
2077 static UINT TABLE_add_column(struct tagMSIVIEW *view, LPCWSTR table, UINT number,
2078                              LPCWSTR column, UINT type, BOOL hold)
2079 {
2080     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
2081     MSITABLE *msitable;
2082     MSIRECORD *rec;
2083     UINT r, i;
2084
2085     rec = MSI_CreateRecord(4);
2086     if (!rec)
2087         return ERROR_OUTOFMEMORY;
2088
2089     MSI_RecordSetStringW(rec, 1, table);
2090     MSI_RecordSetInteger(rec, 2, number);
2091     MSI_RecordSetStringW(rec, 3, column);
2092     MSI_RecordSetInteger(rec, 4, type);
2093
2094     r = TABLE_insert_row(&tv->view, rec, -1, FALSE);
2095     if (r != ERROR_SUCCESS)
2096         goto done;
2097
2098     msi_update_table_columns(tv->db, table);
2099
2100     if (!hold)
2101         goto done;
2102
2103     msitable = find_cached_table(tv->db, table);
2104     for (i = 0; i < msitable->col_count; i++)
2105     {
2106         if (!lstrcmpW(msitable->colinfo[i].colname, column))
2107         {
2108             InterlockedIncrement(&msitable->colinfo[i].ref_count);
2109             break;
2110         }
2111     }
2112
2113 done:
2114     msiobj_release(&rec->hdr);
2115     return r;
2116 }
2117
2118 static UINT order_add_column(struct tagMSIVIEW *view, MSIORDERINFO *order, LPCWSTR name)
2119 {
2120     UINT n, r, count;
2121
2122     r = TABLE_get_dimensions(view, NULL, &count);
2123     if (r != ERROR_SUCCESS)
2124         return r;
2125
2126     if (order->num_cols >= count)
2127         return ERROR_FUNCTION_FAILED;
2128
2129     r = VIEW_find_column(view, name, &n);
2130     if (r != ERROR_SUCCESS)
2131         return r;
2132
2133     order->cols[order->num_cols] = n;
2134     TRACE("Ordering by column %s (%d)\n", debugstr_w(name), n);
2135
2136     order->num_cols++;
2137
2138     return ERROR_SUCCESS;
2139 }
2140
2141 static UINT order_compare(struct tagMSIVIEW *view, MSIORDERINFO *order,
2142                           UINT a, UINT b, UINT *swap)
2143 {
2144     UINT r, i, a_val = 0, b_val = 0;
2145
2146     *swap = 0;
2147     for (i = 0; i < order->num_cols; i++)
2148     {
2149         r = TABLE_fetch_int(view, a, order->cols[i], &a_val);
2150         if (r != ERROR_SUCCESS)
2151             return r;
2152
2153         r = TABLE_fetch_int(view, b, order->cols[i], &b_val);
2154         if (r != ERROR_SUCCESS)
2155             return r;
2156
2157         if (a_val != b_val)
2158         {
2159             if (a_val > b_val)
2160                 *swap = 1;
2161             break;
2162         }
2163     }
2164
2165     return ERROR_SUCCESS;
2166 }
2167
2168 static UINT order_mergesort(struct tagMSIVIEW *view, MSIORDERINFO *order,
2169                             UINT left, UINT right)
2170 {
2171     UINT r, i, j, temp;
2172     UINT swap = 0, center = (left + right) / 2;
2173     UINT *array = order->reorder;
2174
2175     if (left == right)
2176         return ERROR_SUCCESS;
2177
2178     /* sort the left half */
2179     r = order_mergesort(view, order, left, center);
2180     if (r != ERROR_SUCCESS)
2181         return r;
2182
2183     /* sort the right half */
2184     r = order_mergesort(view, order, center + 1, right);
2185     if (r != ERROR_SUCCESS)
2186         return r;
2187
2188     for (i = left, j = center + 1; (i <= center) && (j <= right); i++)
2189     {
2190         r = order_compare(view, order, array[i], array[j], &swap);
2191         if (r != ERROR_SUCCESS)
2192             return r;
2193
2194         if (swap)
2195         {
2196             temp = array[j];
2197             memmove(&array[i + 1], &array[i], (j - i) * sizeof(UINT));
2198             array[i] = temp;
2199             j++;
2200             center++;
2201         }
2202     }
2203
2204     return ERROR_SUCCESS;
2205 }
2206
2207 static UINT order_verify(struct tagMSIVIEW *view, MSIORDERINFO *order, UINT num_rows)
2208 {
2209     UINT i, swap, r;
2210
2211     for (i = 1; i < num_rows; i++)
2212     {
2213         r = order_compare(view, order, order->reorder[i - 1],
2214                           order->reorder[i], &swap);
2215         if (r != ERROR_SUCCESS)
2216             return r;
2217
2218         if (!swap)
2219             continue;
2220
2221         ERR("Bad order! %d\n", i);
2222         return ERROR_FUNCTION_FAILED;
2223     }
2224
2225     return ERROR_SUCCESS;
2226 }
2227
2228 static UINT TABLE_sort(struct tagMSIVIEW *view, column_info *columns)
2229 {
2230     MSITABLEVIEW *tv = (MSITABLEVIEW *)view;
2231     MSIORDERINFO *order;
2232     column_info *ptr;
2233     UINT r, i;
2234     UINT rows, cols;
2235
2236     TRACE("sorting table %s\n", debugstr_w(tv->name));
2237
2238     r = TABLE_get_dimensions(view, &rows, &cols);
2239     if (r != ERROR_SUCCESS)
2240         return r;
2241
2242     if (rows == 0)
2243         return ERROR_SUCCESS;
2244
2245     order = msi_alloc_zero(sizeof(MSIORDERINFO) + sizeof(UINT) * cols);
2246     if (!order)
2247         return ERROR_OUTOFMEMORY;
2248
2249     for (ptr = columns; ptr; ptr = ptr->next)
2250         order_add_column(view, order, ptr->column);
2251
2252     order->reorder = msi_alloc(rows * sizeof(UINT));
2253     if (!order->reorder)
2254         return ERROR_OUTOFMEMORY;
2255
2256     for (i = 0; i < rows; i++)
2257         order->reorder[i] = i;
2258
2259     r = order_mergesort(view, order, 0, rows - 1);
2260     if (r != ERROR_SUCCESS)
2261         return r;
2262
2263     r = order_verify(view, order, rows);
2264     if (r != ERROR_SUCCESS)
2265         return r;
2266
2267     tv->order = order;
2268
2269     return ERROR_SUCCESS;
2270 }
2271
2272 static UINT TABLE_drop(struct tagMSIVIEW *view)
2273 {
2274     MSITABLEVIEW *tv = (MSITABLEVIEW*)view;
2275     MSIVIEW *tables = NULL;
2276     MSIRECORD *rec = NULL;
2277     UINT r, row;
2278     INT i;
2279
2280     TRACE("dropping table %s\n", debugstr_w(tv->name));
2281
2282     for (i = tv->table->col_count - 1; i >= 0; i--)
2283     {
2284         r = TABLE_remove_column(view, tv->table->colinfo[i].tablename,
2285                                 tv->table->colinfo[i].number);
2286         if (r != ERROR_SUCCESS)
2287             return r;
2288     }
2289
2290     rec = MSI_CreateRecord(1);
2291     if (!rec)
2292         return ERROR_OUTOFMEMORY;
2293
2294     MSI_RecordSetStringW(rec, 1, tv->name);
2295
2296     r = TABLE_CreateView(tv->db, szTables, &tables);
2297     if (r != ERROR_SUCCESS)
2298         return r;
2299
2300     r = msi_table_find_row((MSITABLEVIEW *)tables, rec, &row);
2301     if (r != ERROR_SUCCESS)
2302         goto done;
2303
2304     r = TABLE_delete_row(tables, row);
2305     if (r != ERROR_SUCCESS)
2306         goto done;
2307
2308     list_remove(&tv->table->entry);
2309     free_table(tv->table);
2310     TABLE_delete(view);
2311
2312 done:
2313     msiobj_release(&rec->hdr);
2314     tables->ops->delete(tables);
2315
2316     return r;
2317 }
2318
2319 static const MSIVIEWOPS table_ops =
2320 {
2321     TABLE_fetch_int,
2322     TABLE_fetch_stream,
2323     TABLE_get_row,
2324     TABLE_set_row,
2325     TABLE_insert_row,
2326     TABLE_delete_row,
2327     TABLE_execute,
2328     TABLE_close,
2329     TABLE_get_dimensions,
2330     TABLE_get_column_info,
2331     TABLE_modify,
2332     TABLE_delete,
2333     TABLE_find_matching_rows,
2334     TABLE_add_ref,
2335     TABLE_release,
2336     TABLE_add_column,
2337     TABLE_remove_column,
2338     TABLE_sort,
2339     TABLE_drop,
2340 };
2341
2342 UINT TABLE_CreateView( MSIDATABASE *db, LPCWSTR name, MSIVIEW **view )
2343 {
2344     MSITABLEVIEW *tv ;
2345     UINT r, sz;
2346
2347     static const WCHAR Streams[] = {'_','S','t','r','e','a','m','s',0};
2348     static const WCHAR Storages[] = {'_','S','t','o','r','a','g','e','s',0};
2349
2350     TRACE("%p %s %p\n", db, debugstr_w(name), view );
2351
2352     if ( !lstrcmpW( name, Streams ) )
2353         return STREAMS_CreateView( db, view );
2354     else if ( !lstrcmpW( name, Storages ) )
2355         return STORAGES_CreateView( db, view );
2356
2357     sz = sizeof *tv + lstrlenW(name)*sizeof name[0] ;
2358     tv = msi_alloc_zero( sz );
2359     if( !tv )
2360         return ERROR_FUNCTION_FAILED;
2361
2362     r = get_table( db, name, &tv->table );
2363     if( r != ERROR_SUCCESS )
2364     {
2365         msi_free( tv );
2366         WARN("table not found\n");
2367         return r;
2368     }
2369
2370     TRACE("table %p found with %d columns\n", tv->table, tv->table->col_count);
2371
2372     /* fill the structure */
2373     tv->view.ops = &table_ops;
2374     tv->db = db;
2375     tv->columns = tv->table->colinfo;
2376     tv->num_cols = tv->table->col_count;
2377     tv->row_size = msi_table_get_row_size( db, tv->table->colinfo, tv->table->col_count );
2378
2379     TRACE("%s one row is %d bytes\n", debugstr_w(name), tv->row_size );
2380
2381     *view = (MSIVIEW*) tv;
2382     lstrcpyW( tv->name, name );
2383
2384     return ERROR_SUCCESS;
2385 }
2386
2387 UINT MSI_CommitTables( MSIDATABASE *db )
2388 {
2389     UINT r;
2390     MSITABLE *table = NULL;
2391
2392     TRACE("%p\n",db);
2393
2394     r = msi_save_string_table( db->strings, db->storage );
2395     if( r != ERROR_SUCCESS )
2396     {
2397         WARN("failed to save string table r=%08x\n",r);
2398         return r;
2399     }
2400
2401     LIST_FOR_EACH_ENTRY( table, &db->tables, MSITABLE, entry )
2402     {
2403         r = save_table( db, table );
2404         if( r != ERROR_SUCCESS )
2405         {
2406             WARN("failed to save table %s (r=%08x)\n",
2407                   debugstr_w(table->name), r);
2408             return r;
2409         }
2410     }
2411
2412     /* force everything to reload next time */
2413     free_cached_tables( db );
2414
2415     return ERROR_SUCCESS;
2416 }
2417
2418 MSICONDITION MSI_DatabaseIsTablePersistent( MSIDATABASE *db, LPCWSTR table )
2419 {
2420     MSITABLE *t;
2421     UINT r;
2422
2423     TRACE("%p %s\n", db, debugstr_w(table));
2424
2425     if (!table)
2426         return MSICONDITION_ERROR;
2427
2428     r = get_table( db, table, &t );
2429     if (r != ERROR_SUCCESS)
2430         return MSICONDITION_NONE;
2431
2432     return t->persistent;
2433 }
2434
2435 static UINT read_raw_int(const BYTE *data, UINT col, UINT bytes)
2436 {
2437     UINT ret = 0, i;
2438
2439     for (i = 0; i < bytes; i++)
2440         ret += (data[col + i] << i * 8);
2441
2442     return ret;
2443 }
2444
2445 static UINT msi_record_encoded_stream_name( const MSITABLEVIEW *tv, MSIRECORD *rec, LPWSTR *pstname )
2446 {
2447     LPWSTR stname = NULL, sval, p;
2448     DWORD len;
2449     UINT i, r;
2450
2451     TRACE("%p %p\n", tv, rec);
2452
2453     len = lstrlenW( tv->name ) + 1;
2454     stname = msi_alloc( len*sizeof(WCHAR) );
2455     if ( !stname )
2456     {
2457        r = ERROR_OUTOFMEMORY;
2458        goto err;
2459     }
2460
2461     lstrcpyW( stname, tv->name );
2462
2463     for ( i = 0; i < tv->num_cols; i++ )
2464     {
2465         if ( tv->columns[i].type & MSITYPE_KEY )
2466         {
2467             sval = msi_dup_record_field( rec, i + 1 );
2468             if ( !sval )
2469             {
2470                 r = ERROR_OUTOFMEMORY;
2471                 goto err;
2472             }
2473
2474             len += lstrlenW( szDot ) + lstrlenW ( sval );
2475             p = msi_realloc ( stname, len*sizeof(WCHAR) );
2476             if ( !p )
2477             {
2478                 r = ERROR_OUTOFMEMORY;
2479                 goto err;
2480             }
2481             stname = p;
2482
2483             lstrcatW( stname, szDot );
2484             lstrcatW( stname, sval );
2485
2486             msi_free( sval );
2487         }
2488         else
2489             continue;
2490     }
2491
2492     *pstname = encode_streamname( FALSE, stname );
2493     msi_free( stname );
2494
2495     return ERROR_SUCCESS;
2496
2497 err:
2498     msi_free ( stname );
2499     *pstname = NULL;
2500     return r;
2501 }
2502
2503 static MSIRECORD *msi_get_transform_record( const MSITABLEVIEW *tv, const string_table *st,
2504                                             IStorage *stg,
2505                                             const BYTE *rawdata, UINT bytes_per_strref )
2506 {
2507     UINT i, val, ofs = 0;
2508     USHORT mask;
2509     MSICOLUMNINFO *columns = tv->columns;
2510     MSIRECORD *rec;
2511
2512     mask = rawdata[0] | (rawdata[1] << 8);
2513     rawdata += 2;
2514
2515     rec = MSI_CreateRecord( tv->num_cols );
2516     if( !rec )
2517         return rec;
2518
2519     TRACE("row ->\n");
2520     for( i=0; i<tv->num_cols; i++ )
2521     {
2522         if ( (mask&1) && (i>=(mask>>8)) )
2523             break;
2524         /* all keys must be present */
2525         if ( (~mask&1) && (~columns[i].type & MSITYPE_KEY) && ((1<<i) & ~mask) )
2526             continue;
2527
2528         if( MSITYPE_IS_BINARY(tv->columns[i].type) )
2529         {
2530             LPWSTR encname;
2531             IStream *stm = NULL;
2532             UINT r;
2533
2534             ofs += bytes_per_column( tv->db, &columns[i] );
2535
2536             r = msi_record_encoded_stream_name( tv, rec, &encname );
2537             if ( r != ERROR_SUCCESS )
2538                 return NULL;
2539
2540             r = IStorage_OpenStream( stg, encname, NULL,
2541                      STGM_READ | STGM_SHARE_EXCLUSIVE, 0, &stm );
2542             msi_free( encname );
2543             if ( r != ERROR_SUCCESS )
2544                 return NULL;
2545
2546             MSI_RecordSetStream( rec, i+1, stm );
2547             TRACE(" field %d [%s]\n", i+1, debugstr_w(encname));
2548         }
2549         else if( columns[i].type & MSITYPE_STRING )
2550         {
2551             LPCWSTR sval;
2552
2553             val = read_raw_int(rawdata, ofs, bytes_per_strref);
2554             sval = msi_string_lookup_id( st, val );
2555             MSI_RecordSetStringW( rec, i+1, sval );
2556             TRACE(" field %d [%s]\n", i+1, debugstr_w(sval));
2557             ofs += bytes_per_strref;
2558         }
2559         else
2560         {
2561             UINT n = bytes_per_column( tv->db, &columns[i] );
2562             switch( n )
2563             {
2564             case 2:
2565                 val = read_raw_int(rawdata, ofs, n);
2566                 if (val)
2567                     MSI_RecordSetInteger( rec, i+1, val^0x8000 );
2568                 TRACE(" field %d [0x%04x]\n", i+1, val );
2569                 break;
2570             case 4:
2571                 val = read_raw_int(rawdata, ofs, n);
2572                 if (val)
2573                     MSI_RecordSetInteger( rec, i+1, val^0x80000000 );
2574                 TRACE(" field %d [0x%08x]\n", i+1, val );
2575                 break;
2576             default:
2577                 ERR("oops - unknown column width %d\n", n);
2578                 break;
2579             }
2580             ofs += n;
2581         }
2582     }
2583     return rec;
2584 }
2585
2586 static void dump_record( MSIRECORD *rec )
2587 {
2588     UINT i, n;
2589
2590     n = MSI_RecordGetFieldCount( rec );
2591     for( i=1; i<=n; i++ )
2592     {
2593         LPCWSTR sval = MSI_RecordGetString( rec, i );
2594
2595         if( MSI_RecordIsNull( rec, i ) )
2596             TRACE("row -> []\n");
2597         else if( (sval = MSI_RecordGetString( rec, i )) )
2598             TRACE("row -> [%s]\n", debugstr_w(sval));
2599         else
2600             TRACE("row -> [0x%08x]\n", MSI_RecordGetInteger( rec, i ) );
2601     }
2602 }
2603
2604 static void dump_table( const string_table *st, const USHORT *rawdata, UINT rawsize )
2605 {
2606     LPCWSTR sval;
2607     UINT i;
2608
2609     for( i=0; i<(rawsize/2); i++ )
2610     {
2611         sval = msi_string_lookup_id( st, rawdata[i] );
2612         MESSAGE(" %04x %s\n", rawdata[i], debugstr_w(sval) );
2613     }
2614 }
2615
2616 static UINT* msi_record_to_row( const MSITABLEVIEW *tv, MSIRECORD *rec )
2617 {
2618     LPCWSTR str;
2619     UINT i, r, *data;
2620
2621     data = msi_alloc( tv->num_cols *sizeof (UINT) );
2622     for( i=0; i<tv->num_cols; i++ )
2623     {
2624         data[i] = 0;
2625
2626         if ( ~tv->columns[i].type & MSITYPE_KEY )
2627             continue;
2628
2629         /* turn the transform column value into a row value */
2630         if ( ( tv->columns[i].type & MSITYPE_STRING ) &&
2631              ! MSITYPE_IS_BINARY(tv->columns[i].type) )
2632         {
2633             str = MSI_RecordGetString( rec, i+1 );
2634             r = msi_string2idW( tv->db->strings, str, &data[i] );
2635
2636             /* if there's no matching string in the string table,
2637                these keys can't match any record, so fail now. */
2638             if( ERROR_SUCCESS != r )
2639             {
2640                 msi_free( data );
2641                 return NULL;
2642             }
2643         }
2644         else
2645         {
2646             data[i] = MSI_RecordGetInteger( rec, i+1 );
2647
2648             if (data[i] == MSI_NULL_INTEGER)
2649                 data[i] = 0;
2650             else if ((tv->columns[i].type&0xff) == 2)
2651                 data[i] += 0x8000;
2652             else
2653                 data[i] += 0x80000000;
2654         }
2655     }
2656     return data;
2657 }
2658
2659 static UINT msi_row_matches( MSITABLEVIEW *tv, UINT row, const UINT *data )
2660 {
2661     UINT i, r, x, ret = ERROR_FUNCTION_FAILED;
2662
2663     for( i=0; i<tv->num_cols; i++ )
2664     {
2665         if ( ~tv->columns[i].type & MSITYPE_KEY )
2666             continue;
2667
2668         /* turn the transform column value into a row value */
2669         r = TABLE_fetch_int( &tv->view, row, i+1, &x );
2670         if ( r != ERROR_SUCCESS )
2671         {
2672             ERR("TABLE_fetch_int shouldn't fail here\n");
2673             break;
2674         }
2675
2676         /* if this key matches, move to the next column */
2677         if ( x != data[i] )
2678         {
2679             ret = ERROR_FUNCTION_FAILED;
2680             break;
2681         }
2682
2683         ret = ERROR_SUCCESS;
2684     }
2685
2686     return ret;
2687 }
2688
2689 static UINT msi_table_find_row( MSITABLEVIEW *tv, MSIRECORD *rec, UINT *row )
2690 {
2691     UINT i, r = ERROR_FUNCTION_FAILED, *data;
2692
2693     data = msi_record_to_row( tv, rec );
2694     if( !data )
2695         return r;
2696     for( i = 0; i < tv->table->row_count; i++ )
2697     {
2698         r = msi_row_matches( tv, i, data );
2699         if( r == ERROR_SUCCESS )
2700         {
2701             *row = i;
2702             break;
2703         }
2704     }
2705     msi_free( data );
2706     return r;
2707 }
2708
2709 typedef struct
2710 {
2711     struct list entry;
2712     LPWSTR name;
2713 } TRANSFORMDATA;
2714
2715 static UINT msi_table_load_transform( MSIDATABASE *db, IStorage *stg,
2716                                       string_table *st, TRANSFORMDATA *transform,
2717                                       UINT bytes_per_strref )
2718 {
2719     UINT rawsize = 0;
2720     BYTE *rawdata = NULL;
2721     MSITABLEVIEW *tv = NULL;
2722     UINT r, n, sz, i, mask;
2723     MSIRECORD *rec = NULL;
2724     UINT colcol = 0;
2725     WCHAR coltable[32];
2726     LPWSTR name;
2727
2728     if (!transform)
2729         return ERROR_SUCCESS;
2730
2731     name = transform->name;
2732
2733     coltable[0] = 0;
2734     TRACE("%p %p %p %s\n", db, stg, st, debugstr_w(name) );
2735
2736     /* read the transform data */
2737     read_stream_data( stg, name, TRUE, &rawdata, &rawsize );
2738     if ( !rawdata )
2739     {
2740         TRACE("table %s empty\n", debugstr_w(name) );
2741         return ERROR_INVALID_TABLE;
2742     }
2743
2744     /* create a table view */
2745     r = TABLE_CreateView( db, name, (MSIVIEW**) &tv );
2746     if( r != ERROR_SUCCESS )
2747         goto err;
2748
2749     r = tv->view.ops->execute( &tv->view, NULL );
2750     if( r != ERROR_SUCCESS )
2751         goto err;
2752
2753     TRACE("name = %s columns = %u row_size = %u raw size = %u\n",
2754           debugstr_w(name), tv->num_cols, tv->row_size, rawsize );
2755
2756     /* interpret the data */
2757     r = ERROR_SUCCESS;
2758     for( n=0; n < rawsize;  )
2759     {
2760         mask = rawdata[n] | (rawdata[n+1] << 8);
2761
2762         if (mask&1)
2763         {
2764             /*
2765              * if the low bit is set, columns are continuous and
2766              * the number of columns is specified in the high byte
2767              */
2768             sz = 2;
2769             for( i=0; i<tv->num_cols; i++ )
2770             {
2771                 if( (tv->columns[i].type & MSITYPE_STRING) &&
2772                     ! MSITYPE_IS_BINARY(tv->columns[i].type) )
2773                     sz += bytes_per_strref;
2774                 else
2775                     sz += bytes_per_column( tv->db, &tv->columns[i] );
2776             }
2777         }
2778         else
2779         {
2780             /*
2781              * If the low bit is not set, mask is a bitmask.
2782              * Excepting for key fields, which are always present,
2783              *  each bit indicates that a field is present in the transform record.
2784              *
2785              * mask == 0 is a special case ... only the keys will be present
2786              * and it means that this row should be deleted.
2787              */
2788             sz = 2;
2789             for( i=0; i<tv->num_cols; i++ )
2790             {
2791                 if( (tv->columns[i].type & MSITYPE_KEY) || ((1<<i)&mask))
2792                 {
2793                     if( (tv->columns[i].type & MSITYPE_STRING) &&
2794                         ! MSITYPE_IS_BINARY(tv->columns[i].type) )
2795                         sz += bytes_per_strref;
2796                     else
2797                         sz += bytes_per_column( tv->db, &tv->columns[i] );
2798                 }
2799             }
2800         }
2801
2802         /* check we didn't run of the end of the table */
2803         if ( (n+sz) > rawsize )
2804         {
2805             ERR("borked.\n");
2806             dump_table( st, (USHORT *)rawdata, rawsize );
2807             break;
2808         }
2809
2810         rec = msi_get_transform_record( tv, st, stg, &rawdata[n], bytes_per_strref );
2811         if (rec)
2812         {
2813             if ( mask & 1 )
2814             {
2815                 WCHAR table[32];
2816                 DWORD sz = 32;
2817                 UINT number = MSI_NULL_INTEGER;
2818
2819                 TRACE("inserting record\n");
2820
2821                 if (!lstrcmpW(name, szColumns))
2822                 {
2823                     MSI_RecordGetStringW( rec, 1, table, &sz );
2824                     number = MSI_RecordGetInteger( rec, 2 );
2825
2826                     /*
2827                      * Native msi seems writes nul into the Number (2nd) column of
2828                      * the _Columns table, only when the columns are from a new table
2829                      */
2830                     if ( number == MSI_NULL_INTEGER )
2831                     {
2832                         /* reset the column number on a new table */
2833                         if ( lstrcmpW(coltable, table) )
2834                         {
2835                             colcol = 0;
2836                             lstrcpyW( coltable, table );
2837                         }
2838
2839                         /* fix nul column numbers */
2840                         MSI_RecordSetInteger( rec, 2, ++colcol );
2841                     }
2842                 }
2843
2844                 r = TABLE_insert_row( &tv->view, rec, -1, FALSE );
2845                 if (r != ERROR_SUCCESS)
2846                     WARN("insert row failed\n");
2847
2848                 if ( number != MSI_NULL_INTEGER && !lstrcmpW(name, szColumns) )
2849                     msi_update_table_columns( db, table );
2850             }
2851             else
2852             {
2853                 UINT row = 0;
2854
2855                 r = msi_table_find_row( tv, rec, &row );
2856                 if (r != ERROR_SUCCESS)
2857                     WARN("no matching row to transform\n");
2858                 else if ( mask )
2859                 {
2860                     TRACE("modifying row [%d]:\n", row);
2861                     TABLE_set_row( &tv->view, row, rec, mask );
2862                 }
2863                 else
2864                 {
2865                     TRACE("deleting row [%d]:\n", row);
2866                     TABLE_delete_row( &tv->view, row );
2867                 }
2868             }
2869             if( TRACE_ON(msidb) ) dump_record( rec );
2870             msiobj_release( &rec->hdr );
2871         }
2872
2873         n += sz;
2874     }
2875
2876 err:
2877     /* no need to free the table, it's associated with the database */
2878     msi_free( rawdata );
2879     if( tv )
2880         tv->view.ops->delete( &tv->view );
2881
2882     return ERROR_SUCCESS;
2883 }
2884
2885 /*
2886  * msi_table_apply_transform
2887  *
2888  * Enumerate the table transforms in a transform storage and apply each one.
2889  */
2890 UINT msi_table_apply_transform( MSIDATABASE *db, IStorage *stg )
2891 {
2892     struct list transforms;
2893     IEnumSTATSTG *stgenum = NULL;
2894     TRANSFORMDATA *transform;
2895     TRANSFORMDATA *tables = NULL, *columns = NULL;
2896     HRESULT r;
2897     STATSTG stat;
2898     string_table *strings;
2899     UINT ret = ERROR_FUNCTION_FAILED;
2900     UINT bytes_per_strref;
2901
2902     TRACE("%p %p\n", db, stg );
2903
2904     strings = msi_load_string_table( stg, &bytes_per_strref );
2905     if( !strings )
2906         goto end;
2907
2908     r = IStorage_EnumElements( stg, 0, NULL, 0, &stgenum );
2909     if( FAILED( r ) )
2910         goto end;
2911
2912     list_init(&transforms);
2913
2914     while ( TRUE )
2915     {
2916         MSITABLEVIEW *tv = NULL;
2917         WCHAR name[0x40];
2918         ULONG count = 0;
2919
2920         r = IEnumSTATSTG_Next( stgenum, 1, &stat, &count );
2921         if ( FAILED( r ) || !count )
2922             break;
2923
2924         decode_streamname( stat.pwcsName, name );
2925         CoTaskMemFree( stat.pwcsName );
2926         if ( name[0] != 0x4840 )
2927             continue;
2928
2929         if ( !lstrcmpW( name+1, szStringPool ) ||
2930              !lstrcmpW( name+1, szStringData ) )
2931             continue;
2932
2933         transform = msi_alloc_zero( sizeof(TRANSFORMDATA) );
2934         if ( !transform )
2935             break;
2936
2937         list_add_tail( &transforms, &transform->entry );
2938
2939         transform->name = strdupW( name + 1 );
2940
2941         if ( !lstrcmpW( transform->name, szTables ) )
2942             tables = transform;
2943         else if (!lstrcmpW( transform->name, szColumns ) )
2944             columns = transform;
2945
2946         TRACE("transform contains stream %s\n", debugstr_w(name));
2947
2948         /* load the table */
2949         r = TABLE_CreateView( db, transform->name, (MSIVIEW**) &tv );
2950         if( r != ERROR_SUCCESS )
2951             continue;
2952
2953         r = tv->view.ops->execute( &tv->view, NULL );
2954         if( r != ERROR_SUCCESS )
2955         {
2956             tv->view.ops->delete( &tv->view );
2957             continue;
2958         }
2959
2960         tv->view.ops->delete( &tv->view );
2961     }
2962
2963     /*
2964      * Apply _Tables and _Columns transforms first so that
2965      * the table metadata is correct, and empty tables exist.
2966      */
2967     ret = msi_table_load_transform( db, stg, strings, tables, bytes_per_strref );
2968     if (ret != ERROR_SUCCESS && ret != ERROR_INVALID_TABLE)
2969         goto end;
2970
2971     ret = msi_table_load_transform( db, stg, strings, columns, bytes_per_strref );
2972     if (ret != ERROR_SUCCESS && ret != ERROR_INVALID_TABLE)
2973         goto end;
2974
2975     ret = ERROR_SUCCESS;
2976
2977     while ( !list_empty( &transforms ) )
2978     {
2979         transform = LIST_ENTRY( list_head( &transforms ), TRANSFORMDATA, entry );
2980
2981         if ( lstrcmpW( transform->name, szColumns ) &&
2982              lstrcmpW( transform->name, szTables ) &&
2983              ret == ERROR_SUCCESS )
2984         {
2985             ret = msi_table_load_transform( db, stg, strings, transform, bytes_per_strref );
2986         }
2987
2988         list_remove( &transform->entry );
2989         msi_free( transform->name );
2990         msi_free( transform );
2991     }
2992
2993     if ( ret == ERROR_SUCCESS )
2994         append_storage_to_db( db, stg );
2995
2996 end:
2997     if ( stgenum )
2998         IEnumSTATSTG_Release( stgenum );
2999     if ( strings )
3000         msi_destroy_stringtable( strings );
3001
3002     return ret;
3003 }
3004
3005 void append_storage_to_db( MSIDATABASE *db, IStorage *stg )
3006 {
3007     MSITRANSFORM *t;
3008
3009     t = msi_alloc( sizeof *t );
3010     t->stg = stg;
3011     IStorage_AddRef( stg );
3012     list_add_tail( &db->transforms, &t->entry );
3013 }
3014
3015 void msi_free_transforms( MSIDATABASE *db )
3016 {
3017     while( !list_empty( &db->transforms ) )
3018     {
3019         MSITRANSFORM *t = LIST_ENTRY( list_head( &db->transforms ),
3020                                       MSITRANSFORM, entry );
3021         list_remove( &t->entry );
3022         IStorage_Release( t->stg );
3023         msi_free( t );
3024     }
3025 }