Artifact fab565baa9b845cba453c65b9cae1894544a10bf:
File
src/rebuild.c
part of check-in
[ba486fec5a]
- Add the unclustered table and the M lines to manifests. Process
clusters in manifest_parse and manifest_crossref. The xfer process
still does not yet use clusters though so it is still compatible. But
that is about to change.
by
drh on
2007-09-03 01:28:57.
0000: 2f 2a 0a 2a 2a 20 43 6f 70 79 72 69 67 68 74 20 /*.** Copyright
0010: 28 63 29 20 32 30 30 37 20 44 2e 20 52 69 63 68 (c) 2007 D. Rich
0020: 61 72 64 20 48 69 70 70 0a 2a 2a 0a 2a 2a 20 54 ard Hipp.**.** T
0030: 68 69 73 20 70 72 6f 67 72 61 6d 20 69 73 20 66 his program is f
0040: 72 65 65 20 73 6f 66 74 77 61 72 65 3b 20 79 6f ree software; yo
0050: 75 20 63 61 6e 20 72 65 64 69 73 74 72 69 62 75 u can redistribu
0060: 74 65 20 69 74 20 61 6e 64 2f 6f 72 0a 2a 2a 20 te it and/or.**
0070: 6d 6f 64 69 66 79 20 69 74 20 75 6e 64 65 72 20 modify it under
0080: 74 68 65 20 74 65 72 6d 73 20 6f 66 20 74 68 65 the terms of the
0090: 20 47 4e 55 20 47 65 6e 65 72 61 6c 20 50 75 62 GNU General Pub
00a0: 6c 69 63 0a 2a 2a 20 4c 69 63 65 6e 73 65 20 76 lic.** License v
00b0: 65 72 73 69 6f 6e 20 32 20 61 73 20 70 75 62 6c ersion 2 as publ
00c0: 69 73 68 65 64 20 62 79 20 74 68 65 20 46 72 65 ished by the Fre
00d0: 65 20 53 6f 66 74 77 61 72 65 20 46 6f 75 6e 64 e Software Found
00e0: 61 74 69 6f 6e 2e 0a 2a 2a 0a 2a 2a 20 54 68 69 ation..**.** Thi
00f0: 73 20 70 72 6f 67 72 61 6d 20 69 73 20 64 69 73 s program is dis
0100: 74 72 69 62 75 74 65 64 20 69 6e 20 74 68 65 20 tributed in the
0110: 68 6f 70 65 20 74 68 61 74 20 69 74 20 77 69 6c hope that it wil
0120: 6c 20 62 65 20 75 73 65 66 75 6c 2c 0a 2a 2a 20 l be useful,.**
0130: 62 75 74 20 57 49 54 48 4f 55 54 20 41 4e 59 20 but WITHOUT ANY
0140: 57 41 52 52 41 4e 54 59 3b 20 77 69 74 68 6f 75 WARRANTY; withou
0150: 74 20 65 76 65 6e 20 74 68 65 20 69 6d 70 6c 69 t even the impli
0160: 65 64 20 77 61 72 72 61 6e 74 79 20 6f 66 0a 2a ed warranty of.*
0170: 2a 20 4d 45 52 43 48 41 4e 54 41 42 49 4c 49 54 * MERCHANTABILIT
0180: 59 20 6f 72 20 46 49 54 4e 45 53 53 20 46 4f 52 Y or FITNESS FOR
0190: 20 41 20 50 41 52 54 49 43 55 4c 41 52 20 50 55 A PARTICULAR PU
01a0: 52 50 4f 53 45 2e 20 20 53 65 65 20 74 68 65 20 RPOSE. See the
01b0: 47 4e 55 0a 2a 2a 20 47 65 6e 65 72 61 6c 20 50 GNU.** General P
01c0: 75 62 6c 69 63 20 4c 69 63 65 6e 73 65 20 66 6f ublic License fo
01d0: 72 20 6d 6f 72 65 20 64 65 74 61 69 6c 73 2e 0a r more details..
01e0: 2a 2a 20 0a 2a 2a 20 59 6f 75 20 73 68 6f 75 6c ** .** You shoul
01f0: 64 20 68 61 76 65 20 72 65 63 65 69 76 65 64 20 d have received
0200: 61 20 63 6f 70 79 20 6f 66 20 74 68 65 20 47 4e a copy of the GN
0210: 55 20 47 65 6e 65 72 61 6c 20 50 75 62 6c 69 63 U General Public
0220: 0a 2a 2a 20 4c 69 63 65 6e 73 65 20 61 6c 6f 6e .** License alon
0230: 67 20 77 69 74 68 20 74 68 69 73 20 6c 69 62 72 g with this libr
0240: 61 72 79 3b 20 69 66 20 6e 6f 74 2c 20 77 72 69 ary; if not, wri
0250: 74 65 20 74 6f 20 74 68 65 0a 2a 2a 20 46 72 65 te to the.** Fre
0260: 65 20 53 6f 66 74 77 61 72 65 20 46 6f 75 6e 64 e Software Found
0270: 61 74 69 6f 6e 2c 20 49 6e 63 2e 2c 20 35 39 20 ation, Inc., 59
0280: 54 65 6d 70 6c 65 20 50 6c 61 63 65 20 2d 20 53 Temple Place - S
0290: 75 69 74 65 20 33 33 30 2c 0a 2a 2a 20 42 6f 73 uite 330,.** Bos
02a0: 74 6f 6e 2c 20 4d 41 20 20 30 32 31 31 31 2d 31 ton, MA 02111-1
02b0: 33 30 37 2c 20 55 53 41 2e 0a 2a 2a 0a 2a 2a 20 307, USA..**.**
02c0: 41 75 74 68 6f 72 20 63 6f 6e 74 61 63 74 20 69 Author contact i
02d0: 6e 66 6f 72 6d 61 74 69 6f 6e 3a 0a 2a 2a 20 20 nformation:.**
02e0: 20 64 72 68 40 68 77 61 63 69 2e 63 6f 6d 0a 2a drh@hwaci.com.*
02f0: 2a 20 20 20 68 74 74 70 3a 2f 2f 77 77 77 2e 68 * http://www.h
0300: 77 61 63 69 2e 63 6f 6d 2f 64 72 68 2f 0a 2a 2a waci.com/drh/.**
0310: 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a .***************
0320: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0330: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0340: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0350: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0360: 0a 2a 2a 0a 2a 2a 20 54 68 69 73 20 66 69 6c 65 .**.** This file
0370: 20 63 6f 6e 74 61 69 6e 73 20 63 6f 64 65 20 75 contains code u
0380: 73 65 64 20 74 6f 20 72 65 62 75 69 6c 64 20 74 sed to rebuild t
0390: 68 65 20 64 61 74 61 62 61 73 65 2e 0a 2a 2f 0a he database..*/.
03a0: 23 69 6e 63 6c 75 64 65 20 22 63 6f 6e 66 69 67 #include "config
03b0: 2e 68 22 0a 23 69 6e 63 6c 75 64 65 20 22 72 65 .h".#include "re
03c0: 62 75 69 6c 64 2e 68 22 0a 23 69 6e 63 6c 75 64 build.h".#includ
03d0: 65 20 3c 61 73 73 65 72 74 2e 68 3e 0a 0a 2f 2a e <assert.h>../*
03e0: 0a 2a 2a 20 43 6f 72 65 20 66 75 6e 63 74 69 6f .** Core functio
03f0: 6e 20 74 6f 20 72 65 62 75 69 6c 64 20 74 68 65 n to rebuild the
0400: 20 69 6e 66 6f 6d 72 61 74 69 6f 6e 20 69 6e 20 infomration in
0410: 74 68 65 20 64 65 72 69 76 65 64 20 74 61 62 6c the derived tabl
0420: 65 73 20 6f 66 20 61 0a 2a 2a 20 66 6f 73 73 69 es of a.** fossi
0430: 6c 20 72 65 70 6f 73 69 74 6f 72 79 20 66 72 6f l repository fro
0440: 6d 20 74 68 65 20 62 6c 6f 62 73 2e 20 54 68 69 m the blobs. Thi
0450: 73 20 66 75 6e 63 74 69 6f 6e 20 69 73 20 73 68 s function is sh
0460: 61 72 65 64 20 62 65 74 77 65 65 6e 0a 2a 2a 20 ared between.**
0470: 27 72 65 62 75 69 6c 64 5f 64 61 74 61 62 61 73 'rebuild_databas
0480: 65 27 20 28 27 72 65 62 75 69 6c 64 27 29 20 61 e' ('rebuild') a
0490: 6e 64 20 27 72 65 63 6f 6e 73 74 72 75 63 74 5f nd 'reconstruct_
04a0: 63 6d 64 27 0a 2a 2a 20 28 27 72 65 63 6f 6e 73 cmd'.** ('recons
04b0: 74 72 75 63 74 27 29 2c 20 62 6f 74 68 20 6f 66 truct'), both of
04c0: 20 77 68 69 63 68 20 68 61 76 65 20 74 6f 20 72 which have to r
04d0: 65 67 65 6e 65 72 61 74 65 20 74 68 69 73 20 69 egenerate this i
04e0: 6e 66 6f 72 6d 61 74 69 6f 6e 0a 2a 2a 20 66 72 nformation.** fr
04f0: 6f 6d 20 73 63 72 61 74 63 68 2e 0a 2a 2f 0a 0a om scratch..*/..
0500: 69 6e 74 20 72 65 62 75 69 6c 64 5f 64 62 28 76 int rebuild_db(v
0510: 6f 69 64 29 7b 0a 20 20 53 74 6d 74 20 73 3b 0a oid){. Stmt s;.
0520: 20 20 69 6e 74 20 65 72 72 43 6e 74 20 3d 20 30 int errCnt = 0
0530: 3b 0a 20 20 63 68 61 72 20 2a 7a 54 61 62 6c 65 ;. char *zTable
0540: 3b 0a 0a 20 20 64 62 5f 6d 75 6c 74 69 5f 65 78 ;.. db_multi_ex
0550: 65 63 28 0a 20 20 20 20 22 43 52 45 41 54 45 20 ec(. "CREATE
0560: 49 4e 44 45 58 20 49 46 20 4e 4f 54 20 45 58 49 INDEX IF NOT EXI
0570: 53 54 53 20 64 65 6c 74 61 5f 69 31 20 4f 4e 20 STS delta_i1 ON
0580: 64 65 6c 74 61 28 73 72 63 69 64 29 3b 22 0a 20 delta(srcid);".
0590: 20 29 3b 0a 20 20 66 6f 72 28 3b 3b 29 7b 0a 20 );. for(;;){.
05a0: 20 20 20 7a 54 61 62 6c 65 20 3d 20 64 62 5f 74 zTable = db_t
05b0: 65 78 74 28 30 2c 0a 20 20 20 20 20 20 20 22 53 ext(0,. "S
05c0: 45 4c 45 43 54 20 6e 61 6d 65 20 46 52 4f 4d 20 ELECT name FROM
05d0: 73 71 6c 69 74 65 5f 6d 61 73 74 65 72 22 0a 20 sqlite_master".
05e0: 20 20 20 20 20 20 22 20 57 48 45 52 45 20 74 79 " WHERE ty
05f0: 70 65 3d 27 74 61 62 6c 65 27 22 0a 20 20 20 20 pe='table'".
0600: 20 20 20 22 20 41 4e 44 20 6e 61 6d 65 20 4e 4f " AND name NO
0610: 54 20 49 4e 20 28 27 62 6c 6f 62 27 2c 27 64 65 T IN ('blob','de
0620: 6c 74 61 27 2c 27 72 63 76 66 72 6f 6d 27 2c 27 lta','rcvfrom','
0630: 75 73 65 72 27 2c 27 63 6f 6e 66 69 67 27 29 22 user','config')"
0640: 29 3b 0a 20 20 20 20 69 66 28 20 7a 54 61 62 6c );. if( zTabl
0650: 65 3d 3d 30 20 29 20 62 72 65 61 6b 3b 0a 20 20 e==0 ) break;.
0660: 20 20 64 62 5f 6d 75 6c 74 69 5f 65 78 65 63 28 db_multi_exec(
0670: 22 44 52 4f 50 20 54 41 42 4c 45 20 25 51 22 2c "DROP TABLE %Q",
0680: 20 7a 54 61 62 6c 65 29 3b 0a 20 20 20 20 66 72 zTable);. fr
0690: 65 65 28 7a 54 61 62 6c 65 29 3b 0a 20 20 7d 0a ee(zTable);. }.
06a0: 20 20 64 62 5f 6d 75 6c 74 69 5f 65 78 65 63 28 db_multi_exec(
06b0: 7a 52 65 70 6f 73 69 74 6f 72 79 53 63 68 65 6d zRepositorySchem
06c0: 61 32 29 3b 0a 0a 20 20 64 62 5f 6d 75 6c 74 69 a2);.. db_multi
06d0: 5f 65 78 65 63 28 22 49 4e 53 45 52 54 20 49 4e _exec("INSERT IN
06e0: 54 4f 20 75 6e 63 6c 75 73 74 65 72 65 64 20 53 TO unclustered S
06f0: 45 4c 45 43 54 20 72 69 64 20 46 52 4f 4d 20 62 ELECT rid FROM b
0700: 6c 6f 62 22 29 3b 0a 20 20 64 62 5f 6d 75 6c 74 lob");. db_mult
0710: 69 5f 65 78 65 63 28 0a 20 20 20 20 22 44 45 4c i_exec(. "DEL
0720: 45 54 45 20 46 52 4f 4d 20 63 6f 6e 66 69 67 20 ETE FROM config
0730: 57 48 45 52 45 20 6e 61 6d 65 20 49 4e 20 28 27 WHERE name IN ('
0740: 72 65 6d 6f 74 65 2d 63 6f 64 65 27 2c 20 27 72 remote-code', 'r
0750: 65 6d 6f 74 65 2d 6d 61 78 69 64 27 29 22 0a 20 emote-maxid')".
0760: 20 29 3b 0a 20 20 64 62 5f 70 72 65 70 61 72 65 );. db_prepare
0770: 28 26 73 2c 20 22 53 45 4c 45 43 54 20 72 69 64 (&s, "SELECT rid
0780: 2c 20 73 69 7a 65 20 46 52 4f 4d 20 62 6c 6f 62 , size FROM blob
0790: 22 29 3b 0a 20 20 77 68 69 6c 65 28 20 64 62 5f ");. while( db_
07a0: 73 74 65 70 28 26 73 29 3d 3d 53 51 4c 49 54 45 step(&s)==SQLITE
07b0: 5f 52 4f 57 20 29 7b 0a 20 20 20 20 69 6e 74 20 _ROW ){. int
07c0: 72 69 64 20 3d 20 64 62 5f 63 6f 6c 75 6d 6e 5f rid = db_column_
07d0: 69 6e 74 28 26 73 2c 20 30 29 3b 0a 20 20 20 20 int(&s, 0);.
07e0: 69 6e 74 20 73 69 7a 65 20 3d 20 64 62 5f 63 6f int size = db_co
07f0: 6c 75 6d 6e 5f 69 6e 74 28 26 73 2c 20 31 29 3b lumn_int(&s, 1);
0800: 0a 20 20 20 20 69 66 28 20 73 69 7a 65 3e 3d 30 . if( size>=0
0810: 20 29 7b 0a 20 20 20 20 20 20 42 6c 6f 62 20 63 ){. Blob c
0820: 6f 6e 74 65 6e 74 3b 0a 20 20 20 20 20 20 63 6f ontent;. co
0830: 6e 74 65 6e 74 5f 67 65 74 28 72 69 64 2c 20 26 ntent_get(rid, &
0840: 63 6f 6e 74 65 6e 74 29 3b 0a 20 20 20 20 20 20 content);.
0850: 6d 61 6e 69 66 65 73 74 5f 63 72 6f 73 73 6c 69 manifest_crossli
0860: 6e 6b 28 72 69 64 2c 20 26 63 6f 6e 74 65 6e 74 nk(rid, &content
0870: 29 3b 0a 20 20 20 20 20 20 62 6c 6f 62 5f 72 65 );. blob_re
0880: 73 65 74 28 26 63 6f 6e 74 65 6e 74 29 3b 0a 20 set(&content);.
0890: 20 20 20 7d 65 6c 73 65 7b 0a 20 20 20 20 20 20 }else{.
08a0: 64 62 5f 6d 75 6c 74 69 5f 65 78 65 63 28 22 49 db_multi_exec("I
08b0: 4e 53 45 52 54 20 49 4e 54 4f 20 70 68 61 6e 74 NSERT INTO phant
08c0: 6f 6d 20 56 41 4c 55 45 53 28 25 64 29 22 2c 20 om VALUES(%d)",
08d0: 72 69 64 29 3b 0a 20 20 20 20 7d 0a 20 20 7d 0a rid);. }. }.
08e0: 20 20 72 65 74 75 72 6e 20 65 72 72 43 6e 74 3b return errCnt;
08f0: 0a 7d 0a 0a 2f 2a 0a 2a 2a 20 43 4f 4d 4d 41 4e .}../*.** COMMAN
0900: 44 3a 20 20 72 65 62 75 69 6c 64 0a 2a 2a 0a 2a D: rebuild.**.*
0910: 2a 20 55 73 61 67 65 3a 20 25 66 6f 73 73 69 6c * Usage: %fossil
0920: 20 72 65 62 75 69 6c 64 20 52 45 50 4f 53 49 54 rebuild REPOSIT
0930: 4f 52 59 0a 2a 2a 0a 2a 2a 20 52 65 63 6f 6e 73 ORY.**.** Recons
0940: 74 72 75 63 74 20 74 68 65 20 6e 61 6d 65 64 20 truct the named
0950: 72 65 70 6f 73 69 74 6f 72 79 20 64 61 74 61 62 repository datab
0960: 61 73 65 20 66 72 6f 6d 20 74 68 65 20 63 6f 72 ase from the cor
0970: 65 0a 2a 2a 20 72 65 63 6f 72 64 73 2e 20 20 52 e.** records. R
0980: 75 6e 20 74 68 69 73 20 63 6f 6d 6d 61 6e 64 20 un this command
0990: 61 66 74 65 72 20 75 70 64 61 74 69 6e 67 20 74 after updating t
09a0: 68 65 20 66 6f 73 73 69 6c 0a 2a 2a 20 65 78 65 he fossil.** exe
09b0: 63 75 74 61 62 6c 65 20 69 6e 20 61 20 77 61 79 cutable in a way
09c0: 20 74 68 61 74 20 63 68 61 6e 67 65 73 20 74 68 that changes th
09d0: 65 20 64 61 74 61 62 61 73 65 20 73 63 68 65 6d e database schem
09e0: 61 2e 0a 2a 2f 0a 76 6f 69 64 20 72 65 62 75 69 a..*/.void rebui
09f0: 6c 64 5f 64 61 74 61 62 61 73 65 28 76 6f 69 64 ld_database(void
0a00: 29 7b 0a 20 20 69 6e 74 20 66 6f 72 63 65 46 6c ){. int forceFl
0a10: 61 67 3b 0a 20 20 69 6e 74 20 65 72 72 43 6e 74 ag;. int errCnt
0a20: 3b 0a 0a 20 20 66 6f 72 63 65 46 6c 61 67 20 3d ;.. forceFlag =
0a30: 20 66 69 6e 64 5f 6f 70 74 69 6f 6e 28 22 66 6f find_option("fo
0a40: 72 63 65 22 2c 22 66 22 2c 30 29 21 3d 30 3b 0a rce","f",0)!=0;.
0a50: 20 20 69 66 28 20 67 2e 61 72 67 63 21 3d 33 20 if( g.argc!=3
0a60: 29 7b 0a 20 20 20 20 75 73 61 67 65 28 22 52 45 ){. usage("RE
0a70: 50 4f 53 49 54 4f 52 59 2d 46 49 4c 45 4e 41 4d POSITORY-FILENAM
0a80: 45 22 29 3b 0a 20 20 7d 0a 20 20 64 62 5f 6f 70 E");. }. db_op
0a90: 65 6e 5f 72 65 70 6f 73 69 74 6f 72 79 28 67 2e en_repository(g.
0aa0: 61 72 67 76 5b 32 5d 29 3b 0a 20 20 64 62 5f 62 argv[2]);. db_b
0ab0: 65 67 69 6e 5f 74 72 61 6e 73 61 63 74 69 6f 6e egin_transaction
0ac0: 28 29 3b 0a 20 20 65 72 72 43 6e 74 20 3d 20 72 ();. errCnt = r
0ad0: 65 62 75 69 6c 64 5f 64 62 28 29 3b 0a 20 20 69 ebuild_db();. i
0ae0: 66 28 20 65 72 72 43 6e 74 20 26 26 20 21 66 6f f( errCnt && !fo
0af0: 72 63 65 46 6c 61 67 20 29 7b 0a 20 20 20 20 70 rceFlag ){. p
0b00: 72 69 6e 74 66 28 22 25 64 20 65 72 72 6f 72 73 rintf("%d errors
0b10: 2e 20 52 6f 6c 6c 69 6e 67 20 62 61 63 6b 20 63 . Rolling back c
0b20: 68 61 6e 67 65 73 2e 20 55 73 65 20 2d 2d 66 6f hanges. Use --fo
0b30: 72 63 65 20 74 6f 20 66 6f 72 63 65 20 61 20 63 rce to force a c
0b40: 6f 6d 6d 69 74 2e 5c 6e 22 2c 0a 20 20 20 20 20 ommit.\n",.
0b50: 20 20 20 20 20 20 20 65 72 72 43 6e 74 29 3b 0a errCnt);.
0b60: 20 20 20 20 64 62 5f 65 6e 64 5f 74 72 61 6e 73 db_end_trans
0b70: 61 63 74 69 6f 6e 28 31 29 3b 0a 20 20 7d 65 6c action(1);. }el
0b80: 73 65 7b 0a 20 20 20 20 64 62 5f 65 6e 64 5f 74 se{. db_end_t
0b90: 72 61 6e 73 61 63 74 69 6f 6e 28 30 29 3b 0a 20 ransaction(0);.
0ba0: 20 7d 0a 7d 0a }.}.