Artifact 45c4994360d49e70cdb7767c2a37cb0277dee72c:
File
src/rebuild.c
part of check-in
[e1c1877c99]
- Sync using clusters appears to work. More testing is needed before we go
live.
by
drh on
2007-09-08 16:01:28.
Also file
src/rebuild.c
part of check-in
[bbcb6326c9]
- Pulled in the navbar and timeline changes.
by
aku on
2007-09-17 00:58:51.
0000: 2f 2a 0a 2a 2a 20 43 6f 70 79 72 69 67 68 74 20 /*.** Copyright
0010: 28 63 29 20 32 30 30 37 20 44 2e 20 52 69 63 68 (c) 2007 D. Rich
0020: 61 72 64 20 48 69 70 70 0a 2a 2a 0a 2a 2a 20 54 ard Hipp.**.** T
0030: 68 69 73 20 70 72 6f 67 72 61 6d 20 69 73 20 66 his program is f
0040: 72 65 65 20 73 6f 66 74 77 61 72 65 3b 20 79 6f ree software; yo
0050: 75 20 63 61 6e 20 72 65 64 69 73 74 72 69 62 75 u can redistribu
0060: 74 65 20 69 74 20 61 6e 64 2f 6f 72 0a 2a 2a 20 te it and/or.**
0070: 6d 6f 64 69 66 79 20 69 74 20 75 6e 64 65 72 20 modify it under
0080: 74 68 65 20 74 65 72 6d 73 20 6f 66 20 74 68 65 the terms of the
0090: 20 47 4e 55 20 47 65 6e 65 72 61 6c 20 50 75 62 GNU General Pub
00a0: 6c 69 63 0a 2a 2a 20 4c 69 63 65 6e 73 65 20 76 lic.** License v
00b0: 65 72 73 69 6f 6e 20 32 20 61 73 20 70 75 62 6c ersion 2 as publ
00c0: 69 73 68 65 64 20 62 79 20 74 68 65 20 46 72 65 ished by the Fre
00d0: 65 20 53 6f 66 74 77 61 72 65 20 46 6f 75 6e 64 e Software Found
00e0: 61 74 69 6f 6e 2e 0a 2a 2a 0a 2a 2a 20 54 68 69 ation..**.** Thi
00f0: 73 20 70 72 6f 67 72 61 6d 20 69 73 20 64 69 73 s program is dis
0100: 74 72 69 62 75 74 65 64 20 69 6e 20 74 68 65 20 tributed in the
0110: 68 6f 70 65 20 74 68 61 74 20 69 74 20 77 69 6c hope that it wil
0120: 6c 20 62 65 20 75 73 65 66 75 6c 2c 0a 2a 2a 20 l be useful,.**
0130: 62 75 74 20 57 49 54 48 4f 55 54 20 41 4e 59 20 but WITHOUT ANY
0140: 57 41 52 52 41 4e 54 59 3b 20 77 69 74 68 6f 75 WARRANTY; withou
0150: 74 20 65 76 65 6e 20 74 68 65 20 69 6d 70 6c 69 t even the impli
0160: 65 64 20 77 61 72 72 61 6e 74 79 20 6f 66 0a 2a ed warranty of.*
0170: 2a 20 4d 45 52 43 48 41 4e 54 41 42 49 4c 49 54 * MERCHANTABILIT
0180: 59 20 6f 72 20 46 49 54 4e 45 53 53 20 46 4f 52 Y or FITNESS FOR
0190: 20 41 20 50 41 52 54 49 43 55 4c 41 52 20 50 55 A PARTICULAR PU
01a0: 52 50 4f 53 45 2e 20 20 53 65 65 20 74 68 65 20 RPOSE. See the
01b0: 47 4e 55 0a 2a 2a 20 47 65 6e 65 72 61 6c 20 50 GNU.** General P
01c0: 75 62 6c 69 63 20 4c 69 63 65 6e 73 65 20 66 6f ublic License fo
01d0: 72 20 6d 6f 72 65 20 64 65 74 61 69 6c 73 2e 0a r more details..
01e0: 2a 2a 20 0a 2a 2a 20 59 6f 75 20 73 68 6f 75 6c ** .** You shoul
01f0: 64 20 68 61 76 65 20 72 65 63 65 69 76 65 64 20 d have received
0200: 61 20 63 6f 70 79 20 6f 66 20 74 68 65 20 47 4e a copy of the GN
0210: 55 20 47 65 6e 65 72 61 6c 20 50 75 62 6c 69 63 U General Public
0220: 0a 2a 2a 20 4c 69 63 65 6e 73 65 20 61 6c 6f 6e .** License alon
0230: 67 20 77 69 74 68 20 74 68 69 73 20 6c 69 62 72 g with this libr
0240: 61 72 79 3b 20 69 66 20 6e 6f 74 2c 20 77 72 69 ary; if not, wri
0250: 74 65 20 74 6f 20 74 68 65 0a 2a 2a 20 46 72 65 te to the.** Fre
0260: 65 20 53 6f 66 74 77 61 72 65 20 46 6f 75 6e 64 e Software Found
0270: 61 74 69 6f 6e 2c 20 49 6e 63 2e 2c 20 35 39 20 ation, Inc., 59
0280: 54 65 6d 70 6c 65 20 50 6c 61 63 65 20 2d 20 53 Temple Place - S
0290: 75 69 74 65 20 33 33 30 2c 0a 2a 2a 20 42 6f 73 uite 330,.** Bos
02a0: 74 6f 6e 2c 20 4d 41 20 20 30 32 31 31 31 2d 31 ton, MA 02111-1
02b0: 33 30 37 2c 20 55 53 41 2e 0a 2a 2a 0a 2a 2a 20 307, USA..**.**
02c0: 41 75 74 68 6f 72 20 63 6f 6e 74 61 63 74 20 69 Author contact i
02d0: 6e 66 6f 72 6d 61 74 69 6f 6e 3a 0a 2a 2a 20 20 nformation:.**
02e0: 20 64 72 68 40 68 77 61 63 69 2e 63 6f 6d 0a 2a drh@hwaci.com.*
02f0: 2a 20 20 20 68 74 74 70 3a 2f 2f 77 77 77 2e 68 * http://www.h
0300: 77 61 63 69 2e 63 6f 6d 2f 64 72 68 2f 0a 2a 2a waci.com/drh/.**
0310: 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a .***************
0320: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0330: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0340: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0350: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0360: 0a 2a 2a 0a 2a 2a 20 54 68 69 73 20 66 69 6c 65 .**.** This file
0370: 20 63 6f 6e 74 61 69 6e 73 20 63 6f 64 65 20 75 contains code u
0380: 73 65 64 20 74 6f 20 72 65 62 75 69 6c 64 20 74 sed to rebuild t
0390: 68 65 20 64 61 74 61 62 61 73 65 2e 0a 2a 2f 0a he database..*/.
03a0: 23 69 6e 63 6c 75 64 65 20 22 63 6f 6e 66 69 67 #include "config
03b0: 2e 68 22 0a 23 69 6e 63 6c 75 64 65 20 22 72 65 .h".#include "re
03c0: 62 75 69 6c 64 2e 68 22 0a 23 69 6e 63 6c 75 64 build.h".#includ
03d0: 65 20 3c 61 73 73 65 72 74 2e 68 3e 0a 0a 2f 2a e <assert.h>../*
03e0: 0a 2a 2a 20 43 6f 72 65 20 66 75 6e 63 74 69 6f .** Core functio
03f0: 6e 20 74 6f 20 72 65 62 75 69 6c 64 20 74 68 65 n to rebuild the
0400: 20 69 6e 66 6f 6d 72 61 74 69 6f 6e 20 69 6e 20 infomration in
0410: 74 68 65 20 64 65 72 69 76 65 64 20 74 61 62 6c the derived tabl
0420: 65 73 20 6f 66 20 61 0a 2a 2a 20 66 6f 73 73 69 es of a.** fossi
0430: 6c 20 72 65 70 6f 73 69 74 6f 72 79 20 66 72 6f l repository fro
0440: 6d 20 74 68 65 20 62 6c 6f 62 73 2e 20 54 68 69 m the blobs. Thi
0450: 73 20 66 75 6e 63 74 69 6f 6e 20 69 73 20 73 68 s function is sh
0460: 61 72 65 64 20 62 65 74 77 65 65 6e 0a 2a 2a 20 ared between.**
0470: 27 72 65 62 75 69 6c 64 5f 64 61 74 61 62 61 73 'rebuild_databas
0480: 65 27 20 28 27 72 65 62 75 69 6c 64 27 29 20 61 e' ('rebuild') a
0490: 6e 64 20 27 72 65 63 6f 6e 73 74 72 75 63 74 5f nd 'reconstruct_
04a0: 63 6d 64 27 0a 2a 2a 20 28 27 72 65 63 6f 6e 73 cmd'.** ('recons
04b0: 74 72 75 63 74 27 29 2c 20 62 6f 74 68 20 6f 66 truct'), both of
04c0: 20 77 68 69 63 68 20 68 61 76 65 20 74 6f 20 72 which have to r
04d0: 65 67 65 6e 65 72 61 74 65 20 74 68 69 73 20 69 egenerate this i
04e0: 6e 66 6f 72 6d 61 74 69 6f 6e 0a 2a 2a 20 66 72 nformation.** fr
04f0: 6f 6d 20 73 63 72 61 74 63 68 2e 0a 2a 2f 0a 0a om scratch..*/..
0500: 69 6e 74 20 72 65 62 75 69 6c 64 5f 64 62 28 76 int rebuild_db(v
0510: 6f 69 64 29 7b 0a 20 20 53 74 6d 74 20 73 3b 0a oid){. Stmt s;.
0520: 20 20 69 6e 74 20 65 72 72 43 6e 74 20 3d 20 30 int errCnt = 0
0530: 3b 0a 20 20 63 68 61 72 20 2a 7a 54 61 62 6c 65 ;. char *zTable
0540: 3b 0a 0a 20 20 64 62 5f 6d 75 6c 74 69 5f 65 78 ;.. db_multi_ex
0550: 65 63 28 0a 20 20 20 20 22 43 52 45 41 54 45 20 ec(. "CREATE
0560: 49 4e 44 45 58 20 49 46 20 4e 4f 54 20 45 58 49 INDEX IF NOT EXI
0570: 53 54 53 20 64 65 6c 74 61 5f 69 31 20 4f 4e 20 STS delta_i1 ON
0580: 64 65 6c 74 61 28 73 72 63 69 64 29 3b 22 0a 20 delta(srcid);".
0590: 20 29 3b 0a 20 20 66 6f 72 28 3b 3b 29 7b 0a 20 );. for(;;){.
05a0: 20 20 20 7a 54 61 62 6c 65 20 3d 20 64 62 5f 74 zTable = db_t
05b0: 65 78 74 28 30 2c 0a 20 20 20 20 20 20 20 22 53 ext(0,. "S
05c0: 45 4c 45 43 54 20 6e 61 6d 65 20 46 52 4f 4d 20 ELECT name FROM
05d0: 73 71 6c 69 74 65 5f 6d 61 73 74 65 72 22 0a 20 sqlite_master".
05e0: 20 20 20 20 20 20 22 20 57 48 45 52 45 20 74 79 " WHERE ty
05f0: 70 65 3d 27 74 61 62 6c 65 27 22 0a 20 20 20 20 pe='table'".
0600: 20 20 20 22 20 41 4e 44 20 6e 61 6d 65 20 4e 4f " AND name NO
0610: 54 20 49 4e 20 28 27 62 6c 6f 62 27 2c 27 64 65 T IN ('blob','de
0620: 6c 74 61 27 2c 27 72 63 76 66 72 6f 6d 27 2c 27 lta','rcvfrom','
0630: 75 73 65 72 27 2c 27 63 6f 6e 66 69 67 27 29 22 user','config')"
0640: 29 3b 0a 20 20 20 20 69 66 28 20 7a 54 61 62 6c );. if( zTabl
0650: 65 3d 3d 30 20 29 20 62 72 65 61 6b 3b 0a 20 20 e==0 ) break;.
0660: 20 20 64 62 5f 6d 75 6c 74 69 5f 65 78 65 63 28 db_multi_exec(
0670: 22 44 52 4f 50 20 54 41 42 4c 45 20 25 51 22 2c "DROP TABLE %Q",
0680: 20 7a 54 61 62 6c 65 29 3b 0a 20 20 20 20 66 72 zTable);. fr
0690: 65 65 28 7a 54 61 62 6c 65 29 3b 0a 20 20 7d 0a ee(zTable);. }.
06a0: 20 20 64 62 5f 6d 75 6c 74 69 5f 65 78 65 63 28 db_multi_exec(
06b0: 7a 52 65 70 6f 73 69 74 6f 72 79 53 63 68 65 6d zRepositorySchem
06c0: 61 32 29 3b 0a 0a 20 20 64 62 5f 6d 75 6c 74 69 a2);.. db_multi
06d0: 5f 65 78 65 63 28 22 49 4e 53 45 52 54 20 49 4e _exec("INSERT IN
06e0: 54 4f 20 75 6e 63 6c 75 73 74 65 72 65 64 20 53 TO unclustered S
06f0: 45 4c 45 43 54 20 72 69 64 20 46 52 4f 4d 20 62 ELECT rid FROM b
0700: 6c 6f 62 22 29 3b 0a 20 20 64 62 5f 6d 75 6c 74 lob");. db_mult
0710: 69 5f 65 78 65 63 28 0a 20 20 20 20 22 44 45 4c i_exec(. "DEL
0720: 45 54 45 20 46 52 4f 4d 20 63 6f 6e 66 69 67 20 ETE FROM config
0730: 57 48 45 52 45 20 6e 61 6d 65 20 49 4e 20 28 27 WHERE name IN ('
0740: 72 65 6d 6f 74 65 2d 63 6f 64 65 27 2c 20 27 72 remote-code', 'r
0750: 65 6d 6f 74 65 2d 6d 61 78 69 64 27 29 22 0a 20 emote-maxid')".
0760: 20 29 3b 0a 20 20 64 62 5f 70 72 65 70 61 72 65 );. db_prepare
0770: 28 26 73 2c 20 22 53 45 4c 45 43 54 20 72 69 64 (&s, "SELECT rid
0780: 2c 20 73 69 7a 65 20 46 52 4f 4d 20 62 6c 6f 62 , size FROM blob
0790: 22 29 3b 0a 20 20 77 68 69 6c 65 28 20 64 62 5f ");. while( db_
07a0: 73 74 65 70 28 26 73 29 3d 3d 53 51 4c 49 54 45 step(&s)==SQLITE
07b0: 5f 52 4f 57 20 29 7b 0a 20 20 20 20 69 6e 74 20 _ROW ){. int
07c0: 72 69 64 20 3d 20 64 62 5f 63 6f 6c 75 6d 6e 5f rid = db_column_
07d0: 69 6e 74 28 26 73 2c 20 30 29 3b 0a 20 20 20 20 int(&s, 0);.
07e0: 69 6e 74 20 73 69 7a 65 20 3d 20 64 62 5f 63 6f int size = db_co
07f0: 6c 75 6d 6e 5f 69 6e 74 28 26 73 2c 20 31 29 3b lumn_int(&s, 1);
0800: 0a 20 20 20 20 69 66 28 20 73 69 7a 65 3e 3d 30 . if( size>=0
0810: 20 29 7b 0a 20 20 20 20 20 20 42 6c 6f 62 20 63 ){. Blob c
0820: 6f 6e 74 65 6e 74 3b 0a 20 20 20 20 20 20 63 6f ontent;. co
0830: 6e 74 65 6e 74 5f 67 65 74 28 72 69 64 2c 20 26 ntent_get(rid, &
0840: 63 6f 6e 74 65 6e 74 29 3b 0a 20 20 20 20 20 20 content);.
0850: 6d 61 6e 69 66 65 73 74 5f 63 72 6f 73 73 6c 69 manifest_crossli
0860: 6e 6b 28 72 69 64 2c 20 26 63 6f 6e 74 65 6e 74 nk(rid, &content
0870: 29 3b 0a 20 20 20 20 20 20 62 6c 6f 62 5f 72 65 );. blob_re
0880: 73 65 74 28 26 63 6f 6e 74 65 6e 74 29 3b 0a 20 set(&content);.
0890: 20 20 20 7d 65 6c 73 65 7b 0a 20 20 20 20 20 20 }else{.
08a0: 64 62 5f 6d 75 6c 74 69 5f 65 78 65 63 28 22 49 db_multi_exec("I
08b0: 4e 53 45 52 54 20 4f 52 20 49 47 4e 4f 52 45 20 NSERT OR IGNORE
08c0: 49 4e 54 4f 20 70 68 61 6e 74 6f 6d 20 56 41 4c INTO phantom VAL
08d0: 55 45 53 28 25 64 29 22 2c 20 72 69 64 29 3b 0a UES(%d)", rid);.
08e0: 20 20 20 20 7d 0a 20 20 7d 0a 20 20 72 65 74 75 }. }. retu
08f0: 72 6e 20 65 72 72 43 6e 74 3b 0a 7d 0a 0a 2f 2a rn errCnt;.}../*
0900: 0a 2a 2a 20 43 4f 4d 4d 41 4e 44 3a 20 20 72 65 .** COMMAND: re
0910: 62 75 69 6c 64 0a 2a 2a 0a 2a 2a 20 55 73 61 67 build.**.** Usag
0920: 65 3a 20 25 66 6f 73 73 69 6c 20 72 65 62 75 69 e: %fossil rebui
0930: 6c 64 20 52 45 50 4f 53 49 54 4f 52 59 0a 2a 2a ld REPOSITORY.**
0940: 0a 2a 2a 20 52 65 63 6f 6e 73 74 72 75 63 74 20 .** Reconstruct
0950: 74 68 65 20 6e 61 6d 65 64 20 72 65 70 6f 73 69 the named reposi
0960: 74 6f 72 79 20 64 61 74 61 62 61 73 65 20 66 72 tory database fr
0970: 6f 6d 20 74 68 65 20 63 6f 72 65 0a 2a 2a 20 72 om the core.** r
0980: 65 63 6f 72 64 73 2e 20 20 52 75 6e 20 74 68 69 ecords. Run thi
0990: 73 20 63 6f 6d 6d 61 6e 64 20 61 66 74 65 72 20 s command after
09a0: 75 70 64 61 74 69 6e 67 20 74 68 65 20 66 6f 73 updating the fos
09b0: 73 69 6c 0a 2a 2a 20 65 78 65 63 75 74 61 62 6c sil.** executabl
09c0: 65 20 69 6e 20 61 20 77 61 79 20 74 68 61 74 20 e in a way that
09d0: 63 68 61 6e 67 65 73 20 74 68 65 20 64 61 74 61 changes the data
09e0: 62 61 73 65 20 73 63 68 65 6d 61 2e 0a 2a 2f 0a base schema..*/.
09f0: 76 6f 69 64 20 72 65 62 75 69 6c 64 5f 64 61 74 void rebuild_dat
0a00: 61 62 61 73 65 28 76 6f 69 64 29 7b 0a 20 20 69 abase(void){. i
0a10: 6e 74 20 66 6f 72 63 65 46 6c 61 67 3b 0a 20 20 nt forceFlag;.
0a20: 69 6e 74 20 65 72 72 43 6e 74 3b 0a 0a 20 20 66 int errCnt;.. f
0a30: 6f 72 63 65 46 6c 61 67 20 3d 20 66 69 6e 64 5f orceFlag = find_
0a40: 6f 70 74 69 6f 6e 28 22 66 6f 72 63 65 22 2c 22 option("force","
0a50: 66 22 2c 30 29 21 3d 30 3b 0a 20 20 69 66 28 20 f",0)!=0;. if(
0a60: 67 2e 61 72 67 63 21 3d 33 20 29 7b 0a 20 20 20 g.argc!=3 ){.
0a70: 20 75 73 61 67 65 28 22 52 45 50 4f 53 49 54 4f usage("REPOSITO
0a80: 52 59 2d 46 49 4c 45 4e 41 4d 45 22 29 3b 0a 20 RY-FILENAME");.
0a90: 20 7d 0a 20 20 64 62 5f 6f 70 65 6e 5f 72 65 70 }. db_open_rep
0aa0: 6f 73 69 74 6f 72 79 28 67 2e 61 72 67 76 5b 32 ository(g.argv[2
0ab0: 5d 29 3b 0a 20 20 64 62 5f 62 65 67 69 6e 5f 74 ]);. db_begin_t
0ac0: 72 61 6e 73 61 63 74 69 6f 6e 28 29 3b 0a 20 20 ransaction();.
0ad0: 65 72 72 43 6e 74 20 3d 20 72 65 62 75 69 6c 64 errCnt = rebuild
0ae0: 5f 64 62 28 29 3b 0a 20 20 69 66 28 20 65 72 72 _db();. if( err
0af0: 43 6e 74 20 26 26 20 21 66 6f 72 63 65 46 6c 61 Cnt && !forceFla
0b00: 67 20 29 7b 0a 20 20 20 20 70 72 69 6e 74 66 28 g ){. printf(
0b10: 22 25 64 20 65 72 72 6f 72 73 2e 20 52 6f 6c 6c "%d errors. Roll
0b20: 69 6e 67 20 62 61 63 6b 20 63 68 61 6e 67 65 73 ing back changes
0b30: 2e 20 55 73 65 20 2d 2d 66 6f 72 63 65 20 74 6f . Use --force to
0b40: 20 66 6f 72 63 65 20 61 20 63 6f 6d 6d 69 74 2e force a commit.
0b50: 5c 6e 22 2c 0a 20 20 20 20 20 20 20 20 20 20 20 \n",.
0b60: 20 65 72 72 43 6e 74 29 3b 0a 20 20 20 20 64 62 errCnt);. db
0b70: 5f 65 6e 64 5f 74 72 61 6e 73 61 63 74 69 6f 6e _end_transaction
0b80: 28 31 29 3b 0a 20 20 7d 65 6c 73 65 7b 0a 20 20 (1);. }else{.
0b90: 20 20 64 62 5f 65 6e 64 5f 74 72 61 6e 73 61 63 db_end_transac
0ba0: 74 69 6f 6e 28 30 29 3b 0a 20 20 7d 0a 7d 0a tion(0);. }.}.