0000: 2f 2a 0a 2a 2a 20 43 6f 70 79 72 69 67 68 74 20 /*.** Copyright
0010: 28 63 29 20 32 30 30 37 20 44 2e 20 52 69 63 68 (c) 2007 D. Rich
0020: 61 72 64 20 48 69 70 70 0a 2a 2a 0a 2a 2a 20 54 ard Hipp.**.** T
0030: 68 69 73 20 70 72 6f 67 72 61 6d 20 69 73 20 66 his program is f
0040: 72 65 65 20 73 6f 66 74 77 61 72 65 3b 20 79 6f ree software; yo
0050: 75 20 63 61 6e 20 72 65 64 69 73 74 72 69 62 75 u can redistribu
0060: 74 65 20 69 74 20 61 6e 64 2f 6f 72 0a 2a 2a 20 te it and/or.**
0070: 6d 6f 64 69 66 79 20 69 74 20 75 6e 64 65 72 20 modify it under
0080: 74 68 65 20 74 65 72 6d 73 20 6f 66 20 74 68 65 the terms of the
0090: 20 47 4e 55 20 47 65 6e 65 72 61 6c 20 50 75 62 GNU General Pub
00a0: 6c 69 63 0a 2a 2a 20 4c 69 63 65 6e 73 65 20 76 lic.** License v
00b0: 65 72 73 69 6f 6e 20 32 20 61 73 20 70 75 62 6c ersion 2 as publ
00c0: 69 73 68 65 64 20 62 79 20 74 68 65 20 46 72 65 ished by the Fre
00d0: 65 20 53 6f 66 74 77 61 72 65 20 46 6f 75 6e 64 e Software Found
00e0: 61 74 69 6f 6e 2e 0a 2a 2a 0a 2a 2a 20 54 68 69 ation..**.** Thi
00f0: 73 20 70 72 6f 67 72 61 6d 20 69 73 20 64 69 73 s program is dis
0100: 74 72 69 62 75 74 65 64 20 69 6e 20 74 68 65 20 tributed in the
0110: 68 6f 70 65 20 74 68 61 74 20 69 74 20 77 69 6c hope that it wil
0120: 6c 20 62 65 20 75 73 65 66 75 6c 2c 0a 2a 2a 20 l be useful,.**
0130: 62 75 74 20 57 49 54 48 4f 55 54 20 41 4e 59 20 but WITHOUT ANY
0140: 57 41 52 52 41 4e 54 59 3b 20 77 69 74 68 6f 75 WARRANTY; withou
0150: 74 20 65 76 65 6e 20 74 68 65 20 69 6d 70 6c 69 t even the impli
0160: 65 64 20 77 61 72 72 61 6e 74 79 20 6f 66 0a 2a ed warranty of.*
0170: 2a 20 4d 45 52 43 48 41 4e 54 41 42 49 4c 49 54 * MERCHANTABILIT
0180: 59 20 6f 72 20 46 49 54 4e 45 53 53 20 46 4f 52 Y or FITNESS FOR
0190: 20 41 20 50 41 52 54 49 43 55 4c 41 52 20 50 55 A PARTICULAR PU
01a0: 52 50 4f 53 45 2e 20 20 53 65 65 20 74 68 65 20 RPOSE. See the
01b0: 47 4e 55 0a 2a 2a 20 47 65 6e 65 72 61 6c 20 50 GNU.** General P
01c0: 75 62 6c 69 63 20 4c 69 63 65 6e 73 65 20 66 6f ublic License fo
01d0: 72 20 6d 6f 72 65 20 64 65 74 61 69 6c 73 2e 0a r more details..
01e0: 2a 2a 20 0a 2a 2a 20 59 6f 75 20 73 68 6f 75 6c ** .** You shoul
01f0: 64 20 68 61 76 65 20 72 65 63 65 69 76 65 64 20 d have received
0200: 61 20 63 6f 70 79 20 6f 66 20 74 68 65 20 47 4e a copy of the GN
0210: 55 20 47 65 6e 65 72 61 6c 20 50 75 62 6c 69 63 U General Public
0220: 0a 2a 2a 20 4c 69 63 65 6e 73 65 20 61 6c 6f 6e .** License alon
0230: 67 20 77 69 74 68 20 74 68 69 73 20 6c 69 62 72 g with this libr
0240: 61 72 79 3b 20 69 66 20 6e 6f 74 2c 20 77 72 69 ary; if not, wri
0250: 74 65 20 74 6f 20 74 68 65 0a 2a 2a 20 46 72 65 te to the.** Fre
0260: 65 20 53 6f 66 74 77 61 72 65 20 46 6f 75 6e 64 e Software Found
0270: 61 74 69 6f 6e 2c 20 49 6e 63 2e 2c 20 35 39 20 ation, Inc., 59
0280: 54 65 6d 70 6c 65 20 50 6c 61 63 65 20 2d 20 53 Temple Place - S
0290: 75 69 74 65 20 33 33 30 2c 0a 2a 2a 20 42 6f 73 uite 330,.** Bos
02a0: 74 6f 6e 2c 20 4d 41 20 20 30 32 31 31 31 2d 31 ton, MA 02111-1
02b0: 33 30 37 2c 20 55 53 41 2e 0a 2a 2a 0a 2a 2a 20 307, USA..**.**
02c0: 41 75 74 68 6f 72 20 63 6f 6e 74 61 63 74 20 69 Author contact i
02d0: 6e 66 6f 72 6d 61 74 69 6f 6e 3a 0a 2a 2a 20 20 nformation:.**
02e0: 20 64 72 68 40 68 77 61 63 69 2e 63 6f 6d 0a 2a drh@hwaci.com.*
02f0: 2a 20 20 20 68 74 74 70 3a 2f 2f 77 77 77 2e 68 * http://www.h
0300: 77 61 63 69 2e 63 6f 6d 2f 64 72 68 2f 0a 2a 2a waci.com/drh/.**
0310: 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a .***************
0320: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0330: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0340: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0350: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0360: 0a 2a 2a 0a 2a 2a 20 54 68 69 73 20 66 69 6c 65 .**.** This file
0370: 20 63 6f 6e 74 61 69 6e 73 20 63 6f 64 65 20 75 contains code u
0380: 73 65 64 20 74 6f 20 72 65 62 75 69 6c 64 20 74 sed to rebuild t
0390: 68 65 20 64 61 74 61 62 61 73 65 2e 0a 2a 2f 0a he database..*/.
03a0: 23 69 6e 63 6c 75 64 65 20 22 63 6f 6e 66 69 67 #include "config
03b0: 2e 68 22 0a 23 69 6e 63 6c 75 64 65 20 22 72 65 .h".#include "re
03c0: 62 75 69 6c 64 2e 68 22 0a 23 69 6e 63 6c 75 64 build.h".#includ
03d0: 65 20 3c 61 73 73 65 72 74 2e 68 3e 0a 0a 2f 2a e <assert.h>../*
03e0: 0a 2a 2a 20 53 63 68 65 6d 61 20 63 68 61 6e 67 .** Schema chang
03f0: 65 73 0a 2a 2f 0a 73 74 61 74 69 63 20 63 6f 6e es.*/.static con
0400: 73 74 20 63 68 61 72 20 7a 53 63 68 65 6d 61 55 st char zSchemaU
0410: 70 64 61 74 65 73 5b 5d 20 3d 0a 40 20 2d 2d 20 pdates[] =.@ --
0420: 49 6e 64 65 78 20 6f 6e 20 74 68 65 20 64 65 6c Index on the del
0430: 74 61 20 74 61 62 6c 65 0a 40 20 2d 2d 0a 40 20 ta table.@ --.@
0440: 43 52 45 41 54 45 20 49 4e 44 45 58 20 49 46 20 CREATE INDEX IF
0450: 4e 4f 54 20 45 58 49 53 54 53 20 64 65 6c 74 61 NOT EXISTS delta
0460: 5f 69 31 20 4f 4e 20 64 65 6c 74 61 28 73 72 63 _i1 ON delta(src
0470: 69 64 29 3b 0a 40 0a 40 20 2d 2d 20 41 72 74 69 id);.@.@ -- Arti
0480: 66 61 63 74 73 20 74 68 61 74 20 73 68 6f 75 6c facts that shoul
0490: 64 20 6e 6f 74 20 62 65 20 70 72 6f 63 65 73 73 d not be process
04a0: 65 64 20 61 72 65 20 69 64 65 6e 74 69 66 69 65 ed are identifie
04b0: 64 20 69 6e 20 74 68 65 0a 40 20 2d 2d 20 22 73 d in the.@ -- "s
04c0: 68 75 6e 22 20 74 61 62 6c 65 2e 20 20 41 72 74 hun" table. Art
04d0: 69 66 61 63 74 73 20 74 68 61 74 20 61 72 65 20 ifacts that are
04e0: 63 6f 6e 74 72 6f 6c 2d 66 69 6c 65 20 66 6f 72 control-file for
04f0: 67 65 72 69 65 73 20 6f 72 0a 40 20 2d 2d 20 73 geries or.@ -- s
0500: 70 61 6d 20 63 61 6e 20 62 65 20 73 68 75 6e 6e pam can be shunn
0510: 65 64 20 69 6e 20 6f 72 64 65 72 20 74 6f 20 70 ed in order to p
0520: 72 65 76 65 6e 74 20 74 68 65 6d 20 66 72 6f 6d revent them from
0530: 20 63 6f 6e 74 61 6d 69 6e 61 74 69 6e 67 0a 40 contaminating.@
0540: 20 2d 2d 20 74 68 65 20 72 65 70 6f 73 69 74 6f -- the reposito
0550: 72 79 2e 0a 40 20 2d 2d 0a 40 20 43 52 45 41 54 ry..@ --.@ CREAT
0560: 45 20 54 41 42 4c 45 20 49 46 20 4e 4f 54 20 45 E TABLE IF NOT E
0570: 58 49 53 54 53 20 73 68 75 6e 28 75 75 69 64 20 XISTS shun(uuid
0580: 55 4e 49 51 55 45 29 3b 0a 40 0a 40 20 2d 2d 20 UNIQUE);.@.@ --
0590: 41 6e 20 65 6e 74 72 79 20 69 6e 20 74 68 69 73 An entry in this
05a0: 20 74 61 62 6c 65 20 64 65 73 63 72 69 62 65 73 table describes
05b0: 20 61 20 64 61 74 61 62 61 73 65 20 71 75 65 72 a database quer
05c0: 79 20 74 68 61 74 20 67 65 6e 65 72 61 74 65 73 y that generates
05d0: 20 61 0a 40 20 2d 2d 20 74 61 62 6c 65 20 6f 66 a.@ -- table of
05e0: 20 74 69 63 6b 65 74 73 2e 0a 40 20 2d 2d 0a 40 tickets..@ --.@
05f0: 20 43 52 45 41 54 45 20 54 41 42 4c 45 20 49 46 CREATE TABLE IF
0600: 20 4e 4f 54 20 45 58 49 53 54 53 20 72 65 70 6f NOT EXISTS repo
0610: 72 74 66 6d 74 28 0a 40 20 20 20 20 72 6e 20 69 rtfmt(.@ rn i
0620: 6e 74 65 67 65 72 20 70 72 69 6d 61 72 79 20 6b nteger primary k
0630: 65 79 2c 20 20 2d 2d 20 52 65 70 6f 72 74 20 6e ey, -- Report n
0640: 75 6d 62 65 72 0a 40 20 20 20 20 6f 77 6e 65 72 umber.@ owner
0650: 20 74 65 78 74 2c 20 20 20 20 20 20 20 20 20 20 text,
0660: 20 20 20 20 2d 2d 20 4f 77 6e 65 72 20 6f 66 20 -- Owner of
0670: 74 68 69 73 20 72 65 70 6f 72 74 20 66 6f 72 6d this report form
0680: 61 74 20 28 6e 6f 74 20 75 73 65 64 29 0a 40 20 at (not used).@
0690: 20 20 20 74 69 74 6c 65 20 74 65 78 74 2c 20 20 title text,
06a0: 20 20 20 20 20 20 20 20 20 20 20 20 2d 2d 20 54 -- T
06b0: 69 74 6c 65 20 6f 66 20 74 68 69 73 20 72 65 70 itle of this rep
06c0: 6f 72 74 0a 40 20 20 20 20 63 6f 6c 73 20 74 65 ort.@ cols te
06d0: 78 74 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 xt,
06e0: 20 20 2d 2d 20 41 20 63 6f 6c 6f 72 2d 6b 65 79 -- A color-key
06f0: 20 73 70 65 63 69 66 69 63 61 74 69 6f 6e 0a 40 specification.@
0700: 20 20 20 20 73 71 6c 63 6f 64 65 20 74 65 78 74 sqlcode text
0710: 20 20 20 20 20 20 20 20 20 20 20 20 20 2d 2d 20 --
0720: 41 6e 20 53 51 4c 20 53 45 4c 45 43 54 20 73 74 An SQL SELECT st
0730: 61 74 65 6d 65 6e 74 20 66 6f 72 20 74 68 69 73 atement for this
0740: 20 72 65 70 6f 72 74 0a 40 20 29 3b 0a 3b 0a 0a report.@ );.;..
0750: 2f 2a 0a 2a 2a 20 56 61 72 69 61 62 6c 65 73 20 /*.** Variables
0760: 75 73 65 64 20 66 6f 72 20 70 72 6f 67 72 65 73 used for progres
0770: 73 20 69 6e 66 6f 72 6d 61 74 69 6f 6e 0a 2a 2f s information.*/
0780: 0a 73 74 61 74 69 63 20 69 6e 74 20 74 6f 74 61 .static int tota
0790: 6c 53 69 7a 65 3b 20 20 20 20 20 20 20 2f 2a 20 lSize; /*
07a0: 54 6f 74 61 6c 20 6e 75 6d 62 65 72 20 6f 66 20 Total number of
07b0: 61 72 74 69 66 61 63 74 73 20 74 6f 20 70 72 6f artifacts to pro
07c0: 63 65 73 73 20 2a 2f 0a 73 74 61 74 69 63 20 69 cess */.static i
07d0: 6e 74 20 70 72 6f 63 65 73 73 43 6e 74 3b 20 20 nt processCnt;
07e0: 20 20 20 20 2f 2a 20 4e 75 6d 62 65 72 20 70 72 /* Number pr
07f0: 6f 63 65 73 73 65 64 20 73 6f 20 66 61 72 20 2a ocessed so far *
0800: 2f 0a 73 74 61 74 69 63 20 69 6e 74 20 74 74 79 /.static int tty
0810: 4f 75 74 70 75 74 3b 20 20 20 20 20 20 20 2f 2a Output; /*
0820: 20 44 6f 20 70 72 6f 67 72 65 73 73 20 6f 75 74 Do progress out
0830: 70 75 74 20 2a 2f 0a 0a 2f 2a 0a 2a 2a 20 43 61 put */../*.** Ca
0840: 6c 6c 65 64 20 61 66 74 65 72 20 65 61 63 68 20 lled after each
0850: 61 72 74 69 66 61 63 74 20 69 73 20 70 72 6f 63 artifact is proc
0860: 65 73 73 65 64 0a 2a 2f 0a 73 74 61 74 69 63 20 essed.*/.static
0870: 76 6f 69 64 20 72 65 62 75 69 6c 64 5f 73 74 65 void rebuild_ste
0880: 70 5f 64 6f 6e 65 28 76 6f 69 64 29 7b 0a 20 20 p_done(void){.
0890: 69 66 28 20 74 74 79 4f 75 74 70 75 74 20 29 7b if( ttyOutput ){
08a0: 0a 20 20 20 20 70 72 6f 63 65 73 73 43 6e 74 2b . processCnt+
08b0: 2b 3b 0a 20 20 20 20 70 72 69 6e 74 66 28 22 25 +;. printf("%
08c0: 64 20 28 25 64 25 25 29 2e 2e 2e 5c 72 22 2c 20 d (%d%%)...\r",
08d0: 70 72 6f 63 65 73 73 43 6e 74 2c 20 28 70 72 6f processCnt, (pro
08e0: 63 65 73 73 43 6e 74 2a 31 30 30 2f 74 6f 74 61 cessCnt*100/tota
08f0: 6c 53 69 7a 65 29 29 3b 0a 20 20 20 20 66 66 6c lSize));. ffl
0900: 75 73 68 28 73 74 64 6f 75 74 29 3b 0a 20 20 7d ush(stdout);. }
0910: 0a 7d 0a 0a 2f 2a 0a 2a 2a 20 52 65 62 75 69 6c .}../*.** Rebuil
0920: 64 20 63 72 6f 73 73 2d 72 65 66 65 72 65 6e 63 d cross-referenc
0930: 69 6e 67 20 69 6e 66 6f 72 6d 61 74 69 6f 6e 20 ing information
0940: 66 6f 72 20 74 68 65 20 61 72 74 69 66 61 63 74 for the artifact
0950: 0a 2a 2a 20 72 69 64 20 77 69 74 68 20 63 6f 6e .** rid with con
0960: 74 65 6e 74 20 70 42 61 73 65 20 61 6e 64 20 61 tent pBase and a
0970: 6c 6c 20 6f 66 20 69 74 73 20 64 65 73 63 65 6e ll of its descen
0980: 64 61 6e 74 73 2e 20 20 54 68 69 73 0a 2a 2a 20 dants. This.**
0990: 72 6f 75 74 69 6e 65 20 63 6c 65 61 72 73 20 74 routine clears t
09a0: 68 65 20 63 6f 6e 74 65 6e 74 20 62 75 66 66 65 he content buffe
09b0: 72 20 62 65 66 6f 72 65 20 72 65 74 75 72 6e 69 r before returni
09c0: 6e 67 2e 0a 2a 2f 0a 73 74 61 74 69 63 20 76 6f ng..*/.static vo
09d0: 69 64 20 72 65 62 75 69 6c 64 5f 73 74 65 70 28 id rebuild_step(
09e0: 69 6e 74 20 72 69 64 2c 20 42 6c 6f 62 20 2a 70 int rid, Blob *p
09f0: 42 61 73 65 29 7b 0a 20 20 53 74 6d 74 20 71 31 Base){. Stmt q1
0a00: 3b 0a 20 20 42 61 67 20 63 68 69 6c 64 72 65 6e ;. Bag children
0a10: 3b 0a 20 20 42 6c 6f 62 20 63 6f 70 79 3b 0a 20 ;. Blob copy;.
0a20: 20 42 6c 6f 62 20 2a 70 55 73 65 3b 0a 20 20 69 Blob *pUse;. i
0a30: 6e 74 20 6e 43 68 69 6c 64 2c 20 69 2c 20 63 69 nt nChild, i, ci
0a40: 64 3b 0a 0a 20 20 2f 2a 20 46 69 6e 64 20 61 6c d;.. /* Find al
0a50: 6c 20 63 68 69 6c 64 72 65 6e 20 6f 66 20 61 72 l children of ar
0a60: 74 69 66 61 63 74 20 72 69 64 20 2a 2f 0a 20 20 tifact rid */.
0a70: 64 62 5f 70 72 65 70 61 72 65 28 26 71 31 2c 20 db_prepare(&q1,
0a80: 22 53 45 4c 45 43 54 20 72 69 64 20 46 52 4f 4d "SELECT rid FROM
0a90: 20 64 65 6c 74 61 20 57 48 45 52 45 20 73 72 63 delta WHERE src
0aa0: 69 64 3d 25 64 22 2c 20 72 69 64 29 3b 0a 20 20 id=%d", rid);.
0ab0: 62 61 67 5f 69 6e 69 74 28 26 63 68 69 6c 64 72 bag_init(&childr
0ac0: 65 6e 29 3b 0a 20 20 77 68 69 6c 65 28 20 64 62 en);. while( db
0ad0: 5f 73 74 65 70 28 26 71 31 29 3d 3d 53 51 4c 49 _step(&q1)==SQLI
0ae0: 54 45 5f 52 4f 57 20 29 7b 0a 20 20 20 20 62 61 TE_ROW ){. ba
0af0: 67 5f 69 6e 73 65 72 74 28 26 63 68 69 6c 64 72 g_insert(&childr
0b00: 65 6e 2c 20 64 62 5f 63 6f 6c 75 6d 6e 5f 69 6e en, db_column_in
0b10: 74 28 26 71 31 2c 20 30 29 29 3b 0a 20 20 7d 0a t(&q1, 0));. }.
0b20: 20 20 6e 43 68 69 6c 64 20 3d 20 62 61 67 5f 63 nChild = bag_c
0b30: 6f 75 6e 74 28 26 63 68 69 6c 64 72 65 6e 29 3b ount(&children);
0b40: 0a 20 20 64 62 5f 66 69 6e 61 6c 69 7a 65 28 26 . db_finalize(&
0b50: 71 31 29 3b 0a 0a 20 20 2f 2a 20 43 72 6f 73 73 q1);.. /* Cross
0b60: 6c 69 6e 6b 20 74 68 65 20 61 72 74 69 66 61 63 link the artifac
0b70: 74 20 2a 2f 0a 20 20 69 66 28 20 6e 43 68 69 6c t */. if( nChil
0b80: 64 3d 3d 30 20 29 7b 0a 20 20 20 20 70 55 73 65 d==0 ){. pUse
0b90: 20 3d 20 70 42 61 73 65 3b 0a 20 20 7d 65 6c 73 = pBase;. }els
0ba0: 65 7b 0a 20 20 20 20 62 6c 6f 62 5f 63 6f 70 79 e{. blob_copy
0bb0: 28 26 63 6f 70 79 2c 20 70 42 61 73 65 29 3b 0a (©, pBase);.
0bc0: 20 20 20 20 70 55 73 65 20 3d 20 26 63 6f 70 79 pUse = ©
0bd0: 3b 0a 20 20 7d 0a 20 20 6d 61 6e 69 66 65 73 74 ;. }. manifest
0be0: 5f 63 72 6f 73 73 6c 69 6e 6b 28 72 69 64 2c 20 _crosslink(rid,
0bf0: 70 55 73 65 29 3b 0a 20 20 62 6c 6f 62 5f 72 65 pUse);. blob_re
0c00: 73 65 74 28 70 55 73 65 29 3b 0a 0a 20 20 2f 2a set(pUse);.. /*
0c10: 20 43 61 6c 6c 20 61 6c 6c 20 63 68 69 6c 64 72 Call all childr
0c20: 65 6e 20 72 65 63 75 72 73 69 76 65 6c 79 20 2a en recursively *
0c30: 2f 0a 20 20 66 6f 72 28 63 69 64 3d 62 61 67 5f /. for(cid=bag_
0c40: 66 69 72 73 74 28 26 63 68 69 6c 64 72 65 6e 29 first(&children)
0c50: 2c 20 69 3d 31 3b 20 63 69 64 3b 20 63 69 64 3d , i=1; cid; cid=
0c60: 62 61 67 5f 6e 65 78 74 28 26 63 68 69 6c 64 72 bag_next(&childr
0c70: 65 6e 2c 20 63 69 64 29 2c 20 69 2b 2b 29 7b 0a en, cid), i++){.
0c80: 20 20 20 20 53 74 6d 74 20 71 32 3b 0a 20 20 20 Stmt q2;.
0c90: 20 69 6e 74 20 73 7a 3b 0a 20 20 20 20 69 66 28 int sz;. if(
0ca0: 20 6e 43 68 69 6c 64 3d 3d 69 20 29 7b 0a 20 20 nChild==i ){.
0cb0: 20 20 20 20 70 55 73 65 20 3d 20 70 42 61 73 65 pUse = pBase
0cc0: 3b 0a 20 20 20 20 7d 65 6c 73 65 7b 0a 20 20 20 ;. }else{.
0cd0: 20 20 20 62 6c 6f 62 5f 63 6f 70 79 28 26 63 6f blob_copy(&co
0ce0: 70 79 2c 20 70 42 61 73 65 29 3b 0a 20 20 20 20 py, pBase);.
0cf0: 20 20 70 55 73 65 20 3d 20 26 63 6f 70 79 3b 0a pUse = ©.
0d00: 20 20 20 20 7d 0a 20 20 20 20 64 62 5f 70 72 65 }. db_pre
0d10: 70 61 72 65 28 26 71 32 2c 20 22 53 45 4c 45 43 pare(&q2, "SELEC
0d20: 54 20 63 6f 6e 74 65 6e 74 2c 20 73 69 7a 65 20 T content, size
0d30: 46 52 4f 4d 20 62 6c 6f 62 20 57 48 45 52 45 20 FROM blob WHERE
0d40: 72 69 64 3d 25 64 22 2c 20 63 69 64 29 3b 0a 20 rid=%d", cid);.
0d50: 20 20 20 69 66 28 20 64 62 5f 73 74 65 70 28 26 if( db_step(&
0d60: 71 32 29 3d 3d 53 51 4c 49 54 45 5f 52 4f 57 20 q2)==SQLITE_ROW
0d70: 26 26 20 28 73 7a 20 3d 20 64 62 5f 63 6f 6c 75 && (sz = db_colu
0d80: 6d 6e 5f 69 6e 74 28 26 71 32 2c 31 29 29 3e 3d mn_int(&q2,1))>=
0d90: 30 20 29 7b 0a 20 20 20 20 20 20 42 6c 6f 62 20 0 ){. Blob
0da0: 64 65 6c 74 61 3b 0a 20 20 20 20 20 20 64 62 5f delta;. db_
0db0: 65 70 68 65 6d 65 72 61 6c 5f 62 6c 6f 62 28 26 ephemeral_blob(&
0dc0: 71 32 2c 20 30 2c 20 26 64 65 6c 74 61 29 3b 0a q2, 0, &delta);.
0dd0: 20 20 20 20 20 20 62 6c 6f 62 5f 75 6e 63 6f 6d blob_uncom
0de0: 70 72 65 73 73 28 26 64 65 6c 74 61 2c 20 26 64 press(&delta, &d
0df0: 65 6c 74 61 29 3b 0a 20 20 20 20 20 20 62 6c 6f elta);. blo
0e00: 62 5f 64 65 6c 74 61 5f 61 70 70 6c 79 28 70 55 b_delta_apply(pU
0e10: 73 65 2c 20 26 64 65 6c 74 61 2c 20 70 55 73 65 se, &delta, pUse
0e20: 29 3b 0a 20 20 20 20 20 20 62 6c 6f 62 5f 72 65 );. blob_re
0e30: 73 65 74 28 26 64 65 6c 74 61 29 3b 0a 20 20 20 set(&delta);.
0e40: 20 20 20 64 62 5f 66 69 6e 61 6c 69 7a 65 28 26 db_finalize(&
0e50: 71 32 29 3b 0a 20 20 20 20 20 20 72 65 62 75 69 q2);. rebui
0e60: 6c 64 5f 73 74 65 70 28 63 69 64 2c 20 70 55 73 ld_step(cid, pUs
0e70: 65 29 3b 0a 20 20 20 20 7d 65 6c 73 65 7b 0a 20 e);. }else{.
0e80: 20 20 20 20 20 64 62 5f 66 69 6e 61 6c 69 7a 65 db_finalize
0e90: 28 26 71 32 29 3b 0a 20 20 20 20 20 20 62 6c 6f (&q2);. blo
0ea0: 62 5f 72 65 73 65 74 28 70 55 73 65 29 3b 0a 20 b_reset(pUse);.
0eb0: 20 20 20 7d 0a 20 20 7d 0a 20 20 62 61 67 5f 63 }. }. bag_c
0ec0: 6c 65 61 72 28 26 63 68 69 6c 64 72 65 6e 29 3b lear(&children);
0ed0: 0a 20 20 72 65 62 75 69 6c 64 5f 73 74 65 70 5f . rebuild_step_
0ee0: 64 6f 6e 65 28 29 3b 0a 7d 0a 0a 2f 2a 0a 2a 2a done();.}../*.**
0ef0: 20 43 6f 72 65 20 66 75 6e 63 74 69 6f 6e 20 74 Core function t
0f00: 6f 20 72 65 62 75 69 6c 64 20 74 68 65 20 69 6e o rebuild the in
0f10: 66 6f 6d 72 61 74 69 6f 6e 20 69 6e 20 74 68 65 fomration in the
0f20: 20 64 65 72 69 76 65 64 20 74 61 62 6c 65 73 20 derived tables
0f30: 6f 66 20 61 0a 2a 2a 20 66 6f 73 73 69 6c 20 72 of a.** fossil r
0f40: 65 70 6f 73 69 74 6f 72 79 20 66 72 6f 6d 20 74 epository from t
0f50: 68 65 20 62 6c 6f 62 73 2e 20 54 68 69 73 20 66 he blobs. This f
0f60: 75 6e 63 74 69 6f 6e 20 69 73 20 73 68 61 72 65 unction is share
0f70: 64 20 62 65 74 77 65 65 6e 0a 2a 2a 20 27 72 65 d between.** 're
0f80: 62 75 69 6c 64 5f 64 61 74 61 62 61 73 65 27 20 build_database'
0f90: 28 27 72 65 62 75 69 6c 64 27 29 20 61 6e 64 20 ('rebuild') and
0fa0: 27 72 65 63 6f 6e 73 74 72 75 63 74 5f 63 6d 64 'reconstruct_cmd
0fb0: 27 0a 2a 2a 20 28 27 72 65 63 6f 6e 73 74 72 75 '.** ('reconstru
0fc0: 63 74 27 29 2c 20 62 6f 74 68 20 6f 66 20 77 68 ct'), both of wh
0fd0: 69 63 68 20 68 61 76 65 20 74 6f 20 72 65 67 65 ich have to rege
0fe0: 6e 65 72 61 74 65 20 74 68 69 73 20 69 6e 66 6f nerate this info
0ff0: 72 6d 61 74 69 6f 6e 0a 2a 2a 20 66 72 6f 6d 20 rmation.** from
1000: 73 63 72 61 74 63 68 2e 0a 2a 2a 0a 2a 2a 20 49 scratch..**.** I
1010: 66 20 74 68 65 20 72 61 6e 64 6f 6d 69 7a 65 20 f the randomize
1020: 70 61 72 61 6d 65 74 65 72 20 69 73 20 74 72 75 parameter is tru
1030: 65 2c 20 74 68 65 6e 20 74 68 65 20 42 4c 4f 42 e, then the BLOB
1040: 73 20 61 72 65 20 64 65 6c 69 62 65 72 61 74 65 s are deliberate
1050: 6c 79 0a 2a 2a 20 65 78 74 72 61 63 74 65 64 20 ly.** extracted
1060: 69 6e 20 61 20 72 61 6e 64 6f 6d 20 6f 72 64 65 in a random orde
1070: 72 2e 20 20 54 68 69 73 20 66 65 61 74 75 72 65 r. This feature
1080: 20 69 73 20 75 73 65 64 20 74 6f 20 74 65 73 74 is used to test
1090: 20 74 68 65 0a 2a 2a 20 61 62 69 6c 69 74 79 20 the.** ability
10a0: 6f 66 20 66 6f 73 73 69 6c 20 74 6f 20 61 63 63 of fossil to acc
10b0: 65 70 74 20 72 65 63 6f 72 64 73 20 69 6e 20 61 ept records in a
10c0: 6e 79 20 6f 72 64 65 72 20 61 6e 64 20 73 74 69 ny order and sti
10d0: 6c 6c 0a 2a 2a 20 63 6f 6e 73 74 72 75 63 74 20 ll.** construct
10e0: 61 20 73 61 6e 65 20 72 65 70 6f 73 69 74 6f 72 a sane repositor
10f0: 79 2e 0a 2a 2f 0a 69 6e 74 20 72 65 62 75 69 6c y..*/.int rebuil
1100: 64 5f 64 62 28 69 6e 74 20 72 61 6e 64 6f 6d 69 d_db(int randomi
1110: 7a 65 2c 20 69 6e 74 20 64 6f 4f 75 74 29 7b 0a ze, int doOut){.
1120: 20 20 53 74 6d 74 20 73 3b 0a 20 20 69 6e 74 20 Stmt s;. int
1130: 65 72 72 43 6e 74 20 3d 20 30 3b 0a 20 20 63 68 errCnt = 0;. ch
1140: 61 72 20 2a 7a 54 61 62 6c 65 3b 0a 0a 20 20 74 ar *zTable;.. t
1150: 74 79 4f 75 74 70 75 74 20 3d 20 64 6f 4f 75 74 tyOutput = doOut
1160: 3b 0a 20 20 70 72 6f 63 65 73 73 43 6e 74 20 3d ;. processCnt =
1170: 20 30 3b 0a 20 20 64 62 5f 6d 75 6c 74 69 5f 65 0;. db_multi_e
1180: 78 65 63 28 7a 53 63 68 65 6d 61 55 70 64 61 74 xec(zSchemaUpdat
1190: 65 73 29 3b 0a 20 20 66 6f 72 28 3b 3b 29 7b 0a es);. for(;;){.
11a0: 20 20 20 20 7a 54 61 62 6c 65 20 3d 20 64 62 5f zTable = db_
11b0: 74 65 78 74 28 30 2c 0a 20 20 20 20 20 20 20 22 text(0,. "
11c0: 53 45 4c 45 43 54 20 6e 61 6d 65 20 46 52 4f 4d SELECT name FROM
11d0: 20 73 71 6c 69 74 65 5f 6d 61 73 74 65 72 22 0a sqlite_master".
11e0: 20 20 20 20 20 20 20 22 20 57 48 45 52 45 20 74 " WHERE t
11f0: 79 70 65 3d 27 74 61 62 6c 65 27 22 0a 20 20 20 ype='table'".
1200: 20 20 20 20 22 20 41 4e 44 20 6e 61 6d 65 20 4e " AND name N
1210: 4f 54 20 49 4e 20 28 27 62 6c 6f 62 27 2c 27 64 OT IN ('blob','d
1220: 65 6c 74 61 27 2c 27 72 63 76 66 72 6f 6d 27 2c elta','rcvfrom',
1230: 27 75 73 65 72 27 2c 27 63 6f 6e 66 69 67 27 2c 'user','config',
1240: 27 73 68 75 6e 27 29 22 29 3b 0a 20 20 20 20 69 'shun')");. i
1250: 66 28 20 7a 54 61 62 6c 65 3d 3d 30 20 29 20 62 f( zTable==0 ) b
1260: 72 65 61 6b 3b 0a 20 20 20 20 64 62 5f 6d 75 6c reak;. db_mul
1270: 74 69 5f 65 78 65 63 28 22 44 52 4f 50 20 54 41 ti_exec("DROP TA
1280: 42 4c 45 20 25 51 22 2c 20 7a 54 61 62 6c 65 29 BLE %Q", zTable)
1290: 3b 0a 20 20 20 20 66 72 65 65 28 7a 54 61 62 6c ;. free(zTabl
12a0: 65 29 3b 0a 20 20 7d 0a 20 20 64 62 5f 6d 75 6c e);. }. db_mul
12b0: 74 69 5f 65 78 65 63 28 7a 52 65 70 6f 73 69 74 ti_exec(zReposit
12c0: 6f 72 79 53 63 68 65 6d 61 32 29 3b 0a 20 20 74 orySchema2);. t
12d0: 69 63 6b 65 74 5f 63 72 65 61 74 65 5f 74 61 62 icket_create_tab
12e0: 6c 65 28 30 29 3b 0a 0a 20 20 64 62 5f 6d 75 6c le(0);.. db_mul
12f0: 74 69 5f 65 78 65 63 28 22 49 4e 53 45 52 54 20 ti_exec("INSERT
1300: 49 4e 54 4f 20 75 6e 63 6c 75 73 74 65 72 65 64 INTO unclustered
1310: 20 53 45 4c 45 43 54 20 72 69 64 20 46 52 4f 4d SELECT rid FROM
1320: 20 62 6c 6f 62 22 29 3b 0a 20 20 64 62 5f 6d 75 blob");. db_mu
1330: 6c 74 69 5f 65 78 65 63 28 0a 20 20 20 20 20 22 lti_exec(. "
1340: 44 45 4c 45 54 45 20 46 52 4f 4d 20 75 6e 63 6c DELETE FROM uncl
1350: 75 73 74 65 72 65 64 22 0a 20 20 20 20 20 22 20 ustered". "
1360: 57 48 45 52 45 20 72 69 64 20 49 4e 20 28 53 45 WHERE rid IN (SE
1370: 4c 45 43 54 20 72 69 64 20 46 52 4f 4d 20 73 68 LECT rid FROM sh
1380: 75 6e 20 4a 4f 49 4e 20 62 6c 6f 62 20 55 53 49 un JOIN blob USI
1390: 4e 47 28 75 75 69 64 29 29 22 0a 20 20 29 3b 0a NG(uuid))". );.
13a0: 20 20 64 62 5f 6d 75 6c 74 69 5f 65 78 65 63 28 db_multi_exec(
13b0: 0a 20 20 20 20 22 44 45 4c 45 54 45 20 46 52 4f . "DELETE FRO
13c0: 4d 20 63 6f 6e 66 69 67 20 57 48 45 52 45 20 6e M config WHERE n
13d0: 61 6d 65 20 49 4e 20 28 27 72 65 6d 6f 74 65 2d ame IN ('remote-
13e0: 63 6f 64 65 27 2c 20 27 72 65 6d 6f 74 65 2d 6d code', 'remote-m
13f0: 61 78 69 64 27 29 22 0a 20 20 29 3b 0a 20 20 74 axid')". );. t
1400: 6f 74 61 6c 53 69 7a 65 20 3d 20 64 62 5f 69 6e otalSize = db_in
1410: 74 28 30 2c 20 22 53 45 4c 45 43 54 20 63 6f 75 t(0, "SELECT cou
1420: 6e 74 28 2a 29 20 46 52 4f 4d 20 62 6c 6f 62 22 nt(*) FROM blob"
1430: 29 3b 0a 20 20 64 62 5f 70 72 65 70 61 72 65 28 );. db_prepare(
1440: 26 73 2c 0a 20 20 20 20 20 22 53 45 4c 45 43 54 &s,. "SELECT
1450: 20 72 69 64 2c 20 73 69 7a 65 20 46 52 4f 4d 20 rid, size FROM
1460: 62 6c 6f 62 22 0a 20 20 20 20 20 22 20 57 48 45 blob". " WHE
1470: 52 45 20 4e 4f 54 20 45 58 49 53 54 53 28 53 45 RE NOT EXISTS(SE
1480: 4c 45 43 54 20 31 20 46 52 4f 4d 20 73 68 75 6e LECT 1 FROM shun
1490: 20 57 48 45 52 45 20 75 75 69 64 3d 62 6c 6f 62 WHERE uuid=blob
14a0: 2e 75 75 69 64 29 22 0a 20 20 20 20 20 22 20 20 .uuid)". "
14b0: 20 41 4e 44 20 4e 4f 54 20 45 58 49 53 54 53 28 AND NOT EXISTS(
14c0: 53 45 4c 45 43 54 20 31 20 46 52 4f 4d 20 64 65 SELECT 1 FROM de
14d0: 6c 74 61 20 57 48 45 52 45 20 72 69 64 3d 62 6c lta WHERE rid=bl
14e0: 6f 62 2e 72 69 64 29 22 0a 20 20 29 3b 0a 20 20 ob.rid)". );.
14f0: 77 68 69 6c 65 28 20 64 62 5f 73 74 65 70 28 26 while( db_step(&
1500: 73 29 3d 3d 53 51 4c 49 54 45 5f 52 4f 57 20 29 s)==SQLITE_ROW )
1510: 7b 0a 20 20 20 20 69 6e 74 20 72 69 64 20 3d 20 {. int rid =
1520: 64 62 5f 63 6f 6c 75 6d 6e 5f 69 6e 74 28 26 73 db_column_int(&s
1530: 2c 20 30 29 3b 0a 20 20 20 20 69 6e 74 20 73 69 , 0);. int si
1540: 7a 65 20 3d 20 64 62 5f 63 6f 6c 75 6d 6e 5f 69 ze = db_column_i
1550: 6e 74 28 26 73 2c 20 31 29 3b 0a 20 20 20 20 69 nt(&s, 1);. i
1560: 66 28 20 73 69 7a 65 3e 3d 30 20 29 7b 0a 20 20 f( size>=0 ){.
1570: 20 20 20 20 42 6c 6f 62 20 63 6f 6e 74 65 6e 74 Blob content
1580: 3b 0a 20 20 20 20 20 20 63 6f 6e 74 65 6e 74 5f ;. content_
1590: 67 65 74 28 72 69 64 2c 20 26 63 6f 6e 74 65 6e get(rid, &conten
15a0: 74 29 3b 0a 20 20 20 20 20 20 72 65 62 75 69 6c t);. rebuil
15b0: 64 5f 73 74 65 70 28 72 69 64 2c 20 26 63 6f 6e d_step(rid, &con
15c0: 74 65 6e 74 29 3b 0a 20 20 20 20 7d 65 6c 73 65 tent);. }else
15d0: 7b 0a 20 20 20 20 20 20 64 62 5f 6d 75 6c 74 69 {. db_multi
15e0: 5f 65 78 65 63 28 22 49 4e 53 45 52 54 20 4f 52 _exec("INSERT OR
15f0: 20 49 47 4e 4f 52 45 20 49 4e 54 4f 20 70 68 61 IGNORE INTO pha
1600: 6e 74 6f 6d 20 56 41 4c 55 45 53 28 25 64 29 22 ntom VALUES(%d)"
1610: 2c 20 72 69 64 29 3b 0a 20 20 20 20 20 20 72 65 , rid);. re
1620: 62 75 69 6c 64 5f 73 74 65 70 5f 64 6f 6e 65 28 build_step_done(
1630: 29 3b 0a 20 20 20 20 7d 0a 20 20 7d 0a 20 20 64 );. }. }. d
1640: 62 5f 66 69 6e 61 6c 69 7a 65 28 26 73 29 3b 0a b_finalize(&s);.
1650: 20 20 69 66 28 20 74 74 79 4f 75 74 70 75 74 20 if( ttyOutput
1660: 29 7b 0a 20 20 20 20 70 72 69 6e 74 66 28 22 5c ){. printf("\
1670: 6e 22 29 3b 0a 20 20 7d 0a 20 20 72 65 74 75 72 n");. }. retur
1680: 6e 20 65 72 72 43 6e 74 3b 0a 7d 0a 0a 2f 2a 0a n errCnt;.}../*.
1690: 2a 2a 20 43 4f 4d 4d 41 4e 44 3a 20 20 72 65 62 ** COMMAND: reb
16a0: 75 69 6c 64 0a 2a 2a 0a 2a 2a 20 55 73 61 67 65 uild.**.** Usage
16b0: 3a 20 25 66 6f 73 73 69 6c 20 72 65 62 75 69 6c : %fossil rebuil
16c0: 64 20 52 45 50 4f 53 49 54 4f 52 59 0a 2a 2a 0a d REPOSITORY.**.
16d0: 2a 2a 20 52 65 63 6f 6e 73 74 72 75 63 74 20 74 ** Reconstruct t
16e0: 68 65 20 6e 61 6d 65 64 20 72 65 70 6f 73 69 74 he named reposit
16f0: 6f 72 79 20 64 61 74 61 62 61 73 65 20 66 72 6f ory database fro
1700: 6d 20 74 68 65 20 63 6f 72 65 0a 2a 2a 20 72 65 m the core.** re
1710: 63 6f 72 64 73 2e 20 20 52 75 6e 20 74 68 69 73 cords. Run this
1720: 20 63 6f 6d 6d 61 6e 64 20 61 66 74 65 72 20 75 command after u
1730: 70 64 61 74 69 6e 67 20 74 68 65 20 66 6f 73 73 pdating the foss
1740: 69 6c 0a 2a 2a 20 65 78 65 63 75 74 61 62 6c 65 il.** executable
1750: 20 69 6e 20 61 20 77 61 79 20 74 68 61 74 20 63 in a way that c
1760: 68 61 6e 67 65 73 20 74 68 65 20 64 61 74 61 62 hanges the datab
1770: 61 73 65 20 73 63 68 65 6d 61 2e 0a 2a 2f 0a 76 ase schema..*/.v
1780: 6f 69 64 20 72 65 62 75 69 6c 64 5f 64 61 74 61 oid rebuild_data
1790: 62 61 73 65 28 76 6f 69 64 29 7b 0a 20 20 69 6e base(void){. in
17a0: 74 20 66 6f 72 63 65 46 6c 61 67 3b 0a 20 20 69 t forceFlag;. i
17b0: 6e 74 20 72 61 6e 64 6f 6d 69 7a 65 46 6c 61 67 nt randomizeFlag
17c0: 3b 0a 20 20 69 6e 74 20 65 72 72 43 6e 74 3b 0a ;. int errCnt;.
17d0: 0a 20 20 66 6f 72 63 65 46 6c 61 67 20 3d 20 66 . forceFlag = f
17e0: 69 6e 64 5f 6f 70 74 69 6f 6e 28 22 66 6f 72 63 ind_option("forc
17f0: 65 22 2c 22 66 22 2c 30 29 21 3d 30 3b 0a 20 20 e","f",0)!=0;.
1800: 72 61 6e 64 6f 6d 69 7a 65 46 6c 61 67 20 3d 20 randomizeFlag =
1810: 66 69 6e 64 5f 6f 70 74 69 6f 6e 28 22 72 61 6e find_option("ran
1820: 64 6f 6d 69 7a 65 22 2c 20 30 2c 20 30 29 21 3d domize", 0, 0)!=
1830: 30 3b 0a 20 20 69 66 28 20 67 2e 61 72 67 63 21 0;. if( g.argc!
1840: 3d 33 20 29 7b 0a 20 20 20 20 75 73 61 67 65 28 =3 ){. usage(
1850: 22 52 45 50 4f 53 49 54 4f 52 59 2d 46 49 4c 45 "REPOSITORY-FILE
1860: 4e 41 4d 45 22 29 3b 0a 20 20 7d 0a 20 20 64 62 NAME");. }. db
1870: 5f 6f 70 65 6e 5f 72 65 70 6f 73 69 74 6f 72 79 _open_repository
1880: 28 67 2e 61 72 67 76 5b 32 5d 29 3b 0a 20 20 64 (g.argv[2]);. d
1890: 62 5f 62 65 67 69 6e 5f 74 72 61 6e 73 61 63 74 b_begin_transact
18a0: 69 6f 6e 28 29 3b 0a 20 20 74 74 79 4f 75 74 70 ion();. ttyOutp
18b0: 75 74 20 3d 20 31 3b 0a 20 20 65 72 72 43 6e 74 ut = 1;. errCnt
18c0: 20 3d 20 72 65 62 75 69 6c 64 5f 64 62 28 72 61 = rebuild_db(ra
18d0: 6e 64 6f 6d 69 7a 65 46 6c 61 67 2c 20 31 29 3b ndomizeFlag, 1);
18e0: 0a 20 20 69 66 28 20 65 72 72 43 6e 74 20 26 26 . if( errCnt &&
18f0: 20 21 66 6f 72 63 65 46 6c 61 67 20 29 7b 0a 20 !forceFlag ){.
1900: 20 20 20 70 72 69 6e 74 66 28 22 25 64 20 65 72 printf("%d er
1910: 72 6f 72 73 2e 20 52 6f 6c 6c 69 6e 67 20 62 61 rors. Rolling ba
1920: 63 6b 20 63 68 61 6e 67 65 73 2e 20 55 73 65 20 ck changes. Use
1930: 2d 2d 66 6f 72 63 65 20 74 6f 20 66 6f 72 63 65 --force to force
1940: 20 61 20 63 6f 6d 6d 69 74 2e 5c 6e 22 2c 0a 20 a commit.\n",.
1950: 20 20 20 20 20 20 20 20 20 20 20 65 72 72 43 6e errCn
1960: 74 29 3b 0a 20 20 20 20 64 62 5f 65 6e 64 5f 74 t);. db_end_t
1970: 72 61 6e 73 61 63 74 69 6f 6e 28 31 29 3b 0a 20 ransaction(1);.
1980: 20 7d 65 6c 73 65 7b 0a 20 20 20 20 64 62 5f 65 }else{. db_e
1990: 6e 64 5f 74 72 61 6e 73 61 63 74 69 6f 6e 28 30 nd_transaction(0
19a0: 29 3b 0a 20 20 7d 0a 7d 0a );. }.}.