0000: 2f 2a 0a 2a 2a 20 43 6f 70 79 72 69 67 68 74 20 /*.** Copyright
0010: 28 63 29 20 32 30 30 37 20 44 2e 20 52 69 63 68 (c) 2007 D. Rich
0020: 61 72 64 20 48 69 70 70 0a 2a 2a 0a 2a 2a 20 54 ard Hipp.**.** T
0030: 68 69 73 20 70 72 6f 67 72 61 6d 20 69 73 20 66 his program is f
0040: 72 65 65 20 73 6f 66 74 77 61 72 65 3b 20 79 6f ree software; yo
0050: 75 20 63 61 6e 20 72 65 64 69 73 74 72 69 62 75 u can redistribu
0060: 74 65 20 69 74 20 61 6e 64 2f 6f 72 0a 2a 2a 20 te it and/or.**
0070: 6d 6f 64 69 66 79 20 69 74 20 75 6e 64 65 72 20 modify it under
0080: 74 68 65 20 74 65 72 6d 73 20 6f 66 20 74 68 65 the terms of the
0090: 20 47 4e 55 20 47 65 6e 65 72 61 6c 20 50 75 62 GNU General Pub
00a0: 6c 69 63 0a 2a 2a 20 4c 69 63 65 6e 73 65 20 76 lic.** License v
00b0: 65 72 73 69 6f 6e 20 32 20 61 73 20 70 75 62 6c ersion 2 as publ
00c0: 69 73 68 65 64 20 62 79 20 74 68 65 20 46 72 65 ished by the Fre
00d0: 65 20 53 6f 66 74 77 61 72 65 20 46 6f 75 6e 64 e Software Found
00e0: 61 74 69 6f 6e 2e 0a 2a 2a 0a 2a 2a 20 54 68 69 ation..**.** Thi
00f0: 73 20 70 72 6f 67 72 61 6d 20 69 73 20 64 69 73 s program is dis
0100: 74 72 69 62 75 74 65 64 20 69 6e 20 74 68 65 20 tributed in the
0110: 68 6f 70 65 20 74 68 61 74 20 69 74 20 77 69 6c hope that it wil
0120: 6c 20 62 65 20 75 73 65 66 75 6c 2c 0a 2a 2a 20 l be useful,.**
0130: 62 75 74 20 57 49 54 48 4f 55 54 20 41 4e 59 20 but WITHOUT ANY
0140: 57 41 52 52 41 4e 54 59 3b 20 77 69 74 68 6f 75 WARRANTY; withou
0150: 74 20 65 76 65 6e 20 74 68 65 20 69 6d 70 6c 69 t even the impli
0160: 65 64 20 77 61 72 72 61 6e 74 79 20 6f 66 0a 2a ed warranty of.*
0170: 2a 20 4d 45 52 43 48 41 4e 54 41 42 49 4c 49 54 * MERCHANTABILIT
0180: 59 20 6f 72 20 46 49 54 4e 45 53 53 20 46 4f 52 Y or FITNESS FOR
0190: 20 41 20 50 41 52 54 49 43 55 4c 41 52 20 50 55 A PARTICULAR PU
01a0: 52 50 4f 53 45 2e 20 20 53 65 65 20 74 68 65 20 RPOSE. See the
01b0: 47 4e 55 0a 2a 2a 20 47 65 6e 65 72 61 6c 20 50 GNU.** General P
01c0: 75 62 6c 69 63 20 4c 69 63 65 6e 73 65 20 66 6f ublic License fo
01d0: 72 20 6d 6f 72 65 20 64 65 74 61 69 6c 73 2e 0a r more details..
01e0: 2a 2a 20 0a 2a 2a 20 59 6f 75 20 73 68 6f 75 6c ** .** You shoul
01f0: 64 20 68 61 76 65 20 72 65 63 65 69 76 65 64 20 d have received
0200: 61 20 63 6f 70 79 20 6f 66 20 74 68 65 20 47 4e a copy of the GN
0210: 55 20 47 65 6e 65 72 61 6c 20 50 75 62 6c 69 63 U General Public
0220: 0a 2a 2a 20 4c 69 63 65 6e 73 65 20 61 6c 6f 6e .** License alon
0230: 67 20 77 69 74 68 20 74 68 69 73 20 6c 69 62 72 g with this libr
0240: 61 72 79 3b 20 69 66 20 6e 6f 74 2c 20 77 72 69 ary; if not, wri
0250: 74 65 20 74 6f 20 74 68 65 0a 2a 2a 20 46 72 65 te to the.** Fre
0260: 65 20 53 6f 66 74 77 61 72 65 20 46 6f 75 6e 64 e Software Found
0270: 61 74 69 6f 6e 2c 20 49 6e 63 2e 2c 20 35 39 20 ation, Inc., 59
0280: 54 65 6d 70 6c 65 20 50 6c 61 63 65 20 2d 20 53 Temple Place - S
0290: 75 69 74 65 20 33 33 30 2c 0a 2a 2a 20 42 6f 73 uite 330,.** Bos
02a0: 74 6f 6e 2c 20 4d 41 20 20 30 32 31 31 31 2d 31 ton, MA 02111-1
02b0: 33 30 37 2c 20 55 53 41 2e 0a 2a 2a 0a 2a 2a 20 307, USA..**.**
02c0: 41 75 74 68 6f 72 20 63 6f 6e 74 61 63 74 20 69 Author contact i
02d0: 6e 66 6f 72 6d 61 74 69 6f 6e 3a 0a 2a 2a 20 20 nformation:.**
02e0: 20 64 72 68 40 68 77 61 63 69 2e 63 6f 6d 0a 2a drh@hwaci.com.*
02f0: 2a 20 20 20 68 74 74 70 3a 2f 2f 77 77 77 2e 68 * http://www.h
0300: 77 61 63 69 2e 63 6f 6d 2f 64 72 68 2f 0a 2a 2a waci.com/drh/.**
0310: 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a .***************
0320: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0330: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0340: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0350: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0360: 0a 2a 2a 0a 2a 2a 20 54 68 69 73 20 66 69 6c 65 .**.** This file
0370: 20 63 6f 6e 74 61 69 6e 73 20 63 6f 64 65 20 75 contains code u
0380: 73 65 64 20 74 6f 20 72 65 62 75 69 6c 64 20 74 sed to rebuild t
0390: 68 65 20 64 61 74 61 62 61 73 65 2e 0a 2a 2f 0a he database..*/.
03a0: 23 69 6e 63 6c 75 64 65 20 22 63 6f 6e 66 69 67 #include "config
03b0: 2e 68 22 0a 23 69 6e 63 6c 75 64 65 20 22 72 65 .h".#include "re
03c0: 62 75 69 6c 64 2e 68 22 0a 23 69 6e 63 6c 75 64 build.h".#includ
03d0: 65 20 3c 61 73 73 65 72 74 2e 68 3e 0a 0a 2f 2a e <assert.h>../*
03e0: 0a 2a 2a 20 53 63 68 65 6d 61 20 63 68 61 6e 67 .** Schema chang
03f0: 65 73 0a 2a 2f 0a 73 74 61 74 69 63 20 63 6f 6e es.*/.static con
0400: 73 74 20 63 68 61 72 20 7a 53 63 68 65 6d 61 55 st char zSchemaU
0410: 70 64 61 74 65 73 5b 5d 20 3d 0a 40 20 2d 2d 20 pdates[] =.@ --
0420: 49 6e 64 65 78 20 6f 6e 20 74 68 65 20 64 65 6c Index on the del
0430: 74 61 20 74 61 62 6c 65 0a 40 20 2d 2d 0a 40 20 ta table.@ --.@
0440: 43 52 45 41 54 45 20 49 4e 44 45 58 20 49 46 20 CREATE INDEX IF
0450: 4e 4f 54 20 45 58 49 53 54 53 20 64 65 6c 74 61 NOT EXISTS delta
0460: 5f 69 31 20 4f 4e 20 64 65 6c 74 61 28 73 72 63 _i1 ON delta(src
0470: 69 64 29 3b 0a 40 0a 40 20 2d 2d 20 41 72 74 69 id);.@.@ -- Arti
0480: 66 61 63 74 73 20 74 68 61 74 20 73 68 6f 75 6c facts that shoul
0490: 64 20 6e 6f 74 20 62 65 20 70 72 6f 63 65 73 73 d not be process
04a0: 65 64 20 61 72 65 20 69 64 65 6e 74 69 66 69 65 ed are identifie
04b0: 64 20 69 6e 20 74 68 65 0a 40 20 2d 2d 20 22 73 d in the.@ -- "s
04c0: 68 75 6e 22 20 74 61 62 6c 65 2e 20 20 41 72 74 hun" table. Art
04d0: 69 66 61 63 74 73 20 74 68 61 74 20 61 72 65 20 ifacts that are
04e0: 63 6f 6e 74 72 6f 6c 2d 66 69 6c 65 20 66 6f 72 control-file for
04f0: 67 65 72 69 65 73 20 6f 72 0a 40 20 2d 2d 20 73 geries or.@ -- s
0500: 70 61 6d 20 6f 72 20 61 72 74 69 66 61 63 74 73 pam or artifacts
0510: 20 77 68 6f 73 65 20 63 6f 6e 74 65 6e 74 73 20 whose contents
0520: 76 69 6f 6c 61 74 65 20 61 64 6d 69 6e 69 73 74 violate administ
0530: 72 61 74 69 76 65 20 70 6f 6c 69 63 79 0a 40 20 rative policy.@
0540: 2d 2d 20 63 61 6e 20 62 65 20 73 68 75 6e 6e 65 -- can be shunne
0550: 64 20 69 6e 20 6f 72 64 65 72 20 74 6f 20 70 72 d in order to pr
0560: 65 76 65 6e 74 20 74 68 65 6d 20 66 72 6f 6d 20 event them from
0570: 63 6f 6e 74 61 6d 69 6e 61 74 69 6e 67 0a 40 20 contaminating.@
0580: 2d 2d 20 74 68 65 20 72 65 70 6f 73 69 74 6f 72 -- the repositor
0590: 79 2e 0a 40 20 2d 2d 0a 40 20 2d 2d 20 53 68 75 y..@ --.@ -- Shu
05a0: 6e 6e 65 64 20 61 72 74 69 66 61 63 74 73 20 64 nned artifacts d
05b0: 6f 20 6e 6f 74 20 65 78 69 73 74 20 69 6e 20 74 o not exist in t
05c0: 68 65 20 62 6c 6f 62 20 74 61 62 6c 65 2e 20 20 he blob table.
05d0: 48 65 6e 63 65 20 74 68 65 79 0a 40 20 2d 2d 20 Hence they.@ --
05e0: 68 61 76 65 20 6e 6f 74 20 61 72 74 69 66 61 63 have not artifac
05f0: 74 20 49 44 20 28 72 69 64 29 20 61 6e 64 20 77 t ID (rid) and w
0600: 65 20 74 68 75 73 20 6d 75 73 74 20 73 74 6f 72 e thus must stor
0610: 65 20 74 68 65 69 72 20 66 75 6c 6c 0a 40 20 2d e their full.@ -
0620: 2d 20 55 55 49 44 2e 0a 40 20 2d 2d 0a 40 20 43 - UUID..@ --.@ C
0630: 52 45 41 54 45 20 54 41 42 4c 45 20 49 46 20 4e REATE TABLE IF N
0640: 4f 54 20 45 58 49 53 54 53 20 73 68 75 6e 28 75 OT EXISTS shun(u
0650: 75 69 64 20 55 4e 49 51 55 45 29 3b 0a 40 0a 40 uid UNIQUE);.@.@
0660: 20 2d 2d 20 41 72 74 69 66 61 63 74 73 20 74 68 -- Artifacts th
0670: 61 74 20 73 68 6f 75 6c 64 20 6e 6f 74 20 62 65 at should not be
0680: 20 70 75 73 68 65 64 20 61 72 65 20 73 74 6f 72 pushed are stor
0690: 65 64 20 69 6e 20 74 68 65 20 22 70 72 69 76 61 ed in the "priva
06a0: 74 65 22 0a 40 20 2d 2d 20 74 61 62 6c 65 2e 20 te".@ -- table.
06b0: 20 0a 40 20 2d 2d 0a 40 20 43 52 45 41 54 45 20 .@ --.@ CREATE
06c0: 54 41 42 4c 45 20 49 46 20 4e 4f 54 20 45 58 49 TABLE IF NOT EXI
06d0: 53 54 53 20 70 72 69 76 61 74 65 28 72 69 64 20 STS private(rid
06e0: 49 4e 54 45 47 45 52 20 50 52 49 4d 41 52 59 20 INTEGER PRIMARY
06f0: 4b 45 59 29 3b 0a 40 0a 40 20 2d 2d 20 41 6e 20 KEY);.@.@ -- An
0700: 65 6e 74 72 79 20 69 6e 20 74 68 69 73 20 74 61 entry in this ta
0710: 62 6c 65 20 64 65 73 63 72 69 62 65 73 20 61 20 ble describes a
0720: 64 61 74 61 62 61 73 65 20 71 75 65 72 79 20 74 database query t
0730: 68 61 74 20 67 65 6e 65 72 61 74 65 73 20 61 0a hat generates a.
0740: 40 20 2d 2d 20 74 61 62 6c 65 20 6f 66 20 74 69 @ -- table of ti
0750: 63 6b 65 74 73 2e 0a 40 20 2d 2d 0a 40 20 43 52 ckets..@ --.@ CR
0760: 45 41 54 45 20 54 41 42 4c 45 20 49 46 20 4e 4f EATE TABLE IF NO
0770: 54 20 45 58 49 53 54 53 20 72 65 70 6f 72 74 66 T EXISTS reportf
0780: 6d 74 28 0a 40 20 20 20 20 72 6e 20 69 6e 74 65 mt(.@ rn inte
0790: 67 65 72 20 70 72 69 6d 61 72 79 20 6b 65 79 2c ger primary key,
07a0: 20 20 2d 2d 20 52 65 70 6f 72 74 20 6e 75 6d 62 -- Report numb
07b0: 65 72 0a 40 20 20 20 20 6f 77 6e 65 72 20 74 65 er.@ owner te
07c0: 78 74 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 xt,
07d0: 20 2d 2d 20 4f 77 6e 65 72 20 6f 66 20 74 68 69 -- Owner of thi
07e0: 73 20 72 65 70 6f 72 74 20 66 6f 72 6d 61 74 20 s report format
07f0: 28 6e 6f 74 20 75 73 65 64 29 0a 40 20 20 20 20 (not used).@
0800: 74 69 74 6c 65 20 74 65 78 74 2c 20 20 20 20 20 title text,
0810: 20 20 20 20 20 20 20 20 20 2d 2d 20 54 69 74 6c -- Titl
0820: 65 20 6f 66 20 74 68 69 73 20 72 65 70 6f 72 74 e of this report
0830: 0a 40 20 20 20 20 63 6f 6c 73 20 74 65 78 74 2c .@ cols text,
0840: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2d -
0850: 2d 20 41 20 63 6f 6c 6f 72 2d 6b 65 79 20 73 70 - A color-key sp
0860: 65 63 69 66 69 63 61 74 69 6f 6e 0a 40 20 20 20 ecification.@
0870: 20 73 71 6c 63 6f 64 65 20 74 65 78 74 20 20 20 sqlcode text
0880: 20 20 20 20 20 20 20 20 20 20 2d 2d 20 41 6e 20 -- An
0890: 53 51 4c 20 53 45 4c 45 43 54 20 73 74 61 74 65 SQL SELECT state
08a0: 6d 65 6e 74 20 66 6f 72 20 74 68 69 73 20 72 65 ment for this re
08b0: 70 6f 72 74 0a 40 20 29 3b 0a 40 0a 40 20 2d 2d port.@ );.@.@ --
08c0: 20 53 6f 6d 65 20 74 69 63 6b 65 74 20 63 6f 6e Some ticket con
08d0: 74 65 6e 74 20 28 73 75 63 68 20 61 73 20 74 68 tent (such as th
08e0: 65 20 6f 72 69 67 69 6e 61 74 6f 72 73 20 65 6d e originators em
08f0: 61 69 6c 20 61 64 64 72 65 73 73 20 6f 72 20 63 ail address or c
0900: 6f 6e 74 61 63 74 0a 40 20 2d 2d 20 69 6e 66 6f ontact.@ -- info
0910: 72 6d 61 74 69 6f 6e 29 20 6e 65 65 64 73 20 74 rmation) needs t
0920: 6f 20 62 65 20 6f 62 73 63 75 72 65 64 20 74 6f o be obscured to
0930: 20 70 72 6f 74 65 63 74 20 70 72 69 76 61 63 79 protect privacy
0940: 2e 20 20 54 68 69 73 20 69 73 20 61 63 68 69 65 . This is achie
0950: 76 65 64 0a 40 20 2d 2d 20 62 79 20 73 74 6f 72 ved.@ -- by stor
0960: 69 6e 67 20 61 6e 20 53 48 41 31 20 68 61 73 68 ing an SHA1 hash
0970: 20 6f 66 20 74 68 65 20 63 6f 6e 74 65 6e 74 2e of the content.
0980: 20 20 46 6f 72 20 64 69 73 70 6c 61 79 2c 20 74 For display, t
0990: 68 65 20 68 61 73 68 20 69 73 0a 40 20 2d 2d 20 he hash is.@ --
09a0: 6d 61 70 70 65 64 20 62 61 63 6b 20 69 6e 74 6f mapped back into
09b0: 20 74 68 65 20 6f 72 69 67 69 6e 61 6c 20 74 65 the original te
09c0: 78 74 20 75 73 69 6e 67 20 74 68 69 73 20 74 61 xt using this ta
09d0: 62 6c 65 2e 20 20 0a 40 20 2d 2d 0a 40 20 2d 2d ble. .@ --.@ --
09e0: 20 54 68 69 73 20 74 61 62 6c 65 20 63 6f 6e 74 This table cont
09f0: 61 69 6e 73 20 73 65 6e 73 69 74 69 76 65 20 69 ains sensitive i
0a00: 6e 66 6f 72 6d 61 74 69 6f 6e 20 61 6e 64 20 73 nformation and s
0a10: 68 6f 75 6c 64 20 6e 6f 74 20 62 65 20 73 68 61 hould not be sha
0a20: 72 65 64 0a 40 20 2d 2d 20 77 69 74 68 20 75 6e red.@ -- with un
0a30: 61 75 74 68 6f 72 69 7a 65 64 20 75 73 65 72 73 authorized users
0a40: 2e 0a 40 20 2d 2d 0a 40 20 43 52 45 41 54 45 20 ..@ --.@ CREATE
0a50: 54 41 42 4c 45 20 49 46 20 4e 4f 54 20 45 58 49 TABLE IF NOT EXI
0a60: 53 54 53 20 63 6f 6e 63 65 61 6c 65 64 28 0a 40 STS concealed(.@
0a70: 20 20 20 68 61 73 68 20 54 45 58 54 20 50 52 49 hash TEXT PRI
0a80: 4d 41 52 59 20 4b 45 59 2c 0a 40 20 20 20 63 6f MARY KEY,.@ co
0a90: 6e 74 65 6e 74 20 54 45 58 54 0a 40 20 29 3b 0a ntent TEXT.@ );.
0aa0: 3b 0a 0a 2f 2a 0a 2a 2a 20 56 61 72 69 61 62 6c ;../*.** Variabl
0ab0: 65 73 20 75 73 65 64 20 66 6f 72 20 70 72 6f 67 es used for prog
0ac0: 72 65 73 73 20 69 6e 66 6f 72 6d 61 74 69 6f 6e ress information
0ad0: 0a 2a 2f 0a 73 74 61 74 69 63 20 69 6e 74 20 74 .*/.static int t
0ae0: 6f 74 61 6c 53 69 7a 65 3b 20 20 20 20 20 20 20 otalSize;
0af0: 2f 2a 20 54 6f 74 61 6c 20 6e 75 6d 62 65 72 20 /* Total number
0b00: 6f 66 20 61 72 74 69 66 61 63 74 73 20 74 6f 20 of artifacts to
0b10: 70 72 6f 63 65 73 73 20 2a 2f 0a 73 74 61 74 69 process */.stati
0b20: 63 20 69 6e 74 20 70 72 6f 63 65 73 73 43 6e 74 c int processCnt
0b30: 3b 20 20 20 20 20 20 2f 2a 20 4e 75 6d 62 65 72 ; /* Number
0b40: 20 70 72 6f 63 65 73 73 65 64 20 73 6f 20 66 61 processed so fa
0b50: 72 20 2a 2f 0a 73 74 61 74 69 63 20 69 6e 74 20 r */.static int
0b60: 74 74 79 4f 75 74 70 75 74 3b 20 20 20 20 20 20 ttyOutput;
0b70: 20 2f 2a 20 44 6f 20 70 72 6f 67 72 65 73 73 20 /* Do progress
0b80: 6f 75 74 70 75 74 20 2a 2f 0a 73 74 61 74 69 63 output */.static
0b90: 20 42 61 67 20 62 61 67 44 6f 6e 65 3b 20 20 20 Bag bagDone;
0ba0: 20 20 20 20 20 20 2f 2a 20 42 61 67 20 6f 66 20 /* Bag of
0bb0: 72 65 63 6f 72 64 73 20 72 65 62 75 69 6c 74 20 records rebuilt
0bc0: 2a 2f 0a 0a 2f 2a 0a 2a 2a 20 43 61 6c 6c 65 64 */../*.** Called
0bd0: 20 61 66 74 65 72 20 65 61 63 68 20 61 72 74 69 after each arti
0be0: 66 61 63 74 20 69 73 20 70 72 6f 63 65 73 73 65 fact is processe
0bf0: 64 0a 2a 2f 0a 73 74 61 74 69 63 20 76 6f 69 64 d.*/.static void
0c00: 20 72 65 62 75 69 6c 64 5f 73 74 65 70 5f 64 6f rebuild_step_do
0c10: 6e 65 28 72 69 64 29 7b 0a 20 20 2f 2a 20 61 73 ne(rid){. /* as
0c20: 73 65 72 74 28 20 62 61 67 5f 66 69 6e 64 28 26 sert( bag_find(&
0c30: 62 61 67 44 6f 6e 65 2c 20 72 69 64 29 3d 3d 30 bagDone, rid)==0
0c40: 20 29 3b 20 2a 2f 0a 20 20 62 61 67 5f 69 6e 73 ); */. bag_ins
0c50: 65 72 74 28 26 62 61 67 44 6f 6e 65 2c 20 72 69 ert(&bagDone, ri
0c60: 64 29 3b 0a 20 20 69 66 28 20 74 74 79 4f 75 74 d);. if( ttyOut
0c70: 70 75 74 20 29 7b 0a 20 20 20 20 70 72 6f 63 65 put ){. proce
0c80: 73 73 43 6e 74 2b 2b 3b 0a 20 20 20 20 70 72 69 ssCnt++;. pri
0c90: 6e 74 66 28 22 25 64 20 28 25 64 25 25 29 2e 2e ntf("%d (%d%%)..
0ca0: 2e 5c 72 22 2c 20 70 72 6f 63 65 73 73 43 6e 74 .\r", processCnt
0cb0: 2c 20 28 70 72 6f 63 65 73 73 43 6e 74 2a 31 30 , (processCnt*10
0cc0: 30 2f 74 6f 74 61 6c 53 69 7a 65 29 29 3b 0a 20 0/totalSize));.
0cd0: 20 20 20 66 66 6c 75 73 68 28 73 74 64 6f 75 74 fflush(stdout
0ce0: 29 3b 0a 20 20 7d 0a 7d 0a 0a 2f 2a 0a 2a 2a 20 );. }.}../*.**
0cf0: 52 65 62 75 69 6c 64 20 63 72 6f 73 73 2d 72 65 Rebuild cross-re
0d00: 66 65 72 65 6e 63 69 6e 67 20 69 6e 66 6f 72 6d ferencing inform
0d10: 61 74 69 6f 6e 20 66 6f 72 20 74 68 65 20 61 72 ation for the ar
0d20: 74 69 66 61 63 74 0a 2a 2a 20 72 69 64 20 77 69 tifact.** rid wi
0d30: 74 68 20 63 6f 6e 74 65 6e 74 20 70 42 61 73 65 th content pBase
0d40: 20 61 6e 64 20 61 6c 6c 20 6f 66 20 69 74 73 20 and all of its
0d50: 64 65 73 63 65 6e 64 61 6e 74 73 2e 20 20 54 68 descendants. Th
0d60: 69 73 0a 2a 2a 20 72 6f 75 74 69 6e 65 20 63 6c is.** routine cl
0d70: 65 61 72 73 20 74 68 65 20 63 6f 6e 74 65 6e 74 ears the content
0d80: 20 62 75 66 66 65 72 20 62 65 66 6f 72 65 20 72 buffer before r
0d90: 65 74 75 72 6e 69 6e 67 2e 0a 2a 2f 0a 73 74 61 eturning..*/.sta
0da0: 74 69 63 20 76 6f 69 64 20 72 65 62 75 69 6c 64 tic void rebuild
0db0: 5f 73 74 65 70 28 69 6e 74 20 72 69 64 2c 20 69 _step(int rid, i
0dc0: 6e 74 20 73 69 7a 65 2c 20 42 6c 6f 62 20 2a 70 nt size, Blob *p
0dd0: 42 61 73 65 29 7b 0a 20 20 53 74 6d 74 20 71 31 Base){. Stmt q1
0de0: 3b 0a 20 20 42 61 67 20 63 68 69 6c 64 72 65 6e ;. Bag children
0df0: 3b 0a 20 20 42 6c 6f 62 20 63 6f 70 79 3b 0a 20 ;. Blob copy;.
0e00: 20 42 6c 6f 62 20 2a 70 55 73 65 3b 0a 20 20 69 Blob *pUse;. i
0e10: 6e 74 20 6e 43 68 69 6c 64 2c 20 69 2c 20 63 69 nt nChild, i, ci
0e20: 64 3b 0a 0a 20 20 2f 2a 20 46 69 78 20 75 70 20 d;.. /* Fix up
0e30: 74 68 65 20 22 62 6c 6f 62 2e 73 69 7a 65 22 20 the "blob.size"
0e40: 66 69 65 6c 64 20 69 66 20 6e 65 65 64 65 64 2e field if needed.
0e50: 20 2a 2f 0a 20 20 69 66 28 20 73 69 7a 65 21 3d */. if( size!=
0e60: 62 6c 6f 62 5f 73 69 7a 65 28 70 42 61 73 65 29 blob_size(pBase)
0e70: 20 29 7b 0a 20 20 20 20 64 62 5f 6d 75 6c 74 69 ){. db_multi
0e80: 5f 65 78 65 63 28 0a 20 20 20 20 20 20 20 22 55 _exec(. "U
0e90: 50 44 41 54 45 20 62 6c 6f 62 20 53 45 54 20 73 PDATE blob SET s
0ea0: 69 7a 65 3d 25 64 20 57 48 45 52 45 20 72 69 64 ize=%d WHERE rid
0eb0: 3d 25 64 22 2c 20 62 6c 6f 62 5f 73 69 7a 65 28 =%d", blob_size(
0ec0: 70 42 61 73 65 29 2c 20 72 69 64 0a 20 20 20 20 pBase), rid.
0ed0: 29 3b 0a 20 20 7d 0a 0a 20 20 2f 2a 20 46 69 6e );. }.. /* Fin
0ee0: 64 20 61 6c 6c 20 63 68 69 6c 64 72 65 6e 20 6f d all children o
0ef0: 66 20 61 72 74 69 66 61 63 74 20 72 69 64 20 2a f artifact rid *
0f00: 2f 0a 20 20 64 62 5f 70 72 65 70 61 72 65 28 26 /. db_prepare(&
0f10: 71 31 2c 20 22 53 45 4c 45 43 54 20 72 69 64 20 q1, "SELECT rid
0f20: 46 52 4f 4d 20 64 65 6c 74 61 20 57 48 45 52 45 FROM delta WHERE
0f30: 20 73 72 63 69 64 3d 25 64 22 2c 20 72 69 64 29 srcid=%d", rid)
0f40: 3b 0a 20 20 62 61 67 5f 69 6e 69 74 28 26 63 68 ;. bag_init(&ch
0f50: 69 6c 64 72 65 6e 29 3b 0a 20 20 77 68 69 6c 65 ildren);. while
0f60: 28 20 64 62 5f 73 74 65 70 28 26 71 31 29 3d 3d ( db_step(&q1)==
0f70: 53 51 4c 49 54 45 5f 52 4f 57 20 29 7b 0a 20 20 SQLITE_ROW ){.
0f80: 20 20 69 6e 74 20 63 69 64 20 3d 20 64 62 5f 63 int cid = db_c
0f90: 6f 6c 75 6d 6e 5f 69 6e 74 28 26 71 31 2c 20 30 olumn_int(&q1, 0
0fa0: 29 3b 0a 20 20 20 20 69 66 28 20 21 62 61 67 5f );. if( !bag_
0fb0: 66 69 6e 64 28 26 62 61 67 44 6f 6e 65 2c 20 63 find(&bagDone, c
0fc0: 69 64 29 20 29 7b 0a 20 20 20 20 20 20 62 61 67 id) ){. bag
0fd0: 5f 69 6e 73 65 72 74 28 26 63 68 69 6c 64 72 65 _insert(&childre
0fe0: 6e 2c 20 63 69 64 29 3b 0a 20 20 20 20 7d 0a 20 n, cid);. }.
0ff0: 20 7d 0a 20 20 6e 43 68 69 6c 64 20 3d 20 62 61 }. nChild = ba
1000: 67 5f 63 6f 75 6e 74 28 26 63 68 69 6c 64 72 65 g_count(&childre
1010: 6e 29 3b 0a 20 20 64 62 5f 66 69 6e 61 6c 69 7a n);. db_finaliz
1020: 65 28 26 71 31 29 3b 0a 0a 20 20 2f 2a 20 43 72 e(&q1);.. /* Cr
1030: 6f 73 73 6c 69 6e 6b 20 74 68 65 20 61 72 74 69 osslink the arti
1040: 66 61 63 74 20 2a 2f 0a 20 20 69 66 28 20 6e 43 fact */. if( nC
1050: 68 69 6c 64 3d 3d 30 20 29 7b 0a 20 20 20 20 70 hild==0 ){. p
1060: 55 73 65 20 3d 20 70 42 61 73 65 3b 0a 20 20 7d Use = pBase;. }
1070: 65 6c 73 65 7b 0a 20 20 20 20 62 6c 6f 62 5f 63 else{. blob_c
1080: 6f 70 79 28 26 63 6f 70 79 2c 20 70 42 61 73 65 opy(©, pBase
1090: 29 3b 0a 20 20 20 20 70 55 73 65 20 3d 20 26 63 );. pUse = &c
10a0: 6f 70 79 3b 0a 20 20 7d 0a 20 20 6d 61 6e 69 66 opy;. }. manif
10b0: 65 73 74 5f 63 72 6f 73 73 6c 69 6e 6b 28 72 69 est_crosslink(ri
10c0: 64 2c 20 70 55 73 65 29 3b 0a 20 20 62 6c 6f 62 d, pUse);. blob
10d0: 5f 72 65 73 65 74 28 70 55 73 65 29 3b 0a 0a 20 _reset(pUse);..
10e0: 20 2f 2a 20 43 61 6c 6c 20 61 6c 6c 20 63 68 69 /* Call all chi
10f0: 6c 64 72 65 6e 20 72 65 63 75 72 73 69 76 65 6c ldren recursivel
1100: 79 20 2a 2f 0a 20 20 66 6f 72 28 63 69 64 3d 62 y */. for(cid=b
1110: 61 67 5f 66 69 72 73 74 28 26 63 68 69 6c 64 72 ag_first(&childr
1120: 65 6e 29 2c 20 69 3d 31 3b 20 63 69 64 3b 20 63 en), i=1; cid; c
1130: 69 64 3d 62 61 67 5f 6e 65 78 74 28 26 63 68 69 id=bag_next(&chi
1140: 6c 64 72 65 6e 2c 20 63 69 64 29 2c 20 69 2b 2b ldren, cid), i++
1150: 29 7b 0a 20 20 20 20 53 74 6d 74 20 71 32 3b 0a ){. Stmt q2;.
1160: 20 20 20 20 69 6e 74 20 73 7a 3b 0a 20 20 20 20 int sz;.
1170: 69 66 28 20 6e 43 68 69 6c 64 3d 3d 69 20 29 7b if( nChild==i ){
1180: 0a 20 20 20 20 20 20 70 55 73 65 20 3d 20 70 42 . pUse = pB
1190: 61 73 65 3b 0a 20 20 20 20 7d 65 6c 73 65 7b 0a ase;. }else{.
11a0: 20 20 20 20 20 20 62 6c 6f 62 5f 63 6f 70 79 28 blob_copy(
11b0: 26 63 6f 70 79 2c 20 70 42 61 73 65 29 3b 0a 20 ©, pBase);.
11c0: 20 20 20 20 20 70 55 73 65 20 3d 20 26 63 6f 70 pUse = &cop
11d0: 79 3b 0a 20 20 20 20 7d 0a 20 20 20 20 64 62 5f y;. }. db_
11e0: 70 72 65 70 61 72 65 28 26 71 32 2c 20 22 53 45 prepare(&q2, "SE
11f0: 4c 45 43 54 20 63 6f 6e 74 65 6e 74 2c 20 73 69 LECT content, si
1200: 7a 65 20 46 52 4f 4d 20 62 6c 6f 62 20 57 48 45 ze FROM blob WHE
1210: 52 45 20 72 69 64 3d 25 64 22 2c 20 63 69 64 29 RE rid=%d", cid)
1220: 3b 0a 20 20 20 20 69 66 28 20 64 62 5f 73 74 65 ;. if( db_ste
1230: 70 28 26 71 32 29 3d 3d 53 51 4c 49 54 45 5f 52 p(&q2)==SQLITE_R
1240: 4f 57 20 26 26 20 28 73 7a 20 3d 20 64 62 5f 63 OW && (sz = db_c
1250: 6f 6c 75 6d 6e 5f 69 6e 74 28 26 71 32 2c 31 29 olumn_int(&q2,1)
1260: 29 3e 3d 30 20 29 7b 0a 20 20 20 20 20 20 42 6c )>=0 ){. Bl
1270: 6f 62 20 64 65 6c 74 61 3b 0a 20 20 20 20 20 20 ob delta;.
1280: 64 62 5f 65 70 68 65 6d 65 72 61 6c 5f 62 6c 6f db_ephemeral_blo
1290: 62 28 26 71 32 2c 20 30 2c 20 26 64 65 6c 74 61 b(&q2, 0, &delta
12a0: 29 3b 0a 20 20 20 20 20 20 62 6c 6f 62 5f 75 6e );. blob_un
12b0: 63 6f 6d 70 72 65 73 73 28 26 64 65 6c 74 61 2c compress(&delta,
12c0: 20 26 64 65 6c 74 61 29 3b 0a 20 20 20 20 20 20 &delta);.
12d0: 62 6c 6f 62 5f 64 65 6c 74 61 5f 61 70 70 6c 79 blob_delta_apply
12e0: 28 70 55 73 65 2c 20 26 64 65 6c 74 61 2c 20 70 (pUse, &delta, p
12f0: 55 73 65 29 3b 0a 20 20 20 20 20 20 62 6c 6f 62 Use);. blob
1300: 5f 72 65 73 65 74 28 26 64 65 6c 74 61 29 3b 0a _reset(&delta);.
1310: 20 20 20 20 20 20 64 62 5f 66 69 6e 61 6c 69 7a db_finaliz
1320: 65 28 26 71 32 29 3b 0a 20 20 20 20 20 20 72 65 e(&q2);. re
1330: 62 75 69 6c 64 5f 73 74 65 70 28 63 69 64 2c 20 build_step(cid,
1340: 73 7a 2c 20 70 55 73 65 29 3b 0a 20 20 20 20 7d sz, pUse);. }
1350: 65 6c 73 65 7b 0a 20 20 20 20 20 20 64 62 5f 66 else{. db_f
1360: 69 6e 61 6c 69 7a 65 28 26 71 32 29 3b 0a 20 20 inalize(&q2);.
1370: 20 20 20 20 62 6c 6f 62 5f 72 65 73 65 74 28 70 blob_reset(p
1380: 55 73 65 29 3b 0a 20 20 20 20 7d 0a 20 20 7d 0a Use);. }. }.
1390: 20 20 62 61 67 5f 63 6c 65 61 72 28 26 63 68 69 bag_clear(&chi
13a0: 6c 64 72 65 6e 29 3b 0a 20 20 72 65 62 75 69 6c ldren);. rebuil
13b0: 64 5f 73 74 65 70 5f 64 6f 6e 65 28 72 69 64 29 d_step_done(rid)
13c0: 3b 0a 7d 0a 0a 2f 2a 0a 2a 2a 20 43 6f 72 65 20 ;.}../*.** Core
13d0: 66 75 6e 63 74 69 6f 6e 20 74 6f 20 72 65 62 75 function to rebu
13e0: 69 6c 64 20 74 68 65 20 69 6e 66 6f 6d 72 61 74 ild the infomrat
13f0: 69 6f 6e 20 69 6e 20 74 68 65 20 64 65 72 69 76 ion in the deriv
1400: 65 64 20 74 61 62 6c 65 73 20 6f 66 20 61 0a 2a ed tables of a.*
1410: 2a 20 66 6f 73 73 69 6c 20 72 65 70 6f 73 69 74 * fossil reposit
1420: 6f 72 79 20 66 72 6f 6d 20 74 68 65 20 62 6c 6f ory from the blo
1430: 62 73 2e 20 54 68 69 73 20 66 75 6e 63 74 69 6f bs. This functio
1440: 6e 20 69 73 20 73 68 61 72 65 64 20 62 65 74 77 n is shared betw
1450: 65 65 6e 0a 2a 2a 20 27 72 65 62 75 69 6c 64 5f een.** 'rebuild_
1460: 64 61 74 61 62 61 73 65 27 20 28 27 72 65 62 75 database' ('rebu
1470: 69 6c 64 27 29 20 61 6e 64 20 27 72 65 63 6f 6e ild') and 'recon
1480: 73 74 72 75 63 74 5f 63 6d 64 27 0a 2a 2a 20 28 struct_cmd'.** (
1490: 27 72 65 63 6f 6e 73 74 72 75 63 74 27 29 2c 20 'reconstruct'),
14a0: 62 6f 74 68 20 6f 66 20 77 68 69 63 68 20 68 61 both of which ha
14b0: 76 65 20 74 6f 20 72 65 67 65 6e 65 72 61 74 65 ve to regenerate
14c0: 20 74 68 69 73 20 69 6e 66 6f 72 6d 61 74 69 6f this informatio
14d0: 6e 0a 2a 2a 20 66 72 6f 6d 20 73 63 72 61 74 63 n.** from scratc
14e0: 68 2e 0a 2a 2a 0a 2a 2a 20 49 66 20 74 68 65 20 h..**.** If the
14f0: 72 61 6e 64 6f 6d 69 7a 65 20 70 61 72 61 6d 65 randomize parame
1500: 74 65 72 20 69 73 20 74 72 75 65 2c 20 74 68 65 ter is true, the
1510: 6e 20 74 68 65 20 42 4c 4f 42 73 20 61 72 65 20 n the BLOBs are
1520: 64 65 6c 69 62 65 72 61 74 65 6c 79 0a 2a 2a 20 deliberately.**
1530: 65 78 74 72 61 63 74 65 64 20 69 6e 20 61 20 72 extracted in a r
1540: 61 6e 64 6f 6d 20 6f 72 64 65 72 2e 20 20 54 68 andom order. Th
1550: 69 73 20 66 65 61 74 75 72 65 20 69 73 20 75 73 is feature is us
1560: 65 64 20 74 6f 20 74 65 73 74 20 74 68 65 0a 2a ed to test the.*
1570: 2a 20 61 62 69 6c 69 74 79 20 6f 66 20 66 6f 73 * ability of fos
1580: 73 69 6c 20 74 6f 20 61 63 63 65 70 74 20 72 65 sil to accept re
1590: 63 6f 72 64 73 20 69 6e 20 61 6e 79 20 6f 72 64 cords in any ord
15a0: 65 72 20 61 6e 64 20 73 74 69 6c 6c 0a 2a 2a 20 er and still.**
15b0: 63 6f 6e 73 74 72 75 63 74 20 61 20 73 61 6e 65 construct a sane
15c0: 20 72 65 70 6f 73 69 74 6f 72 79 2e 0a 2a 2f 0a repository..*/.
15d0: 69 6e 74 20 72 65 62 75 69 6c 64 5f 64 62 28 69 int rebuild_db(i
15e0: 6e 74 20 72 61 6e 64 6f 6d 69 7a 65 2c 20 69 6e nt randomize, in
15f0: 74 20 64 6f 4f 75 74 29 7b 0a 20 20 53 74 6d 74 t doOut){. Stmt
1600: 20 73 3b 0a 20 20 69 6e 74 20 65 72 72 43 6e 74 s;. int errCnt
1610: 20 3d 20 30 3b 0a 20 20 63 68 61 72 20 2a 7a 54 = 0;. char *zT
1620: 61 62 6c 65 3b 0a 0a 20 20 62 61 67 5f 69 6e 69 able;.. bag_ini
1630: 74 28 26 62 61 67 44 6f 6e 65 29 3b 0a 20 20 74 t(&bagDone);. t
1640: 74 79 4f 75 74 70 75 74 20 3d 20 64 6f 4f 75 74 tyOutput = doOut
1650: 3b 0a 20 20 70 72 6f 63 65 73 73 43 6e 74 20 3d ;. processCnt =
1660: 20 30 3b 0a 20 20 64 62 5f 6d 75 6c 74 69 5f 65 0;. db_multi_e
1670: 78 65 63 28 7a 53 63 68 65 6d 61 55 70 64 61 74 xec(zSchemaUpdat
1680: 65 73 29 3b 0a 20 20 66 6f 72 28 3b 3b 29 7b 0a es);. for(;;){.
1690: 20 20 20 20 7a 54 61 62 6c 65 20 3d 20 64 62 5f zTable = db_
16a0: 74 65 78 74 28 30 2c 0a 20 20 20 20 20 20 20 22 text(0,. "
16b0: 53 45 4c 45 43 54 20 6e 61 6d 65 20 46 52 4f 4d SELECT name FROM
16c0: 20 73 71 6c 69 74 65 5f 6d 61 73 74 65 72 22 0a sqlite_master".
16d0: 20 20 20 20 20 20 20 22 20 57 48 45 52 45 20 74 " WHERE t
16e0: 79 70 65 3d 27 74 61 62 6c 65 27 22 0a 20 20 20 ype='table'".
16f0: 20 20 20 20 22 20 41 4e 44 20 6e 61 6d 65 20 4e " AND name N
1700: 4f 54 20 49 4e 20 28 27 62 6c 6f 62 27 2c 27 64 OT IN ('blob','d
1710: 65 6c 74 61 27 2c 27 72 63 76 66 72 6f 6d 27 2c elta','rcvfrom',
1720: 27 75 73 65 72 27 2c 22 0a 20 20 20 20 20 20 20 'user',".
1730: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
1740: 20 20 22 27 63 6f 6e 66 69 67 27 2c 27 73 68 75 "'config','shu
1750: 6e 27 2c 27 70 72 69 76 61 74 65 27 2c 27 72 65 n','private','re
1760: 70 6f 72 74 66 6d 74 27 2c 22 0a 20 20 20 20 20 portfmt',".
1770: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
1780: 20 20 20 20 22 27 63 6f 6e 63 65 61 6c 65 64 27 "'concealed'
1790: 29 22 0a 20 20 20 20 29 3b 0a 20 20 20 20 69 66 )". );. if
17a0: 28 20 7a 54 61 62 6c 65 3d 3d 30 20 29 20 62 72 ( zTable==0 ) br
17b0: 65 61 6b 3b 0a 20 20 20 20 64 62 5f 6d 75 6c 74 eak;. db_mult
17c0: 69 5f 65 78 65 63 28 22 44 52 4f 50 20 54 41 42 i_exec("DROP TAB
17d0: 4c 45 20 25 51 22 2c 20 7a 54 61 62 6c 65 29 3b LE %Q", zTable);
17e0: 0a 20 20 20 20 66 72 65 65 28 7a 54 61 62 6c 65 . free(zTable
17f0: 29 3b 0a 20 20 7d 0a 20 20 64 62 5f 6d 75 6c 74 );. }. db_mult
1800: 69 5f 65 78 65 63 28 7a 52 65 70 6f 73 69 74 6f i_exec(zReposito
1810: 72 79 53 63 68 65 6d 61 32 29 3b 0a 20 20 74 69 rySchema2);. ti
1820: 63 6b 65 74 5f 63 72 65 61 74 65 5f 74 61 62 6c cket_create_tabl
1830: 65 28 30 29 3b 0a 20 20 73 68 75 6e 5f 61 72 74 e(0);. shun_art
1840: 69 66 61 63 74 73 28 29 3b 0a 0a 20 20 64 62 5f ifacts();.. db_
1850: 6d 75 6c 74 69 5f 65 78 65 63 28 0a 20 20 20 20 multi_exec(.
1860: 20 22 49 4e 53 45 52 54 20 49 4e 54 4f 20 75 6e "INSERT INTO un
1870: 63 6c 75 73 74 65 72 65 64 22 0a 20 20 20 20 20 clustered".
1880: 22 20 53 45 4c 45 43 54 20 72 69 64 20 46 52 4f " SELECT rid FRO
1890: 4d 20 62 6c 6f 62 20 45 58 43 45 50 54 20 53 45 M blob EXCEPT SE
18a0: 4c 45 43 54 20 72 69 64 20 46 52 4f 4d 20 70 72 LECT rid FROM pr
18b0: 69 76 61 74 65 22 0a 20 20 29 3b 0a 20 20 64 62 ivate". );. db
18c0: 5f 6d 75 6c 74 69 5f 65 78 65 63 28 0a 20 20 20 _multi_exec(.
18d0: 20 20 22 44 45 4c 45 54 45 20 46 52 4f 4d 20 75 "DELETE FROM u
18e0: 6e 63 6c 75 73 74 65 72 65 64 22 0a 20 20 20 20 nclustered".
18f0: 20 22 20 57 48 45 52 45 20 72 69 64 20 49 4e 20 " WHERE rid IN
1900: 28 53 45 4c 45 43 54 20 72 69 64 20 46 52 4f 4d (SELECT rid FROM
1910: 20 73 68 75 6e 20 4a 4f 49 4e 20 62 6c 6f 62 20 shun JOIN blob
1920: 55 53 49 4e 47 28 75 75 69 64 29 29 22 0a 20 20 USING(uuid))".
1930: 29 3b 0a 20 20 64 62 5f 6d 75 6c 74 69 5f 65 78 );. db_multi_ex
1940: 65 63 28 0a 20 20 20 20 22 44 45 4c 45 54 45 20 ec(. "DELETE
1950: 46 52 4f 4d 20 63 6f 6e 66 69 67 20 57 48 45 52 FROM config WHER
1960: 45 20 6e 61 6d 65 20 49 4e 20 28 27 72 65 6d 6f E name IN ('remo
1970: 74 65 2d 63 6f 64 65 27 2c 20 27 72 65 6d 6f 74 te-code', 'remot
1980: 65 2d 6d 61 78 69 64 27 29 22 0a 20 20 29 3b 0a e-maxid')". );.
1990: 20 20 74 6f 74 61 6c 53 69 7a 65 20 3d 20 64 62 totalSize = db
19a0: 5f 69 6e 74 28 30 2c 20 22 53 45 4c 45 43 54 20 _int(0, "SELECT
19b0: 63 6f 75 6e 74 28 2a 29 20 46 52 4f 4d 20 62 6c count(*) FROM bl
19c0: 6f 62 22 29 3b 0a 20 20 64 62 5f 70 72 65 70 61 ob");. db_prepa
19d0: 72 65 28 26 73 2c 0a 20 20 20 20 20 22 53 45 4c re(&s,. "SEL
19e0: 45 43 54 20 72 69 64 2c 20 73 69 7a 65 20 46 52 ECT rid, size FR
19f0: 4f 4d 20 62 6c 6f 62 22 0a 20 20 20 20 20 22 20 OM blob". "
1a00: 57 48 45 52 45 20 4e 4f 54 20 45 58 49 53 54 53 WHERE NOT EXISTS
1a10: 28 53 45 4c 45 43 54 20 31 20 46 52 4f 4d 20 73 (SELECT 1 FROM s
1a20: 68 75 6e 20 57 48 45 52 45 20 75 75 69 64 3d 62 hun WHERE uuid=b
1a30: 6c 6f 62 2e 75 75 69 64 29 22 0a 20 20 20 20 20 lob.uuid)".
1a40: 22 20 20 20 41 4e 44 20 4e 4f 54 20 45 58 49 53 " AND NOT EXIS
1a50: 54 53 28 53 45 4c 45 43 54 20 31 20 46 52 4f 4d TS(SELECT 1 FROM
1a60: 20 64 65 6c 74 61 20 57 48 45 52 45 20 72 69 64 delta WHERE rid
1a70: 3d 62 6c 6f 62 2e 72 69 64 29 22 0a 20 20 29 3b =blob.rid)". );
1a80: 0a 20 20 77 68 69 6c 65 28 20 64 62 5f 73 74 65 . while( db_ste
1a90: 70 28 26 73 29 3d 3d 53 51 4c 49 54 45 5f 52 4f p(&s)==SQLITE_RO
1aa0: 57 20 29 7b 0a 20 20 20 20 69 6e 74 20 72 69 64 W ){. int rid
1ab0: 20 3d 20 64 62 5f 63 6f 6c 75 6d 6e 5f 69 6e 74 = db_column_int
1ac0: 28 26 73 2c 20 30 29 3b 0a 20 20 20 20 69 6e 74 (&s, 0);. int
1ad0: 20 73 69 7a 65 20 3d 20 64 62 5f 63 6f 6c 75 6d size = db_colum
1ae0: 6e 5f 69 6e 74 28 26 73 2c 20 31 29 3b 0a 20 20 n_int(&s, 1);.
1af0: 20 20 69 66 28 20 73 69 7a 65 3e 3d 30 20 29 7b if( size>=0 ){
1b00: 0a 20 20 20 20 20 20 42 6c 6f 62 20 63 6f 6e 74 . Blob cont
1b10: 65 6e 74 3b 0a 20 20 20 20 20 20 63 6f 6e 74 65 ent;. conte
1b20: 6e 74 5f 67 65 74 28 72 69 64 2c 20 26 63 6f 6e nt_get(rid, &con
1b30: 74 65 6e 74 29 3b 0a 20 20 20 20 20 20 72 65 62 tent);. reb
1b40: 75 69 6c 64 5f 73 74 65 70 28 72 69 64 2c 20 73 uild_step(rid, s
1b50: 69 7a 65 2c 20 26 63 6f 6e 74 65 6e 74 29 3b 0a ize, &content);.
1b60: 20 20 20 20 7d 0a 20 20 7d 0a 20 20 64 62 5f 66 }. }. db_f
1b70: 69 6e 61 6c 69 7a 65 28 26 73 29 3b 0a 20 20 64 inalize(&s);. d
1b80: 62 5f 70 72 65 70 61 72 65 28 26 73 2c 0a 20 20 b_prepare(&s,.
1b90: 20 20 20 22 53 45 4c 45 43 54 20 72 69 64 2c 20 "SELECT rid,
1ba0: 73 69 7a 65 20 46 52 4f 4d 20 62 6c 6f 62 22 0a size FROM blob".
1bb0: 20 20 20 20 20 22 20 57 48 45 52 45 20 4e 4f 54 " WHERE NOT
1bc0: 20 45 58 49 53 54 53 28 53 45 4c 45 43 54 20 31 EXISTS(SELECT 1
1bd0: 20 46 52 4f 4d 20 73 68 75 6e 20 57 48 45 52 45 FROM shun WHERE
1be0: 20 75 75 69 64 3d 62 6c 6f 62 2e 75 75 69 64 29 uuid=blob.uuid)
1bf0: 22 0a 20 20 29 3b 0a 20 20 77 68 69 6c 65 28 20 ". );. while(
1c00: 64 62 5f 73 74 65 70 28 26 73 29 3d 3d 53 51 4c db_step(&s)==SQL
1c10: 49 54 45 5f 52 4f 57 20 29 7b 0a 20 20 20 20 69 ITE_ROW ){. i
1c20: 6e 74 20 72 69 64 20 3d 20 64 62 5f 63 6f 6c 75 nt rid = db_colu
1c30: 6d 6e 5f 69 6e 74 28 26 73 2c 20 30 29 3b 0a 20 mn_int(&s, 0);.
1c40: 20 20 20 69 6e 74 20 73 69 7a 65 20 3d 20 64 62 int size = db
1c50: 5f 63 6f 6c 75 6d 6e 5f 69 6e 74 28 26 73 2c 20 _column_int(&s,
1c60: 31 29 3b 0a 20 20 20 20 69 66 28 20 73 69 7a 65 1);. if( size
1c70: 3e 3d 30 20 29 7b 0a 20 20 20 20 20 20 69 66 28 >=0 ){. if(
1c80: 20 21 62 61 67 5f 66 69 6e 64 28 26 62 61 67 44 !bag_find(&bagD
1c90: 6f 6e 65 2c 20 72 69 64 29 20 29 7b 0a 20 20 20 one, rid) ){.
1ca0: 20 20 20 20 20 42 6c 6f 62 20 63 6f 6e 74 65 6e Blob conten
1cb0: 74 3b 0a 20 20 20 20 20 20 20 20 63 6f 6e 74 65 t;. conte
1cc0: 6e 74 5f 67 65 74 28 72 69 64 2c 20 26 63 6f 6e nt_get(rid, &con
1cd0: 74 65 6e 74 29 3b 0a 20 20 20 20 20 20 20 20 72 tent);. r
1ce0: 65 62 75 69 6c 64 5f 73 74 65 70 28 72 69 64 2c ebuild_step(rid,
1cf0: 20 73 69 7a 65 2c 20 26 63 6f 6e 74 65 6e 74 29 size, &content)
1d00: 3b 0a 20 20 20 20 20 20 7d 0a 20 20 20 20 7d 65 ;. }. }e
1d10: 6c 73 65 7b 0a 20 20 20 20 20 20 64 62 5f 6d 75 lse{. db_mu
1d20: 6c 74 69 5f 65 78 65 63 28 22 49 4e 53 45 52 54 lti_exec("INSERT
1d30: 20 4f 52 20 49 47 4e 4f 52 45 20 49 4e 54 4f 20 OR IGNORE INTO
1d40: 70 68 61 6e 74 6f 6d 20 56 41 4c 55 45 53 28 25 phantom VALUES(%
1d50: 64 29 22 2c 20 72 69 64 29 3b 0a 20 20 20 20 20 d)", rid);.
1d60: 20 72 65 62 75 69 6c 64 5f 73 74 65 70 5f 64 6f rebuild_step_do
1d70: 6e 65 28 72 69 64 29 3b 0a 20 20 20 20 7d 0a 20 ne(rid);. }.
1d80: 20 7d 0a 20 20 64 62 5f 66 69 6e 61 6c 69 7a 65 }. db_finalize
1d90: 28 26 73 29 3b 0a 20 20 69 66 28 20 74 74 79 4f (&s);. if( ttyO
1da0: 75 74 70 75 74 20 29 7b 0a 20 20 20 20 70 72 69 utput ){. pri
1db0: 6e 74 66 28 22 5c 6e 22 29 3b 0a 20 20 7d 0a 20 ntf("\n");. }.
1dc0: 20 72 65 74 75 72 6e 20 65 72 72 43 6e 74 3b 0a return errCnt;.
1dd0: 7d 0a 0a 2f 2a 0a 2a 2a 20 43 4f 4d 4d 41 4e 44 }../*.** COMMAND
1de0: 3a 20 20 72 65 62 75 69 6c 64 0a 2a 2a 0a 2a 2a : rebuild.**.**
1df0: 20 55 73 61 67 65 3a 20 25 66 6f 73 73 69 6c 20 Usage: %fossil
1e00: 72 65 62 75 69 6c 64 20 52 45 50 4f 53 49 54 4f rebuild REPOSITO
1e10: 52 59 0a 2a 2a 0a 2a 2a 20 52 65 63 6f 6e 73 74 RY.**.** Reconst
1e20: 72 75 63 74 20 74 68 65 20 6e 61 6d 65 64 20 72 ruct the named r
1e30: 65 70 6f 73 69 74 6f 72 79 20 64 61 74 61 62 61 epository databa
1e40: 73 65 20 66 72 6f 6d 20 74 68 65 20 63 6f 72 65 se from the core
1e50: 0a 2a 2a 20 72 65 63 6f 72 64 73 2e 20 20 52 75 .** records. Ru
1e60: 6e 20 74 68 69 73 20 63 6f 6d 6d 61 6e 64 20 61 n this command a
1e70: 66 74 65 72 20 75 70 64 61 74 69 6e 67 20 74 68 fter updating th
1e80: 65 20 66 6f 73 73 69 6c 0a 2a 2a 20 65 78 65 63 e fossil.** exec
1e90: 75 74 61 62 6c 65 20 69 6e 20 61 20 77 61 79 20 utable in a way
1ea0: 74 68 61 74 20 63 68 61 6e 67 65 73 20 74 68 65 that changes the
1eb0: 20 64 61 74 61 62 61 73 65 20 73 63 68 65 6d 61 database schema
1ec0: 2e 0a 2a 2f 0a 76 6f 69 64 20 72 65 62 75 69 6c ..*/.void rebuil
1ed0: 64 5f 64 61 74 61 62 61 73 65 28 76 6f 69 64 29 d_database(void)
1ee0: 7b 0a 20 20 69 6e 74 20 66 6f 72 63 65 46 6c 61 {. int forceFla
1ef0: 67 3b 0a 20 20 69 6e 74 20 72 61 6e 64 6f 6d 69 g;. int randomi
1f00: 7a 65 46 6c 61 67 3b 0a 20 20 69 6e 74 20 65 72 zeFlag;. int er
1f10: 72 43 6e 74 3b 0a 0a 20 20 66 6f 72 63 65 46 6c rCnt;.. forceFl
1f20: 61 67 20 3d 20 66 69 6e 64 5f 6f 70 74 69 6f 6e ag = find_option
1f30: 28 22 66 6f 72 63 65 22 2c 22 66 22 2c 30 29 21 ("force","f",0)!
1f40: 3d 30 3b 0a 20 20 72 61 6e 64 6f 6d 69 7a 65 46 =0;. randomizeF
1f50: 6c 61 67 20 3d 20 66 69 6e 64 5f 6f 70 74 69 6f lag = find_optio
1f60: 6e 28 22 72 61 6e 64 6f 6d 69 7a 65 22 2c 20 30 n("randomize", 0
1f70: 2c 20 30 29 21 3d 30 3b 0a 20 20 69 66 28 20 67 , 0)!=0;. if( g
1f80: 2e 61 72 67 63 21 3d 33 20 29 7b 0a 20 20 20 20 .argc!=3 ){.
1f90: 75 73 61 67 65 28 22 52 45 50 4f 53 49 54 4f 52 usage("REPOSITOR
1fa0: 59 2d 46 49 4c 45 4e 41 4d 45 22 29 3b 0a 20 20 Y-FILENAME");.
1fb0: 7d 0a 20 20 64 62 5f 6f 70 65 6e 5f 72 65 70 6f }. db_open_repo
1fc0: 73 69 74 6f 72 79 28 67 2e 61 72 67 76 5b 32 5d sitory(g.argv[2]
1fd0: 29 3b 0a 20 20 64 62 5f 62 65 67 69 6e 5f 74 72 );. db_begin_tr
1fe0: 61 6e 73 61 63 74 69 6f 6e 28 29 3b 0a 20 20 74 ansaction();. t
1ff0: 74 79 4f 75 74 70 75 74 20 3d 20 31 3b 0a 20 20 tyOutput = 1;.
2000: 65 72 72 43 6e 74 20 3d 20 72 65 62 75 69 6c 64 errCnt = rebuild
2010: 5f 64 62 28 72 61 6e 64 6f 6d 69 7a 65 46 6c 61 _db(randomizeFla
2020: 67 2c 20 31 29 3b 0a 20 20 69 66 28 20 65 72 72 g, 1);. if( err
2030: 43 6e 74 20 26 26 20 21 66 6f 72 63 65 46 6c 61 Cnt && !forceFla
2040: 67 20 29 7b 0a 20 20 20 20 70 72 69 6e 74 66 28 g ){. printf(
2050: 22 25 64 20 65 72 72 6f 72 73 2e 20 52 6f 6c 6c "%d errors. Roll
2060: 69 6e 67 20 62 61 63 6b 20 63 68 61 6e 67 65 73 ing back changes
2070: 2e 20 55 73 65 20 2d 2d 66 6f 72 63 65 20 74 6f . Use --force to
2080: 20 66 6f 72 63 65 20 61 20 63 6f 6d 6d 69 74 2e force a commit.
2090: 5c 6e 22 2c 0a 20 20 20 20 20 20 20 20 20 20 20 \n",.
20a0: 20 65 72 72 43 6e 74 29 3b 0a 20 20 20 20 64 62 errCnt);. db
20b0: 5f 65 6e 64 5f 74 72 61 6e 73 61 63 74 69 6f 6e _end_transaction
20c0: 28 31 29 3b 0a 20 20 7d 65 6c 73 65 7b 0a 20 20 (1);. }else{.
20d0: 20 20 64 62 5f 65 6e 64 5f 74 72 61 6e 73 61 63 db_end_transac
20e0: 74 69 6f 6e 28 30 29 3b 0a 20 20 7d 0a 7d 0a 0a tion(0);. }.}..
20f0: 2f 2a 0a 2a 2a 20 43 4f 4d 4d 41 4e 44 3a 20 20 /*.** COMMAND:
2100: 74 65 73 74 2d 64 65 74 61 63 68 0a 2a 2a 0a 2a test-detach.**.*
2110: 2a 20 43 68 61 6e 67 65 20 74 68 65 20 70 72 6f * Change the pro
2120: 6a 65 63 74 2d 63 6f 64 65 20 61 6e 64 20 6d 61 ject-code and ma
2130: 6b 65 20 6f 74 68 65 72 20 63 68 61 6e 67 65 73 ke other changes
2140: 20 69 6e 20 6f 72 64 65 72 20 74 6f 20 70 72 65 in order to pre
2150: 76 65 6e 74 0a 2a 2a 20 74 68 65 20 72 65 70 6f vent.** the repo
2160: 73 69 74 6f 72 79 20 66 72 6f 6d 20 65 76 65 72 sitory from ever
2170: 20 61 67 61 69 6e 20 70 75 73 68 69 6e 67 20 6f again pushing o
2180: 72 20 70 75 6c 6c 69 6e 67 20 74 6f 20 6f 74 68 r pulling to oth
2190: 65 72 0a 2a 2a 20 72 65 70 6f 73 69 74 6f 72 69 er.** repositori
21a0: 65 73 2e 20 20 55 73 65 64 20 74 6f 20 63 72 65 es. Used to cre
21b0: 61 74 65 20 61 20 22 74 65 73 74 22 20 72 65 70 ate a "test" rep
21c0: 6f 73 69 74 6f 72 79 20 66 6f 72 20 64 65 76 65 ository for deve
21d0: 6c 6f 70 6d 65 6e 74 0a 2a 2a 20 74 65 73 74 69 lopment.** testi
21e0: 6e 67 20 62 79 20 63 6c 6f 6e 69 6e 67 20 61 20 ng by cloning a
21f0: 77 6f 72 6b 69 6e 67 20 70 72 6f 6a 65 63 74 20 working project
2200: 72 65 70 6f 73 69 74 6f 72 79 2e 0a 2a 2f 0a 76 repository..*/.v
2210: 6f 69 64 20 74 65 73 74 5f 64 65 74 61 63 68 5f oid test_detach_
2220: 63 6d 64 28 76 6f 69 64 29 7b 0a 20 20 64 62 5f cmd(void){. db_
2230: 66 69 6e 64 5f 61 6e 64 5f 6f 70 65 6e 5f 72 65 find_and_open_re
2240: 70 6f 73 69 74 6f 72 79 28 31 29 3b 0a 20 20 64 pository(1);. d
2250: 62 5f 62 65 67 69 6e 5f 74 72 61 6e 73 61 63 74 b_begin_transact
2260: 69 6f 6e 28 29 3b 0a 20 20 64 62 5f 6d 75 6c 74 ion();. db_mult
2270: 69 5f 65 78 65 63 28 0a 20 20 20 20 22 44 45 4c i_exec(. "DEL
2280: 45 54 45 20 46 52 4f 4d 20 63 6f 6e 66 69 67 20 ETE FROM config
2290: 57 48 45 52 45 20 6e 61 6d 65 3d 27 6c 61 73 74 WHERE name='last
22a0: 2d 73 79 6e 63 2d 75 72 6c 27 3b 22 0a 20 20 20 -sync-url';".
22b0: 20 22 55 50 44 41 54 45 20 63 6f 6e 66 69 67 20 "UPDATE config
22c0: 53 45 54 20 76 61 6c 75 65 3d 6c 6f 77 65 72 28 SET value=lower(
22d0: 68 65 78 28 72 61 6e 64 6f 6d 62 6c 6f 62 28 32 hex(randomblob(2
22e0: 30 29 29 29 22 0a 20 20 20 20 22 20 57 48 45 52 0)))". " WHER
22f0: 45 20 6e 61 6d 65 3d 27 70 72 6f 6a 65 63 74 2d E name='project-
2300: 63 6f 64 65 27 3b 22 0a 20 20 20 20 22 55 50 44 code';". "UPD
2310: 41 54 45 20 63 6f 6e 66 69 67 20 53 45 54 20 76 ATE config SET v
2320: 61 6c 75 65 3d 27 64 65 74 61 63 68 65 64 2d 27 alue='detached-'
2330: 20 7c 7c 20 76 61 6c 75 65 22 0a 20 20 20 20 22 || value". "
2340: 20 57 48 45 52 45 20 6e 61 6d 65 3d 27 70 72 6f WHERE name='pro
2350: 6a 65 63 74 2d 6e 61 6d 65 27 20 41 4e 44 20 76 ject-name' AND v
2360: 61 6c 75 65 20 4e 4f 54 20 47 4c 4f 42 20 27 64 alue NOT GLOB 'd
2370: 65 74 61 63 68 65 64 2d 2a 27 3b 22 0a 20 20 29 etached-*';". )
2380: 3b 0a 20 20 64 62 5f 65 6e 64 5f 74 72 61 6e 73 ;. db_end_trans
2390: 61 63 74 69 6f 6e 28 30 29 3b 0a 7d 0a action(0);.}.