Hex Artifact Content

Artifact 7c607fdb04c08e72789336505cee157223c56a08:


0000: 23 21 20 2f 75 73 72 2f 62 69 6e 2f 65 6e 76 20  #! /usr/bin/env 
0010: 74 63 6c 73 68 0a 0a 70 61 63 6b 61 67 65 20 72  tclsh..package r
0020: 65 71 75 69 72 65 20 68 74 74 70 20 32 2e 37 0a  equire http 2.7.
0030: 70 61 63 6b 61 67 65 20 72 65 71 75 69 72 65 20  package require 
0040: 73 71 6c 69 74 65 33 0a 0a 69 66 20 7b 5b 63 61  sqlite3..if {[ca
0050: 74 63 68 20 7b 0a 09 70 61 63 6b 61 67 65 20 72  tch {..package r
0060: 65 71 75 69 72 65 20 73 68 61 31 0a 7d 5d 7d 20  equire sha1.}]} 
0070: 7b 0a 09 40 40 53 48 41 31 2e 54 43 4c 40 40 0a  {..@@SHA1.TCL@@.
0080: 09 70 61 63 6b 61 67 65 20 72 65 71 75 69 72 65  .package require
0090: 20 73 68 61 31 0a 7d 0a 0a 6e 61 6d 65 73 70 61   sha1.}..namespa
00a0: 63 65 20 65 76 61 6c 20 3a 3a 61 70 70 66 73 20  ce eval ::appfs 
00b0: 7b 0a 09 76 61 72 69 61 62 6c 65 20 63 61 63 68  {..variable cach
00c0: 65 64 69 72 20 22 2f 74 6d 70 2f 61 70 70 66 73  edir "/tmp/appfs
00d0: 2d 63 61 63 68 65 22 0a 09 76 61 72 69 61 62 6c  -cache"..variabl
00e0: 65 20 74 74 6c 20 33 36 30 30 0a 09 76 61 72 69  e ttl 3600..vari
00f0: 61 62 6c 65 20 6e 74 74 6c 20 36 30 0a 0a 09 70  able nttl 60...p
0100: 72 6f 63 20 5f 68 61 73 68 5f 73 65 70 20 7b 68  roc _hash_sep {h
0110: 61 73 68 20 7b 73 65 70 73 20 34 7d 7d 20 7b 0a  ash {seps 4}} {.
0120: 09 09 66 6f 72 20 7b 73 65 74 20 69 64 78 20 30  ..for {set idx 0
0130: 7d 20 7b 24 69 64 78 20 3c 20 24 73 65 70 73 7d  } {$idx < $seps}
0140: 20 7b 69 6e 63 72 20 69 64 78 7d 20 7b 0a 09 09   {incr idx} {...
0150: 09 61 70 70 65 6e 64 20 72 65 74 76 61 6c 20 22  .append retval "
0160: 5b 73 74 72 69 6e 67 20 72 61 6e 67 65 20 24 68  [string range $h
0170: 61 73 68 20 5b 65 78 70 72 20 7b 24 69 64 78 20  ash [expr {$idx 
0180: 2a 20 32 7d 5d 20 5b 65 78 70 72 20 7b 28 24 69  * 2}] [expr {($i
0190: 64 78 20 2a 20 32 29 20 2b 20 31 7d 5d 5d 2f 22  dx * 2) + 1}]]/"
01a0: 0a 09 09 7d 0a 09 09 61 70 70 65 6e 64 20 72 65  ...}...append re
01b0: 74 76 61 6c 20 22 5b 73 74 72 69 6e 67 20 72 61  tval "[string ra
01c0: 6e 67 65 20 24 68 61 73 68 20 5b 65 78 70 72 20  nge $hash [expr 
01d0: 7b 24 69 64 78 20 2a 20 32 7d 5d 20 65 6e 64 5d  {$idx * 2}] end]
01e0: 22 0a 0a 09 09 72 65 74 75 72 6e 20 24 72 65 74  "....return $ret
01f0: 76 61 6c 0a 09 7d 0a 0a 09 70 72 6f 63 20 5f 63  val..}...proc _c
0200: 61 63 68 65 66 69 6c 65 20 7b 75 72 6c 20 6b 65  achefile {url ke
0210: 79 20 7b 6b 65 79 49 73 48 61 73 68 20 31 7d 7d  y {keyIsHash 1}}
0220: 20 7b 0a 09 09 73 65 74 20 66 69 6c 65 6b 65 79   {...set filekey
0230: 20 24 6b 65 79 0a 09 09 69 66 20 7b 24 6b 65 79   $key...if {$key
0240: 49 73 48 61 73 68 7d 20 7b 0a 09 09 09 73 65 74  IsHash} {....set
0250: 20 66 69 6c 65 6b 65 79 20 5b 5f 68 61 73 68 5f   filekey [_hash_
0260: 73 65 70 20 24 66 69 6c 65 6b 65 79 5d 0a 09 09  sep $filekey]...
0270: 7d 0a 0a 09 09 73 65 74 20 66 69 6c 65 20 5b 66  }....set file [f
0280: 69 6c 65 20 6a 6f 69 6e 20 24 3a 3a 61 70 70 66  ile join $::appf
0290: 73 3a 3a 63 61 63 68 65 64 69 72 20 24 66 69 6c  s::cachedir $fil
02a0: 65 6b 65 79 5d 0a 0a 09 09 66 69 6c 65 20 6d 6b  ekey]....file mk
02b0: 64 69 72 20 5b 66 69 6c 65 20 64 69 72 6e 61 6d  dir [file dirnam
02c0: 65 20 24 66 69 6c 65 5d 0a 0a 09 09 69 66 20 7b  e $file]....if {
02d0: 5b 66 69 6c 65 20 65 78 69 73 74 73 20 24 66 69  [file exists $fi
02e0: 6c 65 5d 7d 20 7b 0a 09 09 09 72 65 74 75 72 6e  le]} {....return
02f0: 20 24 66 69 6c 65 0a 09 09 7d 0a 0a 09 09 73 65   $file...}....se
0300: 74 20 74 6d 70 66 69 6c 65 20 22 24 7b 66 69 6c  t tmpfile "${fil
0310: 65 7d 2e 5b 65 78 70 72 20 7b 72 61 6e 64 28 29  e}.[expr {rand()
0320: 7d 5d 22 0a 0a 09 09 73 65 74 20 66 64 20 5b 6f  }]"....set fd [o
0330: 70 65 6e 20 24 74 6d 70 66 69 6c 65 20 22 77 22  pen $tmpfile "w"
0340: 5d 0a 09 09 66 63 6f 6e 66 69 67 75 72 65 20 24  ]...fconfigure $
0350: 66 64 20 2d 74 72 61 6e 73 6c 61 74 69 6f 6e 20  fd -translation 
0360: 62 69 6e 61 72 79 0a 0a 09 09 63 61 74 63 68 20  binary....catch 
0370: 7b 0a 09 09 09 73 65 74 20 74 6f 6b 65 6e 20 5b  {....set token [
0380: 3a 3a 68 74 74 70 3a 3a 67 65 74 75 72 6c 20 24  ::http::geturl $
0390: 75 72 6c 20 2d 63 68 61 6e 6e 65 6c 20 24 66 64  url -channel $fd
03a0: 20 2d 62 69 6e 61 72 79 20 74 72 75 65 5d 0a 09   -binary true]..
03b0: 09 7d 0a 0a 09 09 69 66 20 7b 5b 69 6e 66 6f 20  .}....if {[info 
03c0: 65 78 69 73 74 73 20 74 6f 6b 65 6e 5d 7d 20 7b  exists token]} {
03d0: 0a 09 09 09 73 65 74 20 6e 63 6f 64 65 20 5b 3a  ....set ncode [:
03e0: 3a 68 74 74 70 3a 3a 6e 63 6f 64 65 20 24 74 6f  :http::ncode $to
03f0: 6b 65 6e 5d 0a 09 09 09 3a 3a 68 74 74 70 3a 3a  ken]....::http::
0400: 72 65 73 65 74 20 24 74 6f 6b 65 6e 0a 09 09 7d  reset $token...}
0410: 20 65 6c 73 65 20 7b 0a 09 09 09 73 65 74 20 6e   else {....set n
0420: 63 6f 64 65 20 22 39 30 30 22 0a 09 09 7d 0a 0a  code "900"...}..
0430: 09 09 63 6c 6f 73 65 20 24 66 64 0a 0a 09 09 69  ..close $fd....i
0440: 66 20 7b 24 6b 65 79 49 73 48 61 73 68 7d 20 7b  f {$keyIsHash} {
0450: 0a 09 09 09 73 65 74 20 68 61 73 68 20 5b 73 74  ....set hash [st
0460: 72 69 6e 67 20 74 6f 6c 6f 77 65 72 20 5b 73 68  ring tolower [sh
0470: 61 31 3a 3a 73 68 61 31 20 2d 68 65 78 20 2d 66  a1::sha1 -hex -f
0480: 69 6c 65 20 24 74 6d 70 66 69 6c 65 5d 5d 0a 09  ile $tmpfile]]..
0490: 09 7d 20 65 6c 73 65 20 7b 0a 09 09 09 73 65 74  .} else {....set
04a0: 20 68 61 73 68 20 24 6b 65 79 0a 09 09 7d 0a 0a   hash $key...}..
04b0: 09 09 69 66 20 7b 24 6e 63 6f 64 65 20 3d 3d 20  ..if {$ncode == 
04c0: 22 32 30 30 22 20 26 26 20 24 68 61 73 68 20 3d  "200" && $hash =
04d0: 3d 20 24 6b 65 79 7d 20 7b 0a 09 09 09 66 69 6c  = $key} {....fil
04e0: 65 20 72 65 6e 61 6d 65 20 2d 66 6f 72 63 65 20  e rename -force 
04f0: 2d 2d 20 24 74 6d 70 66 69 6c 65 20 24 66 69 6c  -- $tmpfile $fil
0500: 65 0a 09 09 7d 20 65 6c 73 65 20 7b 0a 09 09 09  e...} else {....
0510: 66 69 6c 65 20 64 65 6c 65 74 65 20 2d 66 6f 72  file delete -for
0520: 63 65 20 2d 2d 20 24 74 6d 70 66 69 6c 65 0a 09  ce -- $tmpfile..
0530: 09 7d 0a 0a 09 09 72 65 74 75 72 6e 20 24 66 69  .}....return $fi
0540: 6c 65 0a 09 7d 0a 0a 0a 09 70 72 6f 63 20 5f 69  le..}....proc _i
0550: 73 48 61 73 68 20 7b 76 61 6c 75 65 7d 20 7b 0a  sHash {value} {.
0560: 09 09 73 65 74 20 76 61 6c 75 65 20 5b 73 74 72  ..set value [str
0570: 69 6e 67 20 74 6f 6c 6f 77 65 72 20 24 76 61 6c  ing tolower $val
0580: 75 65 5d 0a 0a 09 09 69 66 20 7b 5b 73 74 72 69  ue]....if {[stri
0590: 6e 67 20 6c 65 6e 67 74 68 20 24 76 61 6c 75 65  ng length $value
05a0: 5d 20 21 3d 20 34 30 7d 20 7b 0a 09 09 09 72 65  ] != 40} {....re
05b0: 74 75 72 6e 20 66 61 6c 73 65 0a 09 09 7d 0a 0a  turn false...}..
05c0: 09 09 69 66 20 7b 21 5b 72 65 67 65 78 70 20 7b  ..if {![regexp {
05d0: 5e 5b 30 2d 39 61 2d 66 5d 2a 24 7d 20 24 76 61  ^[0-9a-f]*$} $va
05e0: 6c 75 65 5d 7d 20 7b 0a 09 09 09 72 65 74 75 72  lue]} {....retur
05f0: 6e 20 66 61 6c 73 65 0a 09 09 7d 0a 0a 09 09 72  n false...}....r
0600: 65 74 75 72 6e 20 74 72 75 65 0a 09 7d 0a 0a 09  eturn true..}...
0610: 70 72 6f 63 20 5f 64 62 20 7b 61 72 67 73 7d 20  proc _db {args} 
0620: 7b 0a 09 09 72 65 74 75 72 6e 20 5b 75 70 6c 65  {...return [uple
0630: 76 65 6c 20 31 20 5b 6c 69 73 74 20 3a 3a 61 70  vel 1 [list ::ap
0640: 70 66 73 3a 3a 64 62 20 7b 2a 7d 24 61 72 67 73  pfs::db {*}$args
0650: 5d 5d 0a 09 7d 0a 0a 09 70 72 6f 63 20 5f 6e 6f  ]]..}...proc _no
0660: 72 6d 61 6c 69 7a 65 4f 53 20 7b 6f 73 7d 20 7b  rmalizeOS {os} {
0670: 0a 09 09 73 65 74 20 6f 73 20 5b 73 74 72 69 6e  ...set os [strin
0680: 67 20 74 6f 6c 6f 77 65 72 20 5b 73 74 72 69 6e  g tolower [strin
0690: 67 20 74 72 69 6d 20 24 6f 73 5d 5d 0a 0a 09 09  g trim $os]]....
06a0: 73 77 69 74 63 68 20 2d 2d 20 24 6f 73 20 7b 0a  switch -- $os {.
06b0: 09 09 09 22 6c 69 6e 75 78 22 20 2d 20 22 66 72  ..."linux" - "fr
06c0: 65 65 62 73 64 22 20 2d 20 22 6f 70 65 6e 62 73  eebsd" - "openbs
06d0: 64 22 20 2d 20 22 6e 65 74 62 73 64 22 20 7b 0a  d" - "netbsd" {.
06e0: 09 09 09 09 72 65 74 75 72 6e 20 24 6f 73 0a 09  ....return $os..
06f0: 09 09 7d 0a 09 09 09 22 73 75 6e 6f 73 22 20 7b  ..}...."sunos" {
0700: 0a 09 09 09 09 72 65 74 75 72 6e 20 22 73 6f 6c  .....return "sol
0710: 61 72 69 73 22 0a 09 09 09 7d 0a 09 09 7d 0a 0a  aris"....}...}..
0720: 09 09 72 65 74 75 72 6e 20 2d 63 6f 64 65 20 65  ..return -code e
0730: 72 72 6f 72 20 22 55 6e 61 62 6c 65 20 74 6f 20  rror "Unable to 
0740: 6e 6f 72 6d 61 6c 69 7a 65 20 4f 53 3a 20 24 6f  normalize OS: $o
0750: 73 22 0a 09 7d 0a 0a 09 70 72 6f 63 20 5f 6e 6f  s"..}...proc _no
0760: 72 6d 61 6c 69 7a 65 43 50 55 20 7b 63 70 75 7d  rmalizeCPU {cpu}
0770: 20 7b 0a 09 09 73 65 74 20 63 70 75 20 5b 73 74   {...set cpu [st
0780: 72 69 6e 67 20 74 6f 6c 6f 77 65 72 20 5b 73 74  ring tolower [st
0790: 72 69 6e 67 20 74 72 69 6d 20 24 63 70 75 5d 5d  ring trim $cpu]]
07a0: 0a 0a 09 09 73 77 69 74 63 68 20 2d 67 6c 6f 62  ....switch -glob
07b0: 20 2d 2d 20 24 63 70 75 20 7b 0a 09 09 09 22 69   -- $cpu {...."i
07c0: 3f 38 36 22 20 7b 0a 09 09 09 09 72 65 74 75 72  ?86" {.....retur
07d0: 6e 20 22 69 78 38 36 22 0a 09 09 09 7d 0a 09 09  n "ix86"....}...
07e0: 09 22 78 38 36 5f 36 34 22 20 7b 0a 09 09 09 09  ."x86_64" {.....
07f0: 72 65 74 75 72 6e 20 24 63 70 75 0a 09 09 09 7d  return $cpu....}
0800: 0a 09 09 7d 0a 0a 09 09 72 65 74 75 72 6e 20 2d  ...}....return -
0810: 63 6f 64 65 20 65 72 72 6f 72 20 22 55 6e 61 62  code error "Unab
0820: 6c 65 20 74 6f 20 6e 6f 72 6d 61 6c 69 7a 65 20  le to normalize 
0830: 43 50 55 3a 20 24 63 70 75 22 0a 09 7d 0a 0a 09  CPU: $cpu"..}...
0840: 70 72 6f 63 20 69 6e 69 74 20 7b 7d 20 7b 0a 09  proc init {} {..
0850: 09 69 66 20 7b 5b 69 6e 66 6f 20 65 78 69 73 74  .if {[info exist
0860: 73 20 3a 3a 61 70 70 66 73 3a 3a 69 6e 69 74 5f  s ::appfs::init_
0870: 63 61 6c 6c 65 64 5d 7d 20 7b 0a 09 09 09 72 65  called]} {....re
0880: 74 75 72 6e 0a 09 09 7d 0a 0a 09 09 73 65 74 20  turn...}....set 
0890: 3a 3a 61 70 70 66 73 3a 3a 69 6e 69 74 5f 63 61  ::appfs::init_ca
08a0: 6c 6c 65 64 20 31 0a 0a 09 09 69 66 20 7b 21 5b  lled 1....if {![
08b0: 69 6e 66 6f 20 65 78 69 73 74 73 20 3a 3a 61 70  info exists ::ap
08c0: 70 66 73 3a 3a 64 62 5d 7d 20 7b 0a 09 09 09 66  pfs::db]} {....f
08d0: 69 6c 65 20 6d 6b 64 69 72 20 24 3a 3a 61 70 70  ile mkdir $::app
08e0: 66 73 3a 3a 63 61 63 68 65 64 69 72 0a 0a 09 09  fs::cachedir....
08f0: 09 73 71 6c 69 74 65 33 20 3a 3a 61 70 70 66 73  .sqlite3 ::appfs
0900: 3a 3a 64 62 20 5b 66 69 6c 65 20 6a 6f 69 6e 20  ::db [file join 
0910: 24 3a 3a 61 70 70 66 73 3a 3a 63 61 63 68 65 64  $::appfs::cached
0920: 69 72 20 63 61 63 68 65 2e 64 62 5d 0a 09 09 7d  ir cache.db]...}
0930: 0a 0a 09 09 23 20 43 72 65 61 74 65 20 74 61 62  ....# Create tab
0940: 6c 65 73 0a 09 09 5f 64 62 20 65 76 61 6c 20 7b  les..._db eval {
0950: 43 52 45 41 54 45 20 54 41 42 4c 45 20 49 46 20  CREATE TABLE IF 
0960: 4e 4f 54 20 45 58 49 53 54 53 20 73 69 74 65 73  NOT EXISTS sites
0970: 28 68 6f 73 74 6e 61 6d 65 20 50 52 49 4d 41 52  (hostname PRIMAR
0980: 59 20 4b 45 59 2c 20 6c 61 73 74 55 70 64 61 74  Y KEY, lastUpdat
0990: 65 2c 20 74 74 6c 29 3b 7d 0a 09 09 5f 64 62 20  e, ttl);}..._db 
09a0: 65 76 61 6c 20 7b 43 52 45 41 54 45 20 54 41 42  eval {CREATE TAB
09b0: 4c 45 20 49 46 20 4e 4f 54 20 45 58 49 53 54 53  LE IF NOT EXISTS
09c0: 20 70 61 63 6b 61 67 65 73 28 68 6f 73 74 6e 61   packages(hostna
09d0: 6d 65 2c 20 73 68 61 31 2c 20 70 61 63 6b 61 67  me, sha1, packag
09e0: 65 2c 20 76 65 72 73 69 6f 6e 2c 20 6f 73 2c 20  e, version, os, 
09f0: 63 70 75 41 72 63 68 2c 20 69 73 4c 61 74 65 73  cpuArch, isLates
0a00: 74 2c 20 68 61 76 65 4d 61 6e 69 66 65 73 74 29  t, haveManifest)
0a10: 3b 7d 0a 09 09 5f 64 62 20 65 76 61 6c 20 7b 43  ;}..._db eval {C
0a20: 52 45 41 54 45 20 54 41 42 4c 45 20 49 46 20 4e  REATE TABLE IF N
0a30: 4f 54 20 45 58 49 53 54 53 20 66 69 6c 65 73 28  OT EXISTS files(
0a40: 70 61 63 6b 61 67 65 5f 73 68 61 31 2c 20 74 79  package_sha1, ty
0a50: 70 65 2c 20 74 69 6d 65 2c 20 73 6f 75 72 63 65  pe, time, source
0a60: 2c 20 73 69 7a 65 2c 20 70 65 72 6d 73 2c 20 66  , size, perms, f
0a70: 69 6c 65 5f 73 68 61 31 2c 20 66 69 6c 65 5f 6e  ile_sha1, file_n
0a80: 61 6d 65 2c 20 66 69 6c 65 5f 64 69 72 65 63 74  ame, file_direct
0a90: 6f 72 79 29 3b 7d 0a 0a 09 09 23 20 43 72 65 61  ory);}....# Crea
0aa0: 74 65 20 69 6e 64 65 78 65 73 0a 09 09 5f 64 62  te indexes..._db
0ab0: 20 65 76 61 6c 20 7b 43 52 45 41 54 45 20 49 4e   eval {CREATE IN
0ac0: 44 45 58 20 49 46 20 4e 4f 54 20 45 58 49 53 54  DEX IF NOT EXIST
0ad0: 53 20 73 69 74 65 73 5f 69 6e 64 65 78 20 4f 4e  S sites_index ON
0ae0: 20 73 69 74 65 73 20 28 68 6f 73 74 6e 61 6d 65   sites (hostname
0af0: 29 3b 7d 0a 09 09 5f 64 62 20 65 76 61 6c 20 7b  );}..._db eval {
0b00: 43 52 45 41 54 45 20 49 4e 44 45 58 20 49 46 20  CREATE INDEX IF 
0b10: 4e 4f 54 20 45 58 49 53 54 53 20 70 61 63 6b 61  NOT EXISTS packa
0b20: 67 65 73 5f 69 6e 64 65 78 20 4f 4e 20 70 61 63  ges_index ON pac
0b30: 6b 61 67 65 73 20 28 68 6f 73 74 6e 61 6d 65 2c  kages (hostname,
0b40: 20 70 61 63 6b 61 67 65 2c 20 76 65 72 73 69 6f   package, versio
0b50: 6e 2c 20 6f 73 2c 20 63 70 75 41 72 63 68 29 3b  n, os, cpuArch);
0b60: 7d 0a 09 09 5f 64 62 20 65 76 61 6c 20 7b 43 52  }..._db eval {CR
0b70: 45 41 54 45 20 49 4e 44 45 58 20 49 46 20 4e 4f  EATE INDEX IF NO
0b80: 54 20 45 58 49 53 54 53 20 66 69 6c 65 73 5f 69  T EXISTS files_i
0b90: 6e 64 65 78 20 4f 4e 20 66 69 6c 65 73 20 28 70  ndex ON files (p
0ba0: 61 63 6b 61 67 65 5f 73 68 61 31 2c 20 66 69 6c  ackage_sha1, fil
0bb0: 65 5f 6e 61 6d 65 2c 20 66 69 6c 65 5f 64 69 72  e_name, file_dir
0bc0: 65 63 74 6f 72 79 29 3b 7d 0a 09 7d 0a 0a 09 70  ectory);}..}...p
0bd0: 72 6f 63 20 64 6f 77 6e 6c 6f 61 64 20 7b 68 6f  roc download {ho
0be0: 73 74 6e 61 6d 65 20 68 61 73 68 20 7b 6d 65 74  stname hash {met
0bf0: 68 6f 64 20 73 68 61 31 7d 7d 20 7b 0a 09 09 73  hod sha1}} {...s
0c00: 65 74 20 75 72 6c 20 22 68 74 74 70 3a 2f 2f 24  et url "http://$
0c10: 68 6f 73 74 6e 61 6d 65 2f 61 70 70 66 73 2f 24  hostname/appfs/$
0c20: 6d 65 74 68 6f 64 2f 24 68 61 73 68 22 0a 09 09  method/$hash"...
0c30: 73 65 74 20 66 69 6c 65 20 5b 5f 63 61 63 68 65  set file [_cache
0c40: 66 69 6c 65 20 24 75 72 6c 20 24 68 61 73 68 5d  file $url $hash]
0c50: 0a 0a 09 09 69 66 20 7b 21 5b 66 69 6c 65 20 65  ....if {![file e
0c60: 78 69 73 74 73 20 24 66 69 6c 65 5d 7d 20 7b 0a  xists $file]} {.
0c70: 09 09 09 72 65 74 75 72 6e 20 2d 63 6f 64 65 20  ...return -code 
0c80: 65 72 72 6f 72 20 22 55 6e 61 62 6c 65 20 74 6f  error "Unable to
0c90: 20 66 65 74 63 68 22 0a 09 09 7d 0a 0a 09 09 72   fetch"...}....r
0ca0: 65 74 75 72 6e 20 24 66 69 6c 65 0a 09 7d 0a 0a  eturn $file..}..
0cb0: 09 70 72 6f 63 20 67 65 74 69 6e 64 65 78 20 7b  .proc getindex {
0cc0: 68 6f 73 74 6e 61 6d 65 7d 20 7b 0a 09 09 73 65  hostname} {...se
0cd0: 74 20 6e 6f 77 20 5b 63 6c 6f 63 6b 20 73 65 63  t now [clock sec
0ce0: 6f 6e 64 73 5d 0a 0a 09 09 73 65 74 20 6c 61 73  onds]....set las
0cf0: 74 55 70 64 61 74 65 73 20 5b 5f 64 62 20 65 76  tUpdates [_db ev
0d00: 61 6c 20 7b 53 45 4c 45 43 54 20 6c 61 73 74 55  al {SELECT lastU
0d10: 70 64 61 74 65 2c 20 74 74 6c 20 46 52 4f 4d 20  pdate, ttl FROM 
0d20: 73 69 74 65 73 20 57 48 45 52 45 20 68 6f 73 74  sites WHERE host
0d30: 6e 61 6d 65 20 3d 20 24 68 6f 73 74 6e 61 6d 65  name = $hostname
0d40: 20 4c 49 4d 49 54 20 31 3b 7d 5d 0a 09 09 69 66   LIMIT 1;}]...if
0d50: 20 7b 5b 6c 6c 65 6e 67 74 68 20 24 6c 61 73 74   {[llength $last
0d60: 55 70 64 61 74 65 73 5d 20 3d 3d 20 30 7d 20 7b  Updates] == 0} {
0d70: 0a 09 09 09 73 65 74 20 6c 61 73 74 55 70 64 61  ....set lastUpda
0d80: 74 65 20 30 0a 09 09 09 73 65 74 20 74 74 6c 20  te 0....set ttl 
0d90: 30 0a 09 09 7d 20 65 6c 73 65 20 7b 0a 09 09 09  0...} else {....
0da0: 73 65 74 20 6c 61 73 74 55 70 64 61 74 65 20 5b  set lastUpdate [
0db0: 6c 69 6e 64 65 78 20 24 6c 61 73 74 55 70 64 61  lindex $lastUpda
0dc0: 74 65 73 20 30 5d 0a 09 09 09 73 65 74 20 74 74  tes 0]....set tt
0dd0: 6c 20 5b 6c 69 6e 64 65 78 20 24 6c 61 73 74 55  l [lindex $lastU
0de0: 70 64 61 74 65 73 20 31 5d 0a 09 09 7d 0a 0a 09  pdates 1]...}...
0df0: 09 69 66 20 7b 24 6e 6f 77 20 3c 20 28 24 6c 61  .if {$now < ($la
0e00: 73 74 55 70 64 61 74 65 20 2b 20 24 74 74 6c 29  stUpdate + $ttl)
0e10: 7d 20 7b 0a 09 09 09 72 65 74 75 72 6e 20 43 4f  } {....return CO
0e20: 4d 50 4c 45 54 45 0a 09 09 7d 0a 0a 09 09 69 66  MPLETE...}....if
0e30: 20 7b 5b 73 74 72 69 6e 67 20 6d 61 74 63 68 20   {[string match 
0e40: 22 2a 5c 5b 2f 7e 5c 5d 2a 22 20 24 68 6f 73 74  "*\[/~\]*" $host
0e50: 6e 61 6d 65 5d 7d 20 7b 0a 09 09 09 72 65 74 75  name]} {....retu
0e60: 72 6e 20 2d 63 6f 64 65 20 65 72 72 6f 72 20 22  rn -code error "
0e70: 49 6e 76 61 6c 69 64 20 68 6f 73 74 6e 61 6d 65  Invalid hostname
0e80: 22 0a 09 09 7d 0a 0a 09 09 73 65 74 20 75 72 6c  "...}....set url
0e90: 20 22 68 74 74 70 3a 2f 2f 24 68 6f 73 74 6e 61   "http://$hostna
0ea0: 6d 65 2f 61 70 70 66 73 2f 69 6e 64 65 78 22 0a  me/appfs/index".
0eb0: 0a 09 09 63 61 74 63 68 20 7b 0a 09 09 09 73 65  ...catch {....se
0ec0: 74 20 74 6f 6b 65 6e 20 5b 3a 3a 68 74 74 70 3a  t token [::http:
0ed0: 3a 67 65 74 75 72 6c 20 24 75 72 6c 5d 0a 09 09  :geturl $url]...
0ee0: 09 69 66 20 7b 5b 3a 3a 68 74 74 70 3a 3a 6e 63  .if {[::http::nc
0ef0: 6f 64 65 20 24 74 6f 6b 65 6e 5d 20 3d 3d 20 22  ode $token] == "
0f00: 32 30 30 22 7d 20 7b 0a 09 09 09 09 73 65 74 20  200"} {.....set 
0f10: 69 6e 64 65 78 68 61 73 68 5f 64 61 74 61 20 5b  indexhash_data [
0f20: 3a 3a 68 74 74 70 3a 3a 64 61 74 61 20 24 74 6f  ::http::data $to
0f30: 6b 65 6e 5d 0a 09 09 09 7d 0a 09 09 09 3a 3a 68  ken]....}....::h
0f40: 74 74 70 3a 3a 72 65 73 65 74 20 24 74 6f 6b 65  ttp::reset $toke
0f50: 6e 0a 09 09 09 24 74 6f 6b 65 6e 20 63 6c 65 61  n....$token clea
0f60: 6e 75 70 0a 09 09 7d 0a 0a 09 09 69 66 20 7b 21  nup...}....if {!
0f70: 5b 69 6e 66 6f 20 65 78 69 73 74 73 20 69 6e 64  [info exists ind
0f80: 65 78 68 61 73 68 5f 64 61 74 61 5d 7d 20 7b 0a  exhash_data]} {.
0f90: 09 09 09 23 20 43 61 63 68 65 20 74 68 69 73 20  ...# Cache this 
0fa0: 72 65 73 75 6c 74 20 66 6f 72 20 36 30 20 73 65  result for 60 se
0fb0: 63 6f 6e 64 73 0a 09 09 09 5f 64 62 20 65 76 61  conds...._db eva
0fc0: 6c 20 7b 49 4e 53 45 52 54 20 4f 52 20 52 45 50  l {INSERT OR REP
0fd0: 4c 41 43 45 20 49 4e 54 4f 20 73 69 74 65 73 20  LACE INTO sites 
0fe0: 28 68 6f 73 74 6e 61 6d 65 2c 20 6c 61 73 74 55  (hostname, lastU
0ff0: 70 64 61 74 65 2c 20 74 74 6c 29 20 56 41 4c 55  pdate, ttl) VALU
1000: 45 53 20 28 24 68 6f 73 74 6e 61 6d 65 2c 20 24  ES ($hostname, $
1010: 6e 6f 77 2c 20 24 3a 3a 61 70 70 66 73 3a 3a 6e  now, $::appfs::n
1020: 74 74 6c 29 3b 7d 0a 0a 09 09 09 72 65 74 75 72  ttl);}.....retur
1030: 6e 20 2d 63 6f 64 65 20 65 72 72 6f 72 20 22 55  n -code error "U
1040: 6e 61 62 6c 65 20 74 6f 20 66 65 74 63 68 20 24  nable to fetch $
1050: 75 72 6c 22 0a 09 09 7d 0a 0a 09 09 73 65 74 20  url"...}....set 
1060: 69 6e 64 65 78 68 61 73 68 20 5b 6c 69 6e 64 65  indexhash [linde
1070: 78 20 5b 73 70 6c 69 74 20 24 69 6e 64 65 78 68  x [split $indexh
1080: 61 73 68 5f 64 61 74 61 20 22 2c 22 5d 20 30 5d  ash_data ","] 0]
1090: 0a 0a 09 09 69 66 20 7b 21 5b 5f 69 73 48 61 73  ....if {![_isHas
10a0: 68 20 24 69 6e 64 65 78 68 61 73 68 5d 7d 20 7b  h $indexhash]} {
10b0: 0a 09 09 09 72 65 74 75 72 6e 20 2d 63 6f 64 65  ....return -code
10c0: 20 65 72 72 6f 72 20 22 49 6e 76 61 6c 69 64 20   error "Invalid 
10d0: 68 61 73 68 3a 20 24 69 6e 64 65 78 68 61 73 68  hash: $indexhash
10e0: 22 0a 09 09 7d 0a 0a 09 09 73 65 74 20 66 69 6c  "...}....set fil
10f0: 65 20 5b 64 6f 77 6e 6c 6f 61 64 20 24 68 6f 73  e [download $hos
1100: 74 6e 61 6d 65 20 24 69 6e 64 65 78 68 61 73 68  tname $indexhash
1110: 5d 0a 09 09 73 65 74 20 66 64 20 5b 6f 70 65 6e  ]...set fd [open
1120: 20 24 66 69 6c 65 5d 0a 09 09 73 65 74 20 64 61   $file]...set da
1130: 74 61 20 5b 72 65 61 64 20 24 66 64 5d 0a 09 09  ta [read $fd]...
1140: 63 6c 6f 73 65 20 24 66 64 0a 0a 09 09 73 65 74  close $fd....set
1150: 20 63 75 72 72 5f 70 61 63 6b 61 67 65 73 20 5b   curr_packages [
1160: 6c 69 73 74 5d 0a 09 09 66 6f 72 65 61 63 68 20  list]...foreach 
1170: 6c 69 6e 65 20 5b 73 70 6c 69 74 20 24 64 61 74  line [split $dat
1180: 61 20 22 5c 6e 22 5d 20 7b 0a 09 09 09 73 65 74  a "\n"] {....set
1190: 20 6c 69 6e 65 20 5b 73 74 72 69 6e 67 20 74 72   line [string tr
11a0: 69 6d 20 24 6c 69 6e 65 5d 0a 0a 09 09 09 69 66  im $line].....if
11b0: 20 7b 5b 73 74 72 69 6e 67 20 6d 61 74 63 68 20   {[string match 
11c0: 22 2a 2f 2a 22 20 24 6c 69 6e 65 5d 7d 20 7b 0a  "*/*" $line]} {.
11d0: 09 09 09 09 63 6f 6e 74 69 6e 75 65 0a 09 09 09  ....continue....
11e0: 7d 0a 0a 09 09 09 69 66 20 7b 24 6c 69 6e 65 20  }.....if {$line 
11f0: 3d 3d 20 22 22 7d 20 7b 0a 09 09 09 09 63 6f 6e  == ""} {.....con
1200: 74 69 6e 75 65 0a 09 09 09 7d 0a 0a 09 09 09 73  tinue....}.....s
1210: 65 74 20 77 6f 72 6b 20 5b 73 70 6c 69 74 20 24  et work [split $
1220: 6c 69 6e 65 20 22 2c 22 5d 0a 0a 09 09 09 75 6e  line ","].....un
1230: 73 65 74 20 2d 6e 6f 63 6f 6d 70 6c 61 69 6e 20  set -nocomplain 
1240: 70 6b 67 49 6e 66 6f 0a 09 09 09 73 65 74 20 70  pkgInfo....set p
1250: 6b 67 49 6e 66 6f 28 70 61 63 6b 61 67 65 29 20  kgInfo(package) 
1260: 20 5b 6c 69 6e 64 65 78 20 24 77 6f 72 6b 20 30   [lindex $work 0
1270: 5d 0a 09 09 09 73 65 74 20 70 6b 67 49 6e 66 6f  ]....set pkgInfo
1280: 28 76 65 72 73 69 6f 6e 29 20 20 5b 6c 69 6e 64  (version)  [lind
1290: 65 78 20 24 77 6f 72 6b 20 31 5d 0a 09 09 09 73  ex $work 1]....s
12a0: 65 74 20 70 6b 67 49 6e 66 6f 28 6f 73 29 20 20  et pkgInfo(os)  
12b0: 20 20 20 20 20 5b 5f 6e 6f 72 6d 61 6c 69 7a 65       [_normalize
12c0: 4f 53 20 5b 6c 69 6e 64 65 78 20 24 77 6f 72 6b  OS [lindex $work
12d0: 20 32 5d 5d 0a 09 09 09 73 65 74 20 70 6b 67 49   2]]....set pkgI
12e0: 6e 66 6f 28 63 70 75 41 72 63 68 29 20 20 5b 5f  nfo(cpuArch)  [_
12f0: 6e 6f 72 6d 61 6c 69 7a 65 43 50 55 20 5b 6c 69  normalizeCPU [li
1300: 6e 64 65 78 20 24 77 6f 72 6b 20 33 5d 5d 0a 09  ndex $work 3]]..
1310: 09 09 73 65 74 20 70 6b 67 49 6e 66 6f 28 68 61  ..set pkgInfo(ha
1320: 73 68 29 20 20 20 20 20 5b 73 74 72 69 6e 67 20  sh)     [string 
1330: 74 6f 6c 6f 77 65 72 20 5b 6c 69 6e 64 65 78 20  tolower [lindex 
1340: 24 77 6f 72 6b 20 34 5d 5d 0a 09 09 09 73 65 74  $work 4]]....set
1350: 20 70 6b 67 49 6e 66 6f 28 68 61 73 68 5f 74 79   pkgInfo(hash_ty
1360: 70 65 29 20 22 73 68 61 31 22 0a 09 09 09 73 65  pe) "sha1"....se
1370: 74 20 70 6b 67 49 6e 66 6f 28 69 73 4c 61 74 65  t pkgInfo(isLate
1380: 73 74 29 20 5b 65 78 70 72 20 7b 21 21 5b 6c 69  st) [expr {!![li
1390: 6e 64 65 78 20 24 77 6f 72 6b 20 35 5d 7d 5d 0a  ndex $work 5]}].
13a0: 0a 09 09 09 69 66 20 7b 21 5b 5f 69 73 48 61 73  ....if {![_isHas
13b0: 68 20 24 70 6b 67 49 6e 66 6f 28 68 61 73 68 29  h $pkgInfo(hash)
13c0: 5d 7d 20 7b 0a 09 09 09 09 63 6f 6e 74 69 6e 75  ]} {.....continu
13d0: 65 0a 09 09 09 7d 0a 0a 09 09 09 6c 61 70 70 65  e....}.....lappe
13e0: 6e 64 20 63 75 72 72 5f 70 61 63 6b 61 67 65 73  nd curr_packages
13f0: 20 24 70 6b 67 49 6e 66 6f 28 68 61 73 68 29 0a   $pkgInfo(hash).
1400: 0a 09 09 09 23 20 44 6f 20 6e 6f 74 20 64 6f 20  ....# Do not do 
1410: 61 6e 79 20 61 64 64 69 74 69 6f 6e 61 6c 20 77  any additional w
1420: 6f 72 6b 20 69 66 20 77 65 20 61 6c 72 65 61 64  ork if we alread
1430: 79 20 68 61 76 65 20 74 68 69 73 20 70 61 63 6b  y have this pack
1440: 61 67 65 0a 09 09 09 73 65 74 20 65 78 69 73 74  age....set exist
1450: 69 6e 67 5f 70 61 63 6b 61 67 65 73 20 5b 5f 64  ing_packages [_d
1460: 62 20 65 76 61 6c 20 7b 53 45 4c 45 43 54 20 70  b eval {SELECT p
1470: 61 63 6b 61 67 65 20 46 52 4f 4d 20 70 61 63 6b  ackage FROM pack
1480: 61 67 65 73 20 57 48 45 52 45 20 68 6f 73 74 6e  ages WHERE hostn
1490: 61 6d 65 20 3d 20 24 68 6f 73 74 6e 61 6d 65 20  ame = $hostname 
14a0: 41 4e 44 20 73 68 61 31 20 3d 20 24 70 6b 67 49  AND sha1 = $pkgI
14b0: 6e 66 6f 28 68 61 73 68 29 3b 7d 5d 0a 09 09 09  nfo(hash);}]....
14c0: 69 66 20 7b 5b 6c 73 65 61 72 63 68 20 2d 65 78  if {[lsearch -ex
14d0: 61 63 74 20 24 65 78 69 73 74 69 6e 67 5f 70 61  act $existing_pa
14e0: 63 6b 61 67 65 73 20 24 70 6b 67 49 6e 66 6f 28  ckages $pkgInfo(
14f0: 70 61 63 6b 61 67 65 29 5d 20 21 3d 20 2d 31 7d  package)] != -1}
1500: 20 7b 0a 09 09 09 09 63 6f 6e 74 69 6e 75 65 0a   {.....continue.
1510: 09 09 09 7d 0a 0a 09 09 09 69 66 20 7b 24 70 6b  ...}.....if {$pk
1520: 67 49 6e 66 6f 28 69 73 4c 61 74 65 73 74 29 7d  gInfo(isLatest)}
1530: 20 7b 0a 09 09 09 09 5f 64 62 20 65 76 61 6c 20   {....._db eval 
1540: 7b 55 50 44 41 54 45 20 70 61 63 6b 61 67 65 73  {UPDATE packages
1550: 20 53 45 54 20 69 73 4c 61 74 65 73 74 20 3d 20   SET isLatest = 
1560: 30 20 57 48 45 52 45 20 68 6f 73 74 6e 61 6d 65  0 WHERE hostname
1570: 20 3d 20 24 68 6f 73 74 6e 61 6d 65 20 41 4e 44   = $hostname AND
1580: 20 70 61 63 6b 61 67 65 20 3d 20 24 70 6b 67 49   package = $pkgI
1590: 6e 66 6f 28 24 70 61 63 6b 61 67 65 29 20 41 4e  nfo($package) AN
15a0: 44 20 6f 73 20 3d 20 24 70 6b 67 49 6e 66 6f 28  D os = $pkgInfo(
15b0: 24 70 61 63 6b 61 67 65 29 20 41 4e 44 20 63 70  $package) AND cp
15c0: 75 41 72 63 68 20 3d 20 24 70 6b 67 49 6e 66 6f  uArch = $pkgInfo
15d0: 28 63 70 75 41 72 63 68 29 3b 7d 0a 09 09 09 7d  (cpuArch);}....}
15e0: 0a 0a 09 09 09 5f 64 62 20 65 76 61 6c 20 7b 49  ....._db eval {I
15f0: 4e 53 45 52 54 20 49 4e 54 4f 20 70 61 63 6b 61  NSERT INTO packa
1600: 67 65 73 20 28 68 6f 73 74 6e 61 6d 65 2c 20 73  ges (hostname, s
1610: 68 61 31 2c 20 70 61 63 6b 61 67 65 2c 20 76 65  ha1, package, ve
1620: 72 73 69 6f 6e 2c 20 6f 73 2c 20 63 70 75 41 72  rsion, os, cpuAr
1630: 63 68 2c 20 69 73 4c 61 74 65 73 74 2c 20 68 61  ch, isLatest, ha
1640: 76 65 4d 61 6e 69 66 65 73 74 29 20 56 41 4c 55  veManifest) VALU
1650: 45 53 20 28 24 68 6f 73 74 6e 61 6d 65 2c 20 24  ES ($hostname, $
1660: 70 6b 67 49 6e 66 6f 28 68 61 73 68 29 2c 20 24  pkgInfo(hash), $
1670: 70 6b 67 49 6e 66 6f 28 70 61 63 6b 61 67 65 29  pkgInfo(package)
1680: 2c 20 24 70 6b 67 49 6e 66 6f 28 76 65 72 73 69  , $pkgInfo(versi
1690: 6f 6e 29 2c 20 24 70 6b 67 49 6e 66 6f 28 6f 73  on), $pkgInfo(os
16a0: 29 2c 20 24 70 6b 67 49 6e 66 6f 28 63 70 75 41  ), $pkgInfo(cpuA
16b0: 72 63 68 29 2c 20 24 70 6b 67 49 6e 66 6f 28 69  rch), $pkgInfo(i
16c0: 73 4c 61 74 65 73 74 29 2c 20 30 29 3b 7d 0a 09  sLatest), 0);}..
16d0: 09 7d 0a 0a 09 09 23 20 4c 6f 6f 6b 20 66 6f 72  .}....# Look for
16e0: 20 70 61 63 6b 61 67 65 73 20 74 68 61 74 20 68   packages that h
16f0: 61 76 65 20 62 65 65 6e 20 64 65 6c 65 74 65 64  ave been deleted
1700: 0a 09 09 73 65 74 20 66 6f 75 6e 64 5f 70 61 63  ...set found_pac
1710: 6b 61 67 65 73 20 5b 5f 64 62 20 65 76 61 6c 20  kages [_db eval 
1720: 7b 53 45 4c 45 43 54 20 73 68 61 31 20 46 52 4f  {SELECT sha1 FRO
1730: 4d 20 70 61 63 6b 61 67 65 73 20 57 48 45 52 45  M packages WHERE
1740: 20 68 6f 73 74 6e 61 6d 65 20 3d 20 24 68 6f 73   hostname = $hos
1750: 74 6e 61 6d 65 3b 7d 5d 0a 09 09 66 6f 72 65 61  tname;}]...forea
1760: 63 68 20 70 61 63 6b 61 67 65 20 24 66 6f 75 6e  ch package $foun
1770: 64 5f 70 61 63 6b 61 67 65 73 20 7b 0a 09 09 09  d_packages {....
1780: 73 65 74 20 66 6f 75 6e 64 5f 70 61 63 6b 61 67  set found_packag
1790: 65 73 5f 61 72 72 28 24 70 61 63 6b 61 67 65 29  es_arr($package)
17a0: 20 31 0a 09 09 7d 0a 0a 09 09 66 6f 72 65 61 63   1...}....foreac
17b0: 68 20 70 61 63 6b 61 67 65 20 24 63 75 72 72 5f  h package $curr_
17c0: 70 61 63 6b 61 67 65 73 20 7b 0a 09 09 09 75 6e  packages {....un
17d0: 73 65 74 20 2d 6e 6f 63 6f 6d 70 6c 61 69 6e 20  set -nocomplain 
17e0: 66 6f 75 6e 64 5f 70 61 63 6b 61 67 65 73 5f 61  found_packages_a
17f0: 72 72 28 24 70 61 63 6b 61 67 65 29 0a 09 09 7d  rr($package)...}
1800: 0a 0a 09 09 66 6f 72 65 61 63 68 20 70 61 63 6b  ....foreach pack
1810: 61 67 65 20 5b 61 72 72 61 79 20 6e 61 6d 65 73  age [array names
1820: 20 66 6f 75 6e 64 5f 70 61 63 6b 61 67 65 73 5f   found_packages_
1830: 61 72 72 5d 20 7b 0a 09 09 09 5f 64 62 20 65 76  arr] {...._db ev
1840: 61 6c 20 7b 44 45 4c 45 54 45 20 46 52 4f 4d 20  al {DELETE FROM 
1850: 70 61 63 6b 61 67 65 73 20 57 48 45 52 45 20 68  packages WHERE h
1860: 6f 73 74 6e 61 6d 65 20 3d 20 24 68 6f 73 74 6e  ostname = $hostn
1870: 61 6d 65 20 41 4e 44 20 73 68 61 31 20 3d 20 24  ame AND sha1 = $
1880: 70 61 63 6b 61 67 65 3b 7d 0a 09 09 7d 0a 0a 09  package;}...}...
1890: 09 5f 64 62 20 65 76 61 6c 20 7b 49 4e 53 45 52  ._db eval {INSER
18a0: 54 20 4f 52 20 52 45 50 4c 41 43 45 20 49 4e 54  T OR REPLACE INT
18b0: 4f 20 73 69 74 65 73 20 28 68 6f 73 74 6e 61 6d  O sites (hostnam
18c0: 65 2c 20 6c 61 73 74 55 70 64 61 74 65 2c 20 74  e, lastUpdate, t
18d0: 74 6c 29 20 56 41 4c 55 45 53 20 28 24 68 6f 73  tl) VALUES ($hos
18e0: 74 6e 61 6d 65 2c 20 24 6e 6f 77 2c 20 24 3a 3a  tname, $now, $::
18f0: 61 70 70 66 73 3a 3a 74 74 6c 29 3b 7d 0a 0a 09  appfs::ttl);}...
1900: 09 72 65 74 75 72 6e 20 43 4f 4d 50 4c 45 54 45  .return COMPLETE
1910: 0a 09 7d 0a 0a 09 70 72 6f 63 20 67 65 74 70 6b  ..}...proc getpk
1920: 67 6d 61 6e 69 66 65 73 74 20 7b 68 6f 73 74 6e  gmanifest {hostn
1930: 61 6d 65 20 70 61 63 6b 61 67 65 5f 73 68 61 31  ame package_sha1
1940: 7d 20 7b 0a 09 09 73 65 74 20 68 61 76 65 4d 61  } {...set haveMa
1950: 6e 69 66 65 73 74 73 20 5b 5f 64 62 20 65 76 61  nifests [_db eva
1960: 6c 20 7b 53 45 4c 45 43 54 20 68 61 76 65 4d 61  l {SELECT haveMa
1970: 6e 69 66 65 73 74 20 46 52 4f 4d 20 70 61 63 6b  nifest FROM pack
1980: 61 67 65 73 20 57 48 45 52 45 20 73 68 61 31 20  ages WHERE sha1 
1990: 3d 20 24 70 61 63 6b 61 67 65 5f 73 68 61 31 20  = $package_sha1 
19a0: 4c 49 4d 49 54 20 31 3b 7d 5d 0a 09 09 73 65 74  LIMIT 1;}]...set
19b0: 20 68 61 76 65 4d 61 6e 69 66 65 73 74 20 5b 6c   haveManifest [l
19c0: 69 6e 64 65 78 20 24 68 61 76 65 4d 61 6e 69 66  index $haveManif
19d0: 65 73 74 73 20 30 5d 0a 0a 09 09 69 66 20 7b 24  ests 0]....if {$
19e0: 68 61 76 65 4d 61 6e 69 66 65 73 74 7d 20 7b 0a  haveManifest} {.
19f0: 09 09 09 72 65 74 75 72 6e 20 43 4f 4d 50 4c 45  ...return COMPLE
1a00: 54 45 0a 09 09 7d 0a 0a 09 09 69 66 20 7b 21 5b  TE...}....if {![
1a10: 5f 69 73 48 61 73 68 20 24 70 61 63 6b 61 67 65  _isHash $package
1a20: 5f 73 68 61 31 5d 7d 20 7b 0a 09 09 09 72 65 74  _sha1]} {....ret
1a30: 75 72 6e 20 46 41 49 4c 0a 09 09 7d 0a 0a 09 09  urn FAIL...}....
1a40: 73 65 74 20 66 69 6c 65 20 5b 64 6f 77 6e 6c 6f  set file [downlo
1a50: 61 64 20 24 68 6f 73 74 6e 61 6d 65 20 24 70 61  ad $hostname $pa
1a60: 63 6b 61 67 65 5f 73 68 61 31 5d 0a 09 09 73 65  ckage_sha1]...se
1a70: 74 20 66 64 20 5b 6f 70 65 6e 20 24 66 69 6c 65  t fd [open $file
1a80: 5d 0a 09 09 73 65 74 20 70 6b 67 64 61 74 61 20  ]...set pkgdata 
1a90: 5b 72 65 61 64 20 24 66 64 5d 0a 09 09 63 6c 6f  [read $fd]...clo
1aa0: 73 65 20 24 66 64 0a 0a 09 09 5f 64 62 20 74 72  se $fd...._db tr
1ab0: 61 6e 73 61 63 74 69 6f 6e 20 7b 0a 09 09 09 66  ansaction {....f
1ac0: 6f 72 65 61 63 68 20 6c 69 6e 65 20 5b 73 70 6c  oreach line [spl
1ad0: 69 74 20 24 70 6b 67 64 61 74 61 20 22 5c 6e 22  it $pkgdata "\n"
1ae0: 5d 20 7b 0a 09 09 09 09 73 65 74 20 6c 69 6e 65  ] {.....set line
1af0: 20 5b 73 74 72 69 6e 67 20 74 72 69 6d 20 24 6c   [string trim $l
1b00: 69 6e 65 5d 0a 0a 09 09 09 09 69 66 20 7b 24 6c  ine]......if {$l
1b10: 69 6e 65 20 3d 3d 20 22 22 7d 20 7b 0a 09 09 09  ine == ""} {....
1b20: 09 09 63 6f 6e 74 69 6e 75 65 0a 09 09 09 09 7d  ..continue.....}
1b30: 0a 0a 09 09 09 09 73 65 74 20 77 6f 72 6b 20 5b  ......set work [
1b40: 73 70 6c 69 74 20 24 6c 69 6e 65 20 22 2c 22 5d  split $line ","]
1b50: 0a 0a 09 09 09 09 75 6e 73 65 74 20 2d 6e 6f 63  ......unset -noc
1b60: 6f 6d 70 6c 61 69 6e 20 66 69 6c 65 49 6e 66 6f  omplain fileInfo
1b70: 0a 09 09 09 09 73 65 74 20 66 69 6c 65 49 6e 66  .....set fileInf
1b80: 6f 28 74 79 70 65 29 20 5b 6c 69 6e 64 65 78 20  o(type) [lindex 
1b90: 24 77 6f 72 6b 20 30 5d 0a 09 09 09 09 73 65 74  $work 0].....set
1ba0: 20 66 69 6c 65 49 6e 66 6f 28 74 69 6d 65 29 20   fileInfo(time) 
1bb0: 5b 6c 69 6e 64 65 78 20 24 77 6f 72 6b 20 31 5d  [lindex $work 1]
1bc0: 0a 0a 09 09 09 09 73 65 74 20 77 6f 72 6b 20 5b  ......set work [
1bd0: 6c 72 61 6e 67 65 20 24 77 6f 72 6b 20 32 20 65  lrange $work 2 e
1be0: 6e 64 5d 0a 09 09 09 09 73 77 69 74 63 68 20 2d  nd].....switch -
1bf0: 2d 20 24 66 69 6c 65 49 6e 66 6f 28 74 79 70 65  - $fileInfo(type
1c00: 29 20 7b 0a 09 09 09 09 09 22 66 69 6c 65 22 20  ) {......"file" 
1c10: 7b 0a 09 09 09 09 09 09 73 65 74 20 66 69 6c 65  {.......set file
1c20: 49 6e 66 6f 28 73 69 7a 65 29 20 5b 6c 69 6e 64  Info(size) [lind
1c30: 65 78 20 24 77 6f 72 6b 20 30 5d 0a 09 09 09 09  ex $work 0].....
1c40: 09 09 73 65 74 20 66 69 6c 65 49 6e 66 6f 28 70  ..set fileInfo(p
1c50: 65 72 6d 73 29 20 5b 6c 69 6e 64 65 78 20 24 77  erms) [lindex $w
1c60: 6f 72 6b 20 31 5d 0a 09 09 09 09 09 09 73 65 74  ork 1].......set
1c70: 20 66 69 6c 65 49 6e 66 6f 28 73 68 61 31 29 20   fileInfo(sha1) 
1c80: 5b 6c 69 6e 64 65 78 20 24 77 6f 72 6b 20 32 5d  [lindex $work 2]
1c90: 0a 0a 09 09 09 09 09 09 73 65 74 20 77 6f 72 6b  ........set work
1ca0: 20 5b 6c 72 61 6e 67 65 20 24 77 6f 72 6b 20 33   [lrange $work 3
1cb0: 20 65 6e 64 5d 0a 09 09 09 09 09 7d 0a 09 09 09   end]......}....
1cc0: 09 09 22 73 79 6d 6c 69 6e 6b 22 20 7b 0a 09 09  .."symlink" {...
1cd0: 09 09 09 09 73 65 74 20 66 69 6c 65 49 6e 66 6f  ....set fileInfo
1ce0: 28 73 6f 75 72 63 65 29 20 5b 6c 69 6e 64 65 78  (source) [lindex
1cf0: 20 24 77 6f 72 6b 20 30 5d 0a 09 09 09 09 09 09   $work 0].......
1d00: 73 65 74 20 77 6f 72 6b 20 5b 6c 72 61 6e 67 65  set work [lrange
1d10: 20 24 77 6f 72 6b 20 31 20 65 6e 64 5d 0a 09 09   $work 1 end]...
1d20: 09 09 09 7d 0a 09 09 09 09 7d 0a 0a 09 09 09 09  ...}.....}......
1d30: 73 65 74 20 66 69 6c 65 49 6e 66 6f 28 6e 61 6d  set fileInfo(nam
1d40: 65 29 20 5b 6a 6f 69 6e 20 24 77 6f 72 6b 20 22  e) [join $work "
1d50: 2c 22 5d 0a 09 09 09 09 73 65 74 20 66 69 6c 65  ,"].....set file
1d60: 49 6e 66 6f 28 6e 61 6d 65 29 20 5b 73 70 6c 69  Info(name) [spli
1d70: 74 20 5b 73 74 72 69 6e 67 20 74 72 69 6d 20 24  t [string trim $
1d80: 66 69 6c 65 49 6e 66 6f 28 6e 61 6d 65 29 20 22  fileInfo(name) "
1d90: 2f 22 5d 20 22 2f 22 5d 0a 09 09 09 09 73 65 74  /"] "/"].....set
1da0: 20 66 69 6c 65 49 6e 66 6f 28 64 69 72 65 63 74   fileInfo(direct
1db0: 6f 72 79 29 20 5b 6a 6f 69 6e 20 5b 6c 72 61 6e  ory) [join [lran
1dc0: 67 65 20 24 66 69 6c 65 49 6e 66 6f 28 6e 61 6d  ge $fileInfo(nam
1dd0: 65 29 20 30 20 65 6e 64 2d 31 5d 20 22 2f 22 5d  e) 0 end-1] "/"]
1de0: 0a 09 09 09 09 73 65 74 20 66 69 6c 65 49 6e 66  .....set fileInf
1df0: 6f 28 6e 61 6d 65 29 20 5b 6c 69 6e 64 65 78 20  o(name) [lindex 
1e00: 24 66 69 6c 65 49 6e 66 6f 28 6e 61 6d 65 29 20  $fileInfo(name) 
1e10: 65 6e 64 5d 0a 0a 09 09 09 09 5f 64 62 20 65 76  end]......_db ev
1e20: 61 6c 20 7b 49 4e 53 45 52 54 20 49 4e 54 4f 20  al {INSERT INTO 
1e30: 66 69 6c 65 73 20 28 70 61 63 6b 61 67 65 5f 73  files (package_s
1e40: 68 61 31 2c 20 74 79 70 65 2c 20 74 69 6d 65 2c  ha1, type, time,
1e50: 20 73 6f 75 72 63 65 2c 20 73 69 7a 65 2c 20 70   source, size, p
1e60: 65 72 6d 73 2c 20 66 69 6c 65 5f 73 68 61 31 2c  erms, file_sha1,
1e70: 20 66 69 6c 65 5f 6e 61 6d 65 2c 20 66 69 6c 65   file_name, file
1e80: 5f 64 69 72 65 63 74 6f 72 79 29 20 56 41 4c 55  _directory) VALU
1e90: 45 53 20 28 24 70 61 63 6b 61 67 65 5f 73 68 61  ES ($package_sha
1ea0: 31 2c 20 24 66 69 6c 65 49 6e 66 6f 28 74 79 70  1, $fileInfo(typ
1eb0: 65 29 2c 20 24 66 69 6c 65 49 6e 66 6f 28 74 69  e), $fileInfo(ti
1ec0: 6d 65 29 2c 20 24 66 69 6c 65 49 6e 66 6f 28 73  me), $fileInfo(s
1ed0: 6f 75 72 63 65 29 2c 20 24 66 69 6c 65 49 6e 66  ource), $fileInf
1ee0: 6f 28 73 69 7a 65 29 2c 20 24 66 69 6c 65 49 6e  o(size), $fileIn
1ef0: 66 6f 28 70 65 72 6d 73 29 2c 20 24 66 69 6c 65  fo(perms), $file
1f00: 49 6e 66 6f 28 73 68 61 31 29 2c 20 24 66 69 6c  Info(sha1), $fil
1f10: 65 49 6e 66 6f 28 6e 61 6d 65 29 2c 20 24 66 69  eInfo(name), $fi
1f20: 6c 65 49 6e 66 6f 28 64 69 72 65 63 74 6f 72 79  leInfo(directory
1f30: 29 20 29 3b 7d 0a 09 09 09 09 5f 64 62 20 65 76  ) );}....._db ev
1f40: 61 6c 20 7b 55 50 44 41 54 45 20 70 61 63 6b 61  al {UPDATE packa
1f50: 67 65 73 20 53 45 54 20 68 61 76 65 4d 61 6e 69  ges SET haveMani
1f60: 66 65 73 74 20 3d 20 31 20 57 48 45 52 45 20 73  fest = 1 WHERE s
1f70: 68 61 31 20 3d 20 24 70 61 63 6b 61 67 65 5f 73  ha1 = $package_s
1f80: 68 61 31 3b 7d 0a 09 09 09 7d 0a 09 09 7d 0a 0a  ha1;}....}...}..
1f90: 09 09 72 65 74 75 72 6e 20 43 4f 4d 50 4c 45 54  ..return COMPLET
1fa0: 45 0a 09 7d 0a 7d 0a                             E..}.}.