source: project/chicken/trunk/chicken-install.scm @ 12819

Last change on this file since 12819 was 12819, checked in by felix winkelmann, 12 years ago

build bugfixes (thanks to Wietse Jacobs); added -repository option to setup tools

File size: 16.2 KB
Line 
1;;;; chicken-install.scm
2;
3; Copyright (c) 2008, The Chicken Team
4; All rights reserved.
5;
6; Redistribution and use in source and binary forms, with or without modification, are permitted provided that the following
7; conditions are met:
8;
9;   Redistributions of source code must retain the above copyright notice, this list of conditions and the following
10;     disclaimer.
11;   Redistributions in binary form must reproduce the above copyright notice, this list of conditions and the following
12;     disclaimer in the documentation and/or other materials provided with the distribution.
13;   Neither the name of the author nor the names of its contributors may be used to endorse or promote
14;     products derived from this software without specific prior written permission.
15;
16; THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS "AS IS" AND ANY EXPRESS
17; OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY
18; AND FITNESS FOR A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT HOLDERS OR
19; CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR
20; CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR
21; SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
22; THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR
23; OTHERWISE) ARISING IN ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE
24; POSSIBILITY OF SUCH DAMAGE.
25
26
27(require-library setup-download setup-api)
28(require-library srfi-1 posix data-structures utils ports regex ports extras
29                 srfi-13 files)
30
31
32(foreign-declare #<<EOF
33#ifndef C_INSTALL_BIN_HOME
34# define C_INSTALL_BIN_HOME   NULL
35#endif
36EOF
37)
38
39
40(module main ()
41 
42  (import scheme chicken srfi-1 posix data-structures utils ports regex ports extras
43          srfi-13 files)
44  (import setup-download setup-api)
45 
46  (import foreign)
47
48  (define +default-repository-files+
49    '("setup-api.so" "setup-api.import.so"
50      "setup-utils.so" "setup-utils.import.so"
51      "setup-download.so" "setup-download.import.so"
52      "chicken.import.so"
53      "lolevel.import.so"
54      "srfi-1.import.so"
55      "srfi-4.import.so"
56      "data-structures.import.so"
57      "ports.import.so"
58      "files.import.so"
59      "posix.import.so"
60      "srfi-13.import.so"
61      "srfi-69.import.so"
62      "extras.import.so"
63      "regex.import.so"
64      "srfi-14.import.so"
65      "tcp.import.so"
66      "foreign.import.so"
67      "scheme.import.so"
68      "srfi-18.import.so"
69      "utils.import.so"
70      "csi.import.so"
71      "compiler.import.so"))
72
73  (define *program-path*
74    (or (and-let* ((p (getenv "CHICKEN_PREFIX")))
75          (make-pathname p "bin") )
76        (foreign-value "C_INSTALL_BIN_HOME" c-string) ) )
77
78  (define *keep* #f)
79  (define *force* #f)
80  (define *prefix* #f)
81  (define *host-extension* #f)
82  (define *run-tests* #f)
83  (define *retrieve-only* #f)
84  (define *no-install* #f)
85  (define *username* #f)
86  (define *password* #f)
87  (define *default-sources* '())
88  (define *default-location* #f)
89  (define *default-transport* 'http)
90
91  (define-constant +module-db+ "modules.db")
92  (define-constant +defaults-file+ "setup.defaults")
93
94  (define (load-defaults)
95    (let ((deff (make-pathname (chicken-home) +defaults-file+)))
96      (cond ((not (file-exists? deff)) '())
97            (else
98             (set! *default-sources* (read-file deff))
99             (pair? *default-sources*)))))
100
101  (define (deps key meta)
102    (or (and-let* ((d (assq key meta)))
103          (cdr d))
104        '()))
105
106  (define (init-repository dir)
107    (let ((src (repository-path))
108          (copy (if (or (feature? 'mingw32) (feature? 'msvc))
109                    "copy" 
110                    "cp -r")))
111      (print "copying required files to " dir " ...")
112      (for-each
113       (lambda (f)
114         (system* "~a ~a ~a" copy (make-pathname src f) dir))
115       +default-repository-files+)))
116
117  (define (ext-version x)
118    (cond ((or (eq? x 'chicken)
119               (equal? x "chicken")
120               (member (->string x) ##sys#core-library-modules))
121           (chicken-version) )
122          ((extension-information x) =>
123           (lambda (info)
124             (and-let* ((a (assq 'version info)))
125               (->string (cadr a)))))
126          (else #f)))
127
128  (define (outdated-dependencies meta)
129    (let ((ds (append
130               (deps 'depends meta) 
131               (deps 'needs meta)
132               (if *run-tests* (deps 'test-depends meta) '()))))
133      (let loop ((deps ds) (missing '()) (upgrade '()))
134        (if (null? deps)
135            (values (reverse missing) (reverse upgrade))
136            (let ((dep (car deps))
137                  (rest (cdr deps)))
138              (cond ((or (symbol? dep) (string? dep))
139                     (loop rest
140                           (if (ext-version dep)
141                               missing
142                               (cons (->string dep) missing))
143                           upgrade))
144                    ((and (list? dep) (= 2 (length dep))
145                          (or (string? (car dep)) (symbol? (car dep))))
146                     (let ((v (ext-version (car dep))))
147                       (cond ((not v) 
148                              (warning
149                               "installed extension has unknown version - assuming it is outdated" 
150                               (car dep))
151                              (loop rest missing 
152                                    (alist-cons 
153                                     (->string (car dep))
154                                     (->string (cadr dep))
155                                     upgrade)))
156                             ((version>=? (->string (cadr dep)) v)
157                              (loop rest missing
158                                    (alist-cons
159                                     (->string (car dep)) (->string (cadr dep))
160                                     upgrade)))
161                             (else (loop rest missing upgrade)))))
162                    (else
163                     (warning
164                      "invalid dependency syntax in extension meta information" 
165                      dep)
166                     (loop rest missing upgrade))))))))
167
168    (define *eggs+dirs* '())
169    (define *checked* '())
170
171    (define (try name version)
172      (let loop ((defs (if (and *default-location* *default-transport*)
173                           `(((location ,*default-location*)
174                              (transport ,*default-transport*)))
175                           *default-sources*)))
176        (and (pair? defs)
177             (let* ((def (car defs))
178                    (loc (cadr (or (assq 'location def)
179                                   (error "missing location entry" def))))
180                    (trans (cadr (or (assq 'transport def)
181                                     (error "missing transport entry" def)))))
182               (or (condition-case
183                       (retrieve-extension 
184                        name trans loc
185                        version: version
186                        destination: (and *retrieve-only* (current-directory))
187                        tests: *run-tests*
188                        username: *username* 
189                        password: *password*)
190                     ((exn net) 
191                      (print "TCP connect timeout")
192                      #f)
193                     ((exn http-fetch)
194                      (print "HTTP protocol error")
195                      #f)
196                     (e () (abort e)))
197                   (begin
198                     (set! *default-sources* (delete def *default-sources* eq?))
199                     (loop (cdr defs))))))))
200
201    (define (retrieve eggs)
202      (print "retrieving ...")
203      (for-each
204       (lambda (egg)
205         (cond ((assoc egg *eggs+dirs*) =>
206                (lambda (a)
207                  ;; push to front
208                  (set! *eggs+dirs* (cons a (delete a *eggs+dirs* eq?))) ) )
209               (else
210                (let* ((name (if (pair? egg) (car egg) egg))
211                       (version (and (pair? egg) (cdr egg)))
212                       (dir (try name version)))
213                  (unless dir
214                    (error "extension or version not found"))
215                  (print " " name " located at " dir)
216                  (set! *eggs+dirs* (alist-cons name dir *eggs+dirs*))))) )
217       eggs)
218      (unless *retrieve-only*
219        (for-each
220         (lambda (e+d)
221           (unless (member (car e+d) *checked*)
222             (set! *checked* (cons (car e+d) *checked*))
223             (let ((mfile (make-pathname (cdr e+d) (car e+d) "meta")))
224               (cond ((file-exists? mfile)
225                      (let ((meta (with-input-from-file mfile read)))
226                        (print "checking dependencies for `" (car e+d) "' ...")
227                        (let-values (((missing upgrade) (outdated-dependencies meta)))
228                          (when (pair? missing)
229                            (print " missing: " (string-intersperse missing ", "))
230                            (retrieve missing))
231                          (when (and (pair? upgrade)
232                                     (or *force*
233                                         (yes-or-no? 
234                                          (string-concatenate
235                                           (append
236                                            (list "The following installed extensions are outdated, because `"
237                                                  (car e+d) "' requires later versions:\n")
238                                            (map (lambda (e)
239                                                   (sprintf 
240                                                    "  ~a (~a -> ~a)~%"
241                                                    (car e) 
242                                                    (let ((v (assq 'version (extension-information (car e)))))
243                                                      (if v (cadr v) "???"))
244                                                    (cdr e)))
245                                                 upgrade)
246                                            '("\nDo you want to replace the existing extensions?")))
247                                          "no") ) )
248                            (let ((ueggs (unzip1 upgrade)))
249                              (print " upgrade: " (string-intersperse ueggs ", "))
250                              (for-each
251                               (lambda (e)
252                                 (print "removing previously installed extension `" e "' ...")
253                                 (remove-extension e) )
254                               ueggs)
255                              (retrieve ueggs))))))
256                     (else
257                      (warning 
258                       (string-append
259                        "extension `" (car e+d) "' has no .meta file "
260                        "- assuming it has no dependencies")))))))
261         *eggs+dirs*)))
262
263    (define (install eggs)
264      (retrieve eggs)
265      (unless *retrieve-only*
266        (for-each ; we assume the order reflects the dependency tree...
267         (lambda (e+d)
268           (print "installing " (car e+d) " ...")
269           (print "changing current directory to " (cdr e+d))
270           (parameterize ((current-directory (cdr e+d)))
271             (let ((cmd (sprintf
272                         "~a/csi -bnq -e \"(require-library setup-api)\" -e \"(import setup-api)\" ~a ~a ~a ~a ~a ~a"
273                         *program-path*
274                         (if (sudo-install) "-e \"(sudo-install #t)\"" "")
275                         (if *keep* "-e \"(keep-intermediates #t)\"" "")
276                         (if *no-install* "-e \"(setup-install-flag #f)\"" "")
277                         (if *host-extension* "-e \"(host-extension #t)\"" "")
278                         (if *prefix* 
279                             (sprintf "-e \"(installation-prefix \\\"~a\\\")\"" *prefix*)
280                             "")
281                         (make-pathname (cdr e+d) (car e+d) "setup"))))
282               (system* cmd))
283             (when (and *run-tests*
284                        (file-exists? "tests")
285                        (directory? "tests")
286                        (file-exists? "tests/run.scm") )
287               (current-directory "tests")
288               (let ((cmd (sprintf "~a/csi -s run.scm ~a" *program-path* (car e+d))))
289                 (print cmd)
290                 (system* cmd)))))
291         *eggs+dirs*)))
292
293  (define (cleanup)
294    (unless *keep*
295      (and-let* ((tmpdir (temporary-directory)))
296        (remove-directory tmpdir))))
297
298  (define (update-db)
299    (let* ((files (glob (make-pathname (repository-path) "*.import.*")))
300           (tmpdir (create-temporary-directory))
301           (dbfile (make-pathname tmpdir +module-db+)))
302      (fluid-let ((##sys#warnings-enabled #f))
303        (for-each
304         (lambda (f)
305           (let ((m (string-match ".*/([^/]+)\\.import\\.(scm|so)" f)))
306             (eval `(import ,(string->symbol (cadr m))))))
307         files))
308      (print "generating database")
309      (let ((db
310             (sort
311              (append-map
312               (lambda (m)
313                 (let* ((mod (cdr m))
314                        (mname (##sys#module-name mod)))
315                   (print* " " mname)
316                   (let-values (((_ ve se) (##sys#module-exports mod)))
317                     (append
318                      (map (lambda (se) (list (car se) 'syntax mname)) se)
319                      (map (lambda (ve) (list (car ve) 'value mname)) ve)))))
320               ##sys#module-table) 
321              (lambda (e1 e2)
322                (string<? (symbol->string (car e1)) (symbol->string (car e2)))))))
323        (newline)
324        (with-output-to-file dbfile
325          (lambda ()
326            (for-each (lambda (x) (write x) (newline)) db)))
327        (copy-file dbfile (make-pathname (repository-path) +module-db+))
328        (remove-directory tmpdir))))
329
330  (define (usage code)
331    (print #<<EOF
332usage: chicken-install [OPTION | EXTENSION[:VERSION]] ...
333
334  -h   -help                    show this message and exit
335  -v   -version                 show version and exit
336       -force                   don't ask, install even if versions don't match
337  -k   -keep                    keep temporary files
338  -l   -location LOCATION       install from given location instead of default
339  -t   -transport TRANSPORT     use given transport instead of default
340  -s   -sudo                    use sudo(1) for installing or removing files
341  -r   -retrieve                only retrieve egg into current directory, don't install
342  -n   -no-install              do not install, just build (implies `-keep')
343  -p   -prefix PREFIX           change installation prefix to PREFIX
344       -host-extension          when cross-compiling, compile extension for host
345       -test                    run included test-cases, if available
346       -username USER           set username for transports that require this
347       -password PASS           set password for transports that require this
348  -i   -init DIRECTORY          initialize empty alternative repository
349  -u   -update-db               update export database
350  -r   -repository DIRECTORY    specify alternative extension repository
351EOF
352);|
353    (exit code))
354
355  (define *short-options* '(#\h #\k #\l #\t #\s #\p #\r #\n #\v #\i #\u))
356
357  (define (main args)
358    (let ((defaults (load-defaults))
359          (update #f))
360      (let loop ((args args) (eggs '()))
361        (cond ((null? args)
362               (cond (update (update-db))
363                     (else
364                      (when (null? eggs)
365                        (let ((setups (glob "*.setup")))
366                          (cond ((pair? setups)
367                                 (set! *eggs+dirs*
368                                   (append
369                                    (map (lambda (s) (cons (pathname-file s) ".")) setups)
370                                    *eggs+dirs*)))
371                                (else
372                                 (print "no setup-scripts to process")
373                                 (exit 1))) ) )
374                      (unless defaults
375                        (unless *default-transport* 
376                          (error "no default transport defined - please use `-transport' option"))
377                        (unless *default-location* 
378                          (error "no default location defined - please use `-location' option")))
379                      (install (reverse eggs)))))
380              (else
381               (let ((arg (car args)))
382                 (cond ((or (string=? arg "-help") 
383                            (string=? arg "-h")
384                            (string=? arg "--help"))
385                        (usage 0))
386                       ((string=? arg "-force")
387                        (set! *force* #t)
388                        (loop (cdr args) eggs))
389                       ((or (string=? arg "-k") (string=? arg "-keep"))
390                        (set! *keep* #t)
391                        (loop (cdr args) eggs))
392                       ((or (string=? arg "-s") (string=? arg "-sudo"))
393                        (sudo-install #t)
394                        (loop (cdr args) eggs))
395                       ((or (string=? arg "-r") (string=? arg "-retrieve"))
396                        (set! *retrieve-only* #t)
397                        (loop (cdr args) eggs))
398                       ((or (string=? arg "-l") (string=? arg "-location"))
399                        (unless (pair? (cdr args)) (usage 1))
400                        (set! *default-location* (cadr args))
401                        (loop (cddr args) eggs))
402                       ((or (string=? arg "-t") (string=? arg "-transport"))
403                        (unless (pair? (cdr args)) (usage 1))
404                        (set! *default-transport* (string->symbol (cadr args)))
405                        (loop (cddr args) eggs))
406                       ((or (string=? arg "-p") (string=? arg "-prefix"))
407                        (unless (pair? (cdr args)) (usage 1))
408                        (set! *prefix* (cadr args))
409                        (loop (cddr args) eggs))
410                       ((or (string=? arg "-n") (string=? arg "-no-install"))
411                        (set! *keep* #t)
412                        (set! *no-install* #t)
413                        (loop (cdr args) eggs))
414                       ((or (string=? arg "-v") (string=? arg "-version"))
415                        (print (chicken-version))
416                        (exit 0))
417                       ((or (string=? arg "-u") (string=? arg "-update-db"))
418                        (set! update #t)
419                        (loop (cdr args) eggs))
420                       ((or (string=? arg "-i") (string=? arg "-init"))
421                        (unless (pair? (cdr args)) (usage 1))
422                        (init-repository (cadr args))
423                        (exit 0))
424                       ((string=? "-test" arg)
425                        (set! *run-tests* #t)
426                        (loop (cdr args) eggs))
427                       ((string=? "-host-extension" arg)
428                        (set! *host-extension* #t)
429                        (loop (cdr args) eggs))
430                       ((string=? "-username" arg)
431                        (unless (pair? (cdr args)) (usage 1))
432                        (set! *username* (cadr args))
433                        (loop (cddr args) eggs))
434                       ((string=? "-password" arg)
435                        (unless (pair? (cdr args)) (usage 1))
436                        (set! *password* (cadr args))
437                        (loop (cddr args) eggs))
438                       ((or (string=? arg "-r") (string=? arg "-repository"))
439                        (if (pair? (cdr args))
440                            (repository-path (cadr args))
441                            (usage 1)))
442                       ((and (positive? (string-length arg))
443                             (char=? #\- (string-ref arg 0)))
444                        (if (> (string-length arg) 2)
445                            (let ((sos (string->list (substring arg 1))))
446                              (if (null? (lset-intersection eq? *short-options* sos))
447                                  (loop (append (map (cut string #\- <>) sos) (cdr args)) eggs)
448                                  (usage 1)))
449                            (usage 1)))
450                       ((equal? "setup" (pathname-extension arg))
451                        (let ((egg (pathname-file arg)))
452                          (set! *eggs+dirs*
453                            (alist-cons
454                             egg
455                             (let ((dir (pathname-directory arg)))
456                               (if dir
457                                   (if (absolute-pathname? dir)
458                                       dir
459                                       (make-pathname (current-directory) dir) )
460                                   (current-directory)))
461                             *eggs+dirs*))
462                          (loop (cdr args) (cons egg eggs))))
463                       ((string-match "([^:]+):(.+)" arg) =>
464                        (lambda (m)
465                          (loop (cdr args) (alist-cons (cadr m) (caddr m) eggs))))
466                       (else (loop (cdr args) (cons arg eggs))))))))))
467
468  (register-feature! 'chicken-install)
469  (define ##compiler#compiler-macro-environment '()) ; only to make `compiler' import work
470
471  (handle-exceptions ex
472      (begin
473        (print-error-message ex (current-error-port))
474        (cleanup)
475        (exit 1))
476    (main (command-line-arguments))
477    (cleanup))
478 
479)
Note: See TracBrowser for help on using the repository browser.