German update
[webmin.git] / web-lib-funcs.pl
1 =head1 web-lib-funcs.pl
2
3 Common functions for Webmin CGI scripts. This file gets in-directly included
4 by all scripts that use web-lib.pl.
5 Example code:
6
7   use WebminCore;
8   init_config();
9   ui_print_header(undef, 'My Module', '');
10   print 'This is Webmin version ',get_webmin_version(),'<p>\n';
11   ui_print_footer();
12
13 =cut
14
15 #use warnings;
16 use Socket;
17 use POSIX;
18 eval "use Socket6";
19 $ipv6_module_error = $@;
20
21 use vars qw($user_risk_level $loaded_theme_library $wait_for_input
22             $done_webmin_header $trust_unknown_referers $unsafe_index_cgi
23             %done_foreign_require $webmin_feedback_address
24             $user_skill_level $pragma_no_cache $foreign_args);
25 # Globals
26 use vars qw($module_index_name $number_to_month_map $month_to_number_map
27             $umask_already $default_charset $licence_status $os_type
28             $licence_message $script_name $loaded_theme_oo_library
29             $done_web_lib_funcs $os_version $module_index_link
30             $called_from_webmin_core $ipv6_module_error);
31
32 =head2 read_file(file, &hash, [&order], [lowercase], [split-char])
33
34 Fill the given hash reference with name=value pairs from a file. The required
35 parameters are :
36
37 =item file - The file to head, which must be text with each line like name=value
38
39 =item hash - The hash reference to add values read from the file to.
40
41 =item order - If given, an array reference to add names to in the order they were read
42
43 =item lowercase - If set to 1, names are converted to lower case
44
45 =item split-char - If set, names and values are split on this character instead of =
46
47 =cut
48 sub read_file
49 {
50 local $_;
51 my $split = defined($_[4]) ? $_[4] : "=";
52 my $realfile = &translate_filename($_[0]);
53 &open_readfile(ARFILE, $_[0]) || return 0;
54 while(<ARFILE>) {
55         chomp;
56         my $hash = index($_, "#");
57         my $eq = index($_, $split);
58         if ($hash != 0 && $eq >= 0) {
59                 my $n = substr($_, 0, $eq);
60                 my $v = substr($_, $eq+1);
61                 chomp($v);
62                 $_[1]->{$_[3] ? lc($n) : $n} = $v;
63                 push(@{$_[2]}, $n) if ($_[2]);
64                 }
65         }
66 close(ARFILE);
67 $main::read_file_missing{$realfile} = 0;        # It exists now
68 if (defined($main::read_file_cache{$realfile})) {
69         %{$main::read_file_cache{$realfile}} = %{$_[1]};
70         }
71 return 1;
72 }
73
74 =head2 read_file_cached(file, &hash, [&order], [lowercase], [split-char])
75
76 Like read_file, but reads from an in-memory cache if the file has already been
77 read in this Webmin script. Recommended, as it behaves exactly the same as
78 read_file, but can be much faster.
79
80 =cut
81 sub read_file_cached
82 {
83 my $realfile = &translate_filename($_[0]);
84 if (defined($main::read_file_cache{$realfile})) {
85         # Use cached data
86         %{$_[1]} = ( %{$_[1]}, %{$main::read_file_cache{$realfile}} );
87         return 1;
88         }
89 elsif ($main::read_file_missing{$realfile}) {
90         # Doesn't exist, so don't re-try read
91         return 0;
92         }
93 else {
94         # Actually read the file
95         my %d;
96         if (&read_file($_[0], \%d, $_[2], $_[3], $_[4])) {
97                 %{$main::read_file_cache{$realfile}} = %d;
98                 %{$_[1]} = ( %{$_[1]}, %d );
99                 return 1;
100                 }
101         else {
102                 # Flag as non-existant
103                 $main::read_file_missing{$realfile} = 1;
104                 return 0;
105                 }
106         }
107 }
108
109 =head2 read_file_cached_with_stat(file, &hash, [&order], [lowercase], [split-char])
110
111 Like read_file, but reads from an in-memory cache if the file has already been
112 read in this Webmin script AND has not changed.
113
114 =cut
115 sub read_file_cached_with_stat
116 {
117 my $realfile = &translate_filename($_[0]);
118 my $t = $main::read_file_cache_time{$realfile};
119 my @st = stat($realfile);
120 if ($t && $st[9] != $t) {
121         # Changed, invalidate cache
122         delete($main::read_file_cache{$realfile});
123         }
124 my $rv = &read_file_cached(@_);
125 $main::read_file_cache_time{$realfile} = $st[9];
126 return $rv;
127 }
128  
129 =head2 write_file(file, &hash, [join-char])
130
131 Write out the contents of a hash as name=value lines. The parameters are :
132
133 =item file - Full path to write to
134
135 =item hash - A hash reference containing names and values to output
136
137 =item join-char - If given, names and values are separated by this instead of =
138
139 =cut
140 sub write_file
141 {
142 my (%old, @order);
143 my $join = defined($_[2]) ? $_[2] : "=";
144 my $realfile = &translate_filename($_[0]);
145 &read_file($_[0], \%old, \@order);
146 &open_tempfile(ARFILE, ">$_[0]");
147 foreach $k (@order) {
148         if (exists($_[1]->{$k})) {
149                 (print ARFILE $k,$join,$_[1]->{$k},"\n") ||
150                         &error(&text("efilewrite", $realfile, $!));
151                 }
152         }
153 foreach $k (keys %{$_[1]}) {
154         if (!exists($old{$k})) {
155                 (print ARFILE $k,$join,$_[1]->{$k},"\n") ||
156                         &error(&text("efilewrite", $realfile, $!));
157                 }
158         }
159 &close_tempfile(ARFILE);
160 if (defined($main::read_file_cache{$realfile})) {
161         %{$main::read_file_cache{$realfile}} = %{$_[1]};
162         }
163 if (defined($main::read_file_missing{$realfile})) {
164         $main::read_file_missing{$realfile} = 0;
165         }
166 }
167
168 =head2 html_escape(string)
169
170 Converts &, < and > codes in text to HTML entities, and returns the new string.
171 This should be used when including data read from other sources in HTML pages.
172
173 =cut
174 sub html_escape
175 {
176 my ($tmp) = @_;
177 $tmp =~ s/&/&amp;/g;
178 $tmp =~ s/</&lt;/g;
179 $tmp =~ s/>/&gt;/g;
180 $tmp =~ s/\"/&quot;/g;
181 $tmp =~ s/\'/&#39;/g;
182 $tmp =~ s/=/&#61;/g;
183 return $tmp;
184 }
185
186 =head2 quote_escape(string, [only-quote])
187
188 Converts ' and " characters in a string into HTML entities, and returns it.
189 Useful for outputing HTML tag values.
190
191 =cut
192 sub quote_escape
193 {
194 my ($tmp, $only) = @_;
195 if ($tmp !~ /\&[a-zA-Z]+;/ && $tmp !~ /\&#/) {
196         # convert &, unless it is part of &#nnn; or &foo;
197         $tmp =~ s/&([^#])/&amp;$1/g;
198         }
199 $tmp =~ s/&$/&amp;/g;
200 $tmp =~ s/\"/&quot;/g if ($only eq '' || $only eq '"');
201 $tmp =~ s/\'/&#39;/g if ($only eq '' || $only eq "'");
202 return $tmp;
203 }
204
205 =head2 tempname([filename])
206
207 Returns a mostly random temporary file name, typically under the /tmp/.webmin
208 directory. If filename is given, this will be the base name used. Otherwise
209 a unique name is selected randomly.
210
211 =cut
212 sub tempname
213 {
214 my $tmp_base = $gconfig{'tempdir_'.&get_module_name()} ?
215                         $gconfig{'tempdir_'.&get_module_name()} :
216                   $gconfig{'tempdir'} ? $gconfig{'tempdir'} :
217                   $ENV{'TEMP'} && $ENV{'TEMP'} ne "/tmp" ? $ENV{'TEMP'} :
218                   $ENV{'TMP'} && $ENV{'TMP'} ne "/tmp" ? $ENV{'TMP'} :
219                   -d "c:/temp" ? "c:/temp" : "/tmp/.webmin";
220 my $tmp_dir = -d $remote_user_info[7] && !$gconfig{'nohometemp'} ?
221                         "$remote_user_info[7]/.tmp" :
222                  @remote_user_info ? $tmp_base."-".$remote_user :
223                  $< != 0 ? $tmp_base."-".getpwuid($<) :
224                                      $tmp_base;
225 if ($gconfig{'os_type'} eq 'windows' || $tmp_dir =~ /^[a-z]:/i) {
226         # On Windows system, just create temp dir if missing
227         if (!-d $tmp_dir) {
228                 mkdir($tmp_dir, 0755) ||
229                         &error("Failed to create temp directory $tmp_dir : $!");
230                 }
231         }
232 else {
233         # On Unix systems, need to make sure temp dir is valid
234         my $tries = 0;
235         while($tries++ < 10) {
236                 my @st = lstat($tmp_dir);
237                 last if ($st[4] == $< && (-d _) && ($st[2] & 0777) == 0755);
238                 if (@st) {
239                         unlink($tmp_dir) || rmdir($tmp_dir) ||
240                                 system("/bin/rm -rf ".quotemeta($tmp_dir));
241                         }
242                 mkdir($tmp_dir, 0755) || next;
243                 chown($<, $(, $tmp_dir);
244                 chmod(0755, $tmp_dir);
245                 }
246         if ($tries >= 10) {
247                 my @st = lstat($tmp_dir);
248                 &error("Failed to create temp directory $tmp_dir : uid=$st[4] mode=$st[2]");
249                 }
250         }
251 my $rv;
252 if (defined($_[0]) && $_[0] !~ /\.\./) {
253         $rv = "$tmp_dir/$_[0]";
254         }
255 else {
256         $main::tempfilecount++;
257         &seed_random();
258         $rv = $tmp_dir."/".int(rand(1000000))."_".
259                $main::tempfilecount."_".$scriptname;
260         }
261 return $rv;
262 }
263
264 =head2 transname([filename])
265
266 Behaves exactly like tempname, but records the temp file for deletion when the
267 current Webmin script process exits.
268
269 =cut
270 sub transname
271 {
272 my $rv = &tempname(@_);
273 push(@main::temporary_files, $rv);
274 return $rv;
275 }
276
277 =head2 trunc(string, maxlen)
278
279 Truncates a string to the shortest whole word less than or equal to the
280 given width. Useful for word wrapping.
281
282 =cut
283 sub trunc
284 {
285 if (length($_[0]) <= $_[1]) {
286         return $_[0];
287         }
288 my $str = substr($_[0],0,$_[1]);
289 my $c;
290 do {
291         $c = chop($str);
292         } while($c !~ /\S/);
293 $str =~ s/\s+$//;
294 return $str;
295 }
296
297 =head2 indexof(string, value, ...)
298
299 Returns the index of some value in an array of values, or -1 if it was not
300 found.
301
302 =cut
303 sub indexof
304 {
305 for(my $i=1; $i <= $#_; $i++) {
306         if ($_[$i] eq $_[0]) { return $i - 1; }
307         }
308 return -1;
309 }
310
311 =head2 indexoflc(string, value, ...)
312
313 Like indexof, but does a case-insensitive match
314
315 =cut
316 sub indexoflc
317 {
318 my $str = lc(shift(@_));
319 my @arr = map { lc($_) } @_;
320 return &indexof($str, @arr);
321 }
322
323 =head2 sysprint(handle, [string]+)
324
325 Outputs some strings to a file handle, but bypassing IO buffering. Can be used
326 as a replacement for print when writing to pipes or sockets.
327
328 =cut
329 sub sysprint
330 {
331 my $fh = &callers_package($_[0]);
332 my $str = join('', @_[1..$#_]);
333 syswrite $fh, $str, length($str);
334 }
335
336 =head2 check_ipaddress(ip)
337
338 Check if some IPv4 address is properly formatted, returning 1 if so or 0 if not.
339
340 =cut
341 sub check_ipaddress
342 {
343 return $_[0] =~ /^(\d+)\.(\d+)\.(\d+)\.(\d+)$/ &&
344         $1 >= 0 && $1 <= 255 &&
345         $2 >= 0 && $2 <= 255 &&
346         $3 >= 0 && $3 <= 255 &&
347         $4 >= 0 && $4 <= 255;
348 }
349
350 =head2 check_ip6address(ip)
351
352 Check if some IPv6 address is properly formatted, and returns 1 if so.
353
354 =cut
355 sub check_ip6address
356 {
357   my @blocks = split(/:/, $_[0]);
358   return 0 if (@blocks == 0 || @blocks > 8);
359
360   # The address/netmask format is accepted. So we're looking for a "/" to isolate a possible netmask.
361   # After that, we delete the netmask to control the address only format, but we verify whether the netmask 
362   # value is in [0;128].
363   my $ib = $#blocks;
364   my $where = index($blocks[$ib],"/");
365   my $m = 0;
366   if ($where != -1) {
367     my $b = substr($blocks[$ib],0,$where);
368     $m = substr($blocks[$ib],$where+1,length($blocks[$ib])-($where+1));
369     $blocks[$ib]=$b;
370   }
371
372   # The netmask must take its value in [0;128] 
373   return 0 if ($m <0 || $m >128); 
374
375   # Check the different blocks of the address : 16 bits block in hexa notation.
376   # Possibility of 1 empty block or 2 if the address begins with "::".
377   my $b;
378   my $empty = 0;
379   foreach $b (@blocks) {
380           return 0 if ($b ne "" && $b !~ /^[0-9a-f]{1,4}$/i);
381           $empty++ if ($b eq "");
382           }
383   return 0 if ($empty > 1 && !($_[0] =~ /^::/ && $empty == 2));
384   return 1;
385 }
386
387
388
389 =head2 generate_icon(image, title, link, [href], [width], [height], [before-title], [after-title])
390
391 Prints HTML for an icon image. The parameters are :
392
393 =item image - URL for the image, like images/foo.gif
394
395 =item title - Text to appear under the icon
396
397 =item link - Optional destination for the icon's link
398
399 =item href - Other HTML attributes to be added to the <a href> for the link
400
401 =item width - Optional width of the icon
402
403 =item height - Optional height of the icon
404
405 =item before-title - HTML to appear before the title link, but which is not actually in the link
406
407 =item after-title - HTML to appear after the title link, but which is not actually in the link
408
409 =cut
410 sub generate_icon
411 {
412 &load_theme_library();
413 if (defined(&theme_generate_icon)) {
414         &theme_generate_icon(@_);
415         return;
416         }
417 my $w = !defined($_[4]) ? "width=48" : $_[4] ? "width=$_[4]" : "";
418 my $h = !defined($_[5]) ? "height=48" : $_[5] ? "height=$_[5]" : "";
419 if ($tconfig{'noicons'}) {
420         if ($_[2]) {
421                 print "$_[6]<a href=\"$_[2]\" $_[3]>$_[1]</a>$_[7]\n";
422                 }
423         else {
424                 print "$_[6]$_[1]$_[7]\n";
425                 }
426         }
427 elsif ($_[2]) {
428         print "<table border><tr><td width=48 height=48>\n",
429               "<a href=\"$_[2]\" $_[3]><img src=\"$_[0]\" alt=\"\" border=0 ",
430               "$w $h></a></td></tr></table>\n";
431         print "$_[6]<a href=\"$_[2]\" $_[3]>$_[1]</a>$_[7]\n";
432         }
433 else {
434         print "<table border><tr><td width=48 height=48>\n",
435               "<img src=\"$_[0]\" alt=\"\" border=0 $w $h>",
436               "</td></tr></table>\n$_[6]$_[1]$_[7]\n";
437         }
438 }
439
440 =head2 urlize
441
442 Converts a string to a form ok for putting in a URL, using % escaping.
443
444 =cut
445 sub urlize
446 {
447 my ($rv) = @_;
448 $rv =~ s/([^A-Za-z0-9])/sprintf("%%%2.2X", ord($1))/ge;
449 return $rv;
450 }
451
452 =head2 un_urlize(string)
453
454 Converts a URL-encoded string to it's original contents - the reverse of the
455 urlize function.
456
457 =cut
458 sub un_urlize
459 {
460 my ($rv) = @_;
461 $rv =~ s/\+/ /g;
462 $rv =~ s/%(..)/pack("c",hex($1))/ge;
463 return $rv;
464 }
465
466 =head2 include(filename)
467
468 Read and output the contents of the given file.
469
470 =cut
471 sub include
472 {
473 local $_;
474 open(INCLUDE, &translate_filename($_[0])) || return 0;
475 while(<INCLUDE>) {
476         print;
477         }
478 close(INCLUDE);
479 return 1;
480 }
481
482 =head2 copydata(in-handle, out-handle)
483
484 Read from one file handle and write to another, until there is no more to read.
485
486 =cut
487 sub copydata
488 {
489 my ($in, $out) = @_;
490 $in = &callers_package($in);
491 $out = &callers_package($out);
492 my $buf;
493 while(read($in, $buf, 1024) > 0) {
494         (print $out $buf) || return 0;
495         }
496 return 1;
497 }
498
499 =head2 ReadParseMime([maximum], [&cbfunc, &cbargs])
500
501 Read data submitted via a POST request using the multipart/form-data coding,
502 and store it in the global %in hash. The optional parameters are :
503
504 =item maximum - If the number of bytes of input exceeds this number, stop reading and call error.
505
506 =item cbfunc - A function reference to call after reading each block of data.
507
508 =item cbargs - Additional parameters to the callback function.
509
510 =cut
511 sub ReadParseMime
512 {
513 my ($max, $cbfunc, $cbargs) = @_;
514 my ($boundary, $line, $foo, $name, $got, $file);
515 my $err = &text('readparse_max', $max);
516 $ENV{'CONTENT_TYPE'} =~ /boundary=(.*)$/ || &error($text{'readparse_enc'});
517 if ($ENV{'CONTENT_LENGTH'} && $max && $ENV{'CONTENT_LENGTH'} > $max) {
518         &error($err);
519         }
520 &$cbfunc(0, $ENV{'CONTENT_LENGTH'}, $file, @$cbargs) if ($cbfunc);
521 $boundary = $1;
522 <STDIN>;        # skip first boundary
523 while(1) {
524         $name = "";
525         # Read section headers
526         my $lastheader;
527         while(1) {
528                 $line = <STDIN>;
529                 $got += length($line);
530                 &$cbfunc($got, $ENV{'CONTENT_LENGTH'}, @$cbargs) if ($cbfunc);
531                 if ($max && $got > $max) {
532                         &error($err)
533                         }
534                 $line =~ tr/\r\n//d;
535                 last if (!$line);
536                 if ($line =~ /^(\S+):\s*(.*)$/) {
537                         $header{$lastheader = lc($1)} = $2;
538                         }
539                 elsif ($line =~ /^\s+(.*)$/) {
540                         $header{$lastheader} .= $line;
541                         }
542                 }
543
544         # Parse out filename and type
545         if ($header{'content-disposition'} =~ /^form-data(.*)/) {
546                 $rest = $1;
547                 while ($rest =~ /([a-zA-Z]*)=\"([^\"]*)\"(.*)/) {
548                         if ($1 eq 'name') {
549                                 $name = $2;
550                                 }
551                         else {
552                                 $foo = $name . "_$1";
553                                 $in{$foo} = $2;
554                                 }
555                         $rest = $3;
556                         }
557                 }
558         else {
559                 &error($text{'readparse_cdheader'});
560                 }
561         if ($header{'content-type'} =~ /^([^\s;]+)/) {
562                 $foo = $name . "_content_type";
563                 $in{$foo} = $1;
564                 }
565         $file = $in{$name."_filename"};
566
567         # Read data
568         $in{$name} .= "\0" if (defined($in{$name}));
569         while(1) {
570                 $line = <STDIN>;
571                 $got += length($line);
572                 &$cbfunc($got, $ENV{'CONTENT_LENGTH'}, $file, @$cbargs)
573                         if ($cbfunc);
574                 if ($max && $got > $max) {
575                         #print STDERR "over limit of $max\n";
576                         #&error($err);
577                         }
578                 if (!$line) {
579                         # Unexpected EOF?
580                         &$cbfunc(-1, $ENV{'CONTENT_LENGTH'}, $file, @$cbargs)
581                                 if ($cbfunc);
582                         return;
583                         }
584                 my $ptline = $line;
585                 $ptline =~ s/[^a-zA-Z0-9\-]/\./g;
586                 if (index($line, $boundary) != -1) { last; }
587                 $in{$name} .= $line;
588                 }
589         chop($in{$name}); chop($in{$name});
590         if (index($line,"$boundary--") != -1) { last; }
591         }
592 &$cbfunc(-1, $ENV{'CONTENT_LENGTH'}, $file, @$cbargs) if ($cbfunc);
593 }
594
595 =head2 ReadParse([&hash], [method], [noplus])
596
597 Fills the given hash reference with CGI parameters, or uses the global hash
598 %in if none is given. Also sets the global variables $in and @in. The other
599 parameters are :
600
601 =item method - For use of this HTTP method, such as GET
602
603 =item noplus - Don't convert + in parameters to spaces.
604
605 =cut
606 sub ReadParse
607 {
608 my $a = $_[0] || \%in;
609 %$a = ( );
610 my $meth = $_[1] ? $_[1] : $ENV{'REQUEST_METHOD'};
611 undef($in);
612 if ($meth eq 'POST') {
613         my $clen = $ENV{'CONTENT_LENGTH'};
614         &read_fully(STDIN, \$in, $clen) == $clen ||
615                 &error("Failed to read POST input : $!");
616         }
617 if ($ENV{'QUERY_STRING'}) {
618         if ($in) { $in .= "&".$ENV{'QUERY_STRING'}; }
619         else { $in = $ENV{'QUERY_STRING'}; }
620         }
621 @in = split(/\&/, $in);
622 foreach my $i (@in) {
623         my ($k, $v) = split(/=/, $i, 2);
624         if (!$_[2]) {
625                 $k =~ tr/\+/ /;
626                 $v =~ tr/\+/ /;
627                 }
628         $k =~ s/%(..)/pack("c",hex($1))/ge;
629         $v =~ s/%(..)/pack("c",hex($1))/ge;
630         $a->{$k} = defined($a->{$k}) ? $a->{$k}."\0".$v : $v;
631         }
632 }
633
634 =head2 read_fully(fh, &buffer, length)
635
636 Read data from some file handle up to the given length, even in the face
637 of partial reads. Reads the number of bytes read. Stores received data in the
638 string pointed to be the buffer reference.
639
640 =cut
641 sub read_fully
642 {
643 my ($fh, $buf, $len) = @_;
644 $fh = &callers_package($fh);
645 my $got = 0;
646 while($got < $len) {
647         my $r = read(STDIN, $$buf, $len-$got, $got);
648         last if ($r <= 0);
649         $got += $r;
650         }
651 return $got;
652 }
653
654 =head2 read_parse_mime_callback(size, totalsize, upload-id)
655
656 Called by ReadParseMime as new data arrives from a form-data POST. Only updates
657 the file on every 1% change though. For internal use by the upload progress
658 tracker.
659
660 =cut
661 sub read_parse_mime_callback
662 {
663 my ($size, $totalsize, $filename, $id) = @_;
664 return if ($gconfig{'no_upload_tracker'});
665 return if (!$id);
666
667 # Create the upload tracking directory - if running as non-root, this has to
668 # be under the user's home
669 my $vardir;
670 if ($<) {
671         my @uinfo = @remote_user_info ? @remote_user_info : getpwuid($<);
672         $vardir = "$uinfo[7]/.tmp";
673         }
674 else {
675         $vardir = $ENV{'WEBMIN_VAR'};
676         }
677 if (!-d $vardir) {
678         &make_dir($vardir, 0755);
679         }
680
681 # Remove any upload.* files more than 1 hour old
682 if (!$main::read_parse_mime_callback_flushed) {
683         my $now = time();
684         opendir(UPDIR, $vardir);
685         foreach my $f (readdir(UPDIR)) {
686                 next if ($f !~ /^upload\./);
687                 my @st = stat("$vardir/$f");
688                 if ($st[9] < $now-3600) {
689                         unlink("$vardir/$f");
690                         }
691                 }
692         closedir(UPDIR);
693         $main::read_parse_mime_callback_flushed++;
694         }
695
696 # Only update file once per percent
697 my $upfile = "$vardir/upload.$id";
698 if ($totalsize && $size >= 0) {
699         my $pc = int(100 * $size / $totalsize);
700         if ($pc <= $main::read_parse_mime_callback_pc{$upfile}) {
701                 return;
702                 }
703         $main::read_parse_mime_callback_pc{$upfile} = $pc;
704         }
705
706 # Write to the file
707 &open_tempfile(UPFILE, ">$upfile");
708 print UPFILE $size,"\n";
709 print UPFILE $totalsize,"\n";
710 print UPFILE $filename,"\n";
711 &close_tempfile(UPFILE);
712 }
713
714 =head2 read_parse_mime_javascript(upload-id, [&fields])
715
716 Returns an onSubmit= Javascript statement to popup a window for tracking
717 an upload with the given ID. For internal use by the upload progress tracker.
718
719 =cut
720 sub read_parse_mime_javascript
721 {
722 my ($id, $fields) = @_;
723 return "" if ($gconfig{'no_upload_tracker'});
724 my $opener = "window.open(\"$gconfig{'webprefix'}/uptracker.cgi?id=$id&uid=$<\", \"uptracker\", \"toolbar=no,menubar=no,scrollbars=no,width=500,height=100\");";
725 if ($fields) {
726         my $if = join(" || ", map { "typeof($_) != \"undefined\" && $_.value != \"\"" } @$fields);
727         return "onSubmit='if ($if) { $opener }'";
728         }
729 else {
730         return "onSubmit='$opener'";
731         }
732 }
733
734 =head2 PrintHeader(charset)
735
736 Outputs the HTTP headers for an HTML page. The optional charset parameter
737 can be used to set a character set. Normally this function is not called
738 directly, but is rather called by ui_print_header or header.
739
740 =cut
741 sub PrintHeader
742 {
743 if ($pragma_no_cache || $gconfig{'pragma_no_cache'}) {
744         print "pragma: no-cache\n";
745         print "Expires: Thu, 1 Jan 1970 00:00:00 GMT\n";
746         print "Cache-Control: no-store, no-cache, must-revalidate\n";
747         print "Cache-Control: post-check=0, pre-check=0\n";
748         }
749 if (defined($_[0])) {
750         print "Content-type: text/html; Charset=$_[0]\n\n";
751         }
752 else {
753         print "Content-type: text/html\n\n";
754         }
755 }
756
757 =head2 header(title, image, [help], [config], [nomodule], [nowebmin], [rightside], [head-stuff], [body-stuff], [below])
758
759 Outputs a Webmin HTML page header with a title, including HTTP headers. The
760 parameters are :
761
762 =item title - The text to show at the top of the page
763
764 =item image - An image to show instead of the title text. This is typically left blank.
765
766 =item help - If set, this is the name of a help page that will be linked to in the title.
767
768 =item config - If set to 1, the title will contain a link to the module's config page.
769
770 =item nomodule - If set to 1, there will be no link in the title section to the module's index.
771
772 =item nowebmin - If set to 1, there will be no link in the title section to the Webmin index.
773
774 =item rightside - HTML to be shown on the right-hand side of the title. Can contain multiple lines, separated by <br>. Typically this is used for links to stop, start or restart servers.
775
776 =item head-stuff - HTML to be included in the <head> section of the page.
777
778 =item body-stuff - HTML attributes to be include in the <body> tag.
779
780 =item below - HTML to be displayed below the title. Typically this is used for application or server version information.
781
782 =cut
783 sub header
784 {
785 return if ($main::done_webmin_header++);
786 my $ll;
787 my $charset = defined($main::force_charset) ? $main::force_charset
788                                             : &get_charset();
789 &PrintHeader($charset);
790 &load_theme_library();
791 if (defined(&theme_header)) {
792         $module_name = &get_module_name();
793         &theme_header(@_);
794         $miniserv::page_capture = 1;
795         return;
796         }
797 print "<!doctype html public \"-//W3C//DTD HTML 3.2 Final//EN\">\n";
798 print "<html>\n";
799 print "<head>\n";
800 if (defined(&theme_prehead)) {
801         &theme_prehead(@_);
802         }
803 if ($charset) {
804         print "<meta http-equiv=\"Content-Type\" ",
805               "content=\"text/html; Charset=".&quote_escape($charset)."\">\n";
806         }
807 if (@_ > 0) {
808         my $title = &get_html_title($_[0]);
809         print "<title>$title</title>\n";
810         print $_[7] if ($_[7]);
811         print &get_html_status_line(0);
812         }
813 print "$tconfig{'headhtml'}\n" if ($tconfig{'headhtml'});
814 if ($tconfig{'headinclude'}) {
815         print &read_file_contents(
816                 "$theme_root_directory/$tconfig{'headinclude'}");
817         }
818 print "</head>\n";
819 my $bgcolor = defined($tconfig{'cs_page'}) ? $tconfig{'cs_page'} :
820                  defined($gconfig{'cs_page'}) ? $gconfig{'cs_page'} : "ffffff";
821 my $link = defined($tconfig{'cs_link'}) ? $tconfig{'cs_link'} :
822               defined($gconfig{'cs_link'}) ? $gconfig{'cs_link'} : "0000ee";
823 my $text = defined($tconfig{'cs_text'}) ? $tconfig{'cs_text'} : 
824               defined($gconfig{'cs_text'}) ? $gconfig{'cs_text'} : "000000";
825 my $bgimage = defined($tconfig{'bgimage'}) ? "background=$tconfig{'bgimage'}"
826                                               : "";
827 my $dir = $current_lang_info->{'dir'} ? "dir=\"$current_lang_info->{'dir'}\""
828                                          : "";
829 print "<body bgcolor=#$bgcolor link=#$link vlink=#$link text=#$text ",
830       "$bgimage $tconfig{'inbody'} $dir $_[8]>\n";
831 if (defined(&theme_prebody)) {
832         &theme_prebody(@_);
833         }
834 my $hostname = &get_display_hostname();
835 my $version = &get_webmin_version();
836 my $prebody = $tconfig{'prebody'};
837 if ($prebody) {
838         $prebody =~ s/%HOSTNAME%/$hostname/g;
839         $prebody =~ s/%VERSION%/$version/g;
840         $prebody =~ s/%USER%/$remote_user/g;
841         $prebody =~ s/%OS%/$os_type $os_version/g;
842         print "$prebody\n";
843         }
844 if ($tconfig{'prebodyinclude'}) {
845         local $_;
846         open(INC, "$theme_root_directory/$tconfig{'prebodyinclude'}");
847         while(<INC>) {
848                 print;
849                 }
850         close(INC);
851         }
852 if (@_ > 1) {
853         print $tconfig{'preheader'};
854         my %this_module_info = &get_module_info(&get_module_name());
855         print "<table class='header' width=100%><tr>\n";
856         if ($gconfig{'sysinfo'} == 2 && $remote_user) {
857                 print "<td id='headln1' colspan=3 align=center>\n";
858                 print &get_html_status_line(1);
859                 print "</td></tr> <tr>\n";
860                 }
861         print "<td id='headln2l' width=15% valign=top align=left>";
862         if ($ENV{'HTTP_WEBMIN_SERVERS'} && !$tconfig{'framed'}) {
863                 print "<a href='$ENV{'HTTP_WEBMIN_SERVERS'}'>",
864                       "$text{'header_servers'}</a><br>\n";
865                 }
866         if (!$_[5] && !$tconfig{'noindex'}) {
867                 my @avail = &get_available_module_infos(1);
868                 my $nolo = $ENV{'ANONYMOUS_USER'} ||
869                               $ENV{'SSL_USER'} || $ENV{'LOCAL_USER'} ||
870                               $ENV{'HTTP_USER_AGENT'} =~ /webmin/i;
871                 if ($gconfig{'gotoone'} && $main::session_id && @avail == 1 &&
872                     !$nolo) {
873                         print "<a href='$gconfig{'webprefix'}/session_login.cgi?logout=1'>",
874                               "$text{'main_logout'}</a><br>";
875                         }
876                 elsif ($gconfig{'gotoone'} && @avail == 1 && !$nolo) {
877                         print "<a href=$gconfig{'webprefix'}/switch_user.cgi>",
878                               "$text{'main_switch'}</a><br>";
879                         }
880                 elsif (!$gconfig{'gotoone'} || @avail > 1) {
881                         print "<a href='$gconfig{'webprefix'}/?cat=",
882                               $this_module_info{'category'},
883                               "'>$text{'header_webmin'}</a><br>\n";
884                         }
885                 }
886         if (!$_[4] && !$tconfig{'nomoduleindex'}) {
887                 my $idx = $this_module_info{'index_link'};
888                 my $mi = $module_index_link || "/".&get_module_name()."/$idx";
889                 my $mt = $module_index_name || $text{'header_module'};
890                 print "<a href=\"$gconfig{'webprefix'}$mi\">$mt</a><br>\n";
891                 }
892         if (ref($_[2]) eq "ARRAY" && !$ENV{'ANONYMOUS_USER'} &&
893             !$tconfig{'nohelp'}) {
894                 print &hlink($text{'header_help'}, $_[2]->[0], $_[2]->[1]),
895                       "<br>\n";
896                 }
897         elsif (defined($_[2]) && !$ENV{'ANONYMOUS_USER'} &&
898                !$tconfig{'nohelp'}) {
899                 print &hlink($text{'header_help'}, $_[2]),"<br>\n";
900                 }
901         if ($_[3]) {
902                 my %access = &get_module_acl();
903                 if (!$access{'noconfig'} && !$config{'noprefs'}) {
904                         my $cprog = $user_module_config_directory ?
905                                         "uconfig.cgi" : "config.cgi";
906                         print "<a href=\"$gconfig{'webprefix'}/$cprog?",
907                               &get_module_name()."\">",
908                               $text{'header_config'},"</a><br>\n";
909                         }
910                 }
911         print "</td>\n";
912         if ($_[1]) {
913                 # Title is a single image
914                 print "<td id='headln2c' align=center width=70%>",
915                       "<img alt=\"$_[0]\" src=\"$_[1]\"></td>\n";
916                 }
917         else {
918                 # Title is just text
919                 my $ts = defined($tconfig{'titlesize'}) ?
920                                 $tconfig{'titlesize'} : "+2";
921                 print "<td id='headln2c' align=center width=70%>",
922                       ($ts ? "<font size=$ts>" : ""),$_[0],
923                       ($ts ? "</font>" : "");
924                 print "<br>$_[9]\n" if ($_[9]);
925                 print "</td>\n";
926                 }
927         print "<td id='headln2r' width=15% valign=top align=right>";
928         print $_[6];
929         print "</td></tr></table>\n";
930         print $tconfig{'postheader'};
931         }
932 $miniserv::page_capture = 1;
933 }
934
935 =head2 get_html_title(title)
936
937 Returns the full string to appear in the HTML <title> block.
938
939 =cut
940 sub get_html_title
941 {
942 my ($msg) = @_;
943 my $title;
944 my $os_type = $gconfig{'real_os_type'} || $gconfig{'os_type'};
945 my $os_version = $gconfig{'real_os_version'} || $gconfig{'os_version'};
946 my $host = &get_display_hostname();
947 if ($gconfig{'sysinfo'} == 1 && $remote_user) {
948         $title = sprintf "%s : %s on %s (%s %s)\n",
949                 $msg, $remote_user, $host,
950                 $os_type, $os_version;
951         }
952 elsif ($gconfig{'sysinfo'} == 4 && $remote_user) {
953         $title = sprintf "%s on %s (%s %s)\n",
954                 $remote_user, $host,
955                 $os_type, $os_version;
956         }
957 else {
958         $title = $msg;
959         }
960 if ($gconfig{'showlogin'} && $remote_user) {
961         $title = $remote_user.($title ? " : ".$title : "");
962         }
963 if ($gconfig{'showhost'}) {
964         $title = $host.($title ? " : ".$title : "");
965         }
966 return $title;
967 }
968
969 =head2 get_html_framed_title
970
971 Returns the title text for a framed theme main page.
972
973 =cut
974 sub get_html_framed_title
975 {
976 my $ostr;
977 my $os_type = $gconfig{'real_os_type'} || $gconfig{'os_type'};
978 my $os_version = $gconfig{'real_os_version'} || $gconfig{'os_version'};
979 my $title;
980 if (($gconfig{'sysinfo'} == 4 || $gconfig{'sysinfo'} == 1) && $remote_user) {
981         # Alternate title mode requested
982         $title = sprintf "%s on %s (%s %s)\n",
983                 $remote_user, &get_display_hostname(),
984                 $os_type, $os_version;
985         }
986 else {
987         # Title like 'Webmin x.yy on hostname (Linux 6)'
988         if ($os_version eq "*") {
989                 $ostr = $os_type;
990                 }
991         else {
992                 $ostr = "$os_type $os_version";
993                 }
994         my $host = &get_display_hostname();
995         my $ver = &get_webmin_version();
996         $title = $gconfig{'nohostname'} ? $text{'main_title2'} :
997                  $gconfig{'showhost'} ? &text('main_title3', $ver, $ostr) :
998                                         &text('main_title', $ver, $host, $ostr);
999         if ($gconfig{'showlogin'}) {
1000                 $title = $remote_user.($title ? " : ".$title : "");
1001                 }
1002         if ($gconfig{'showhost'}) {
1003                 $title = $host.($title ? " : ".$title : "");
1004                 }
1005         }
1006 return $title;
1007 }
1008
1009 =head2 get_html_status_line(text-only)
1010
1011 Returns HTML for a script block that sets the status line, or if text-only
1012 is set to 1, just return the status line text.
1013
1014 =cut
1015 sub get_html_status_line
1016 {
1017 my ($textonly) = @_;
1018 if (($gconfig{'sysinfo'} != 0 || !$remote_user) && !$textonly) {
1019         # Disabled in this mode
1020         return undef;
1021         }
1022 my $os_type = $gconfig{'real_os_type'} || $gconfig{'os_type'};
1023 my $os_version = $gconfig{'real_os_version'} || $gconfig{'os_version'};
1024 my $line = &text('header_statusmsg',
1025                  ($ENV{'ANONYMOUS_USER'} ? "Anonymous user"
1026                                            : $remote_user).
1027                  ($ENV{'SSL_USER'} ? " (SSL certified)" :
1028                   $ENV{'LOCAL_USER'} ? " (Local user)" : ""),
1029                  $text{'programname'},
1030                  &get_webmin_version(),
1031                  &get_display_hostname(),
1032                  $os_type.($os_version eq "*" ? "" :" $os_version"));
1033 if ($textonly) {
1034         return $line;
1035         }
1036 else {
1037         $line =~ s/\r|\n//g;
1038         return "<script language=JavaScript type=text/javascript>\n".
1039                "defaultStatus=\"".&quote_escape($line)."\";\n".
1040                "</script>\n";
1041         }
1042 }
1043
1044 =head2 popup_header([title], [head-stuff], [body-stuff], [no-body])
1045
1046 Outputs a page header, suitable for a popup window. If no title is given,
1047 absolutely no decorations are output. Also useful in framesets. The parameters
1048 are :
1049
1050 =item title - Title text for the popup window.
1051
1052 =item head-stuff - HTML to appear in the <head> section.
1053
1054 =item body-stuff - HTML attributes to be include in the <body> tag.
1055
1056 =item no-body - If set to 1, don't generate a body tag
1057
1058 =cut
1059 sub popup_header
1060 {
1061 return if ($main::done_webmin_header++);
1062 my $ll;
1063 my $charset = defined($main::force_charset) ? $main::force_charset
1064                                             : &get_charset();
1065 &PrintHeader($charset);
1066 &load_theme_library();
1067 if (defined(&theme_popup_header)) {
1068         &theme_popup_header(@_);
1069         $miniserv::page_capture = 1;
1070         return;
1071         }
1072 print "<!doctype html public \"-//W3C//DTD HTML 3.2 Final//EN\">\n";
1073 print "<html>\n";
1074 print "<head>\n";
1075 if (defined(&theme_popup_prehead)) {
1076         &theme_popup_prehead(@_);
1077         }
1078 print "<title>$_[0]</title>\n";
1079 print $_[1];
1080 print "$tconfig{'headhtml'}\n" if ($tconfig{'headhtml'});
1081 if ($tconfig{'headinclude'}) {
1082         print &read_file_contents(
1083                 "$theme_root_directory/$tconfig{'headinclude'}");
1084         }
1085 print "</head>\n";
1086 my $bgcolor = defined($tconfig{'cs_page'}) ? $tconfig{'cs_page'} :
1087                  defined($gconfig{'cs_page'}) ? $gconfig{'cs_page'} : "ffffff";
1088 my $link = defined($tconfig{'cs_link'}) ? $tconfig{'cs_link'} :
1089               defined($gconfig{'cs_link'}) ? $gconfig{'cs_link'} : "0000ee";
1090 my $text = defined($tconfig{'cs_text'}) ? $tconfig{'cs_text'} : 
1091               defined($gconfig{'cs_text'}) ? $gconfig{'cs_text'} : "000000";
1092 my $bgimage = defined($tconfig{'bgimage'}) ? "background=$tconfig{'bgimage'}"
1093                                               : "";
1094 if (!$_[3]) {
1095         print "<body id='popup' bgcolor=#$bgcolor link=#$link vlink=#$link ",
1096               "text=#$text $bgimage $tconfig{'inbody'} $_[2]>\n";
1097         if (defined(&theme_popup_prebody)) {
1098                 &theme_popup_prebody(@_);
1099                 }
1100         }
1101 $miniserv::page_capture = 1;
1102 }
1103
1104 =head2 footer([page, name]+, [noendbody])
1105
1106 Outputs the footer for a Webmin HTML page, possibly with links back to other
1107 pages. The links are specified by pairs of parameters, the first of which is 
1108 a link destination, and the second the link text. For example :
1109
1110  footer('/', 'Webmin index', '', 'Module menu');
1111
1112 =cut
1113 sub footer
1114 {
1115 $miniserv::page_capture = 0;
1116 &load_theme_library();
1117 my %this_module_info = &get_module_info(&get_module_name());
1118 if (defined(&theme_footer)) {
1119         $module_name = &get_module_name();      # Old themes use these
1120         %module_info = %this_module_info;
1121         &theme_footer(@_);
1122         return;
1123         }
1124 for(my $i=0; $i+1<@_; $i+=2) {
1125         my $url = $_[$i];
1126         if ($url ne '/' || !$tconfig{'noindex'}) {
1127                 if ($url eq '/') {
1128                         $url = "/?cat=$this_module_info{'category'}";
1129                         }
1130                 elsif ($url eq '' && &get_module_name()) {
1131                         $url = "/".&get_module_name()."/".
1132                                $this_module_info{'index_link'};
1133                         }
1134                 elsif ($url =~ /^\?/ && &get_module_name()) {
1135                         $url = "/".&get_module_name()."/$url";
1136                         }
1137                 $url = "$gconfig{'webprefix'}$url" if ($url =~ /^\//);
1138                 if ($i == 0) {
1139                         print "<a href=\"$url\"><img alt=\"<-\" align=middle border=0 src=$gconfig{'webprefix'}/images/left.gif></a>\n";
1140                         }
1141                 else {
1142                         print "&nbsp;|\n";
1143                         }
1144                 print "&nbsp;<a href=\"$url\">",&text('main_return', $_[$i+1]),"</a>\n";
1145                 }
1146         }
1147 print "<br>\n";
1148 if (!$_[$i]) {
1149         my $postbody = $tconfig{'postbody'};
1150         if ($postbody) {
1151                 my $hostname = &get_display_hostname();
1152                 my $version = &get_webmin_version();
1153                 my $os_type = $gconfig{'real_os_type'} ||
1154                               $gconfig{'os_type'};
1155                 my $os_version = $gconfig{'real_os_version'} ||
1156                                  $gconfig{'os_version'};
1157                 $postbody =~ s/%HOSTNAME%/$hostname/g;
1158                 $postbody =~ s/%VERSION%/$version/g;
1159                 $postbody =~ s/%USER%/$remote_user/g;
1160                 $postbody =~ s/%OS%/$os_type $os_version/g;
1161                 print "$postbody\n";
1162                 }
1163         if ($tconfig{'postbodyinclude'}) {
1164                 local $_;
1165                 open(INC, "$theme_root_directory/$tconfig{'postbodyinclude'}");
1166                 while(<INC>) {
1167                         print;
1168                         }
1169                 close(INC);
1170                 }
1171         if (defined(&theme_postbody)) {
1172                 &theme_postbody(@_);
1173                 }
1174         print "</body></html>\n";
1175         }
1176 }
1177
1178 =head2 popup_footer([no-body])
1179
1180 Outputs html for a footer for a popup window, started by popup_header.
1181
1182 =cut
1183 sub popup_footer
1184 {
1185 $miniserv::page_capture = 0;
1186 &load_theme_library();
1187 if (defined(&theme_popup_footer)) {
1188         &theme_popup_footer(@_);
1189         return;
1190         }
1191 if (!$_[0]) {
1192         print "</body>\n";
1193         }
1194 print "</html>\n";
1195 }
1196
1197 =head2 load_theme_library
1198
1199 Immediately loads the current theme's theme.pl file. Not generally useful for
1200 most module developers, as this is called automatically by the header function.
1201
1202 =cut
1203 sub load_theme_library
1204 {
1205 return if (!$current_theme || $loaded_theme_library++);
1206 for(my $i=0; $i<@theme_root_directories; $i++) {
1207         if ($theme_configs[$i]->{'functions'}) {
1208                 do $theme_root_directories[$i]."/".
1209                    $theme_configs[$i]->{'functions'};
1210                 }
1211         }
1212 }
1213
1214 =head2 redirect(url)
1215
1216 Output HTTP headers to redirect the browser to some page. The url parameter is
1217 typically a relative URL like index.cgi or list_users.cgi.
1218
1219 =cut
1220 sub redirect
1221 {
1222 my $port = $ENV{'SERVER_PORT'} == 443 && uc($ENV{'HTTPS'}) eq "ON" ? "" :
1223            $ENV{'SERVER_PORT'} == 80 && uc($ENV{'HTTPS'}) ne "ON" ? "" :
1224                 ":$ENV{'SERVER_PORT'}";
1225 my $prot = uc($ENV{'HTTPS'}) eq "ON" ? "https" : "http";
1226 my $wp = $gconfig{'webprefixnoredir'} ? undef : $gconfig{'webprefix'};
1227 my $url;
1228 if ($_[0] =~ /^(http|https|ftp|gopher):/) {
1229         # Absolute URL (like http://...)
1230         $url = $_[0];
1231         }
1232 elsif ($_[0] =~ /^\//) {
1233         # Absolute path (like /foo/bar.cgi)
1234         $url = "$prot://$ENV{'SERVER_NAME'}$port$wp$_[0]";
1235         }
1236 elsif ($ENV{'SCRIPT_NAME'} =~ /^(.*)\/[^\/]*$/) {
1237         # Relative URL (like foo.cgi)
1238         $url = "$prot://$ENV{'SERVER_NAME'}$port$wp$1/$_[0]";
1239         }
1240 else {
1241         $url = "$prot://$ENV{'SERVER_NAME'}$port/$wp$_[0]";
1242         }
1243 &load_theme_library();
1244 if (defined(&theme_redirect)) {
1245         $module_name = &get_module_name();      # Old themes use these
1246         %module_info = &get_module_info($module_name);
1247         &theme_redirect($_[0], $url);
1248         }
1249 else {
1250         print "Location: $url\n\n";
1251         }
1252 }
1253
1254 =head2 kill_byname(name, signal)
1255
1256 Finds a process whose command line contains the given name (such as httpd), and
1257 sends some signal to it. The signal can be numeric (like 9) or named
1258 (like KILL).
1259
1260 =cut
1261 sub kill_byname
1262 {
1263 my @pids = &find_byname($_[0]);
1264 return scalar(@pids) if (&is_readonly_mode());
1265 &webmin_debug_log('KILL', "signal=$_[1] name=$_[0]")
1266         if ($gconfig{'debug_what_procs'});
1267 if (@pids) { kill($_[1], @pids); return scalar(@pids); }
1268 else { return 0; }
1269 }
1270
1271 =head2 kill_byname_logged(name, signal)
1272
1273 Like kill_byname, but also logs the killing.
1274
1275 =cut
1276 sub kill_byname_logged
1277 {
1278 my @pids = &find_byname($_[0]);
1279 return scalar(@pids) if (&is_readonly_mode());
1280 if (@pids) { &kill_logged($_[1], @pids); return scalar(@pids); }
1281 else { return 0; }
1282 }
1283
1284 =head2 find_byname(name)
1285
1286 Finds processes searching for the given name in their command lines, and
1287 returns a list of matching PIDs.
1288
1289 =cut
1290 sub find_byname
1291 {
1292 if ($gconfig{'os_type'} =~ /-linux$/ && -r "/proc/$$/cmdline") {
1293         # Linux with /proc filesystem .. use cmdline files, as this is
1294         # faster than forking
1295         my @pids;
1296         opendir(PROCDIR, "/proc");
1297         foreach my $f (readdir(PROCDIR)) {
1298                 if ($f eq int($f) && $f != $$) {
1299                         my $line = &read_file_contents("/proc/$f/cmdline");
1300                         if ($line =~ /$_[0]/) {
1301                                 push(@pids, $f);
1302                                 }
1303                         }
1304                 }
1305         closedir(PROCDIR);
1306         return @pids;
1307         }
1308
1309 if (&foreign_check("proc")) {
1310         # Call the proc module
1311         &foreign_require("proc", "proc-lib.pl");
1312         if (defined(&proc::list_processes)) {
1313                 my @procs = &proc::list_processes();
1314                 my @pids;
1315                 foreach my $p (@procs) {
1316                         if ($p->{'args'} =~ /$_[0]/) {
1317                                 push(@pids, $p->{'pid'});
1318                                 }
1319                         }
1320                 @pids = grep { $_ != $$ } @pids;
1321                 return @pids;
1322                 }
1323         }
1324
1325 # Fall back to running a command
1326 my ($cmd, @pids);
1327 $cmd = $gconfig{'find_pid_command'};
1328 $cmd =~ s/NAME/"$_[0]"/g;
1329 $cmd = &translate_command($cmd);
1330 @pids = split(/\n/, `($cmd) <$null_file 2>$null_file`);
1331 @pids = grep { $_ != $$ } @pids;
1332 return @pids;
1333 }
1334
1335 =head2 error([message]+)
1336
1337 Display an error message and exit. This should be used by CGI scripts that
1338 encounter a fatal error or invalid user input to notify users of the problem.
1339 If error_setup has been called, the displayed error message will be prefixed
1340 by the message setup using that function.
1341
1342 =cut
1343 sub error
1344 {
1345 $main::no_miniserv_userdb = 1;
1346 my $msg = join("", @_);
1347 $msg =~ s/<[^>]*>//g;
1348 if (!$main::error_must_die) {
1349         print STDERR "Error: ",$msg,"\n";
1350         }
1351 &load_theme_library();
1352 if ($main::error_must_die) {
1353         if ($gconfig{'error_stack'}) {
1354                 print STDERR "Error: ",$msg,"\n";
1355                 for(my $i=0; my @stack = caller($i); $i++) {
1356                         print STDERR "File: $stack[1] Line: $stack[2] ",
1357                                      "Function: $stack[3]\n";
1358                         }
1359                 }
1360         die @_;
1361         }
1362 elsif (!$ENV{'REQUEST_METHOD'}) {
1363         # Show text-only error
1364         print STDERR "$text{'error'}\n";
1365         print STDERR "-----\n";
1366         print STDERR ($main::whatfailed ? "$main::whatfailed : " : ""),
1367                      $msg,"\n";
1368         print STDERR "-----\n";
1369         if ($gconfig{'error_stack'}) {
1370                 # Show call stack
1371                 print STDERR $text{'error_stack'},"\n";
1372                 for(my $i=0; my @stack = caller($i); $i++) {
1373                         print STDERR &text('error_stackline',
1374                                 $stack[1], $stack[2], $stack[3]),"\n";
1375                         }
1376                 }
1377
1378         }
1379 elsif (defined(&theme_error)) {
1380         &theme_error(@_);
1381         }
1382 else {
1383         &header($text{'error'}, "");
1384         print "<hr>\n";
1385         print "<h3>",($main::whatfailed ? "$main::whatfailed : " : ""),
1386                      @_,"</h3>\n";
1387         if ($gconfig{'error_stack'}) {
1388                 # Show call stack
1389                 print "<h3>$text{'error_stack'}</h3>\n";
1390                 print "<table>\n";
1391                 print "<tr> <td><b>$text{'error_file'}</b></td> ",
1392                       "<td><b>$text{'error_line'}</b></td> ",
1393                       "<td><b>$text{'error_sub'}</b></td> </tr>\n";
1394                 for($i=0; my @stack = caller($i); $i++) {
1395                         print "<tr>\n";
1396                         print "<td>$stack[1]</td>\n";
1397                         print "<td>$stack[2]</td>\n";
1398                         print "<td>$stack[3]</td>\n";
1399                         print "</tr>\n";
1400                         }
1401                 print "</table>\n";
1402                 }
1403         print "<hr>\n";
1404         if ($ENV{'HTTP_REFERER'} && $main::completed_referers_check) {
1405                 &footer($ENV{'HTTP_REFERER'}, $text{'error_previous'});
1406                 }
1407         else {
1408                 &footer();
1409                 }
1410         }
1411 &unlock_all_files();
1412 &cleanup_tempnames();
1413 exit(1);
1414 }
1415
1416 =head2 popup_error([message]+)
1417
1418 This function is almost identical to error, but displays the message with HTML
1419 headers suitable for a popup window.
1420
1421 =cut
1422 sub popup_error
1423 {
1424 $main::no_miniserv_userdb = 1;
1425 &load_theme_library();
1426 if ($main::error_must_die) {
1427         die @_;
1428         }
1429 elsif (defined(&theme_popup_error)) {
1430         &theme_popup_error(@_);
1431         }
1432 else {
1433         &popup_header($text{'error'}, "");
1434         print "<h3>",($main::whatfailed ? "$main::whatfailed : " : ""),@_,"</h3>\n";
1435         &popup_footer();
1436         }
1437 &unlock_all_files();
1438 &cleanup_tempnames();
1439 exit;
1440 }
1441
1442 =head2 error_setup(message)
1443
1444 Registers a message to be prepended to all error messages displayed by the 
1445 error function.
1446
1447 =cut
1448 sub error_setup
1449 {
1450 $main::whatfailed = $_[0];
1451 }
1452
1453 =head2 wait_for(handle, regexp, regexp, ...)
1454
1455 Reads from the input stream until one of the regexps matches, and returns the
1456 index of the matching regexp, or -1 if input ended before any matched. This is
1457 very useful for parsing the output of interactive programs, and can be used with
1458 a two-way pipe to feed input to a program in response to output matched by
1459 this function.
1460
1461 If the matching regexp contains bracketed sub-expressions, their values will
1462 be placed in the global array @matches, indexed starting from 1. You cannot
1463 use the Perl variables $1, $2 and so on to capture matches.
1464
1465 Example code:
1466
1467  $rv = wait_for($loginfh, "username:");
1468  if ($rv == -1) {
1469    error("Didn't get username prompt");
1470  }
1471  print $loginfh "joe\n";
1472  $rv = wait_for($loginfh, "password:");
1473  if ($rv == -1) {
1474    error("Didn't get password prompt");
1475  }
1476  print $loginfh "smeg\n";
1477
1478 =cut
1479 sub wait_for
1480 {
1481 my ($c, $i, $sw, $rv, $ha);
1482 undef($wait_for_input);
1483 if ($wait_for_debug) {
1484         print STDERR "wait_for(",join(",", @_),")\n";
1485         }
1486 $ha = &callers_package($_[0]);
1487 if ($wait_for_debug) {
1488         print STDERR "File handle=$ha fd=",fileno($ha),"\n";
1489         }
1490 $codes =
1491 "my \$hit;\n".
1492 "while(1) {\n".
1493 " if ((\$c = getc(\$ha)) eq \"\") { return -1; }\n".
1494 " \$wait_for_input .= \$c;\n";
1495 if ($wait_for_debug) {
1496         $codes .= "print STDERR \$wait_for_input,\"\\n\";";
1497         }
1498 for($i=1; $i<@_; $i++) {
1499         $sw = $i>1 ? "elsif" : "if";
1500         $codes .= " $sw (\$wait_for_input =~ /$_[$i]/i) { \$hit = $i-1; }\n";
1501         }
1502 $codes .=
1503 " if (defined(\$hit)) {\n".
1504 "  \@matches = (-1, \$1, \$2, \$3, \$4, \$5, \$6, \$7, \$8, \$9);\n".
1505 "  return \$hit;\n".
1506 "  }\n".
1507 " }\n";
1508 $rv = eval $codes;
1509 if ($@) {
1510         &error("wait_for error : $@\n");
1511         }
1512 return $rv;
1513 }
1514
1515 =head2 fast_wait_for(handle, string, string, ...)
1516
1517 This function behaves very similar to wait_for (documented above), but instead
1518 of taking regular expressions as parameters, it takes strings. As soon as the
1519 input contains one of them, it will return the index of the matching string.
1520 If the input ends before any match, it returns -1.
1521
1522 =cut
1523 sub fast_wait_for
1524 {
1525 my ($inp, $maxlen, $ha, $i, $c, $inpl);
1526 for($i=1; $i<@_; $i++) {
1527         $maxlen = length($_[$i]) > $maxlen ? length($_[$i]) : $maxlen;
1528         }
1529 $ha = $_[0];
1530 while(1) {
1531         if (($c = getc($ha)) eq "") {
1532                 &error("fast_wait_for read error : $!");
1533                 }
1534         $inp .= $c;
1535         if (length($inp) > $maxlen) {
1536                 $inp = substr($inp, length($inp)-$maxlen);
1537                 }
1538         $inpl = length($inp);
1539         for($i=1; $i<@_; $i++) {
1540                 if ($_[$i] eq substr($inp, $inpl-length($_[$i]))) {
1541                         return $i-1;
1542                         }
1543                 }
1544         }
1545 }
1546
1547 =head2 has_command(command)
1548
1549 Returns the full path to the executable if some command is in the path, or
1550 undef if not found. If the given command is already an absolute path and
1551 exists, then the same path will be returned.
1552
1553 =cut
1554 sub has_command
1555 {
1556 if (!$_[0]) { return undef; }
1557 if (exists($main::has_command_cache{$_[0]})) {
1558         return $main::has_command_cache{$_[0]};
1559         }
1560 my $rv = undef;
1561 my $slash = $gconfig{'os_type'} eq 'windows' ? '\\' : '/';
1562 if ($_[0] =~ /^\// || $_[0] =~ /^[a-z]:[\\\/]/i) {
1563         # Absolute path given - just use it
1564         my $t = &translate_filename($_[0]);
1565         $rv = (-x $t && !-d _) ? $_[0] : undef;
1566         }
1567 else {
1568         # Check each directory in the path
1569         my %donedir;
1570         foreach my $d (split($path_separator, $ENV{'PATH'})) {
1571                 next if ($donedir{$d}++);
1572                 $d =~ s/$slash$// if ($d ne $slash);
1573                 my $t = &translate_filename("$d/$_[0]");
1574                 if (-x $t && !-d _) {
1575                         $rv = $d.$slash.$_[0];
1576                         last;
1577                         }
1578                 if ($gconfig{'os_type'} eq 'windows') {
1579                         foreach my $sfx (".exe", ".com", ".bat") {
1580                                 my $t = &translate_filename("$d/$_[0]").$sfx;
1581                                 if (-r $t && !-d _) {
1582                                         $rv = $d.$slash.$_[0].$sfx;
1583                                         last;
1584                                         }
1585                                 }
1586                         }
1587                 }
1588         }
1589 $main::has_command_cache{$_[0]} = $rv;
1590 return $rv;
1591 }
1592
1593 =head2 make_date(seconds, [date-only], [fmt])
1594
1595 Converts a Unix date/time in seconds to a human-readable form, by default
1596 formatted like dd/mmm/yyyy hh:mm:ss. Parameters are :
1597
1598 =item seconds - Unix time is seconds to convert.
1599
1600 =item date-only - If set to 1, exclude the time from the returned string.
1601
1602 =item fmt - Optional, one of dd/mon/yyyy, dd/mm/yyyy, mm/dd/yyyy or yyyy/mm/dd
1603
1604 =cut
1605 sub make_date
1606 {
1607 my ($secs, $only, $fmt) = @_;
1608 my @tm = localtime($secs);
1609 my $date;
1610 if (!$fmt) {
1611         $fmt = $gconfig{'dateformat'} || 'dd/mon/yyyy';
1612         }
1613 if ($fmt eq 'dd/mon/yyyy') {
1614         $date = sprintf "%2.2d/%s/%4.4d",
1615                         $tm[3], $text{"smonth_".($tm[4]+1)}, $tm[5]+1900;
1616         }
1617 elsif ($fmt eq 'dd/mm/yyyy') {
1618         $date = sprintf "%2.2d/%2.2d/%4.4d", $tm[3], $tm[4]+1, $tm[5]+1900;
1619         }
1620 elsif ($fmt eq 'mm/dd/yyyy') {
1621         $date = sprintf "%2.2d/%2.2d/%4.4d", $tm[4]+1, $tm[3], $tm[5]+1900;
1622         }
1623 elsif ($fmt eq 'yyyy/mm/dd') {
1624         $date = sprintf "%4.4d/%2.2d/%2.2d", $tm[5]+1900, $tm[4]+1, $tm[3];
1625         }
1626 elsif ($fmt eq 'd. mon yyyy') {
1627         $date = sprintf "%d. %s %4.4d",
1628                         $tm[3], $text{"smonth_".($tm[4]+1)}, $tm[5]+1900;
1629         }
1630 elsif ($fmt eq 'dd.mm.yyyy') {
1631         $date = sprintf "%2.2d.%2.2d.%4.4d", $tm[3], $tm[4]+1, $tm[5]+1900;
1632         }
1633 elsif ($fmt eq 'yyyy-mm-dd') {
1634         $date = sprintf "%4.4d-%2.2d-%2.2d", $tm[5]+1900, $tm[4]+1, $tm[3];
1635         }
1636 if (!$only) {
1637         $date .= sprintf " %2.2d:%2.2d", $tm[2], $tm[1];
1638         }
1639 return $date;
1640 }
1641
1642 =head2 file_chooser_button(input, type, [form], [chroot], [addmode])
1643
1644 Return HTML for a button that pops up a file chooser when clicked, and places
1645 the selected filename into another HTML field. The parameters are :
1646
1647 =item input - Name of the form field to store the filename in.
1648
1649 =item type - 0 for file or directory chooser, or 1 for directory only.
1650
1651 =item form - Index of the form containing the button.
1652
1653 =item chroot - If set to 1, the chooser will be limited to this directory.
1654
1655 =item addmode - If set to 1, the selected filename will be appended to the text box instead of replacing it's contents.
1656
1657 =cut
1658 sub file_chooser_button
1659 {
1660 return &theme_file_chooser_button(@_)
1661         if (defined(&theme_file_chooser_button));
1662 my $form = defined($_[2]) ? $_[2] : 0;
1663 my $chroot = defined($_[3]) ? $_[3] : "/";
1664 my $add = int($_[4]);
1665 my ($w, $h) = (400, 300);
1666 if ($gconfig{'db_sizefile'}) {
1667         ($w, $h) = split(/x/, $gconfig{'db_sizefile'});
1668         }
1669 return "<input type=button onClick='ifield = form.$_[0]; chooser = window.open(\"$gconfig{'webprefix'}/chooser.cgi?add=$add&type=$_[1]&chroot=$chroot&file=\"+escape(ifield.value), \"chooser\", \"toolbar=no,menubar=no,scrollbars=no,resizable=yes,width=$w,height=$h\"); chooser.ifield = ifield; window.ifield = ifield' value=\"...\">\n";
1670 }
1671
1672 =head2 popup_window_button(url, width, height, scrollbars?, &field-mappings)
1673
1674 Returns HTML for a button that will popup a chooser window of some kind. The
1675 parameters are :
1676
1677 =item url - Base URL of the popup window's contents
1678
1679 =item width - Width of the window in pixels
1680
1681 =item height - Height in pixels
1682
1683 =item scrollbars - Set to 1 if the window should have scrollbars
1684
1685 The field-mappings parameter is an array ref of array refs containing
1686
1687 =item - Attribute to assign field to in the popup window
1688
1689 =item - Form field name
1690
1691 =item - CGI parameter to URL for value, if any
1692
1693 =cut
1694 sub popup_window_button
1695 {
1696 return &theme_popup_window_button(@_) if (defined(&theme_popup_window_button));
1697 my ($url, $w, $h, $scroll, $fields) = @_;
1698 my $scrollyn = $scroll ? "yes" : "no";
1699 my $rv = "<input type=button onClick='";
1700 foreach my $m (@$fields) {
1701         $rv .= "$m->[0] = form.$m->[1]; ";
1702         }
1703 my $sep = $url =~ /\?/ ? "&" : "?";
1704 $rv .= "chooser = window.open(\"$url\"";
1705 foreach my $m (@$fields) {
1706         if ($m->[2]) {
1707                 $rv .= "+\"$sep$m->[2]=\"+escape($m->[0].value)";
1708                 $sep = "&";
1709                 }
1710         }
1711 $rv .= ", \"chooser\", \"toolbar=no,menubar=no,scrollbars=$scrollyn,resizable=yes,width=$w,height=$h\"); ";
1712 foreach my $m (@$fields) {
1713         $rv .= "chooser.$m->[0] = $m->[0]; ";
1714         $rv .= "window.$m->[0] = $m->[0]; ";
1715         }
1716 $rv .= "' value=\"...\">";
1717 return $rv;
1718 }
1719
1720 =head2 read_acl(&user-module-hash, &user-list-hash, [&only-users])
1721
1722 Reads the Webmin acl file into the given hash references. The first is indexed
1723 by a combined key of username,module , with the value being set to 1 when
1724 the user has access to that module. The second is indexed by username, with
1725 the value being an array ref of allowed modules.
1726
1727 This function is deprecated in favour of foreign_available, which performs a
1728 more comprehensive check of module availability.
1729
1730 If the only-users array ref parameter is given, the results may be limited to
1731 users in that list of names.
1732
1733 =cut
1734 sub read_acl
1735 {
1736 my ($usermod, $userlist, $only) = @_;
1737 if (!%main::acl_hash_cache) {
1738         # Read from local files
1739         local $_;
1740         open(ACL, &acl_filename());
1741         while(<ACL>) {
1742                 if (/^([^:]+):\s*(.*)/) {
1743                         my $user = $1;
1744                         my @mods = split(/\s+/, $2);
1745                         foreach my $m (@mods) {
1746                                 $main::acl_hash_cache{$user,$m}++;
1747                                 }
1748                         $main::acl_array_cache{$user} = \@mods;
1749                         }
1750                 }
1751         close(ACL);
1752         }
1753 %$usermod = %main::acl_hash_cache if ($usermod);
1754 %$userlist = %main::acl_array_cache if ($userlist);
1755
1756 # Read from user DB
1757 my $userdb = &get_userdb_string();
1758 my ($dbh, $proto, $prefix, $args) =
1759         $userdb ? &connect_userdb($userdb) : ( );
1760 if (ref($dbh)) {
1761         if ($proto eq "mysql" || $proto eq "postgresql") {
1762                 # Select usernames and modules from SQL DB
1763                 my $cmd = $dbh->prepare(
1764                         "select webmin_user.name,webmin_user_attr.value ".
1765                         "from webmin_user,webmin_user_attr ".
1766                         "where webmin_user.id = webmin_user_attr.id ".
1767                         "and webmin_user_attr.attr = 'modules' ".
1768                         ($only ? " and webmin_user.name in (".
1769                                  join(",", map { "'$_'" } @$only).")" : ""));
1770                 if ($cmd && $cmd->execute()) {
1771                         while(my ($user, $mods) = $cmd->fetchrow()) {
1772                                 my @mods = split(/\s+/, $mods);
1773                                 foreach my $m (@mods) {
1774                                         $usermod->{$user,$m}++ if ($usermod);
1775                                         }
1776                                 $userlist->{$user} = \@mods if ($userlist);
1777                                 }
1778                         }
1779                 $cmd->finish() if ($cmd);
1780                 }
1781         elsif ($proto eq "ldap") {
1782                 # Find users in LDAP
1783                 my $filter = '(objectClass='.$args->{'userclass'}.')';
1784                 if ($only) {
1785                         my $ufilter =
1786                                 "(|".join("", map { "(cn=$_)" } @$only).")";
1787                         $filter = "(&".$filter.$ufilter.")";
1788                         }
1789                 my $rv = $dbh->search(
1790                         base => $prefix,
1791                         filter => $filter,
1792                         scope => 'sub',
1793                         attrs => [ 'cn', 'webminModule' ]);
1794                 if ($rv && !$rv->code) {
1795                         foreach my $u ($rv->all_entries) {
1796                                 my $user = $u->get_value('cn');
1797                                 my @mods =$u->get_value('webminModule');
1798                                 foreach my $m (@mods) {
1799                                         $usermod->{$user,$m}++ if ($usermod);
1800                                         }
1801                                 $userlist->{$user} = \@mods if ($userlist);
1802                                 }
1803                         }
1804                 }
1805         &disconnect_userdb($userdb, $dbh);
1806         }
1807 }
1808
1809 =head2 acl_filename
1810
1811 Returns the file containing the webmin ACL, which is usually
1812 /etc/webmin/webmin.acl.
1813
1814 =cut
1815 sub acl_filename
1816 {
1817 return "$config_directory/webmin.acl";
1818 }
1819
1820 =head2 acl_check
1821
1822 Does nothing, but kept around for compatability.
1823
1824 =cut
1825 sub acl_check
1826 {
1827 }
1828
1829 =head2 get_miniserv_config(&hash)
1830
1831 Reads the Webmin webserver's (miniserv.pl) configuration file, usually located
1832 at /etc/webmin/miniserv.conf, and stores its names and values in the given
1833 hash reference.
1834
1835 =cut
1836 sub get_miniserv_config
1837 {
1838 return &read_file_cached(
1839         $ENV{'MINISERV_CONFIG'} || "$config_directory/miniserv.conf", $_[0]);
1840 }
1841
1842 =head2 put_miniserv_config(&hash)
1843
1844 Writes out the Webmin webserver configuration file from the contents of
1845 the given hash ref. This should be initially populated by get_miniserv_config,
1846 like so :
1847
1848  get_miniserv_config(\%miniserv);
1849  $miniserv{'port'} = 10005;
1850  put_miniserv_config(\%miniserv);
1851  restart_miniserv();
1852
1853 =cut
1854 sub put_miniserv_config
1855 {
1856 &write_file($ENV{'MINISERV_CONFIG'} || "$config_directory/miniserv.conf",
1857             $_[0]);
1858 }
1859
1860 =head2 restart_miniserv([nowait])
1861
1862 Kill the old miniserv process and re-start it, then optionally waits for
1863 it to restart. This will apply all configuration settings.
1864
1865 =cut
1866 sub restart_miniserv
1867 {
1868 my ($nowait) = @_;
1869 return undef if (&is_readonly_mode());
1870 my %miniserv;
1871 &get_miniserv_config(\%miniserv) || return;
1872 if ($main::webmin_script_type eq 'web' && !$ENV{"MINISERV_CONFIG"} &&
1873     !$ENV{'MINISERV_PID'}) {
1874         # Running under some web server other than miniserv, so do nothing
1875         return;
1876         }
1877
1878 my $i;
1879 if ($gconfig{'os_type'} ne 'windows') {
1880         # On Unix systems, we can restart with a signal
1881         my ($pid, $addr, $i);
1882         $miniserv{'inetd'} && return;
1883         my @oldst = stat($miniserv{'pidfile'});
1884         $pid = $ENV{'MINISERV_PID'};
1885         if (!$pid || !kill(0, $pid)) {
1886                 if (!open(PID, $miniserv{'pidfile'})) {
1887                         print STDERR "PID file $miniserv{'pidfile'} does ",
1888                                      "not exist\n";
1889                         return;
1890                         }
1891                 chop($pid = <PID>);
1892                 close(PID);
1893                 if (!$pid) {
1894                         print STDERR "Invalid PID file $miniserv{'pidfile'}\n";
1895                         return;
1896                         }
1897                 if (!kill(0, $pid)) {
1898                         print STDERR "PID $pid from file $miniserv{'pidfile'} ",
1899                                      "is not valid\n";
1900                         return;
1901                         }
1902                 }
1903
1904         # Just signal miniserv to restart
1905         &kill_logged('HUP', $pid) || &error("Incorrect Webmin PID $pid");
1906
1907         # Wait till new PID is written, indicating a restart
1908         for($i=0; $i<60; $i++) {
1909                 sleep(1);
1910                 my @newst = stat($miniserv{'pidfile'});
1911                 last if ($newst[9] != $oldst[9]);
1912                 }
1913         $i < 60 || &error("Webmin server did not write new PID file");
1914
1915         ## Totally kill the process and re-run it
1916         #$SIG{'TERM'} = 'IGNORE';
1917         #&kill_logged('TERM', $pid);
1918         #&system_logged("$config_directory/start >/dev/null 2>&1 </dev/null");
1919         }
1920 else {
1921         # On Windows, we need to use the flag file
1922         open(TOUCH, ">$miniserv{'restartflag'}");
1923         close(TOUCH);
1924         }
1925
1926 if (!$nowait) {
1927         # Wait for miniserv to come back up
1928         my $addr = $miniserv{'bind'} || "127.0.0.1";
1929         my $ok = 0;
1930         for($i=0; $i<20; $i++) {
1931                 my $err;
1932                 sleep(1);
1933                 &open_socket($addr, $miniserv{'port'}, STEST, \$err);
1934                 close(STEST);
1935                 last if (!$err && ++$ok >= 2);
1936                 }
1937         $i < 20 || &error("Failed to restart Webmin server!");
1938         }
1939 }
1940
1941 =head2 reload_miniserv
1942
1943 Sends a USR1 signal to the miniserv process, telling it to read-read it's
1944 configuration files. Not all changes will be applied though, such as the 
1945 IP addresses and ports to accept connections on.
1946
1947 =cut
1948 sub reload_miniserv
1949 {
1950 return undef if (&is_readonly_mode());
1951 my %miniserv;
1952 &get_miniserv_config(\%miniserv) || return;
1953 if ($main::webmin_script_type eq 'web' && !$ENV{"MINISERV_CONFIG"} &&
1954     !$ENV{'MINISERV_PID'}) {
1955         # Running under some web server other than miniserv, so do nothing
1956         return;
1957         }
1958
1959 if ($gconfig{'os_type'} ne 'windows') {
1960         # Send a USR1 signal to re-read the config
1961         my ($pid, $addr, $i);
1962         $miniserv{'inetd'} && return;
1963         $pid = $ENV{'MINISERV_PID'};
1964         if (!$pid || !kill(0, $pid)) {
1965                 if (!open(PID, $miniserv{'pidfile'})) {
1966                         print STDERR "PID file $miniserv{'pidfile'} does ",
1967                                      "not exist\n";
1968                         return;
1969                         }
1970                 chop($pid = <PID>);
1971                 close(PID);
1972                 if (!$pid) {
1973                         print STDERR "Invalid PID file $miniserv{'pidfile'}\n";
1974                         return;
1975                         }
1976                 if (!kill(0, $pid)) {
1977                         print STDERR "PID $pid from file $miniserv{'pidfile'} ",
1978                                      "is not valid\n";
1979                         return;
1980                         }
1981                 }
1982         &kill_logged('USR1', $pid) || &error("Incorrect Webmin PID $pid");
1983
1984         # Make sure this didn't kill Webmin!
1985         sleep(1);
1986         if (!kill(0, $pid)) {
1987                 print STDERR "USR1 signal killed Webmin - restarting\n";
1988                 &system_logged("$config_directory/start >/dev/null 2>&1 </dev/null");
1989                 }
1990         }
1991 else {
1992         # On Windows, we need to use the flag file
1993         open(TOUCH, ">$miniserv{'reloadflag'}");
1994         close(TOUCH);
1995         }
1996 }
1997
1998 =head2 check_os_support(&minfo, [os-type, os-version], [api-only])
1999
2000 Returns 1 if some module is supported on the current operating system, or the
2001 OS supplies as parameters. The parameters are :
2002
2003 =item minfo - A hash ref of module information, as returned by get_module_info
2004
2005 =item os-type - The Webmin OS code to use instead of the system's real OS, such as redhat-linux
2006
2007 =item os-version - The Webmin OS version to use, such as 13.0
2008
2009 =item api-only - If set to 1, considers a module supported if it provides an API to other modules on this OS, even if the majority of its functionality is not supported.
2010
2011 =cut
2012 sub check_os_support
2013 {
2014 my $oss = $_[0]->{'os_support'};
2015 if ($_[3] && $oss && $_[0]->{'api_os_support'}) {
2016         # May provide usable API
2017         $oss .= " ".$_[0]->{'api_os_support'};
2018         }
2019 if ($_[0]->{'nozone'} && &running_in_zone()) {
2020         # Not supported in a Solaris Zone
2021         return 0;
2022         }
2023 if ($_[0]->{'novserver'} && &running_in_vserver()) {
2024         # Not supported in a Linux Vserver
2025         return 0;
2026         }
2027 if ($_[0]->{'noopenvz'} && &running_in_openvz()) {
2028         # Not supported in an OpenVZ container
2029         return 0;
2030         }
2031 return 1 if (!$oss || $oss eq '*');
2032 my $osver = $_[2] || $gconfig{'os_version'};
2033 my $ostype = $_[1] || $gconfig{'os_type'};
2034 my $anyneg = 0;
2035 while(1) {
2036         my ($os, $ver, $codes);
2037         my ($neg) = ($oss =~ s/^!//);   # starts with !
2038         $anyneg++ if ($neg);
2039         if ($oss =~ /^([^\/\s]+)\/([^\{\s]+)\{([^\}]*)\}\s*(.*)$/) {
2040                 # OS/version{code}
2041                 $os = $1; $ver = $2; $codes = $3; $oss = $4;
2042                 }
2043         elsif ($oss =~ /^([^\/\s]+)\/([^\/\s]+)\s*(.*)$/) {
2044                 # OS/version
2045                 $os = $1; $ver = $2; $oss = $3;
2046                 }
2047         elsif ($oss =~ /^([^\{\s]+)\{([^\}]*)\}\s*(.*)$/) {
2048                 # OS/{code}
2049                 $os = $1; $codes = $2; $oss = $3;
2050                 }
2051         elsif ($oss =~ /^\{([^\}]*)\}\s*(.*)$/) {
2052                 # {code}
2053                 $codes = $1; $oss = $2;
2054                 }
2055         elsif ($oss =~ /^(\S+)\s*(.*)$/) {
2056                 # OS
2057                 $os = $1; $oss = $2;
2058                 }
2059         else { last; }
2060         next if ($os && !($os eq $ostype ||
2061                           $ostype =~ /^(\S+)-(\S+)$/ && $os eq "*-$2"));
2062         if ($ver =~ /^([0-9\.]+)\-([0-9\.]+)$/) {
2063                 next if ($osver < $1 || $osver > $2);
2064                 }
2065         elsif ($ver =~ /^([0-9\.]+)\-\*$/) {
2066                 next if ($osver < $1);
2067                 }
2068         elsif ($ver =~ /^\*\-([0-9\.]+)$/) {
2069                 next if ($osver > $1);
2070                 }
2071         elsif ($ver) {
2072                 next if ($ver ne $osver);
2073                 }
2074         next if ($codes && !eval $codes);
2075         return !$neg;
2076         }
2077 return $anyneg;
2078 }
2079
2080 =head2 http_download(host, port, page, destfile, [&error], [&callback], [sslmode], [user, pass], [timeout], [osdn-convert], [no-cache], [&headers])
2081
2082 Downloads data from a HTTP url to a local file or string. The parameters are :
2083
2084 =item host - The hostname part of the URL, such as www.google.com
2085
2086 =item port - The HTTP port number, such as 80
2087
2088 =item page - The filename part of the URL, like /index.html
2089
2090 =item destfile - The local file to save the URL data to, like /tmp/index.html. This can also be a scalar reference, in which case the data will be appended to that scalar.
2091
2092 =item error - If set to a scalar ref, the function will store any error message in this scalar and return 0 on failure, or 1 on success. If not set, it will simply call the error function if the download fails.
2093
2094 =item callback - If set to a function ref, it will be called after each block of data is received. This is typically set to \&progress_callback, for printing download progress.
2095
2096 =item sslmode - If set to 1, an HTTPS connection is used instead of HTTP.
2097
2098 =item user - If set, HTTP authentication is done with this username.
2099
2100 =item pass - The HTTP password to use with the username above.
2101
2102 =item timeout - A timeout in seconds to wait for the TCP connection to be established before failing.
2103
2104 =item osdn-convert - If set to 1, URL for downloads from sourceforge are converted to use an appropriate mirror site.
2105
2106 =item no-cache - If set to 1, Webmin's internal caching for this URL is disabled.
2107
2108 =item headers - If set to a hash ref of additional HTTP headers, they will be added to the request.
2109
2110 =cut
2111 sub http_download
2112 {
2113 my ($host, $port, $page, $dest, $error, $cbfunc, $ssl, $user, $pass,
2114     $timeout, $osdn, $nocache, $headers) = @_;
2115 if ($gconfig{'debug_what_net'}) {
2116         &webmin_debug_log('HTTP', "host=$host port=$port page=$page ssl=$ssl".
2117                                   ($user ? " user=$user pass=$pass" : "").
2118                                   (ref($dest) ? "" : " dest=$dest"));
2119         }
2120 if ($osdn) {
2121         # Convert OSDN URL first
2122         my $prot = $ssl ? "https://" : "http://";
2123         my $portstr = $ssl && $port == 443 ||
2124                          !$ssl && $port == 80 ? "" : ":$port";
2125         ($host, $port, $page, $ssl) = &parse_http_url(
2126                 &convert_osdn_url($prot.$host.$portstr.$page));
2127         }
2128
2129 # Check if we already have cached the URL
2130 my $url = ($ssl ? "https://" : "http://").$host.":".$port.$page;
2131 my $cfile = &check_in_http_cache($url);
2132 if ($cfile && !$nocache) {
2133         # Yes! Copy to dest file or variable
2134         &$cbfunc(6, $url) if ($cbfunc);
2135         if (ref($dest)) {
2136                 &open_readfile(CACHEFILE, $cfile);
2137                 local $/ = undef;
2138                 $$dest = <CACHEFILE>;
2139                 close(CACHEFILE);
2140                 }
2141         else {
2142                 &copy_source_dest($cfile, $dest);
2143                 }
2144         return;
2145         }
2146
2147 # Build headers
2148 my @headers;
2149 push(@headers, [ "Host", $host ]);
2150 push(@headers, [ "User-agent", "Webmin" ]);
2151 push(@headers, [ "Accept-language", "en" ]);
2152 if ($user) {
2153         my $auth = &encode_base64("$user:$pass");
2154         $auth =~ tr/\r\n//d;
2155         push(@headers, [ "Authorization", "Basic $auth" ]);
2156         }
2157 foreach my $hname (keys %$headers) {
2158         push(@headers, [ $hname, $headers->{$hname} ]);
2159         }
2160
2161 # Actually download it
2162 $main::download_timed_out = undef;
2163 local $SIG{ALRM} = \&download_timeout;
2164 alarm($timeout || 60);
2165 my $h = &make_http_connection($host, $port, $ssl, "GET", $page, \@headers);
2166 alarm(0);
2167 $h = $main::download_timed_out if ($main::download_timed_out);
2168 if (!ref($h)) {
2169         if ($error) { $$error = $h; return; }
2170         else { &error($h); }
2171         }
2172 &complete_http_download($h, $dest, $error, $cbfunc, $osdn, $host, $port,
2173                         $headers, $ssl, $nocache);
2174 if ((!$error || !$$error) && !$nocache) {
2175         &write_to_http_cache($url, $dest);
2176         }
2177 }
2178
2179 =head2 complete_http_download(handle, destfile, [&error], [&callback], [osdn], [oldhost], [oldport], [&send-headers], [old-ssl], [no-cache])
2180
2181 Do a HTTP download, after the headers have been sent. For internal use only,
2182 typically called by http_download.
2183
2184 =cut
2185 sub complete_http_download
2186 {
2187 local ($line, %header, @headers, $s);  # Kept local so that callback funcs
2188                                        # can access them.
2189 my $cbfunc = $_[3];
2190
2191 # read headers
2192 alarm(60);
2193 ($line = &read_http_connection($_[0])) =~ tr/\r\n//d;
2194 if ($line !~ /^HTTP\/1\..\s+(200|30[0-9])(\s+|$)/) {
2195         alarm(0);
2196         if ($_[2]) { ${$_[2]} = $line; return; }
2197         else { &error("Download failed : $line"); }
2198         }
2199 my $rcode = $1;
2200 &$cbfunc(1, $rcode >= 300 && $rcode < 400 ? 1 : 0)
2201         if ($cbfunc);
2202 while(1) {
2203         $line = &read_http_connection($_[0]);
2204         $line =~ tr/\r\n//d;
2205         $line =~ /^(\S+):\s+(.*)$/ || last;
2206         $header{lc($1)} = $2;
2207         push(@headers, [ lc($1), $2 ]);
2208         }
2209 alarm(0);
2210 if ($main::download_timed_out) {
2211         if ($_[2]) { ${$_[2]} = $main::download_timed_out; return 0; }
2212         else { &error($main::download_timed_out); }
2213         }
2214 &$cbfunc(2, $header{'content-length'}) if ($cbfunc);
2215 if ($rcode >= 300 && $rcode < 400) {
2216         # follow the redirect
2217         &$cbfunc(5, $header{'location'}) if ($cbfunc);
2218         my ($host, $port, $page, $ssl);
2219         if ($header{'location'} =~ /^(http|https):\/\/([^:]+):(\d+)(\/.*)?$/) {
2220                 $ssl = $1 eq 'https' ? 1 : 0;
2221                 $host = $2;
2222                 $port = $3;
2223                 $page = $4 || "/";
2224                 }
2225         elsif ($header{'location'} =~ /^(http|https):\/\/([^:\/]+)(\/.*)?$/) {
2226                 $ssl = $1 eq 'https' ? 1 : 0;
2227                 $host = $2;
2228                 $port = $ssl ? 443 : 80;
2229                 $page = $3 || "/";
2230                 }
2231         elsif ($header{'location'} =~ /^\// && $_[5]) {
2232                 # Relative to same server
2233                 $host = $_[5];
2234                 $port = $_[6];
2235                 $ssl = $_[8];
2236                 $page = $header{'location'};
2237                 }
2238         elsif ($header{'location'}) {
2239                 # Assume relative to same dir .. not handled
2240                 if ($_[2]) { ${$_[2]} = "Invalid Location header $header{'location'}"; return; }
2241                 else { &error("Invalid Location header $header{'location'}"); }
2242                 }
2243         else {
2244                 if ($_[2]) { ${$_[2]} = "Missing Location header"; return; }
2245                 else { &error("Missing Location header"); }
2246                 }
2247         my $params;
2248         ($page, $params) = split(/\?/, $page);
2249         $page =~ s/ /%20/g;
2250         $page .= "?".$params if (defined($params));
2251         &http_download($host, $port, $page, $_[1], $_[2], $cbfunc, $ssl,
2252                        undef, undef, undef, $_[4], $_[9], $_[7]);
2253         }
2254 else {
2255         # read data
2256         if (ref($_[1])) {
2257                 # Append to a variable
2258                 while(defined($buf = &read_http_connection($_[0], 1024))) {
2259                         ${$_[1]} .= $buf;
2260                         &$cbfunc(3, length(${$_[1]})) if ($cbfunc);
2261                         }
2262                 }
2263         else {
2264                 # Write to a file
2265                 my $got = 0;
2266                 if (!&open_tempfile(PFILE, ">$_[1]", 1)) {
2267                         if ($_[2]) { ${$_[2]} = "Failed to write to $_[1] : $!"; return; }
2268                         else { &error("Failed to write to $_[1] : $!"); }
2269                         }
2270                 binmode(PFILE);         # For windows
2271                 while(defined($buf = &read_http_connection($_[0], 1024))) {
2272                         &print_tempfile(PFILE, $buf);
2273                         $got += length($buf);
2274                         &$cbfunc(3, $got) if ($cbfunc);
2275                         }
2276                 &close_tempfile(PFILE);
2277                 if ($header{'content-length'} &&
2278                     $got != $header{'content-length'}) {
2279                         if ($_[2]) { ${$_[2]} = "Download incomplete"; return; }
2280                         else { &error("Download incomplete"); }
2281                         }
2282                 }
2283         &$cbfunc(4) if ($cbfunc);
2284         }
2285 &close_http_connection($_[0]);
2286 }
2287
2288
2289 =head2 http_post(host, port, page, content, destfile, [&error], [&callback], [sslmode], [user, pass], [timeout], [osdn-convert], [no-cache], [&headers])
2290
2291 Posts data to an HTTP url and downloads the response to a local file or string. The parameters are :
2292
2293 =item host - The hostname part of the URL, such as www.google.com
2294
2295 =item port - The HTTP port number, such as 80
2296
2297 =item page - The filename part of the URL, like /index.html
2298
2299 =item content - The data to post
2300
2301 =item destfile - The local file to save the URL data to, like /tmp/index.html. This can also be a scalar reference, in which case the data will be appended to that scalar.
2302
2303 =item error - If set to a scalar ref, the function will store any error message in this scalar and return 0 on failure, or 1 on success. If not set, it will simply call the error function if the download fails.
2304
2305 =item callback - If set to a function ref, it will be called after each block of data is received. This is typically set to \&progress_callback, for printing download progress.
2306
2307 =item sslmode - If set to 1, an HTTPS connection is used instead of HTTP.
2308
2309 =item user - If set, HTTP authentication is done with this username.
2310
2311 =item pass - The HTTP password to use with the username above.
2312
2313 =item timeout - A timeout in seconds to wait for the TCP connection to be established before failing.
2314
2315 =item osdn-convert - If set to 1, URL for downloads from sourceforge are converted to use an appropriate mirror site.
2316
2317 =item no-cache - If set to 1, Webmin's internal caching for this URL is disabled.
2318
2319 =item headers - If set to a hash ref of additional HTTP headers, they will be added to the request.
2320
2321 =cut
2322 sub http_post
2323 {
2324 my ($host, $port, $page, $content, $dest, $error, $cbfunc, $ssl, $user, $pass,
2325     $timeout, $osdn, $nocache, $headers) = @_;
2326 if ($gconfig{'debug_what_net'}) {
2327         &webmin_debug_log('HTTP', "host=$host port=$port page=$page ssl=$ssl".
2328                                   ($user ? " user=$user pass=$pass" : "").
2329                                   (ref($dest) ? "" : " dest=$dest"));
2330         }
2331 if ($osdn) {
2332         # Convert OSDN URL first
2333         my $prot = $ssl ? "https://" : "http://";
2334         my $portstr = $ssl && $port == 443 ||
2335                          !$ssl && $port == 80 ? "" : ":$port";
2336         ($host, $port, $page, $ssl) = &parse_http_url(
2337                 &convert_osdn_url($prot.$host.$portstr.$page));
2338         }
2339
2340 # Build headers
2341 my @headers;
2342 push(@headers, [ "Host", $host ]);
2343 push(@headers, [ "User-agent", "Webmin" ]);
2344 push(@headers, [ "Accept-language", "en" ]);
2345 push(@headers, [ "Content-type", "application/x-www-form-urlencoded" ]);
2346 push(@headers, [ "Content-length", length($content) ]);
2347 if ($user) {
2348         my $auth = &encode_base64("$user:$pass");
2349         $auth =~ tr/\r\n//d;
2350         push(@headers, [ "Authorization", "Basic $auth" ]);
2351         }
2352 foreach my $hname (keys %$headers) {
2353         push(@headers, [ $hname, $headers->{$hname} ]);
2354         }
2355
2356 # Actually download it
2357 $main::download_timed_out = undef;
2358 local $SIG{ALRM} = \&download_timeout;
2359 alarm($timeout || 60);
2360 my $h = &make_http_connection($host, $port, $ssl, "POST", $page, \@headers);
2361 alarm(0);
2362 $h = $main::download_timed_out if ($main::download_timed_out);
2363 if (!ref($h)) {
2364         if ($error) { $$error = $h; return; }
2365         else { &error($h); }
2366         }
2367 &write_http_connection($content."\r\n");
2368 &complete_http_download($h, $dest, $error, $cbfunc, $osdn, $host, $port,
2369                         $headers, $ssl, $nocache);
2370 if ((!$error || !$$error) && !$nocache) {
2371         &write_to_http_cache($url, $dest);
2372         }
2373 }
2374
2375 =head2 ftp_download(host, file, destfile, [&error], [&callback], [user, pass], [port], [no-cache])
2376
2377 Download data from an FTP site to a local file. The parameters are :
2378
2379 =item host - FTP server hostname
2380
2381 =item file - File on the FTP server to download
2382
2383 =item destfile - File on the Webmin system to download data to
2384
2385 =item error - If set to a string ref, any error message is written into this string and the function returns 0 on failure, 1 on success. Otherwise, error is called on failure.
2386
2387 =item callback - If set to a function ref, it will be called after each block of data is received. This is typically set to \&progress_callback, for printing download progress.
2388
2389 =item user - Username to login to the FTP server as. If missing, Webmin will login as anonymous.
2390
2391 =item pass - Password for the username above.
2392
2393 =item port - FTP server port number, which defaults to 21 if not set.
2394
2395 =item no-cache - If set to 1, Webmin's internal caching for this URL is disabled.
2396
2397 =cut
2398 sub ftp_download
2399 {
2400 my ($host, $file, $dest, $error, $cbfunc, $user, $pass, $port, $nocache) = @_;
2401 $port ||= 21;
2402 if ($gconfig{'debug_what_net'}) {
2403         &webmin_debug_log('FTP', "host=$host port=$port file=$file".
2404                                  ($user ? " user=$user pass=$pass" : "").
2405                                  (ref($dest) ? "" : " dest=$dest"));
2406         }
2407 my ($buf, @n);
2408 $cbfunc = $_[4];
2409 if (&is_readonly_mode()) {
2410         if ($_[3]) { ${$_[3]} = "FTP connections not allowed in readonly mode";
2411                      return 0; }
2412         else { &error("FTP connections not allowed in readonly mode"); }
2413         }
2414
2415 # Check if we already have cached the URL
2416 my $url = "ftp://".$host.$file;
2417 my $cfile = &check_in_http_cache($url);
2418 if ($cfile && !$nocache) {
2419         # Yes! Copy to dest file or variable
2420         &$cbfunc(6, $url) if ($cbfunc);
2421         if (ref($dest)) {
2422                 &open_readfile(CACHEFILE, $cfile);
2423                 local $/ = undef;
2424                 $$dest = <CACHEFILE>;
2425                 close(CACHEFILE);
2426                 }
2427         else {
2428                 &copy_source_dest($cfile, $dest);
2429                 }
2430         return;
2431         }
2432
2433 # Actually download it
2434 $main::download_timed_out = undef;
2435 local $SIG{ALRM} = \&download_timeout;
2436 alarm(60);
2437 my $connected;
2438 if ($gconfig{'ftp_proxy'} =~ /^http:\/\/(\S+):(\d+)/ && !&no_proxy($_[0])) {
2439         # download through http-style proxy
2440         my $error;
2441         if (&open_socket($1, $2, "SOCK", \$error)) {
2442                 # Connected OK
2443                 if ($main::download_timed_out) {
2444                         alarm(0);
2445                         if ($_[3]) { ${$_[3]} = $main::download_timed_out; return 0; }
2446                         else { &error($main::download_timed_out); }
2447                         }
2448                 my $esc = $_[1]; $esc =~ s/ /%20/g;
2449                 my $up = "$_[5]:$_[6]\@" if ($_[5]);
2450                 my $portstr = $port == 21 ? "" : ":$port";
2451                 print SOCK "GET ftp://$up$_[0]$portstr$esc HTTP/1.0\r\n";
2452                 print SOCK "User-agent: Webmin\r\n";
2453                 if ($gconfig{'proxy_user'}) {
2454                         my $auth = &encode_base64(
2455                            "$gconfig{'proxy_user'}:$gconfig{'proxy_pass'}");
2456                         $auth =~ tr/\r\n//d;
2457                         print SOCK "Proxy-Authorization: Basic $auth\r\n";
2458                         }
2459                 print SOCK "\r\n";
2460                 &complete_http_download({ 'fh' => "SOCK" }, $_[2], $_[3], $_[4],
2461                                 undef, undef, undef, undef, 0, $nocache);
2462                 $connected = 1;
2463                 }
2464         elsif (!$gconfig{'proxy_fallback'}) {
2465                 alarm(0);
2466                 if ($error) { $$error = $main::download_timed_out; return 0; }
2467                 else { &error($main::download_timed_out); }
2468                 }
2469         }
2470
2471 if (!$connected) {
2472         # connect to host and login with real FTP protocol
2473         &open_socket($_[0], $port, "SOCK", $_[3]) || return 0;
2474         alarm(0);
2475         if ($main::download_timed_out) {
2476                 if ($_[3]) { ${$_[3]} = $main::download_timed_out; return 0; }
2477                 else { &error($main::download_timed_out); }
2478                 }
2479         &ftp_command("", 2, $_[3]) || return 0;
2480         if ($_[5]) {
2481                 # Login as supplied user
2482                 my @urv = &ftp_command("USER $_[5]", [ 2, 3 ], $_[3]);
2483                 @urv || return 0;
2484                 if (int($urv[1]/100) == 3) {
2485                         &ftp_command("PASS $_[6]", 2, $_[3]) || return 0;
2486                         }
2487                 }
2488         else {
2489                 # Login as anonymous
2490                 my @urv = &ftp_command("USER anonymous", [ 2, 3 ], $_[3]);
2491                 @urv || return 0;
2492                 if (int($urv[1]/100) == 3) {
2493                         &ftp_command("PASS root\@".&get_system_hostname(), 2,
2494                                      $_[3]) || return 0;
2495                         }
2496                 }
2497         &$cbfunc(1, 0) if ($cbfunc);
2498
2499         if ($_[1]) {
2500                 # get the file size and tell the callback
2501                 &ftp_command("TYPE I", 2, $_[3]) || return 0;
2502                 my $size = &ftp_command("SIZE $_[1]", 2, $_[3]);
2503                 defined($size) || return 0;
2504                 if ($cbfunc) {
2505                         &$cbfunc(2, int($size));
2506                         }
2507
2508                 # request the file
2509                 my $pasv = &ftp_command("PASV", 2, $_[3]);
2510                 defined($pasv) || return 0;
2511                 $pasv =~ /\(([0-9,]+)\)/;
2512                 @n = split(/,/ , $1);
2513                 &open_socket("$n[0].$n[1].$n[2].$n[3]",
2514                         $n[4]*256 + $n[5], "CON", $_[3]) || return 0;
2515                 &ftp_command("RETR $_[1]", 1, $_[3]) || return 0;
2516
2517                 # transfer data
2518                 my $got = 0;
2519                 &open_tempfile(PFILE, ">$_[2]", 1);
2520                 while(read(CON, $buf, 1024) > 0) {
2521                         &print_tempfile(PFILE, $buf);
2522                         $got += length($buf);
2523                         &$cbfunc(3, $got) if ($cbfunc);
2524                         }
2525                 &close_tempfile(PFILE);
2526                 close(CON);
2527                 if ($got != $size) {
2528                         if ($_[3]) { ${$_[3]} = "Download incomplete"; return 0; }
2529                         else { &error("Download incomplete"); }
2530                         }
2531                 &$cbfunc(4) if ($cbfunc);
2532
2533                 &ftp_command("", 2, $_[3]) || return 0;
2534                 }
2535
2536         # finish off..
2537         &ftp_command("QUIT", 2, $_[3]) || return 0;
2538         close(SOCK);
2539         }
2540
2541 &write_to_http_cache($url, $dest);
2542 return 1;
2543 }
2544
2545 =head2 ftp_upload(host, file, srcfile, [&error], [&callback], [user, pass], [port])
2546
2547 Upload data from a local file to an FTP site. The parameters are :
2548
2549 =item host - FTP server hostname
2550
2551 =item file - File on the FTP server to write to
2552
2553 =item srcfile - File on the Webmin system to upload data from
2554
2555 =item error - If set to a string ref, any error message is written into this string and the function returns 0 on failure, 1 on success. Otherwise, error is called on failure.
2556
2557 =item callback - If set to a function ref, it will be called after each block of data is received. This is typically set to \&progress_callback, for printing upload progress.
2558
2559 =item user - Username to login to the FTP server as. If missing, Webmin will login as anonymous.
2560
2561 =item pass - Password for the username above.
2562
2563 =item port - FTP server port number, which defaults to 21 if not set.
2564
2565 =cut
2566 sub ftp_upload
2567 {
2568 my ($buf, @n);
2569 my $cbfunc = $_[4];
2570 if (&is_readonly_mode()) {
2571         if ($_[3]) { ${$_[3]} = "FTP connections not allowed in readonly mode";
2572                      return 0; }
2573         else { &error("FTP connections not allowed in readonly mode"); }
2574         }
2575
2576 $main::download_timed_out = undef;
2577 local $SIG{ALRM} = \&download_timeout;
2578 alarm(60);
2579
2580 # connect to host and login
2581 &open_socket($_[0], $_[7] || 21, "SOCK", $_[3]) || return 0;
2582 alarm(0);
2583 if ($main::download_timed_out) {
2584         if ($_[3]) { ${$_[3]} = $main::download_timed_out; return 0; }
2585         else { &error($main::download_timed_out); }
2586         }
2587 &ftp_command("", 2, $_[3]) || return 0;
2588 if ($_[5]) {
2589         # Login as supplied user
2590         my @urv = &ftp_command("USER $_[5]", [ 2, 3 ], $_[3]);
2591         @urv || return 0;
2592         if (int($urv[1]/100) == 3) {
2593                 &ftp_command("PASS $_[6]", 2, $_[3]) || return 0;
2594                 }
2595         }
2596 else {
2597         # Login as anonymous
2598         my @urv = &ftp_command("USER anonymous", [ 2, 3 ], $_[3]);
2599         @urv || return 0;
2600         if (int($urv[1]/100) == 3) {
2601                 &ftp_command("PASS root\@".&get_system_hostname(), 2,
2602                              $_[3]) || return 0;
2603                 }
2604         }
2605 &$cbfunc(1, 0) if ($cbfunc);
2606
2607 &ftp_command("TYPE I", 2, $_[3]) || return 0;
2608
2609 # get the file size and tell the callback
2610 my @st = stat($_[2]);
2611 if ($cbfunc) {
2612         &$cbfunc(2, $st[7]);
2613         }
2614
2615 # send the file
2616 my $pasv = &ftp_command("PASV", 2, $_[3]);
2617 defined($pasv) || return 0;
2618 $pasv =~ /\(([0-9,]+)\)/;
2619 @n = split(/,/ , $1);
2620 &open_socket("$n[0].$n[1].$n[2].$n[3]", $n[4]*256 + $n[5], "CON", $_[3]) || return 0;
2621 &ftp_command("STOR $_[1]", 1, $_[3]) || return 0;
2622
2623 # transfer data
2624 my $got;
2625 open(PFILE, $_[2]);
2626 while(read(PFILE, $buf, 1024) > 0) {
2627         print CON $buf;
2628         $got += length($buf);
2629         &$cbfunc(3, $got) if ($cbfunc);
2630         }
2631 close(PFILE);
2632 close(CON);
2633 if ($got != $st[7]) {
2634         if ($_[3]) { ${$_[3]} = "Upload incomplete"; return 0; }
2635         else { &error("Upload incomplete"); }
2636         }
2637 &$cbfunc(4) if ($cbfunc);
2638
2639 # finish off..
2640 &ftp_command("", 2, $_[3]) || return 0;
2641 &ftp_command("QUIT", 2, $_[3]) || return 0;
2642 close(SOCK);
2643
2644 return 1;
2645 }
2646
2647 =head2 no_proxy(host)
2648
2649 Checks if some host is on the no proxy list. For internal use by the 
2650 http_download and ftp_download functions.
2651
2652 =cut
2653 sub no_proxy
2654 {
2655 my $ip = &to_ipaddress($_[0]);
2656 foreach my $n (split(/\s+/, $gconfig{'noproxy'})) {
2657         return 1 if ($_[0] =~ /\Q$n\E/ ||
2658                      $ip =~ /\Q$n\E/);
2659         }
2660 return 0;
2661 }
2662
2663 =head2 open_socket(host, port, handle, [&error])
2664
2665 Open a TCP connection to some host and port, using a file handle. The 
2666 parameters are :
2667
2668 =item host - Hostname or IP address to connect to.
2669
2670 =item port - TCP port number.
2671
2672 =item handle - A file handle name to use for the connection.
2673
2674 =item error - A string reference to write any error message into. If not set, the error function is called on failure.
2675
2676 =cut
2677 sub open_socket
2678 {
2679 my ($host, $port, $fh, $err) = @_;
2680 $fh = &callers_package($fh);
2681
2682 if ($gconfig{'debug_what_net'}) {
2683         &webmin_debug_log('TCP', "host=$host port=$port");
2684         }
2685
2686 # Lookup IP address for the host. Try v4 first, and failing that v6
2687 my $ip;
2688 my $proto = getprotobyname("tcp");
2689 if ($ip = &to_ipaddress($host)) {
2690         # Create IPv4 socket and connection
2691         if (!socket($fh, PF_INET(), SOCK_STREAM, $proto)) {
2692                 my $msg = "Failed to create socket : $!";
2693                 if ($err) { $$err = $msg; return 0; }
2694                 else { &error($msg); }
2695                 }
2696         my $addr = inet_aton($ip);
2697         if ($gconfig{'bind_proxy'}) {
2698                 # BIND to outgoing IP
2699                 if (!bind($fh,pack_sockaddr_in(0, inet_aton($gconfig{'bind_proxy'})))) {
2700                         my $msg = "Failed to bind to source address : $!";
2701                         if ($err) { $$err = $msg; return 0; }
2702                         else { &error($msg); }
2703                         }
2704                 }
2705         if (!connect($fh, pack_sockaddr_in($port, $addr))) {
2706                 my $msg = "Failed to connect to $host:$port : $!";
2707                 if ($err) { $$err = $msg; return 0; }
2708                 else { &error($msg); }
2709                 }
2710         }
2711 elsif ($ip = &to_ip6address($host)) {
2712         # Create IPv6 socket and connection
2713         if (!&supports_ipv6()) {
2714                 $msg = "IPv6 connections are not supported";
2715                 if ($err) { $$err = $msg; return 0; }
2716                 else { &error($msg); }
2717                 }
2718         if (!socket($fh, Socket6::PF_INET6(), SOCK_STREAM, $proto)) {
2719                 my $msg = "Failed to create IPv6 socket : $!";
2720                 if ($err) { $$err = $msg; return 0; }
2721                 else { &error($msg); }
2722                 }
2723         my $addr = inet_pton(Socket6::AF_INET6(), $ip);
2724         if (!connect($fh, pack_sockaddr_in6($port, $addr))) {
2725                 my $msg = "Failed to IPv6 connect to $host:$port : $!";
2726                 if ($err) { $$err = $msg; return 0; }
2727                 else { &error($msg); }
2728                 }
2729         }
2730 else {
2731         # Resolution failed
2732         my $msg = "Failed to lookup IP address for $host";
2733         if ($err) { $$err = $msg; return 0; }
2734         else { &error($msg); }
2735         }
2736
2737 # Disable buffering
2738 my $old = select($fh);
2739 $| = 1;
2740 select($old);
2741 return 1;
2742 }
2743
2744 =head2 download_timeout
2745
2746 Called when a download times out. For internal use only.
2747
2748 =cut
2749 sub download_timeout
2750 {
2751 $main::download_timed_out = "Download timed out";
2752 }
2753
2754 =head2 ftp_command(command, expected, [&error], [filehandle])
2755
2756 Send an FTP command, and die if the reply is not what was expected. Mainly
2757 for internal use by the ftp_download and ftp_upload functions.
2758
2759 =cut
2760 sub ftp_command
2761 {
2762 my ($cmd, $expect, $err, $fh) = @_;
2763 $fh ||= "SOCK";
2764 $fh = &callers_package($fh);
2765
2766 my $line;
2767 my $what = $cmd ne "" ? "<i>$cmd</i>" : "initial connection";
2768 if ($cmd ne "") {
2769         print $fh "$cmd\r\n";
2770         }
2771 alarm(60);
2772 if (!($line = <$fh>)) {
2773         alarm(0);
2774         if ($err) { $$err = "Failed to read reply to $what"; return undef; }
2775         else { &error("Failed to read reply to $what"); }
2776         }
2777 $line =~ /^(...)(.)(.*)$/;
2778 my $found = 0;
2779 if (ref($expect)) {
2780         foreach my $c (@$expect) {
2781                 $found++ if (int($1/100) == $c);
2782                 }
2783         }
2784 else {
2785         $found++ if (int($1/100) == $_[1]);
2786         }
2787 if (!$found) {
2788         alarm(0);
2789         if ($err) { $$err = "$what failed : $3"; return undef; }
2790         else { &error("$what failed : $3"); }
2791         }
2792 my $rcode = $1;
2793 my $reply = $3;
2794 if ($2 eq "-") {
2795         # Need to skip extra stuff..
2796         while(1) {
2797                 if (!($line = <$fh>)) {
2798                         alarm(0);
2799                         if ($$err) { $$err = "Failed to read reply to $what";
2800                                      return undef; }
2801                         else { &error("Failed to read reply to $what"); }
2802                         }
2803                 $line =~ /^(....)(.*)$/; $reply .= $2;
2804                 if ($1 eq "$rcode ") { last; }
2805                 }
2806         }
2807 alarm(0);
2808 return wantarray ? ($reply, $rcode) : $reply;
2809 }
2810
2811 =head2 to_ipaddress(hostname)
2812
2813 Converts a hostname to an a.b.c.d format IP address, or returns undef if
2814 it cannot be resolved.
2815
2816 =cut
2817 sub to_ipaddress
2818 {
2819 if (&check_ipaddress($_[0])) {
2820         return $_[0];   # Already in v4 format
2821         }
2822 elsif (&check_ip6address($_[0])) {
2823         return undef;   # A v6 address cannot be converted to v4
2824         }
2825 else {
2826         my $hn = gethostbyname($_[0]);
2827         return undef if (!$hn);
2828         local @ip = unpack("CCCC", $hn);
2829         return join("." , @ip);
2830         }
2831 }
2832
2833 =head2 to_ip6address(hostname)
2834
2835 Converts a hostname to IPv6 address, or returns undef if it cannot be resolved.
2836
2837 =cut
2838 sub to_ip6address
2839 {
2840 if (&check_ip6address($_[0])) {
2841         return $_[0];   # Already in v6 format
2842         }
2843 elsif (&check_ipaddress($_[0])) {
2844         return undef;   # A v4 address cannot be v6
2845         }
2846 elsif (!&supports_ipv6()) {
2847         return undef;   # Cannot lookup
2848         }
2849 else {
2850         # Perform IPv6 DNS lookup
2851         my $inaddr;
2852         (undef, undef, undef, $inaddr) =
2853             getaddrinfo($_[0], undef, Socket6::AF_INET6(), SOCK_STREAM);
2854         return undef if (!$inaddr);
2855         my $addr;
2856         (undef, $addr) = unpack_sockaddr_in6($inaddr);
2857         return inet_ntop(Socket6::AF_INET6(), $addr);
2858         }
2859 }
2860
2861 =head2 to_hostname(ipv4|ipv6-address)
2862
2863 Reverse-resolves an IPv4 or 6 address to a hostname
2864
2865 =cut
2866 sub to_hostname
2867 {
2868 my ($addr) = @_;
2869 if (&check_ip6address($addr) && &supports_ipv6()) {
2870         return gethostbyaddr(inet_pton(Socket6::AF_INET6(), $addr),
2871                              Socket6::AF_INET6());
2872         }
2873 else {
2874         return gethostbyaddr(inet_aton($addr), AF_INET);
2875         }
2876 }
2877
2878 =head2 icons_table(&links, &titles, &icons, [columns], [href], [width], [height], &befores, &afters)
2879
2880 Renders a 4-column table of icons. The useful parameters are :
2881
2882 =item links - An array ref of link destination URLs for the icons.
2883
2884 =item titles - An array ref of titles to appear under the icons.
2885
2886 =item icons - An array ref of URLs for icon images.
2887
2888 =item columns - Number of columns to layout the icons with. Defaults to 4.
2889
2890 =cut
2891 sub icons_table
2892 {
2893 &load_theme_library();
2894 if (defined(&theme_icons_table)) {
2895         &theme_icons_table(@_);
2896         return;
2897         }
2898 my $need_tr;
2899 my $cols = $_[3] ? $_[3] : 4;
2900 my $per = int(100.0 / $cols);
2901 print "<table class='icons_table' width=100% cellpadding=5>\n";
2902 for(my $i=0; $i<@{$_[0]}; $i++) {
2903         if ($i%$cols == 0) { print "<tr>\n"; }
2904         print "<td width=$per% align=center valign=top>\n";
2905         &generate_icon($_[2]->[$i], $_[1]->[$i], $_[0]->[$i],
2906                        ref($_[4]) ? $_[4]->[$i] : $_[4], $_[5], $_[6],
2907                        $_[7]->[$i], $_[8]->[$i]);
2908         print "</td>\n";
2909         if ($i%$cols == $cols-1) { print "</tr>\n"; }
2910         }
2911 while($i++%$cols) { print "<td width=$per%></td>\n"; $need_tr++; }
2912 print "</tr>\n" if ($need_tr);
2913 print "</table>\n";
2914 }
2915
2916 =head2 replace_file_line(file, line, [newline]*)
2917
2918 Replaces one line in some file with 0 or more new lines. The parameters are :
2919
2920 =item file - Full path to some file, like /etc/hosts.
2921
2922 =item line - Line number to replace, starting from 0.
2923
2924 =item newline - Zero or more lines to put into the file at the given line number. These must be newline-terminated strings.
2925
2926 =cut
2927 sub replace_file_line
2928 {
2929 my @lines;
2930 my $realfile = &translate_filename($_[0]);
2931 open(FILE, $realfile);
2932 @lines = <FILE>;
2933 close(FILE);
2934 if (@_ > 2) { splice(@lines, $_[1], 1, @_[2..$#_]); }
2935 else { splice(@lines, $_[1], 1); }
2936 &open_tempfile(FILE, ">$realfile");
2937 &print_tempfile(FILE, @lines);
2938 &close_tempfile(FILE);
2939 }
2940
2941 =head2 read_file_lines(file, [readonly])
2942
2943 Returns a reference to an array containing the lines from some file. This
2944 array can be modified, and will be written out when flush_file_lines()
2945 is called. The parameters are :
2946
2947 =item file - Full path to the file to read.
2948
2949 =item readonly - Should be set 1 if the caller is only going to read the lines, and never write it out.
2950
2951 Example code :
2952
2953  $lref = read_file_lines("/etc/hosts");
2954  push(@$lref, "127.0.0.1 localhost");
2955  flush_file_lines("/etc/hosts");
2956
2957 =cut
2958 sub read_file_lines
2959 {
2960 if (!$_[0]) {
2961         my ($package, $filename, $line) = caller;
2962         print STDERR "Missing file to read at ${package}::${filename} line $line\n";
2963         }
2964 my $realfile = &translate_filename($_[0]);
2965 if (!$main::file_cache{$realfile}) {
2966         my (@lines, $eol);
2967         local $_;
2968         &webmin_debug_log('READ', $_[0]) if ($gconfig{'debug_what_read'});
2969         open(READFILE, $realfile);
2970         while(<READFILE>) {
2971                 if (!$eol) {
2972                         $eol = /\r\n$/ ? "\r\n" : "\n";
2973                         }
2974                 tr/\r\n//d;
2975                 push(@lines, $_);
2976                 }
2977         close(READFILE);
2978         $main::file_cache{$realfile} = \@lines;
2979         $main::file_cache_noflush{$realfile} = $_[1];
2980         $main::file_cache_eol{$realfile} = $eol || "\n";
2981         }
2982 else {
2983         # Make read-write if currently readonly
2984         if (!$_[1]) {
2985                 $main::file_cache_noflush{$realfile} = 0;
2986                 }
2987         }
2988 return $main::file_cache{$realfile};
2989 }
2990
2991 =head2 flush_file_lines([file], [eol])
2992
2993 Write out to a file previously read by read_file_lines to disk (except
2994 for those marked readonly). The parameters are :
2995
2996 =item file - The file to flush out.
2997
2998 =item eof - End-of-line character for each line. Defaults to \n.
2999
3000 =cut
3001 sub flush_file_lines
3002 {
3003 my @files;
3004 if ($_[0]) {
3005         local $trans = &translate_filename($_[0]);
3006         $main::file_cache{$trans} ||
3007                 &error("flush_file_lines called on non-loaded file $trans");
3008         push(@files, $trans);
3009         }
3010 else {
3011         @files = ( keys %main::file_cache );
3012         }
3013 foreach my $f (@files) {
3014         my $eol = $_[1] || $main::file_cache_eol{$f} || "\n";
3015         if (!$main::file_cache_noflush{$f}) {
3016                 no warnings; # XXX Bareword file handles should go away
3017                 &open_tempfile(FLUSHFILE, ">$f");
3018                 foreach my $line (@{$main::file_cache{$f}}) {
3019                         (print FLUSHFILE $line,$eol) ||
3020                                 &error(&text("efilewrite", $f, $!));
3021                         }
3022                 &close_tempfile(FLUSHFILE);
3023                 }
3024         delete($main::file_cache{$f});
3025         delete($main::file_cache_noflush{$f});
3026         }
3027 }
3028
3029 =head2 unflush_file_lines(file)
3030
3031 Clear the internal cache of some given file, previously read by read_file_lines.
3032
3033 =cut
3034 sub unflush_file_lines
3035 {
3036 my $realfile = &translate_filename($_[0]);
3037 delete($main::file_cache{$realfile});
3038 delete($main::file_cache_noflush{$realfile});
3039 }
3040
3041 =head2 unix_user_input(fieldname, user, [form])
3042
3043 Returns HTML for an input to select a Unix user. By default this is a text
3044 box with a user popup button next to it.
3045
3046 =cut
3047 sub unix_user_input
3048 {
3049 if (defined(&theme_unix_user_input)) {
3050         return &theme_unix_user_input(@_);
3051         }
3052 return "<input name=$_[0] size=13 value=\"$_[1]\"> ".
3053        &user_chooser_button($_[0], 0, $_[2] || 0)."\n";
3054 }
3055
3056 =head2 unix_group_input(fieldname, user, [form])
3057
3058 Returns HTML for an input to select a Unix group. By default this is a text
3059 box with a group popup button next to it.
3060
3061 =cut
3062 sub unix_group_input
3063 {
3064 if (defined(&theme_unix_group_input)) {
3065         return &theme_unix_group_input(@_);
3066         }
3067 return "<input name=$_[0] size=13 value=\"$_[1]\"> ".
3068        &group_chooser_button($_[0], 0, $_[2] || 0)."\n";
3069 }
3070
3071 =head2 hlink(text, page, [module], [width], [height])
3072
3073 Returns HTML for a link that when clicked on pops up a window for a Webmin
3074 help page. The parameters are :
3075
3076 =item text - Text for the link.
3077
3078 =item page - Help page code, such as 'intro'.
3079
3080 =item module - Module the help page is in. Defaults to the current module.
3081
3082 =item width - Width of the help popup window. Defaults to 600 pixels.
3083
3084 =item height - Height of the help popup window. Defaults to 400 pixels.
3085
3086 The actual help pages are in each module's help sub-directory, in files with
3087 .html extensions.
3088
3089 =cut
3090 sub hlink
3091 {
3092 if (defined(&theme_hlink)) {
3093         return &theme_hlink(@_);
3094         }
3095 my $mod = $_[2] ? $_[2] : &get_module_name();
3096 my $width = $_[3] || $tconfig{'help_width'} || $gconfig{'help_width'} || 600;
3097 my $height = $_[4] || $tconfig{'help_height'} || $gconfig{'help_height'} || 400;
3098 return "<a onClick='window.open(\"$gconfig{'webprefix'}/help.cgi/$mod/$_[1]\", \"help\", \"toolbar=no,menubar=no,scrollbars=yes,width=$width,height=$height,resizable=yes\"); return false' href=\"$gconfig{'webprefix'}/help.cgi/$mod/$_[1]\">$_[0]</a>";
3099 }
3100
3101 =head2 user_chooser_button(field, multiple, [form])
3102
3103 Returns HTML for a javascript button for choosing a Unix user or users.
3104 The parameters are :
3105
3106 =item field - Name of the HTML field to place the username into.
3107
3108 =item multiple - Set to 1 if multiple users can be selected.
3109
3110 =item form - Index of the form on the page.
3111
3112 =cut
3113 sub user_chooser_button
3114 {
3115 return undef if (!&supports_users());
3116 return &theme_user_chooser_button(@_)
3117         if (defined(&theme_user_chooser_button));
3118 my $form = defined($_[2]) ? $_[2] : 0;
3119 my $w = $_[1] ? 500 : 300;
3120 my $h = 200;
3121 if ($_[1] && $gconfig{'db_sizeusers'}) {
3122         ($w, $h) = split(/x/, $gconfig{'db_sizeusers'});
3123         }
3124 elsif (!$_[1] && $gconfig{'db_sizeuser'}) {
3125         ($w, $h) = split(/x/, $gconfig{'db_sizeuser'});
3126         }
3127 return "<input type=button onClick='ifield = form.$_[0]; chooser = window.open(\"$gconfig{'webprefix'}/user_chooser.cgi?multi=$_[1]&user=\"+escape(ifield.value), \"chooser\", \"toolbar=no,menubar=no,scrollbars=yes,resizable=yes,width=$w,height=$h\"); chooser.ifield = ifield; window.ifield = ifield' value=\"...\">\n";
3128 }
3129
3130 =head2 group_chooser_button(field, multiple, [form])
3131
3132 Returns HTML for a javascript button for choosing a Unix group or groups
3133 The parameters are :
3134
3135 =item field - Name of the HTML field to place the group name into.
3136
3137 =item multiple - Set to 1 if multiple groups can be selected.
3138
3139 =item form - Index of the form on the page.
3140
3141 =cut
3142 sub group_chooser_button
3143 {
3144 return undef if (!&supports_users());
3145 return &theme_group_chooser_button(@_)
3146         if (defined(&theme_group_chooser_button));
3147 my $form = defined($_[2]) ? $_[2] : 0;
3148 my $w = $_[1] ? 500 : 300;
3149 my $h = 200;
3150 if ($_[1] && $gconfig{'db_sizeusers'}) {
3151         ($w, $h) = split(/x/, $gconfig{'db_sizeusers'});
3152         }
3153 elsif (!$_[1] && $gconfig{'db_sizeuser'}) {
3154         ($w, $h) = split(/x/, $gconfig{'db_sizeuser'});
3155         }
3156 return "<input type=button onClick='ifield = form.$_[0]; chooser = window.open(\"$gconfig{'webprefix'}/group_chooser.cgi?multi=$_[1]&group=\"+escape(ifield.value), \"chooser\", \"toolbar=no,menubar=no,scrollbars=yes,resizable=yes,width=$w,height=$h\"); chooser.ifield = ifield; window.ifield = ifield' value=\"...\">\n";
3157 }
3158
3159 =head2 foreign_check(module, [api-only])
3160
3161 Checks if some other module exists and is supported on this OS. The parameters
3162 are :
3163
3164 =item module - Name of the module to check.
3165
3166 =item api-only - Set to 1 if you just want to check if the module provides an API that others can call, instead of the full web UI.
3167
3168 =cut
3169 sub foreign_check
3170 {
3171 my ($mod, $api) = @_;
3172 my %minfo;
3173 my $mdir = &module_root_directory($mod);
3174 &read_file_cached("$mdir/module.info", \%minfo) || return 0;
3175 return &check_os_support(\%minfo, undef, undef, $api);
3176 }
3177
3178 =head2 foreign_exists(module)
3179
3180 Checks if some other module exists. The module parameter is the short module
3181 name.
3182
3183 =cut
3184 sub foreign_exists
3185 {
3186 my $mdir = &module_root_directory($_[0]);
3187 return -r "$mdir/module.info";
3188 }
3189
3190 =head2 foreign_available(module)
3191
3192 Returns 1 if some module is installed, and acessible to the current user. The
3193 module parameter is the module directory name.
3194
3195 =cut
3196 sub foreign_available
3197 {
3198 return 0 if (!&foreign_check($_[0]) &&
3199              !$gconfig{'available_even_if_no_support'});
3200 my %foreign_module_info = &get_module_info($_[0]);
3201
3202 # Check list of allowed modules
3203 my %acl;
3204 &read_acl(\%acl, undef, [ $base_remote_user ]);
3205 return 0 if (!$acl{$base_remote_user,$_[0]} &&
3206              !$acl{$base_remote_user,'*'});
3207
3208 # Check for usermod restrictions
3209 my @usermods = &list_usermods();
3210 return 0 if (!&available_usermods( [ \%foreign_module_info ], \@usermods));
3211
3212 if (&get_product_name() eq "webmin") {
3213         # Check if the user has any RBAC privileges in this module
3214         if (&supports_rbac($_[0]) &&
3215             &use_rbac_module_acl(undef, $_[0])) {
3216                 # RBAC is enabled for this user and module - check if he
3217                 # has any rights
3218                 my $rbacs = &get_rbac_module_acl($remote_user, $_[0]);
3219                 return 0 if (!$rbacs);
3220                 }
3221         elsif ($gconfig{'rbacdeny_'.$base_remote_user}) {
3222                 # If denying access to modules not specifically allowed by
3223                 # RBAC, then prevent access
3224                 return 0;
3225                 }
3226         }
3227
3228 # Check readonly support
3229 if (&is_readonly_mode()) {
3230         return 0 if (!$foreign_module_info{'readonly'});
3231         }
3232
3233 # Check if theme vetos
3234 if (defined(&theme_foreign_available)) {
3235         return 0 if (!&theme_foreign_available($_[0]));
3236         }
3237
3238 # Check if licence module vetos
3239 if ($main::licence_module) {
3240         return 0 if (!&foreign_call($main::licence_module,
3241                                     "check_module_licence", $_[0]));
3242         }
3243
3244 return 1;
3245 }
3246
3247 =head2 foreign_require(module, [file], [package])
3248
3249 Brings in functions from another module, and places them in the Perl namespace
3250 with the same name as the module. The parameters are :
3251
3252 =item module - The source module's directory name, like sendmail.
3253
3254 =item file - The API file in that module, like sendmail-lib.pl. If missing, all API files are loaded.
3255
3256 =item package - Perl package to place the module's functions and global variables in. 
3257
3258 If the original module name contains dashes, they will be replaced with _ in
3259 the package name.
3260
3261 =cut
3262 sub foreign_require
3263 {
3264 my ($mod, $file, $pkg) = @_;
3265 $pkg ||= $mod || "global";
3266 $pkg =~ s/[^A-Za-z0-9]/_/g;
3267 my @files;
3268 if ($file) {
3269         push(@files, $file);
3270         }
3271 else {
3272         # Auto-detect files
3273         my %minfo = &get_module_info($mod);
3274         if ($minfo{'library'}) {
3275                 @files = split(/\s+/, $minfo{'library'});
3276                 }
3277         else {
3278                 @files = ( $mod."-lib.pl" );
3279                 }
3280         }
3281 @files = grep { !$main::done_foreign_require{$pkg,$_} } @files;
3282 return 1 if (!@files);
3283 foreach my $f (@files) {
3284         $main::done_foreign_require{$pkg,$f}++;
3285         }
3286 my @OLDINC = @INC;
3287 my $mdir = &module_root_directory($mod);
3288 @INC = &unique($mdir, @INC);
3289 -d $mdir || &error("Module $mod does not exist");
3290 if (!&get_module_name() && $mod) {
3291         chdir($mdir);
3292         }
3293 my $old_fmn = $ENV{'FOREIGN_MODULE_NAME'};
3294 my $old_frd = $ENV{'FOREIGN_ROOT_DIRECTORY'};
3295 my $code = "package $pkg; ".
3296            "\$ENV{'FOREIGN_MODULE_NAME'} = '$mod'; ".
3297            "\$ENV{'FOREIGN_ROOT_DIRECTORY'} = '$root_directory'; ";
3298 foreach my $f (@files) {
3299         $code .= "do '$mdir/$f' || die \$@; ";
3300         }
3301 eval $code;
3302 if (defined($old_fmn)) {
3303         $ENV{'FOREIGN_MODULE_NAME'} = $old_fmn;
3304         }
3305 else {
3306         delete($ENV{'FOREIGN_MODULE_NAME'});
3307         }
3308 if (defined($old_frd)) {
3309         $ENV{'FOREIGN_ROOT_DIRECTORY'} = $old_frd;
3310         }
3311 else {
3312         delete($ENV{'FOREIGN_ROOT_DIRECTORY'});
3313         }
3314 @INC = @OLDINC;
3315 if ($@) { &error("Require $mod/$files[0] failed : <pre>$@</pre>"); }
3316 return 1;
3317 }
3318
3319 =head2 foreign_call(module, function, [arg]*)
3320
3321 Call a function in another module. The module parameter is the target module
3322 directory name, function is the perl sub to call, and the remaining parameters
3323 are the arguments. However, unless you need to call a function whose name
3324 is dynamic, it is better to use Perl's cross-module function call syntax
3325 like module::function(args).
3326
3327 =cut
3328 sub foreign_call
3329 {
3330 my $pkg = $_[0] || "global";
3331 $pkg =~ s/[^A-Za-z0-9]/_/g;
3332 my @args = @_[2 .. @_-1];
3333 $main::foreign_args = \@args;
3334 my @rv = eval <<EOF;
3335 package $pkg;
3336 &$_[1](\@{\$main::foreign_args});
3337 EOF
3338 if ($@) { &error("$_[0]::$_[1] failed : $@"); }
3339 return wantarray ? @rv : $rv[0];
3340 }
3341
3342 =head2 foreign_config(module, [user-config])
3343
3344 Get the configuration from another module, and return it as a hash. If the
3345 user-config parameter is set to 1, returns the Usermin user-level preferences
3346 for the current user instead.
3347
3348 =cut
3349 sub foreign_config
3350 {
3351 my ($mod, $uc) = @_;
3352 my %fconfig;
3353 if ($uc) {
3354         &read_file_cached("$root_directory/$mod/defaultuconfig", \%fconfig);
3355         &read_file_cached("$config_directory/$mod/uconfig", \%fconfig);
3356         &read_file_cached("$user_config_directory/$mod/config", \%fconfig);
3357         }
3358 else {
3359         &read_file_cached("$config_directory/$mod/config", \%fconfig);
3360         }
3361 return %fconfig;
3362 }
3363
3364 =head2 foreign_installed(module, mode)
3365
3366 Checks if the server for some module is installed, and possibly also checks
3367 if the module has been configured by Webmin.
3368 For mode 1, returns 2 if the server is installed and configured for use by
3369 Webmin, 1 if installed but not configured, or 0 otherwise.
3370 For mode 0, returns 1 if installed, 0 if not.
3371 If the module does not provide an install_check.pl script, assumes that
3372 the server is installed.
3373
3374 =cut
3375 sub foreign_installed
3376 {
3377 my ($mod, $configured) = @_;
3378 if (defined($main::foreign_installed_cache{$mod,$configured})) {
3379         # Already cached..
3380         return $main::foreign_installed_cache{$mod,$configured};
3381         }
3382 else {
3383         my $rv;
3384         if (!&foreign_check($mod)) {
3385                 # Module is missing
3386                 $rv = 0;
3387                 }
3388         else {
3389                 my $mdir = &module_root_directory($mod);
3390                 if (!-r "$mdir/install_check.pl") {
3391                         # Not known, assume OK
3392                         $rv = $configured ? 2 : 1;
3393                         }
3394                 else {
3395                         # Call function to check
3396                         &foreign_require($mod, "install_check.pl");
3397                         $rv = &foreign_call($mod, "is_installed", $configured);
3398                         }
3399                 }
3400         $main::foreign_installed_cache{$mod,$configured} = $rv;
3401         return $rv;
3402         }
3403 }
3404
3405 =head2 foreign_defined(module, function)
3406
3407 Returns 1 if some function is defined in another module. In general, it is
3408 simpler to use the syntax &defined(module::function) instead.
3409
3410 =cut
3411 sub foreign_defined
3412 {
3413 my ($pkg) = @_;
3414 $pkg =~ s/[^A-Za-z0-9]/_/g;
3415 my $func = "${pkg}::$_[1]";
3416 return defined(&$func);
3417 }
3418
3419 =head2 get_system_hostname([short], [skip-file])
3420
3421 Returns the hostname of this system. If the short parameter is set to 1,
3422 then the domain name is not prepended - otherwise, Webmin will attempt to get
3423 the fully qualified hostname, like foo.example.com.
3424
3425 =cut
3426 sub get_system_hostname
3427 {
3428 my $m = int($_[0]);
3429 my $skipfile = $_[1];
3430 if (!$main::get_system_hostname[$m]) {
3431         if ($gconfig{'os_type'} ne 'windows') {
3432                 # Try some common Linux hostname files first
3433                 my $fromfile;
3434                 if ($skipfile) {
3435                         # Never get from file
3436                         }
3437                 elsif ($gconfig{'os_type'} eq 'redhat-linux') {
3438                         my %nc;
3439                         &read_env_file("/etc/sysconfig/network", \%nc);
3440                         if ($nc{'HOSTNAME'}) {
3441                                 $fromfile = $nc{'HOSTNAME'};
3442                                 }
3443                         }
3444                 elsif ($gconfig{'os_type'} eq 'debian-linux') {
3445                         my $hn = &read_file_contents("/etc/hostname");
3446                         if ($hn) {
3447                                 $hn =~ s/\r|\n//g;
3448                                 $fromfile = $hn;
3449                                 }
3450                         }
3451                 elsif ($gconfig{'os_type'} eq 'open-linux') {
3452                         my $hn = &read_file_contents("/etc/HOSTNAME");
3453                         if ($hn) {
3454                                 $hn =~ s/\r|\n//g;
3455                                 $fromfile = $hn;
3456                                 }
3457                         }
3458                 elsif ($gconfig{'os_type'} eq 'solaris') {
3459                         my $hn = &read_file_contents("/etc/nodename");
3460                         if ($hn) {
3461                                 $hn =~ s/\r|\n//g;
3462                                 $fromfile = $hn;
3463                                 }
3464                         }
3465
3466                 # If we found a hostname in a file, use it
3467                 if ($fromfile && ($m || $fromfile =~ /\./)) {
3468                         if ($m) {
3469                                 $fromfile =~ s/\..*$//;
3470                                 }
3471                         $main::get_system_hostname[$m] = $fromfile;
3472                         return $fromfile;
3473                         }
3474
3475                 # Can use hostname command on Unix
3476                 &execute_command("hostname", undef,
3477                                  \$main::get_system_hostname[$m], undef, 0, 1);
3478                 chop($main::get_system_hostname[$m]);
3479                 if ($?) {
3480                         eval "use Sys::Hostname";
3481                         if (!$@) {
3482                                 $main::get_system_hostname[$m] = eval "hostname()";
3483                                 }
3484                         if ($@ || !$main::get_system_hostname[$m]) {
3485                                 $main::get_system_hostname[$m] = "UNKNOWN";
3486                                 }
3487                         }
3488                 elsif ($main::get_system_hostname[$m] !~ /\./ &&
3489                        $gconfig{'os_type'} =~ /linux$/ &&
3490                        !$gconfig{'no_hostname_f'} && !$_[0]) {
3491                         # Try with -f flag to get fully qualified name
3492                         my $flag;
3493                         my $ex = &execute_command("hostname -f", undef, \$flag,
3494                                                   undef, 0, 1);
3495                         chop($flag);
3496                         if ($ex || $flag eq "") {
3497                                 # -f not supported! We have probably set the
3498                                 # hostname to just '-f'. Fix the problem
3499                                 # (if we are root)
3500                                 if ($< == 0) {
3501                                         &execute_command("hostname ".
3502                                                 quotemeta($main::get_system_hostname[$m]),
3503                                                 undef, undef, undef, 0, 1);
3504                                         }
3505                                 }
3506                         else {
3507                                 $main::get_system_hostname[$m] = $flag;
3508                                 }
3509                         }
3510                 }
3511         else {
3512                 # On Windows, try computername environment variable
3513                 return $ENV{'computername'} if ($ENV{'computername'});
3514                 return $ENV{'COMPUTERNAME'} if ($ENV{'COMPUTERNAME'});
3515
3516                 # Fall back to net name command
3517                 my $out = `net name 2>&1`;
3518                 if ($out =~ /\-+\r?\n(\S+)/) {
3519                         $main::get_system_hostname[$m] = $1;
3520                         }
3521                 else {
3522                         $main::get_system_hostname[$m] = "windows";
3523                         }
3524                 }
3525         }
3526 return $main::get_system_hostname[$m];
3527 }
3528
3529 =head2 get_webmin_version
3530
3531 Returns the version of Webmin currently being run, such as 1.450.
3532
3533 =cut
3534 sub get_webmin_version
3535 {
3536 if (!$get_webmin_version) {
3537         open(VERSION, "$root_directory/version") || return 0;
3538         ($get_webmin_version = <VERSION>) =~ tr/\r|\n//d;
3539         close(VERSION);
3540         }
3541 return $get_webmin_version;
3542 }
3543
3544 =head2 get_module_acl([user], [module], [no-rbac], [no-default])
3545
3546 Returns a hash containing access control options for the given user and module.
3547 By default the current username and module name are used. If the no-rbac flag
3548 is given, the permissions will not be updated based on the user's RBAC role
3549 (as seen on Solaris). If the no-default flag is given, default permissions for
3550 the module will not be included.
3551
3552 =cut
3553 sub get_module_acl
3554 {
3555 my $u = defined($_[0]) ? $_[0] : $base_remote_user;
3556 my $m = defined($_[1]) ? $_[1] : &get_module_name();
3557 my $mdir = &module_root_directory($m);
3558 my %rv;
3559 if (!$_[3]) {
3560         # Read default ACL first, to be overridden by per-user settings
3561         &read_file_cached("$mdir/defaultacl", \%rv);
3562
3563         # If this isn't a master admin user, apply the negative permissions
3564         # so that he doesn't un-expectedly gain access to new features
3565         my %gacccess;
3566         &read_file_cached("$config_directory/$u.acl", \%gaccess);
3567         if ($gaccess{'negative'}) {
3568                 &read_file_cached("$mdir/negativeacl", \%rv);
3569                 }
3570         }
3571 my %usersacl;
3572 if (!$_[2] && &supports_rbac($m) && &use_rbac_module_acl($u, $m)) {
3573         # RBAC overrides exist for this user in this module
3574         my $rbac = &get_rbac_module_acl(
3575                         defined($_[0]) ? $_[0] : $remote_user, $m);
3576         foreach my $r (keys %$rbac) {
3577                 $rv{$r} = $rbac->{$r};
3578                 }
3579         }
3580 elsif ($gconfig{"risk_$u"} && $m) {
3581         # ACL is defined by user's risk level
3582         my $rf = $gconfig{"risk_$u"}.'.risk';
3583         &read_file_cached("$mdir/$rf", \%rv);
3584
3585         my $sf = $gconfig{"skill_$u"}.'.skill';
3586         &read_file_cached("$mdir/$sf", \%rv);
3587         }
3588 elsif ($u ne '') {
3589         # Use normal Webmin ACL, if a user is set
3590         my $userdb = &get_userdb_string();
3591         my $foundindb = 0;
3592         if ($userdb && ($u ne $base_remote_user || $remote_user_proto)) {
3593                 # Look for this user in the user/group DB, if one is defined
3594                 # and if the user might be in the DB
3595                 my ($dbh, $proto, $prefix, $args) = &connect_userdb($userdb);
3596                 ref($dbh) || &error(&text('euserdbacl', $dbh));
3597                 if ($proto eq "mysql" || $proto eq "postgresql") {
3598                         # Find the user in the SQL DB
3599                         my $cmd = $dbh->prepare(
3600                                 "select id from webmin_user where name = ?");
3601                         $cmd && $cmd->execute($u) ||
3602                                 &error(&text('euserdbacl', $dbh->errstr));
3603                         my ($id) = $cmd->fetchrow();
3604                         $foundindb = 1 if (defined($id));
3605                         $cmd->finish();
3606
3607                         # Fetch ACLs with SQL
3608                         if ($foundindb) {
3609                                 my $cmd = $dbh->prepare(
3610                                     "select attr,value from webmin_user_acl ".
3611                                     "where id = ? and module = ?");
3612                                 $cmd && $cmd->execute($id, $m) ||
3613                                     &error(&text('euserdbacl', $dbh->errstr));
3614                                 while(my ($a, $v) = $cmd->fetchrow()) {
3615                                         $rv{$a} = $v;
3616                                         }
3617                                 $cmd->finish();
3618                                 }
3619                         }
3620                 elsif ($proto eq "ldap") {
3621                         # Find user in LDAP
3622                         my $rv = $dbh->search(
3623                                 base => $prefix,
3624                                 filter => '(&(cn='.$u.')(objectClass='.
3625                                           $args->{'userclass'}.'))',
3626                                 scope => 'sub');
3627                         if (!$rv || $rv->code) {
3628                                 &error(&text('euserdbacl',
3629                                      $rv ? $rv->error : "Unknown error"));
3630                                 }
3631                         my ($user) = $rv->all_entries;
3632
3633                         # Find ACL sub-object for the module
3634                         my $ldapm = $m || "global";
3635                         if ($user) {
3636                                 my $rv = $dbh->search(
3637                                         base => $user->dn(),
3638                                         filter => '(cn='.$ldapm.')',
3639                                         scope => 'one');
3640                                 if (!$rv || $rv->code) {
3641                                         &error(&text('euserdbacl',
3642                                            $rv ? $rv->error : "Unknown error"));
3643                                         }
3644                                 my ($acl) = $rv->all_entries;
3645                                 if ($acl) {
3646                                         foreach my $av ($acl->get_value(
3647                                                         'webminAclEntry')) {
3648                                                 my ($a, $v) = split(/=/, $av,2);
3649                                                 $rv{$a} = $v;
3650                                                 }
3651                                         }
3652                                 }
3653                         }
3654                 &disconnect_userdb($userdb, $dbh);
3655                 }
3656
3657         if (!$foundindb) {
3658                 # Read from local files
3659                 &read_file_cached("$config_directory/$m/$u.acl", \%rv);
3660                 if ($remote_user ne $base_remote_user && !defined($_[0])) {
3661                         &read_file_cached(
3662                                 "$config_directory/$m/$remote_user.acl",\%rv);
3663                         }
3664                 }
3665         }
3666 if ($tconfig{'preload_functions'}) {
3667         &load_theme_library();
3668         }
3669 if (defined(&theme_get_module_acl)) {
3670         %rv = &theme_get_module_acl($u, $m, \%rv);
3671         }
3672 return %rv;
3673 }
3674
3675 =head2 get_group_module_acl(group, [module], [no-default])
3676
3677 Returns the ACL for a Webmin group, in an optional module (which defaults to
3678 the current module).
3679
3680 =cut
3681 sub get_group_module_acl
3682 {
3683 my $g = $_[0];
3684 my $m = defined($_[1]) ? $_[1] : &get_module_name();
3685 my $mdir = &module_root_directory($m);
3686 my %rv;
3687 if (!$_[2]) {
3688         &read_file_cached("$mdir/defaultacl", \%rv);
3689         }
3690
3691 my $userdb = &get_userdb_string();
3692 my $foundindb = 0;
3693 if ($userdb) {
3694         # Look for this group in the user/group DB
3695         my ($dbh, $proto, $prefix, $args) = &connect_userdb($userdb);
3696         ref($dbh) || &error(&text('egroupdbacl', $dbh));
3697         if ($proto eq "mysql" || $proto eq "postgresql") {
3698                 # Find the group in the SQL DB
3699                 my $cmd = $dbh->prepare(
3700                         "select id from webmin_group where name = ?");
3701                 $cmd && $cmd->execute($g) ||
3702                         &error(&text('egroupdbacl', $dbh->errstr));
3703                 my ($id) = $cmd->fetchrow();
3704                 $foundindb = 1 if (defined($id));
3705                 $cmd->finish();
3706
3707                 # Fetch ACLs with SQL
3708                 if ($foundindb) {
3709                         my $cmd = $dbh->prepare(
3710                             "select attr,value from webmin_group_acl ".
3711                             "where id = ? and module = ?");
3712                         $cmd && $cmd->execute($id, $m) ||
3713                             &error(&text('egroupdbacl', $dbh->errstr));
3714                         while(my ($a, $v) = $cmd->fetchrow()) {
3715                                 $rv{$a} = $v;
3716                                 }
3717                         $cmd->finish();
3718                         }
3719                 }
3720         elsif ($proto eq "ldap") {
3721                 # Find group in LDAP
3722                 my $rv = $dbh->search(
3723                         base => $prefix,
3724                         filter => '(&(cn='.$g.')(objectClass='.
3725                                   $args->{'groupclass'}.'))',
3726                         scope => 'sub');
3727                 if (!$rv || $rv->code) {
3728                         &error(&text('egroupdbacl',
3729                                      $rv ? $rv->error : "Unknown error"));
3730                         }
3731                 my ($group) = $rv->all_entries;
3732
3733                 # Find ACL sub-object for the module
3734                 my $ldapm = $m || "global";
3735                 if ($group) {
3736                         my $rv = $dbh->search(
3737                                 base => $group->dn(),
3738                                 filter => '(cn='.$ldapm.')',
3739                                 scope => 'one');
3740                         if (!$rv || $rv->code) {
3741                                 &error(&text('egroupdbacl',
3742                                      $rv ? $rv->error : "Unknown error"));
3743                                 }
3744                         my ($acl) = $rv->all_entries;
3745                         if ($acl) {
3746                                 foreach my $av ($acl->get_value(
3747                                                 'webminAclEntry')) {
3748                                         my ($a, $v) = split(/=/, $av, 2);
3749                                         $rv{$a} = $v;
3750                                         }
3751                                 }
3752                         }
3753                 }
3754         &disconnect_userdb($userdb, $dbh);
3755         }
3756 if (!$foundindb) {
3757         # Read from local files
3758         &read_file_cached("$config_directory/$m/$g.gacl", \%rv);
3759         }
3760 if (defined(&theme_get_module_acl)) {
3761         %rv = &theme_get_module_acl($g, $m, \%rv);
3762         }
3763 return %rv;
3764 }
3765
3766 =head2 save_module_acl(&acl, [user], [module], [never-update-group])
3767
3768 Updates the acl hash for some user and module. The parameters are :
3769
3770 =item acl - Hash reference for the new access control options, or undef to clear
3771
3772 =item user - User to update, defaulting to the current user.
3773
3774 =item module - Module to update, defaulting to the caller.
3775
3776 =item never-update-group - Never update the user's group's ACL
3777
3778 =cut
3779 sub save_module_acl
3780 {
3781 my $u = defined($_[1]) ? $_[1] : $base_remote_user;
3782 my $m = defined($_[2]) ? $_[2] : &get_module_name();
3783 if (!$_[3] && &foreign_check("acl")) {
3784         # Check if this user is a member of a group, and if he gets the
3785         # module from a group. If so, update its ACL as well
3786         &foreign_require("acl", "acl-lib.pl");
3787         my $group;
3788         foreach my $g (&acl::list_groups()) {
3789                 if (&indexof($u, @{$g->{'members'}}) >= 0 &&
3790                     &indexof($m, @{$g->{'modules'}}) >= 0) {
3791                         $group = $g;
3792                         last;
3793                         }
3794                 }
3795         if ($group) {
3796                 &save_group_module_acl($_[0], $group->{'name'}, $m);
3797                 }
3798         }
3799
3800 my $userdb = &get_userdb_string();
3801 my $foundindb = 0;
3802 if ($userdb && ($u ne $base_remote_user || $remote_user_proto)) {
3803         # Look for this user in the user/group DB
3804         my ($dbh, $proto, $prefix, $args) = &connect_userdb($userdb);
3805         ref($dbh) || &error(&text('euserdbacl', $dbh));
3806         if ($proto eq "mysql" || $proto eq "postgresql") {
3807                 # Find the user in the SQL DB
3808                 my $cmd = $dbh->prepare(
3809                         "select id from webmin_user where name = ?");
3810                 $cmd && $cmd->execute($u) ||
3811                         &error(&text('euserdbacl2', $dbh->errstr));
3812                 my ($id) = $cmd->fetchrow();
3813                 $foundindb = 1 if (defined($id));
3814                 $cmd->finish();
3815
3816                 # Replace ACLs for user
3817                 if ($foundindb) {
3818                         my $cmd = $dbh->prepare("delete from webmin_user_acl ".
3819                                                 "where id = ? and module = ?");
3820                         $cmd && $cmd->execute($id, $m) ||
3821                             &error(&text('euserdbacl', $dbh->errstr));
3822                         $cmd->finish();
3823                         if ($_[0]) {
3824                                 my $cmd = $dbh->prepare(
3825                                     "insert into webmin_user_acl ".
3826                                     "(id,module,attr,value) values (?,?,?,?)");
3827                                 $cmd || &error(&text('euserdbacl2',
3828                                                      $dbh->errstr));
3829                                 foreach my $a (keys %{$_[0]}) {
3830                                         $cmd->execute($id,$m,$a,$_[0]->{$a}) ||
3831                                             &error(&text('euserdbacl2',
3832                                                          $dbh->errstr));
3833                                         $cmd->finish();
3834                                         }
3835                                 }
3836                         }
3837                 }
3838         elsif ($proto eq "ldap") {
3839                 # Find the user in LDAP
3840                 my $rv = $dbh->search(
3841                         base => $prefix,
3842                         filter => '(&(cn='.$u.')(objectClass='.
3843                                   $args->{'userclass'}.'))',
3844                         scope => 'sub');
3845                 if (!$rv || $rv->code) {
3846                         &error(&text('euserdbacl',
3847                                      $rv ? $rv->error : "Unknown error"));
3848                         }
3849                 my ($user) = $rv->all_entries;
3850
3851                 if ($user) {
3852                         # Find the ACL sub-object for the module
3853                         $foundindb = 1;
3854                         my $ldapm = $m || "global";
3855                         my $rv = $dbh->search(
3856                                 base => $user->dn(),
3857                                 filter => '(cn='.$ldapm.')',
3858                                 scope => 'one');
3859                         if (!$rv || $rv->code) {
3860                                 &error(&text('euserdbacl',
3861                                      $rv ? $rv->error : "Unknown error"));
3862                                 }
3863                         my ($acl) = $rv->all_entries;
3864
3865                         my @al;
3866                         foreach my $a (keys %{$_[0]}) {
3867                                 push(@al, $a."=".$_[0]->{$a});
3868                                 }
3869                         if ($acl) {
3870                                 # Update attributes
3871                                 $rv = $dbh->modify($acl->dn(),
3872                                   replace => { "webminAclEntry", \@al });
3873                                 }
3874                         else {
3875                                 # Add a sub-object
3876                                 my @attrs = ( "cn", $ldapm,
3877                                               "objectClass", "webminAcl",
3878                                               "webminAclEntry", \@al );
3879                                 $rv = $dbh->add("cn=".$ldapm.",".$user->dn(),
3880                                                 attr => \@attrs);
3881                                 }
3882                         if (!$rv || $rv->code) {
3883                                 &error(&text('euserdbacl2',
3884                                      $rv ? $rv->error : "Unknown error"));
3885                                 }
3886                         }
3887                 }
3888         &disconnect_userdb($userdb, $dbh);
3889         }
3890
3891 if (!$foundindb) {
3892         # Save ACL to local file
3893         if (!-d "$config_directory/$m") {
3894                 mkdir("$config_directory/$m", 0755);
3895                 }
3896         if ($_[0]) {
3897                 &write_file("$config_directory/$m/$u.acl", $_[0]);
3898                 }
3899         else {
3900                 &unlink_file("$config_directory/$m/$u.acl");
3901                 }
3902         }
3903 }
3904
3905 =head2 save_group_module_acl(&acl, group, [module], [never-update-group])
3906
3907 Updates the acl hash for some group and module. The parameters are :
3908
3909 =item acl - Hash reference for the new access control options.
3910
3911 =item group - Group name to update.
3912
3913 =item module - Module to update, defaulting to the caller.
3914
3915 =item never-update-group - Never update the parent group's ACL
3916
3917 =cut
3918 sub save_group_module_acl
3919 {
3920 my $g = $_[1];
3921 my $m = defined($_[2]) ? $_[2] : &get_module_name();
3922 if (!$_[3] && &foreign_check("acl")) {
3923         # Check if this group is a member of a group, and if it gets the
3924         # module from a group. If so, update the parent ACL as well
3925         &foreign_require("acl", "acl-lib.pl");
3926         my $group;
3927         foreach my $pg (&acl::list_groups()) {
3928                 if (&indexof('@'.$g, @{$pg->{'members'}}) >= 0 &&
3929                     &indexof($m, @{$pg->{'modules'}}) >= 0) {
3930                         $group = $g;
3931                         last;
3932                         }
3933                 }
3934         if ($group) {
3935                 &save_group_module_acl($_[0], $group->{'name'}, $m);
3936                 }
3937         }
3938
3939 my $userdb = &get_userdb_string();
3940 my $foundindb = 0;
3941 if ($userdb) {
3942         # Look for this group in the user/group DB
3943         my ($dbh, $proto, $prefix, $args) = &connect_userdb($userdb);
3944         ref($dbh) || &error(&text('egroupdbacl', $dbh));
3945         if ($proto eq "mysql" || $proto eq "postgresql") {
3946                 # Find the group in the SQL DB
3947                 my $cmd = $dbh->prepare(
3948                         "select id from webmin_group where name = ?");
3949                 $cmd && $cmd->execute($g) ||
3950                         &error(&text('egroupdbacl2', $dbh->errstr));
3951                 my ($id) = $cmd->fetchrow();
3952                 $foundindb = 1 if (defined($id));
3953                 $cmd->finish();
3954
3955                 # Replace ACLs for group
3956                 if ($foundindb) {
3957                         my $cmd = $dbh->prepare("delete from webmin_group_acl ".
3958                                                 "where id = ? and module = ?");
3959                         $cmd && $cmd->execute($id, $m) ||
3960                             &error(&text('egroupdbacl', $dbh->errstr));
3961                         $cmd->finish();
3962                         if ($_[0]) {
3963                                 my $cmd = $dbh->prepare(
3964                                     "insert into webmin_group_acl ".
3965                                     "(id,module,attr,value) values (?,?,?,?)");
3966                                 $cmd || &error(&text('egroupdbacl2',
3967                                                      $dbh->errstr));
3968                                 foreach my $a (keys %{$_[0]}) {
3969                                         $cmd->execute($id,$m,$a,$_[0]->{$a}) ||
3970                                             &error(&text('egroupdbacl2',
3971                                                          $dbh->errstr));
3972                                         $cmd->finish();
3973                                         }
3974                                 }
3975                         }
3976                 }
3977         elsif ($proto eq "ldap") {
3978                 # Find the group in LDAP
3979                 my $rv = $dbh->search(
3980                         base => $prefix,
3981                         filter => '(&(cn='.$g.')(objectClass='.
3982                                   $args->{'groupclass'}.'))',
3983                         scope => 'sub');
3984                 if (!$rv || $rv->code) {
3985                         &error(&text('egroupdbacl',
3986                                      $rv ? $rv->error : "Unknown error"));
3987                         }
3988                 my ($group) = $rv->all_entries;
3989
3990                 my $ldapm = $m || "global";
3991                 if ($group) {
3992                         # Find the ACL sub-object for the module
3993                         $foundindb = 1;
3994                         my $rv = $dbh->search(
3995                                 base => $group->dn(),
3996                                 filter => '(cn='.$ldapm.')',
3997                                 scope => 'one');
3998                         if (!$rv || $rv->code) {
3999                                 &error(&text('egroupdbacl',
4000                                      $rv ? $rv->error : "Unknown error"));
4001                                 }
4002                         my ($acl) = $rv->all_entries;
4003
4004                         my @al;
4005                         foreach my $a (keys %{$_[0]}) {
4006                                 push(@al, $a."=".$_[0]->{$a});
4007                                 }
4008                         if ($acl) {
4009                                 # Update attributes
4010                                 $rv = $dbh->modify($acl->dn(),
4011                                         replace => { "webminAclEntry", \@al });
4012                                 }
4013                         else {
4014                                 # Add a sub-object
4015                                 my @attrs = ( "cn", $ldapm,
4016                                               "objectClass", "webminAcl",
4017                                               "webminAclEntry", \@al );
4018                                 $rv = $dbh->add("cn=".$ldapm.",".$group->dn(),
4019                                                 attr => \@attrs);
4020                                 }
4021                         if (!$rv || $rv->code) {
4022                                 &error(&text('egroupdbacl2',
4023                                      $rv ? $rv->error : "Unknown error"));
4024                                 }
4025                         }
4026                 }
4027         &disconnect_userdb($userdb, $dbh);
4028         }
4029
4030 if (!$foundindb) {
4031         # Save ACL to local file
4032         if (!-d "$config_directory/$m") {
4033                 mkdir("$config_directory/$m", 0755);
4034                 }
4035         if ($_[0]) {
4036                 &write_file("$config_directory/$m/$g.gacl", $_[0]);
4037                 }
4038         else {
4039                 &unlink_file("$config_directory/$m/$g.gacl");
4040                 }
4041         }
4042 }
4043
4044 =head2 init_config
4045
4046 This function must be called by all Webmin CGI scripts, either directly or
4047 indirectly via a per-module lib.pl file. It performs a number of initialization
4048 and housekeeping tasks, such as working out the module name, checking that the
4049 current user has access to the module, and populating global variables. Some
4050 of the variables set include :
4051
4052 =item $config_directory - Base Webmin config directory, typically /etc/webmin
4053
4054 =item $var_directory - Base logs directory, typically /var/webmin
4055
4056 =item %config - Per-module configuration.
4057
4058 =item %gconfig - Global configuration.
4059
4060 =item $scriptname - Base name of the current perl script.
4061
4062 =item $module_name - The name of the current module.
4063
4064 =item $module_config_directory - The config directory for this module.
4065
4066 =item $module_config_file - The config file for this module.
4067
4068 =item $module_root_directory - This module's code directory.
4069
4070 =item $webmin_logfile - The detailed logfile for webmin.
4071
4072 =item $remote_user - The actual username used to login to webmin.
4073
4074 =item $base_remote_user - The username whose permissions are in effect.
4075
4076 =item $current_theme - The theme currently in use.
4077
4078 =item $root_directory - The first root directory of this webmin install.
4079
4080 =item @root_directories - All root directories for this webmin install.
4081
4082 =cut
4083 sub init_config
4084 {
4085 # Record first process ID that called this, so we know when it exited to clean
4086 # up temp files
4087 $main::initial_process_id ||= $$;
4088
4089 # Configuration and spool directories
4090 if (!defined($ENV{'WEBMIN_CONFIG'})) {
4091         die "WEBMIN_CONFIG not set";
4092         }
4093 $config_directory = $ENV{'WEBMIN_CONFIG'};
4094 if (!defined($ENV{'WEBMIN_VAR'})) {
4095         open(VARPATH, "$config_directory/var-path");
4096         chop($var_directory = <VARPATH>);
4097         close(VARPATH);
4098         }
4099 else {
4100         $var_directory = $ENV{'WEBMIN_VAR'};
4101         }
4102 $main::http_cache_directory = $ENV{'WEBMIN_VAR'}."/cache";
4103 $main::default_debug_log_file = $ENV{'WEBMIN_VAR'}."/webmin.debug";
4104
4105 if ($ENV{'SESSION_ID'}) {
4106         # Hide this variable from called programs, but keep it for internal use
4107         $main::session_id = $ENV{'SESSION_ID'};
4108         delete($ENV{'SESSION_ID'});
4109         }
4110 if ($ENV{'REMOTE_PASS'}) {
4111         # Hide the password too
4112         $main::remote_pass = $ENV{'REMOTE_PASS'};
4113         delete($ENV{'REMOTE_PASS'});
4114         }
4115
4116 if ($> == 0 && $< != 0 && !$ENV{'FOREIGN_MODULE_NAME'}) {
4117         # Looks like we are running setuid, but the real UID hasn't been set.
4118         # Do so now, so that executed programs don't get confused
4119         $( = $);
4120         $< = $>;
4121         }
4122
4123 # Read the webmin global config file. This contains the OS type and version,
4124 # OS specific configuration and global options such as proxy servers
4125 $config_file = "$config_directory/config";
4126 %gconfig = ( );
4127 &read_file_cached($config_file, \%gconfig);
4128 $gconfig{'webprefix'} = '' if (!exists($gconfig{'webprefix'}));
4129 $null_file = $gconfig{'os_type'} eq 'windows' ? "NUL" : "/dev/null";
4130 $path_separator = $gconfig{'os_type'} eq 'windows' ? ';' : ':';
4131
4132 # Work out of this is a web, command line or cron job
4133 if (!$main::webmin_script_type) {
4134         if ($ENV{'SCRIPT_NAME'}) {
4135                 # Run via a CGI
4136                 $main::webmin_script_type = 'web';
4137                 }
4138         else {
4139                 # Cron jobs have no TTY
4140                 if ($gconfig{'os_type'} eq 'windows' ||
4141                     open(DEVTTY, ">/dev/tty")) {
4142                         $main::webmin_script_type = 'cmd';
4143                         close(DEVTTY);
4144                         }
4145                 else {
4146                         $main::webmin_script_type = 'cron';
4147                         }
4148                 }
4149         }
4150
4151 # If this is a cron job, suppress STDERR warnings
4152 if ($main::webmin_script_type eq 'cron') {
4153         $SIG{__WARN__} = sub { };
4154         }
4155
4156 # If debugging is enabled, open the debug log
4157 if (($ENV{'WEBMIN_DEBUG'} || $gconfig{'debug_enabled'}) &&
4158     !$main::opened_debug_log++) {
4159         my $dlog = $gconfig{'debug_file'} || $main::default_debug_log_file;
4160         if ($gconfig{'debug_size'}) {
4161                 my @st = stat($dlog);
4162                 if ($st[7] > $gconfig{'debug_size'}) {
4163                         rename($dlog, $dlog.".0");
4164                         }
4165                 }
4166         open(main::DEBUGLOG, ">>$dlog");
4167         $main::opened_debug_log = 1;
4168
4169         if ($gconfig{'debug_what_start'}) {
4170                 my $script_name = $0 =~ /([^\/]+)$/ ? $1 : '-';
4171                 $main::debug_log_start_time = time();
4172                 &webmin_debug_log("START", "script=$script_name");
4173                 $main::debug_log_start_module = $module_name;
4174                 }
4175         }
4176
4177 # Set PATH and LD_LIBRARY_PATH
4178 if ($gconfig{'path'}) {
4179         if ($gconfig{'syspath'}) {
4180                 # Webmin only
4181                 $ENV{'PATH'} = $gconfig{'path'};
4182                 }
4183         else {
4184                 # Include OS too
4185                 $ENV{'PATH'} = $gconfig{'path'}.$path_separator.$ENV{'PATH'};
4186                 }
4187         }
4188 $ENV{$gconfig{'ld_env'}} = $gconfig{'ld_path'} if ($gconfig{'ld_env'});
4189
4190 # Set http_proxy and ftp_proxy environment variables, based on Webmin settings
4191 if ($gconfig{'http_proxy'}) {
4192         $ENV{'http_proxy'} = $gconfig{'http_proxy'};
4193         }
4194 if ($gconfig{'ftp_proxy'}) {
4195         $ENV{'ftp_proxy'} = $gconfig{'ftp_proxy'};
4196         }
4197 if ($gconfig{'noproxy'}) {
4198         $ENV{'no_proxy'} = $gconfig{'noproxy'};
4199         }
4200
4201 # Find all root directories
4202 my %miniserv;
4203 if (&get_miniserv_config(\%miniserv)) {
4204         @root_directories = ( $miniserv{'root'} );
4205         for($i=0; defined($miniserv{"extraroot_$i"}); $i++) {
4206                 push(@root_directories, $miniserv{"extraroot_$i"});
4207                 }
4208         }
4209
4210 # Work out which module we are in, and read the per-module config file
4211 $0 =~ s/\\/\//g;        # Force consistent path on Windows
4212 if (defined($ENV{'FOREIGN_MODULE_NAME'})) {
4213         # In a foreign call - use the module name given
4214         $root_directory = $ENV{'FOREIGN_ROOT_DIRECTORY'};
4215         $module_name = $ENV{'FOREIGN_MODULE_NAME'};
4216         @root_directories = ( $root_directory ) if (!@root_directories);
4217         }
4218 elsif ($ENV{'SCRIPT_NAME'}) {
4219         my $sn = $ENV{'SCRIPT_NAME'};
4220         $sn =~ s/^$gconfig{'webprefix'}//
4221                 if (!$gconfig{'webprefixnoredir'});
4222         if ($sn =~ /^\/([^\/]+)\//) {
4223                 # Get module name from CGI path
4224                 $module_name = $1;
4225                 }
4226         if ($ENV{'SERVER_ROOT'}) {
4227                 $root_directory = $ENV{'SERVER_ROOT'};
4228                 }
4229         elsif ($ENV{'SCRIPT_FILENAME'}) {
4230                 $root_directory = $ENV{'SCRIPT_FILENAME'};
4231                 $root_directory =~ s/$sn$//;
4232                 }
4233         @root_directories = ( $root_directory ) if (!@root_directories);
4234         }
4235 else {
4236         # Get root directory from miniserv.conf, and deduce module name from $0
4237         $root_directory = $root_directories[0];
4238         my $rok = 0;
4239         foreach my $r (@root_directories) {
4240                 if ($0 =~ /^$r\/([^\/]+)\/[^\/]+$/i) {
4241                         # Under a module directory
4242                         $module_name = $1;
4243                         $rok = 1;
4244                         last;
4245                         }
4246                 elsif ($0 =~ /^$root_directory\/[^\/]+$/i) {
4247                         # At the top level
4248                         $rok = 1;
4249                         last;
4250                         }
4251                 }
4252         &error("Script was not run with full path (failed to find $0 under $root_directory)") if (!$rok);
4253         }
4254
4255 # Set the umask based on config
4256 if ($gconfig{'umask'} && !$main::umask_already++) {
4257         umask(oct($gconfig{'umask'}));
4258         }
4259
4260 # If this is a cron job or other background task, set the nice level
4261 if (!$main::nice_already && $main::webmin_script_type eq 'cron') {
4262         # Set nice level
4263         if ($gconfig{'nice'}) {
4264                 eval 'POSIX::nice($gconfig{\'nice\'});';
4265                 }
4266
4267         # Set IO scheduling class and priority
4268         if ($gconfig{'sclass'} ne '' || $gconfig{'sprio'} ne '') {
4269                 my $cmd = "ionice";
4270                 $cmd .= " -c ".quotemeta($gconfig{'sclass'})
4271                         if ($gconfig{'sclass'} ne '');
4272                 $cmd .= " -n ".quotemeta($gconfig{'sprio'})
4273                         if ($gconfig{'sprio'} ne '');
4274                 $cmd .= " -p $$";
4275                 &execute_command("$cmd >/dev/null 2>&1");
4276                 }
4277         }
4278 $main::nice_already++;
4279
4280 # Get the username
4281 my $u = $ENV{'BASE_REMOTE_USER'} || $ENV{'REMOTE_USER'};
4282 $base_remote_user = $u;
4283 $remote_user = $ENV{'REMOTE_USER'};
4284
4285 # Work out if user is definitely in the DB, and if so get his attrs
4286 $remote_user_proto = $ENV{"REMOTE_USER_PROTO"};
4287 %remote_user_attrs = ( );
4288 if ($remote_user_proto) {
4289         my $userdb = &get_userdb_string();
4290         my ($dbh, $proto, $prefix, $args) =
4291                 $userdb ? &connect_userdb($userdb) : ( );
4292         if (ref($dbh)) {
4293                 if ($proto eq "mysql" || $proto eq "postgresql") {
4294                         # Read attrs from SQL
4295                         my $cmd = $dbh->prepare("select webmin_user_attr.attr,webmin_user_attr.value from webmin_user_attr,webmin_user where webmin_user_attr.id = webmin_user.id and webmin_user.name = ?");
4296                         if ($cmd && $cmd->execute($base_remote_user)) {
4297                                 while(my ($attr, $value) = $cmd->fetchrow()) {
4298                                         $remote_user_attrs{$attr} = $value;
4299                                         }
4300                                 $cmd->finish();
4301                                 }
4302                         }
4303                 elsif ($proto eq "ldap") {
4304                         # Read attrs from LDAP
4305                         my $rv = $dbh->search(
4306                                 base => $prefix,
4307                                 filter => '(&(cn='.$base_remote_user.')'.
4308                                           '(objectClass='.
4309                                           $args->{'userclass'}.'))',
4310                                 scope => 'sub');
4311                         my ($u) = $rv && !$rv->code ? $rv->all_entries : ( );
4312                         if ($u) {
4313                                 foreach $la ($u->get_value('webminAttr')) {
4314                                         my ($attr, $value) = split(/=/, $la, 2);
4315                                         $remote_user_attrs{$attr} = $value;
4316                                         }
4317                                 }
4318                         }
4319                 &disconnect_userdb($userdb, $dbh);
4320                 }
4321         }
4322
4323 if ($module_name) {
4324         # Find and load the configuration file for this module
4325         my (@ruinfo, $rgroup);
4326         $module_config_directory = "$config_directory/$module_name";
4327         if (&get_product_name() eq "usermin" &&
4328             -r "$module_config_directory/config.$remote_user") {
4329                 # Based on username
4330                 $module_config_file = "$module_config_directory/config.$remote_user";
4331                 }
4332         elsif (&get_product_name() eq "usermin" &&
4333             (@ruinfo = getpwnam($remote_user)) &&
4334             ($rgroup = getgrgid($ruinfo[3])) &&
4335             -r "$module_config_directory/config.\@$rgroup") {
4336                 # Based on group name
4337                 $module_config_file = "$module_config_directory/config.\@$rgroup";
4338                 }
4339         else {
4340                 # Global config
4341                 $module_config_file = "$module_config_directory/config";
4342                 }
4343         %config = ( );
4344         &read_file_cached($module_config_file, \%config);
4345
4346         # Fix up windows-specific substitutions in values
4347         foreach my $k (keys %config) {
4348                 if ($config{$k} =~ /\$\{systemroot\}/) {
4349                         my $root = &get_windows_root();
4350                         $config{$k} =~ s/\$\{systemroot\}/$root/g;
4351                         }
4352                 }
4353         }
4354
4355 # Record the initial module
4356 $main::initial_module_name ||= $module_name;
4357
4358 # Set some useful variables
4359 my $current_themes;
4360 $current_themes = $ENV{'MOBILE_DEVICE'} && defined($gconfig{'mobile_theme'}) ?
4361                     $gconfig{'mobile_theme'} :
4362                   defined($remote_user_attrs{'theme'}) ?
4363                     $remote_user_attrs{'theme'} :
4364                   defined($gconfig{'theme_'.$remote_user}) ?
4365                     $gconfig{'theme_'.$remote_user} :
4366                   defined($gconfig{'theme_'.$base_remote_user}) ?
4367                     $gconfig{'theme_'.$base_remote_user} :
4368                     $gconfig{'theme'};
4369 @current_themes = split(/\s+/, $current_themes);
4370 $current_theme = $current_themes[0];
4371 @theme_root_directories = map { "$root_directory/$_" } @current_themes;
4372 $theme_root_directory = $theme_root_directories[0];
4373 @theme_configs = ( );
4374 foreach my $troot (@theme_root_directories) {
4375         my %onetconfig;
4376         &read_file_cached("$troot/config", \%onetconfig);
4377         &read_file_cached("$troot/config", \%tconfig);
4378         push(@theme_configs, \%onetconfig);
4379         }
4380 $tb = defined($tconfig{'cs_header'}) ? "bgcolor=#$tconfig{'cs_header'}" :
4381       defined($gconfig{'cs_header'}) ? "bgcolor=#$gconfig{'cs_header'}" :
4382                                        "bgcolor=#9999ff";
4383 $cb = defined($tconfig{'cs_table'}) ? "bgcolor=#$tconfig{'cs_table'}" :
4384       defined($gconfig{'cs_table'}) ? "bgcolor=#$gconfig{'cs_table'}" :
4385                                       "bgcolor=#cccccc";
4386 $tb .= ' '.$tconfig{'tb'} if ($tconfig{'tb'});
4387 $cb .= ' '.$tconfig{'cb'} if ($tconfig{'cb'});
4388 if ($tconfig{'preload_functions'}) {
4389         # Force load of theme functions right now, if requested
4390         &load_theme_library();
4391         }
4392 if ($tconfig{'oofunctions'} && !$main::loaded_theme_oo_library++) {
4393         # Load the theme's Webmin:: package classes
4394         do "$theme_root_directory/$tconfig{'oofunctions'}";
4395         }
4396
4397 $0 =~ /([^\/]+)$/;
4398 $scriptname = $1;
4399 $webmin_logfile = $gconfig{'webmin_log'} ? $gconfig{'webmin_log'}
4400                                          : "$var_directory/webmin.log";
4401
4402 # Load language strings into %text
4403 my @langs = &list_languages();
4404 my $accepted_lang;
4405 if ($gconfig{'acceptlang'}) {
4406         foreach my $a (split(/,/, $ENV{'HTTP_ACCEPT_LANGUAGE'})) {
4407                 $a =~ s/;.*//;  # Remove ;q=0.5 or similar
4408                 my ($al) = grep { $_->{'lang'} eq $a } @langs;
4409                 if ($al) {
4410                         $accepted_lang = $al->{'lang'};
4411                         last;
4412                         }
4413                 }
4414         }
4415 $current_lang = $force_lang ? $force_lang :
4416     $accepted_lang ? $accepted_lang :
4417     $remote_user_attrs{'lang'} ? $remote_user_attrs{'lang'} :
4418     $gconfig{"lang_$remote_user"} ? $gconfig{"lang_$remote_user"} :
4419     $gconfig{"lang_$base_remote_user"} ? $gconfig{"lang_$base_remote_user"} :
4420     $gconfig{"lang"} ? $gconfig{"lang"} : $default_lang;
4421 foreach my $l (@langs) {
4422         $current_lang_info = $l if ($l->{'lang'} eq $current_lang);
4423         }
4424 @lang_order_list = &unique($default_lang,
4425                            split(/:/, $current_lang_info->{'fallback'}),
4426                            $current_lang);
4427 %text = &load_language($module_name);
4428 %text || &error("Failed to determine Webmin root from SERVER_ROOT, SCRIPT_FILENAME or the full command line");
4429
4430 # Get the %module_info for this module
4431 if ($module_name) {
4432         my ($mi) = grep { $_->{'dir'} eq $module_name }
4433                          &get_all_module_infos(2);
4434         %module_info = %$mi;
4435         $module_root_directory = &module_root_directory($module_name);
4436         }
4437
4438 if ($module_name && !$main::no_acl_check &&
4439     !defined($ENV{'FOREIGN_MODULE_NAME'})) {
4440         # Check if the HTTP user can access this module
4441         if (!&foreign_available($module_name)) {
4442                 if (!&foreign_check($module_name)) {
4443                         &error(&text('emodulecheck',
4444                                      "<i>$module_info{'desc'}</i>"));
4445                         }
4446                 else {
4447                         &error(&text('emodule', "<i>$u</i>",
4448                                      "<i>$module_info{'desc'}</i>"));
4449                         }
4450                 }
4451         $main::no_acl_check++;
4452         }
4453
4454 # Check the Referer: header for nasty redirects
4455 my @referers = split(/\s+/, $gconfig{'referers'});
4456 my $referer_site;
4457 my $r = $ENV{'HTTP_REFERER'};
4458 if ($r =~ /^(http|https|ftp):\/\/([^:\/]+:[^@\/]+@)?\[([^\]]+)\]/ ||
4459     $r =~ /^(http|https|ftp):\/\/([^:\/]+:[^@\/]+@)?([^\/:@]+)/) {
4460         $referer_site = $3;
4461         }
4462 my $http_host = $ENV{'HTTP_HOST'};
4463 $http_host =~ s/:\d+$//;
4464 $http_host =~ s/^\[(\S+)\]$/$1/;
4465 my $unsafe_index = $unsafe_index_cgi ||
4466                    &get_module_variable('$unsafe_index_cgi');
4467 if ($0 &&
4468     ($ENV{'SCRIPT_NAME'} !~ /^\/(index.cgi)?$/ || $unsafe_index) &&
4469     ($ENV{'SCRIPT_NAME'} !~ /^\/([a-z0-9\_\-]+)\/(index.cgi)?$/i ||
4470      $unsafe_index) &&
4471     $0 !~ /(session_login|pam_login)\.cgi$/ && !$gconfig{'referer'} &&
4472     $ENV{'MINISERV_CONFIG'} && !$main::no_referers_check &&
4473     $ENV{'HTTP_USER_AGENT'} !~ /^Webmin/i &&
4474     ($referer_site && $referer_site ne $http_host &&
4475      &indexof($referer_site, @referers) < 0 ||
4476     !$referer_site && $gconfig{'referers_none'}) &&
4477     !$trust_unknown_referers &&
4478     !&get_module_variable('$trust_unknown_referers')) {
4479         # Looks like a link from elsewhere .. show an error
4480         &header($text{'referer_title'}, "", undef, 0, 1, 1);
4481
4482         $prot = lc($ENV{'HTTPS'}) eq 'on' ? "https" : "http";
4483         my $url = "<tt>".&html_escape("$prot://$ENV{'HTTP_HOST'}$ENV{'REQUEST_URI'}")."</tt>";
4484         if ($referer_site) {
4485                 # From a known host
4486                 print &text('referer_warn',
4487                             "<tt>".&html_escape($r)."</tt>", $url);
4488                 print "<p>\n";
4489                 print &text('referer_fix1', &html_escape($http_host)),"<p>\n";
4490                 print &text('referer_fix2', &html_escape($http_host)),"<p>\n";
4491                 }
4492         else {
4493                 # No referer info given
4494                 print &text('referer_warn_unknown', $url),"<p>\n";
4495                 print &text('referer_fix1u'),"<p>\n";
4496                 print &text('referer_fix2u'),"<p>\n";
4497                 }
4498         print "<p>\n";
4499
4500         &footer("/", $text{'index'});
4501         exit;
4502         }
4503 $main::no_referers_check++;
4504 $main::completed_referers_check++;
4505
4506 # Call theme post-init
4507 if (defined(&theme_post_init_config)) {
4508         &theme_post_init_config(@_);
4509         }
4510
4511 # Record that we have done the calling library in this package
4512 my ($callpkg, $lib) = caller();
4513 $lib =~ s/^.*\///;
4514 $main::done_foreign_require{$callpkg,$lib} = 1;
4515
4516 # If a licence checking is enabled, do it now
4517 if ($gconfig{'licence_module'} && !$main::done_licence_module_check &&
4518     &foreign_check($gconfig{'licence_module'}) &&
4519     -r "$root_directory/$gconfig{'licence_module'}/licence_check.pl") {
4520         my $oldpwd = &get_current_dir();
4521         $main::done_licence_module_check++;
4522         $main::licence_module = $gconfig{'licence_module'};
4523         &foreign_require($main::licence_module, "licence_check.pl");
4524         ($main::licence_status, $main::licence_message) =
4525                 &foreign_call($main::licence_module, "check_licence");
4526         chdir($oldpwd);
4527         }
4528
4529 # Export global variables to caller
4530 if ($main::export_to_caller) {
4531         foreach my $v ('$config_file', '%gconfig', '$null_file',
4532                        '$path_separator', '@root_directories',
4533                        '$root_directory', '$module_name',
4534                        '$base_remote_user', '$remote_user',
4535                        '$remote_user_proto', '%remote_user_attrs',
4536                        '$module_config_directory', '$module_config_file',
4537                        '%config', '@current_themes', '$current_theme',
4538                        '@theme_root_directories', '$theme_root_directory',
4539                        '%tconfig','@theme_configs', '$tb', '$cb', '$scriptname',
4540                        '$webmin_logfile', '$current_lang',
4541                        '$current_lang_info', '@lang_order_list', '%text',
4542                        '%module_info', '$module_root_directory') {
4543                 my ($vt, $vn) = split('', $v, 2);
4544                 eval "${vt}${callpkg}::${vn} = ${vt}${vn}";
4545                 }
4546         }
4547
4548 return 1;
4549 }
4550
4551 =head2 load_language([module], [directory])
4552
4553 Returns a hashtable mapping text codes to strings in the appropriate language,
4554 based on the $current_lang global variable, which is in turn set based on
4555 the Webmin user's selection. The optional module parameter tells the function
4556 which module to load strings for, and defaults to the calling module. The
4557 optional directory parameter can be used to load strings from a directory
4558 other than lang.
4559
4560 In regular module development you will never need to call this function
4561 directly, as init_config calls it for you, and places the module's strings
4562 into the %text hash.
4563
4564 =cut
4565 sub load_language
4566 {
4567 my %text;
4568 my $root = $root_directory;
4569 my $ol = $gconfig{'overlang'};
4570 my ($dir) = ($_[1] || "lang");
4571
4572 # Read global lang files
4573 foreach my $o (@lang_order_list) {
4574         my $ok = &read_file_cached_with_stat("$root/$dir/$o", \%text);
4575         return () if (!$ok && $o eq $default_lang);
4576         }
4577 if ($ol) {
4578         foreach my $o (@lang_order_list) {
4579                 &read_file_cached("$root/$ol/$o", \%text);
4580                 }
4581         }
4582 &read_file_cached("$config_directory/custom-lang", \%text);
4583 foreach my $o (@lang_order_list) {
4584         next if ($o eq "en");
4585         &read_file_cached("$config_directory/custom-lang.$o", \%text);
4586         }
4587 my $norefs = $text{'__norefs'};
4588
4589 if ($_[0]) {
4590         # Read module's lang files
4591         delete($text{'__norefs'});
4592         my $mdir = &module_root_directory($_[0]);
4593         foreach my $o (@lang_order_list) {
4594                 &read_file_cached_with_stat("$mdir/$dir/$o", \%text);
4595                 }
4596         if ($ol) {
4597                 foreach my $o (@lang_order_list) {
4598                         &read_file_cached("$mdir/$ol/$o", \%text);
4599                         }
4600                 }
4601         &read_file_cached("$config_directory/$_[0]/custom-lang", \%text);
4602         foreach my $o (@lang_order_list) {
4603                 next if ($o eq "en");
4604                 &read_file_cached("$config_directory/$_[0]/custom-lang.$o",
4605                                   \%text);
4606                 }
4607         $norefs = $text{'__norefs'} if ($norefs);
4608         }
4609
4610 # Replace references to other strings
4611 if (!$norefs) {
4612         foreach $k (keys %text) {
4613                 $text{$k} =~ s/\$(\{([^\}]+)\}|([A-Za-z0-9\.\-\_]+))/text_subs($2 || $3,\%text)/ge;
4614                 }
4615         }
4616
4617 if (defined(&theme_load_language)) {
4618         &theme_load_language(\%text, $_[0]);
4619         }
4620 return %text;
4621 }
4622
4623 =head2 text_subs(string)
4624
4625 Used internally by load_language to expand $code substitutions in language
4626 files.
4627
4628 =cut
4629 sub text_subs
4630 {
4631 if (substr($_[0], 0, 8) eq "include:") {
4632         local $_;
4633         my $rv;
4634         open(INCLUDE, substr($_[0], 8));
4635         while(<INCLUDE>) {
4636                 $rv .= $_;
4637                 }
4638         close(INCLUDE);
4639         return $rv;
4640         }
4641 else {
4642         my $t = $_[1]->{$_[0]};
4643         return defined($t) ? $t : '$'.$_[0];
4644         }
4645 }
4646
4647 =head2 text(message, [substitute]+)
4648
4649 Returns a translated message from %text, but with $1, $2, etc.. replaced with
4650 the substitute parameters. This makes it easy to use strings with placeholders
4651 that get replaced with programmatically generated text. For example :
4652
4653  print &text('index_hello', $remote_user),"<p>\n";
4654
4655 =cut
4656 sub text
4657 {
4658 my $t = &get_module_variable('%text', 1);
4659 my $rv = exists($t->{$_[0]}) ? $t->{$_[0]} : $text{$_[0]};
4660 for(my $i=1; $i<@_; $i++) {
4661         $rv =~ s/\$$i/$_[$i]/g;
4662         }
4663 return $rv;
4664 }
4665
4666 =head2 encode_base64(string)
4667
4668 Encodes a string into base64 format, for use in MIME email or HTTP
4669 authorization headers.
4670
4671 =cut
4672 sub encode_base64
4673 {
4674 my $res;
4675 pos($_[0]) = 0;                          # ensure start at the beginning
4676 while ($_[0] =~ /(.{1,57})/gs) {
4677         $res .= substr(pack('u57', $1), 1)."\n";
4678         chop($res);
4679         }
4680 $res =~ tr|\` -_|AA-Za-z0-9+/|;
4681 my $padding = (3 - length($_[0]) % 3) % 3;
4682 $res =~ s/.{$padding}$/'=' x $padding/e if ($padding);
4683 return $res;
4684 }
4685
4686 =head2 decode_base64(string)
4687
4688 Converts a base64-encoded string into plain text. The opposite of encode_base64.
4689
4690 =cut
4691 sub decode_base64
4692 {
4693 my ($str) = @_;
4694 my $res;
4695 $str =~ tr|A-Za-z0-9+=/||cd;            # remove non-base64 chars
4696 if (length($str) % 4) {
4697         return undef;
4698 }
4699 $str =~ s/=+$//;                        # remove padding
4700 $str =~ tr|A-Za-z0-9+/| -_|;            # convert to uuencoded format
4701 while ($str =~ /(.{1,60})/gs) {
4702         my $len = chr(32 + length($1)*3/4); # compute length byte
4703         $res .= unpack("u", $len . $1 );    # uudecode
4704         }
4705 return $res;
4706 }
4707
4708 =head2 get_module_info(module, [noclone], [forcache])
4709
4710 Returns a hash containg details of the given module. Some useful keys are :
4711
4712 =item dir - The module directory, like sendmail.
4713
4714 =item desc - Human-readable description, in the current users' language.
4715
4716 =item version - Optional module version number.
4717
4718 =item os_support - List of supported operating systems and versions.
4719
4720 =item category - Category on Webmin's left menu, like net.
4721
4722 =cut
4723 sub get_module_info
4724 {
4725 return () if ($_[0] =~ /^\./);
4726 my (%rv, $clone, $o);
4727 my $mdir = &module_root_directory($_[0]);
4728 &read_file_cached("$mdir/module.info", \%rv) || return ();
4729 if (-l $mdir) {
4730         # A clone is a module that links to another directory under the root
4731         foreach my $r (@root_directories) {
4732                 if (&is_under_directory($r, $mdir)) {
4733                         $clone = 1;
4734                         last;
4735                         }
4736                 }
4737         }
4738 foreach $o (@lang_order_list) {
4739         $rv{"desc"} = $rv{"desc_$o"} if ($rv{"desc_$o"});
4740         $rv{"longdesc"} = $rv{"longdesc_$o"} if ($rv{"longdesc_$o"});
4741         }
4742 if ($clone && !$_[1] && $config_directory) {
4743         $rv{'clone'} = $rv{'desc'};
4744         &read_file("$config_directory/$_[0]/clone", \%rv);
4745         }
4746 $rv{'dir'} = $_[0];
4747 my %module_categories;
4748 &read_file_cached("$config_directory/webmin.cats", \%module_categories);
4749 my $pn = &get_product_name();
4750 if (defined($rv{'category_'.$pn})) {
4751         # Can override category for webmin/usermin
4752         $rv{'category'} = $rv{'category_'.$pn};
4753         }
4754 $rv{'realcategory'} = $rv{'category'};
4755 $rv{'category'} = $module_categories{$_[0]}
4756         if (defined($module_categories{$_[0]}));
4757
4758 # Apply description overrides
4759 $rv{'realdesc'} = $rv{'desc'};
4760 my %descs;
4761 &read_file_cached("$config_directory/webmin.descs", \%descs);
4762 if ($descs{$_[0]}) {
4763         $rv{'desc'} = $descs{$_[0]};
4764         }
4765 foreach my $o (@lang_order_list) {
4766         my $ov = $descs{$_[0]." ".$o} || $descs{$_[0]."_".$o};
4767         $rv{'desc'} = $ov if ($ov);
4768         }
4769
4770 if (!$_[2]) {
4771         # Apply per-user description overridde
4772         my %gaccess = &get_module_acl(undef, "");
4773         if ($gaccess{'desc_'.$_[0]}) {
4774                 $rv{'desc'} = $gaccess{'desc_'.$_[0]};
4775                 }
4776         }
4777
4778 if ($rv{'longdesc'}) {
4779         # All standard modules have an index.cgi
4780         $rv{'index_link'} = 'index.cgi';
4781         }
4782
4783 # Call theme-specific override function
4784 if (defined(&theme_get_module_info)) {
4785         %rv = &theme_get_module_info(\%rv, $_[0], $_[1], $_[2]);
4786         }
4787
4788 return %rv;
4789 }
4790
4791 =head2 get_all_module_infos(cachemode)
4792
4793 Returns a list contains the information on all modules in this webmin
4794 install, including clones. Uses caching to reduce the number of module.info
4795 files that need to be read. Each element of the array is a hash reference
4796 in the same format as returned by get_module_info. The cache mode flag can be :
4797 0 = read and write, 1 = don't read or write, 2 = read only
4798
4799 =cut
4800 sub get_all_module_infos
4801 {
4802 my (%cache, @rv);
4803
4804 # Is the cache out of date? (ie. have any of the root's changed?)
4805 my $cache_file = "$config_directory/module.infos.cache";
4806 my $changed = 0;
4807 if (&read_file_cached($cache_file, \%cache)) {
4808         foreach my $r (@root_directories) {
4809                 my @st = stat($r);
4810                 if ($st[9] != $cache{'mtime_'.$r}) {
4811                         $changed = 2;
4812                         last;
4813                         }
4814                 }
4815         }
4816 else {
4817         $changed = 1;
4818         }
4819
4820 if ($_[0] != 1 && !$changed && $cache{'lang'} eq $current_lang) {
4821         # Can use existing module.info cache
4822         my %mods;
4823         foreach my $k (keys %cache) {
4824                 if ($k =~ /^(\S+) (\S+)$/) {
4825                         $mods{$1}->{$2} = $cache{$k};
4826                         }
4827                 }
4828         @rv = map { $mods{$_} } (keys %mods) if (%mods);
4829         }
4830 else {
4831         # Need to rebuild cache
4832         %cache = ( );
4833         foreach my $r (@root_directories) {
4834                 opendir(DIR, $r);
4835                 foreach my $m (readdir(DIR)) {
4836                         next if ($m =~ /^(config-|\.)/ || $m =~ /\.(cgi|pl)$/);
4837                         my %minfo = &get_module_info($m, 0, 1);
4838                         next if (!%minfo || !$minfo{'dir'});
4839                         push(@rv, \%minfo);
4840                         foreach $k (keys %minfo) {
4841                                 $cache{"${m} ${k}"} = $minfo{$k};
4842                                 }
4843                         }
4844                 closedir(DIR);
4845                 my @st = stat($r);
4846                 $cache{'mtime_'.$r} = $st[9];
4847                 }
4848         $cache{'lang'} = $current_lang;
4849         if (!$_[0] && $< == 0 && $> == 0) {
4850                 eval {
4851                         # Don't fail if cache write fails
4852                         local $main::error_must_die = 1;
4853                         &write_file($cache_file, \%cache);
4854                         }
4855                 }
4856         }
4857
4858 # Override descriptions for modules for current user
4859 my %gaccess = &get_module_acl(undef, "");
4860 foreach my $m (@rv) {
4861         if ($gaccess{"desc_".$m->{'dir'}}) {
4862                 $m->{'desc'} = $gaccess{"desc_".$m->{'dir'}};
4863                 }
4864         }
4865
4866 # Apply installed flags
4867 my %installed;
4868 &read_file_cached("$config_directory/installed.cache", \%installed);
4869 foreach my $m (@rv) {
4870         $m->{'installed'} = $installed{$m->{'dir'}};
4871         }
4872
4873 return @rv;
4874 }
4875
4876 =head2 list_themes
4877
4878 Returns an array of all installed themes, each of which is a hash ref
4879 corresponding to the theme.info file.
4880
4881 =cut
4882 sub list_themes
4883 {
4884 my @rv;
4885 opendir(DIR, $root_directory);
4886 foreach my $m (readdir(DIR)) {
4887         my %tinfo;
4888         next if ($m =~ /^\./);
4889         next if (!&read_file_cached("$root_directory/$m/theme.info", \%tinfo));
4890         next if (!&check_os_support(\%tinfo));
4891         foreach my $o (@lang_order_list) {
4892                 if ($tinfo{'desc_'.$o}) {
4893                         $tinfo{'desc'} = $tinfo{'desc_'.$o};
4894                         }
4895                 }
4896         $tinfo{'dir'} = $m;
4897         push(@rv, \%tinfo);
4898         }
4899 closedir(DIR);
4900 return sort { lc($a->{'desc'}) cmp lc($b->{'desc'}) } @rv;
4901 }
4902
4903 =head2 get_theme_info(theme)
4904
4905 Returns a hash containing a theme's details, taken from it's theme.info file.
4906 Some useful keys are :
4907
4908 =item dir - The theme directory, like blue-theme.
4909
4910 =item desc - Human-readable description, in the current users' language.
4911
4912 =item version - Optional module version number.
4913
4914 =item os_support - List of supported operating systems and versions.
4915
4916 =cut
4917 sub get_theme_info
4918 {
4919 return () if ($_[0] =~ /^\./);
4920 my %rv;
4921 my $tdir = &module_root_directory($_[0]);
4922 &read_file("$tdir/theme.info", \%rv) || return ();
4923 foreach my $o (@lang_order_list) {
4924         $rv{"desc"} = $rv{"desc_$o"} if ($rv{"desc_$o"});
4925         }
4926 $rv{"dir"} = $_[0];
4927 return %rv;
4928 }
4929
4930 =head2 list_languages
4931
4932 Returns an array of supported languages, taken from Webmin's os_list.txt file.
4933 Each is a hash reference with the following keys :
4934
4935 =item lang - The short language code, like es for Spanish.
4936
4937 =item desc - A human-readable description, in English.
4938
4939 =item charset - An optional character set to use when displaying the language.
4940
4941 =item titles - Set to 1 only if Webmin has title images for the language.
4942
4943 =item fallback - The code for another language to use if a string does not exist in this one. For all languages, English is the ultimate fallback.
4944
4945 =cut
4946 sub list_languages
4947 {
4948 if (!@main::list_languages_cache) {
4949         my $o;
4950         local $_;
4951         open(LANG, "$root_directory/lang_list.txt");
4952         while(<LANG>) {
4953                 if (/^(\S+)\s+(.*)/) {
4954                         my $l = { 'desc' => $2 };
4955                         foreach $o (split(/,/, $1)) {
4956                                 if ($o =~ /^([^=]+)=(.*)$/) {
4957                                         $l->{$1} = $2;
4958                                         }
4959                                 }
4960                         $l->{'index'} = scalar(@rv);
4961                         push(@main::list_languages_cache, $l);
4962                         }
4963                 }
4964         close(LANG);
4965         @main::list_languages_cache = sort { $a->{'desc'} cmp $b->{'desc'} }
4966                                      @main::list_languages_cache;
4967         }
4968 return @main::list_languages_cache;
4969 }
4970
4971 =head2 read_env_file(file, &hash, [include-commented])
4972
4973 Similar to Webmin's read_file function, but handles files containing shell
4974 environment variables formatted like :
4975
4976   export FOO=bar
4977   SMEG="spod"
4978
4979 The file parameter is the full path to the file to read, and hash a Perl hash
4980 ref to read names and values into.
4981
4982 =cut
4983 sub read_env_file
4984 {
4985 local $_;
4986 &open_readfile(FILE, $_[0]) || return 0;
4987 while(<FILE>) {
4988         if ($_[2]) {
4989                 # Remove start of line comments
4990                 s/^\s*#+\s*//;
4991                 }
4992         s/#.*$//g;
4993         if (/^\s*(export\s*)?([A-Za-z0-9_\.]+)\s*=\s*"(.*)"/i ||
4994             /^\s*(export\s*)?([A-Za-z0-9_\.]+)\s*=\s*'(.*)'/i ||
4995             /^\s*(export\s*)?([A-Za-z0-9_\.]+)\s*=\s*(.*)/i) {
4996                 $_[1]->{$2} = $3;
4997                 }
4998         }
4999 close(FILE);
5000 return 1;
5001 }
5002
5003 =head2 write_env_file(file, &hash, [export])
5004
5005 Writes out a hash to a file in name='value' format, suitable for use in a shell
5006 script. The parameters are :
5007
5008 =item file - Full path for a file to write to
5009
5010 =item hash - Hash reference of names and values to write.
5011
5012 =item export - If set to 1, preceed each variable setting with the word 'export'.
5013
5014 =cut
5015 sub write_env_file
5016 {
5017 my $exp = $_[2] ? "export " : "";
5018 &open_tempfile(FILE, ">$_[0]");
5019 foreach my $k (keys %{$_[1]}) {
5020         my $v = $_[1]->{$k};
5021         if ($v =~ /^\S+$/) {
5022                 &print_tempfile(FILE, "$exp$k=$v\n");
5023                 }
5024         else {
5025                 &print_tempfile(FILE, "$exp$k=\"$v\"\n");
5026                 }
5027         }
5028 &close_tempfile(FILE);
5029 }
5030
5031 =head2 lock_file(filename, [readonly], [forcefile])
5032
5033 Lock a file for exclusive access. If the file is already locked, spin
5034 until it is freed. Uses a .lock file, which is not 100% reliable, but seems
5035 to work OK. The parameters are :
5036
5037 =item filename - File or directory to lock.
5038
5039 =item readonly - If set, the lock is for reading the file only. More than one script can have a readonly lock, but only one can hold a write lock.
5040
5041 =item forcefile - Force the file to be considered as a real file and not a symlink for Webmin actions logging purposes.
5042
5043 =cut
5044 sub lock_file
5045 {
5046 my $realfile = &translate_filename($_[0]);
5047 return 0 if (!$_[0] || defined($main::locked_file_list{$realfile}));
5048 my $no_lock = !&can_lock_file($realfile);
5049 my $lock_tries_count = 0;
5050 while(1) {
5051         my $pid;
5052         if (!$no_lock && open(LOCKING, "$realfile.lock")) {
5053                 $pid = <LOCKING>;
5054                 $pid = int($pid);
5055                 close(LOCKING);
5056                 }
5057         if ($no_lock || !$pid || !kill(0, $pid) || $pid == $$) {
5058                 # Got the lock!
5059                 if (!$no_lock) {
5060                         # Create the .lock file
5061                         open(LOCKING, ">$realfile.lock") || return 0;
5062                         my $lck = eval "flock(LOCKING, 2+4)";
5063                         if (!$lck && !$@) {
5064                                 # Lock of lock file failed! Wait till later
5065                                 goto tryagain;
5066                                 }
5067                         print LOCKING $$,"\n";
5068                         eval "flock(LOCKING, 8)";
5069                         close(LOCKING);
5070                         }
5071                 $main::locked_file_list{$realfile} = int($_[1]);
5072                 push(@main::temporary_files, "$realfile.lock");
5073                 if (($gconfig{'logfiles'} || $gconfig{'logfullfiles'}) &&
5074                     !&get_module_variable('$no_log_file_changes') &&
5075                     !$_[1]) {
5076                         # Grab a copy of this file for later diffing
5077                         my $lnk;
5078                         $main::locked_file_data{$realfile} = undef;
5079                         if (-d $realfile) {
5080                                 $main::locked_file_type{$realfile} = 1;
5081                                 $main::locked_file_data{$realfile} = '';
5082                                 }
5083                         elsif (!$_[2] && ($lnk = readlink($realfile))) {
5084                                 $main::locked_file_type{$realfile} = 2;
5085                                 $main::locked_file_data{$realfile} = $lnk;
5086                                 }
5087                         elsif (open(ORIGFILE, $realfile)) {
5088                                 $main::locked_file_type{$realfile} = 0;
5089                                 $main::locked_file_data{$realfile} = '';
5090                                 local $_;
5091                                 while(<ORIGFILE>) {
5092                                         $main::locked_file_data{$realfile} .=$_;
5093                                         }
5094                                 close(ORIGFILE);
5095                                 }
5096                         }
5097                 last;
5098                 }
5099 tryagain:
5100         sleep(1);
5101         if ($lock_tries_count++ > 5*60) {
5102                 # Give up after 5 minutes
5103                 &error(&text('elock_tries', "<tt>$realfile</tt>", 5));
5104                 }
5105         }
5106 return 1;
5107 }
5108
5109 =head2 unlock_file(filename)
5110
5111 Release a lock on a file taken out by lock_file. If Webmin actions logging of
5112 file changes is enabled, then at unlock file a diff will be taken between the
5113 old and new contents, and stored under /var/webmin/diffs when webmin_log is
5114 called. This can then be viewed in the Webmin Actions Log module.
5115
5116 =cut
5117 sub unlock_file
5118 {
5119 my $realfile = &translate_filename($_[0]);
5120 return if (!$_[0] || !defined($main::locked_file_list{$realfile}));
5121 unlink("$realfile.lock") if (&can_lock_file($realfile));
5122 delete($main::locked_file_list{$realfile});
5123 if (exists($main::locked_file_data{$realfile})) {
5124         # Diff the new file with the old
5125         stat($realfile);
5126         my $lnk = readlink($realfile);
5127         my $type = -d _ ? 1 : $lnk ? 2 : 0;
5128         my $oldtype = $main::locked_file_type{$realfile};
5129         my $new = !defined($main::locked_file_data{$realfile});
5130         if ($new && !-e _) {
5131                 # file doesn't exist, and never did! do nothing ..
5132                 }
5133         elsif ($new && $type == 1 || !$new && $oldtype == 1) {
5134                 # is (or was) a directory ..
5135                 if (-d _ && !defined($main::locked_file_data{$realfile})) {
5136                         push(@main::locked_file_diff,
5137                              { 'type' => 'mkdir', 'object' => $realfile });
5138                         }
5139                 elsif (!-d _ && defined($main::locked_file_data{$realfile})) {
5140                         push(@main::locked_file_diff,
5141                              { 'type' => 'rmdir', 'object' => $realfile });
5142                         }
5143                 }
5144         elsif ($new && $type == 2 || !$new && $oldtype == 2) {
5145                 # is (or was) a symlink ..
5146                 if ($lnk && !defined($main::locked_file_data{$realfile})) {
5147                         push(@main::locked_file_diff,
5148                              { 'type' => 'symlink', 'object' => $realfile,
5149                                'data' => $lnk });
5150                         }
5151                 elsif (!$lnk && defined($main::locked_file_data{$realfile})) {
5152                         push(@main::locked_file_diff,
5153                              { 'type' => 'unsymlink', 'object' => $realfile,
5154                                'data' => $main::locked_file_data{$realfile} });
5155                         }
5156                 elsif ($lnk ne $main::locked_file_data{$realfile}) {
5157                         push(@main::locked_file_diff,
5158                              { 'type' => 'resymlink', 'object' => $realfile,
5159                                'data' => $lnk });
5160                         }
5161                 }
5162         else {
5163                 # is a file, or has changed type?!
5164                 my ($diff, $delete_file);
5165                 my $type = "modify";
5166                 if (!-r _) {
5167                         open(NEWFILE, ">$realfile");
5168                         close(NEWFILE);
5169                         $delete_file++;
5170                         $type = "delete";
5171                         }
5172                 if (!defined($main::locked_file_data{$realfile})) {
5173                         $type = "create";
5174                         }
5175                 open(ORIGFILE, ">$realfile.webminorig");
5176                 print ORIGFILE $main::locked_file_data{$realfile};
5177                 close(ORIGFILE);
5178                 $diff = &backquote_command(
5179                         "diff ".quotemeta("$realfile.webminorig")." ".
5180                                 quotemeta($realfile)." 2>/dev/null");
5181                 push(@main::locked_file_diff,
5182                      { 'type' => $type, 'object' => $realfile,
5183                        'data' => $diff } ) if ($diff);
5184                 unlink("$realfile.webminorig");
5185                 unlink($realfile) if ($delete_file);
5186                 }
5187
5188         if ($gconfig{'logfullfiles'}) {
5189                 # Add file details to list of those to fully log
5190                 $main::orig_file_data{$realfile} ||=
5191                         $main::locked_file_data{$realfile};
5192                 $main::orig_file_type{$realfile} ||=
5193                         $main::locked_file_type{$realfile};
5194                 }
5195
5196         delete($main::locked_file_data{$realfile});
5197         delete($main::locked_file_type{$realfile});
5198         }
5199 }
5200
5201 =head2 test_lock(file)
5202
5203 Returns 1 if some file is currently locked, 0 if not.
5204
5205 =cut
5206 sub test_lock
5207 {
5208 my $realfile = &translate_filename($_[0]);
5209 return 0 if (!$_[0]);
5210 return 1 if (defined($main::locked_file_list{$realfile}));
5211 return 0 if (!&can_lock_file($realfile));
5212 my $pid;
5213 if (open(LOCKING, "$realfile.lock")) {
5214         $pid = <LOCKING>;
5215         $pid = int($pid);
5216         close(LOCKING);
5217         }
5218 return $pid && kill(0, $pid);
5219 }
5220
5221 =head2 unlock_all_files
5222
5223 Unlocks all files locked by the current script.
5224
5225 =cut
5226 sub unlock_all_files
5227 {
5228 foreach $f (keys %main::locked_file_list) {
5229         &unlock_file($f);
5230         }
5231 }
5232
5233 =head2 can_lock_file(file)
5234
5235 Returns 1 if some file should be locked, based on the settings in the 
5236 Webmin Configuration module. For internal use by lock_file only.
5237
5238 =cut
5239 sub can_lock_file
5240 {
5241 if (&is_readonly_mode()) {
5242         return 0;       # never lock in read-only mode
5243         }
5244 elsif ($gconfig{'lockmode'} == 0) {
5245         return 1;       # always
5246         }
5247 elsif ($gconfig{'lockmode'} == 1) {
5248         return 0;       # never
5249         }
5250 else {
5251         # Check if under any of the directories
5252         my $match;
5253         foreach my $d (split(/\t+/, $gconfig{'lockdirs'})) {
5254                 if (&same_file($d, $_[0]) ||
5255                     &is_under_directory($d, $_[0])) {
5256                         $match = 1;
5257                         }
5258                 }
5259         return $gconfig{'lockmode'} == 2 ? $match : !$match;
5260         }
5261 }
5262
5263 =head2 webmin_log(action, type, object, &params, [module], [host, script-on-host, client-ip])
5264
5265 Log some action taken by a user. This is typically called at the end of a
5266 script, once all file changes are complete and all commands run. The 
5267 parameters are :
5268
5269 =item action - A short code for the action being performed, like 'create'.
5270
5271 =item type - A code for the type of object the action is performed to, like 'user'.
5272
5273 =item object - A short name for the object, like 'joe' if the Unix user 'joe' was just created.
5274
5275 =item params - A hash ref of additional information about the action.
5276
5277 =item module - Name of the module in which the action was performed, which defaults to the current module.
5278
5279 =item host - Remote host on which the action was performed. You should never need to set this (or the following two parameters), as they are used only for remote Webmin logging.
5280
5281 =item script-on-host - Script name like create_user.cgi on the host the action was performed on.
5282
5283 =item client-ip - IP address of the browser that performed the action.
5284
5285 =cut
5286 sub webmin_log
5287 {
5288 return if (!$gconfig{'log'} || &is_readonly_mode());
5289 my $m = $_[4] ? $_[4] : &get_module_name();
5290
5291 if ($gconfig{'logclear'}) {
5292         # check if it is time to clear the log
5293         my @st = stat("$webmin_logfile.time");
5294         my $write_logtime = 0;
5295         if (@st) {
5296                 if ($st[9]+$gconfig{'logtime'}*60*60 < time()) {
5297                         # clear logfile and all diff files
5298                         &unlink_file("$ENV{'WEBMIN_VAR'}/diffs");
5299                         &unlink_file("$ENV{'WEBMIN_VAR'}/files");
5300                         &unlink_file("$ENV{'WEBMIN_VAR'}/annotations");
5301                         unlink($webmin_logfile);
5302                         $write_logtime = 1;
5303                         }
5304                 }
5305         else {
5306                 $write_logtime = 1;
5307                 }
5308         if ($write_logtime) {
5309                 open(LOGTIME, ">$webmin_logfile.time");
5310                 print LOGTIME time(),"\n";
5311                 close(LOGTIME);
5312                 }
5313         }
5314
5315 # If an action script directory is defined, call the appropriate scripts
5316 if ($gconfig{'action_script_dir'}) {
5317     my ($action, $type, $object) = ($_[0], $_[1], $_[2]);
5318     my ($basedir) = $gconfig{'action_script_dir'};
5319
5320     for my $dir ($basedir/$type/$action, $basedir/$type, $basedir) {
5321         if (-d $dir) {
5322             my ($file);
5323             opendir(DIR, $dir) or die "Can't open $dir: $!";
5324             while (defined($file = readdir(DIR))) {
5325                 next if ($file =~ /^\.\.?$/); # skip '.' and '..'
5326                 if (-x "$dir/$file") {
5327                     # Call a script notifying it of the action
5328                     my %OLDENV = %ENV;
5329                     $ENV{'ACTION_MODULE'} = &get_module_name();
5330                     $ENV{'ACTION_ACTION'} = $_[0];
5331                     $ENV{'ACTION_TYPE'} = $_[1];
5332                     $ENV{'ACTION_OBJECT'} = $_[2];
5333                     $ENV{'ACTION_SCRIPT'} = $script_name;
5334                     foreach my $p (keys %param) {
5335                             $ENV{'ACTION_PARAM_'.uc($p)} = $param{$p};
5336                             }
5337                     system("$dir/$file", @_,
5338                            "<$null_file", ">$null_file", "2>&1");
5339                     %ENV = %OLDENV;
5340                     }
5341                 }
5342             }
5343         }
5344     }
5345
5346 # should logging be done at all?
5347 return if ($gconfig{'logusers'} && &indexof($base_remote_user,
5348            split(/\s+/, $gconfig{'logusers'})) < 0);
5349 return if ($gconfig{'logmodules'} && &indexof($m,
5350            split(/\s+/, $gconfig{'logmodules'})) < 0);
5351
5352 # log the action
5353 my $now = time();
5354 my @tm = localtime($now);
5355 my $script_name = $0 =~ /([^\/]+)$/ ? $1 : '-';
5356 my $id = sprintf "%d.%d.%d", $now, $$, $main::action_id_count;
5357 my $idprefix = substr($now, 0, 5);
5358 $main::action_id_count++;
5359 my $line = sprintf "%s [%2.2d/%s/%4.4d %2.2d:%2.2d:%2.2d] %s %s %s %s %s \"%s\" \"%s\" \"%s\"",
5360         $id, $tm[3], ucfirst($number_to_month_map{$tm[4]}), $tm[5]+1900,
5361         $tm[2], $tm[1], $tm[0],
5362         $remote_user || '-',
5363         $main::session_id || '-',
5364         $_[7] || $ENV{'REMOTE_HOST'} || '-',
5365         $m, $_[5] ? "$_[5]:$_[6]" : $script_name,
5366         $_[0], $_[1] ne '' ? $_[1] : '-', $_[2] ne '' ? $_[2] : '-';
5367 my %param;
5368 foreach my $k (sort { $a cmp $b } keys %{$_[3]}) {
5369         my $v = $_[3]->{$k};
5370         my @pv;
5371         if ($v eq '') {
5372                 $line .= " $k=''";
5373                 @rv = ( "" );
5374                 }
5375         elsif (ref($v) eq 'ARRAY') {
5376                 foreach $vv (@$v) {
5377                         next if (ref($vv));
5378                         push(@pv, $vv);
5379                         $vv =~ s/(['"\\\r\n\t\%])/sprintf("%%%2.2X",ord($1))/ge;
5380                         $line .= " $k='$vv'";
5381                         }
5382                 }
5383         elsif (!ref($v)) {
5384                 foreach $vv (split(/\0/, $v)) {
5385                         push(@pv, $vv);
5386                         $vv =~ s/(['"\\\r\n\t\%])/sprintf("%%%2.2X",ord($1))/ge;
5387                         $line .= " $k='$vv'";
5388                         }
5389                 }
5390         $param{$k} = join(" ", @pv);
5391         }
5392 open(WEBMINLOG, ">>$webmin_logfile");
5393 print WEBMINLOG $line,"\n";
5394 close(WEBMINLOG);
5395 if ($gconfig{'logperms'}) {
5396         chmod(oct($gconfig{'logperms'}), $webmin_logfile);
5397         }
5398 else {
5399         chmod(0600, $webmin_logfile);
5400         }
5401
5402 if ($gconfig{'logfiles'} && !&get_module_variable('$no_log_file_changes')) {
5403         # Find and record the changes made to any locked files, or commands run
5404         my $i = 0;
5405         mkdir("$ENV{'WEBMIN_VAR'}/diffs", 0700);
5406         foreach my $d (@main::locked_file_diff) {
5407                 mkdir("$ENV{'WEBMIN_VAR'}/diffs/$idprefix", 0700);
5408                 mkdir("$ENV{'WEBMIN_VAR'}/diffs/$idprefix/$id", 0700);
5409                 open(DIFFLOG, ">$ENV{'WEBMIN_VAR'}/diffs/$idprefix/$id/$i");
5410                 print DIFFLOG "$d->{'type'} $d->{'object'}\n";
5411                 print DIFFLOG $d->{'data'};
5412                 close(DIFFLOG);
5413                 if ($d->{'input'}) {
5414                         open(DIFFLOG,
5415                           ">$ENV{'WEBMIN_VAR'}/diffs/$idprefix/$id/$i.input");
5416                         print DIFFLOG $d->{'input'};
5417                         close(DIFFLOG);
5418                         }
5419                 if ($gconfig{'logperms'}) {
5420                         chmod(oct($gconfig{'logperms'}),
5421                              "$ENV{'WEBMIN_VAR'}/diffs/$idprefix/$id/$i",
5422                              "$ENV{'WEBMIN_VAR'}/diffs/$idprefix/$id/$i.input");
5423                         }
5424                 $i++;
5425                 }
5426         @main::locked_file_diff = undef;
5427         }
5428
5429 if ($gconfig{'logfullfiles'}) {
5430         # Save the original contents of any modified files
5431         my $i = 0;
5432         mkdir("$ENV{'WEBMIN_VAR'}/files", 0700);
5433         foreach my $f (keys %main::orig_file_data) {
5434                 mkdir("$ENV{'WEBMIN_VAR'}/files/$idprefix", 0700);
5435                 mkdir("$ENV{'WEBMIN_VAR'}/files/$idprefix/$id", 0700);
5436                 open(ORIGLOG, ">$ENV{'WEBMIN_VAR'}/files/$idprefix/$id/$i");
5437                 if (!defined($main::orig_file_type{$f})) {
5438                         print ORIGLOG -1," ",$f,"\n";
5439                         }
5440                 else {
5441                         print ORIGLOG $main::orig_file_type{$f}," ",$f,"\n";
5442                         }
5443                 print ORIGLOG $main::orig_file_data{$f};
5444                 close(ORIGLOG);
5445                 if ($gconfig{'logperms'}) {
5446                         chmod(oct($gconfig{'logperms'}),
5447                               "$ENV{'WEBMIN_VAR'}/files/$idprefix/$id.$i");
5448                         }
5449                 $i++;
5450                 }
5451         %main::orig_file_data = undef;
5452         %main::orig_file_type = undef;
5453         }
5454
5455 if ($miniserv::page_capture_out) {
5456         # Save the whole page output
5457         mkdir("$ENV{'WEBMIN_VAR'}/output", 0700);
5458         mkdir("$ENV{'WEBMIN_VAR'}/output/$idprefix", 0700);
5459         open(PAGEOUT, ">$ENV{'WEBMIN_VAR'}/output/$idprefix/$id");
5460         print PAGEOUT $miniserv::page_capture_out;
5461         close(PAGEOUT);
5462         if ($gconfig{'logperms'}) {
5463                 chmod(oct($gconfig{'logperms'}),
5464                       "$ENV{'WEBMIN_VAR'}/output/$idprefix/$id");
5465                 }
5466         $miniserv::page_capture_out = undef;
5467         }
5468
5469 # Log to syslog too
5470 if ($gconfig{'logsyslog'}) {
5471         eval 'use Sys::Syslog qw(:DEFAULT setlogsock);
5472               openlog(&get_product_name(), "cons,pid,ndelay", "daemon");
5473               setlogsock("inet");';
5474         if (!$@) {
5475                 # Syslog module is installed .. try to convert to a
5476                 # human-readable form
5477                 my $msg;
5478                 my $mod = &get_module_name();
5479                 my $mdir = module_root_directory($mod);
5480                 if (-r "$mdir/log_parser.pl") {
5481                         &foreign_require($mod, "log_parser.pl");
5482                         my %params;
5483                         foreach my $k (keys %{$_[3]}) {
5484                                 my $v = $_[3]->{$k};
5485                                 if (ref($v) eq 'ARRAY') {
5486                                         $params{$k} = join("\0", @$v);
5487                                         }
5488                                 else {
5489                                         $params{$k} = $v;
5490                                         }
5491                                 }
5492                         $msg = &foreign_call($mod, "parse_webmin_log",
5493                                 $remote_user, $script_name,
5494                                 $_[0], $_[1], $_[2], \%params);
5495                         $msg =~ s/<[^>]*>//g;   # Remove tags
5496                         }
5497                 elsif ($_[0] eq "_config_") {
5498                         my %wtext = &load_language("webminlog");
5499                         $msg = $wtext{'search_config'};
5500                         }
5501                 $msg ||= "$_[0] $_[1] $_[2]";
5502                 my %info = &get_module_info($m);
5503                 eval { syslog("info", "%s", "[$info{'desc'}] $msg"); };
5504                 }
5505         }
5506 }
5507
5508 =head2 additional_log(type, object, data, [input])
5509
5510 Records additional log data for an upcoming call to webmin_log, such
5511 as a command that was run or SQL that was executed. Typically you will never
5512 need to call this function directory.
5513
5514 =cut
5515 sub additional_log
5516 {
5517 if ($gconfig{'logfiles'} && !&get_module_variable('$no_log_file_changes')) {
5518         push(@main::locked_file_diff,
5519              { 'type' => $_[0], 'object' => $_[1], 'data' => $_[2],
5520                'input' => $_[3] } );
5521         }
5522 }
5523
5524 =head2 webmin_debug_log(type, message)
5525
5526 Write something to the Webmin debug log. For internal use only.
5527
5528 =cut
5529 sub webmin_debug_log
5530 {
5531 my ($type, $msg) = @_;
5532 return 0 if (!$main::opened_debug_log);
5533 return 0 if ($gconfig{'debug_no'.$main::webmin_script_type});
5534 if ($gconfig{'debug_modules'}) {
5535         my @dmods = split(/\s+/, $gconfig{'debug_modules'});
5536         return 0 if (&indexof($main::initial_module_name, @dmods) < 0);
5537         }
5538 my $now;
5539 eval 'use Time::HiRes qw(gettimeofday); ($now, $ms) = gettimeofday';
5540 $now ||= time();
5541 my @tm = localtime($now);
5542 my $line = sprintf
5543         "%s [%2.2d/%s/%4.4d %2.2d:%2.2d:%2.2d.%6.6d] %s %s %s %s \"%s\"",
5544         $$, $tm[3], ucfirst($number_to_month_map{$tm[4]}), $tm[5]+1900,
5545         $tm[2], $tm[1], $tm[0], $ms,
5546         $remote_user || "-",
5547         $ENV{'REMOTE_HOST'} || "-",
5548         &get_module_name() || "-",
5549         $type,
5550         $msg;
5551 seek(main::DEBUGLOG, 0, 2);
5552 print main::DEBUGLOG $line."\n";
5553 return 1;
5554 }
5555
5556 =head2 system_logged(command)
5557
5558 Just calls the Perl system() function, but also logs the command run.
5559
5560 =cut
5561 sub system_logged
5562 {
5563 if (&is_readonly_mode()) {
5564         print STDERR "Vetoing command $_[0]\n";
5565         return 0;
5566         }
5567 my @realcmd = ( &translate_command($_[0]), @_[1..$#_] );
5568 my $cmd = join(" ", @realcmd);
5569 my $and;
5570 if ($cmd =~ s/(\s*&\s*)$//) {
5571         $and = $1;
5572         }
5573 while($cmd =~ s/(\d*)(<|>)((\/(tmp|dev)\S+)|&\d+)\s*$//) { }
5574 $cmd =~ s/^\((.*)\)\s*$/$1/;
5575 $cmd .= $and;
5576 &additional_log('exec', undef, $cmd);
5577 return system(@realcmd);
5578 }
5579
5580 =head2 backquote_logged(command)
5581
5582 Executes a command and returns the output (like `command`), but also logs it.
5583
5584 =cut
5585 sub backquote_logged
5586 {
5587 if (&is_readonly_mode()) {
5588         $? = 0;
5589         print STDERR "Vetoing command $_[0]\n";
5590         return undef;
5591         }
5592 my $realcmd = &translate_command($_[0]);
5593 my $cmd = $realcmd;
5594 my $and;
5595 if ($cmd =~ s/(\s*&\s*)$//) {
5596         $and = $1;
5597         }
5598 while($cmd =~ s/(\d*)(<|>)((\/(tmp\/.webmin|dev)\S+)|&\d+)\s*$//) { }
5599 $cmd =~ s/^\((.*)\)\s*$/$1/;
5600 $cmd .= $and;
5601 &additional_log('exec', undef, $cmd);
5602 &webmin_debug_log('CMD', "cmd=$cmd") if ($gconfig{'debug_what_cmd'});
5603 return `$realcmd`;
5604 }
5605
5606 =head2 backquote_with_timeout(command, timeout, safe?, [maxlines])
5607
5608 Runs some command, waiting at most the given number of seconds for it to
5609 complete, and returns the output. The maxlines parameter sets the number
5610 of lines of output to capture. The safe parameter should be set to 1 if the
5611 command is safe for read-only mode users to run.
5612
5613 =cut
5614 sub backquote_with_timeout
5615 {
5616 my $realcmd = &translate_command($_[0]);
5617 my $out;
5618 my $pid = &open_execute_command(OUT, "($realcmd) <$null_file", 1, $_[2]);
5619 my $start = time();
5620 my $timed_out = 0;
5621 my $linecount = 0;
5622 while(1) {
5623         my $elapsed = time() - $start;
5624         last if ($elapsed > $_[1]);
5625         my $rmask;
5626         vec($rmask, fileno(OUT), 1) = 1;
5627         my $sel = select($rmask, undef, undef, $_[1] - $elapsed);
5628         last if (!$sel || $sel < 0);
5629         my $line = <OUT>;
5630         last if (!defined($line));
5631         $out .= $line;
5632         $linecount++;
5633         if ($_[3] && $linecount >= $_[3]) {
5634                 # Got enough lines
5635                 last;
5636                 }
5637         }
5638 if (kill('TERM', $pid) && time() - $start >= $_[1]) {
5639         $timed_out = 1;
5640         }
5641 close(OUT);
5642 return wantarray ? ($out, $timed_out) : $out;
5643 }
5644
5645 =head2 backquote_command(command, safe?)
5646
5647 Executes a command and returns the output (like `command`), subject to
5648 command translation. The safe parameter should be set to 1 if the command
5649 is safe for read-only mode users to run.
5650
5651 =cut
5652 sub backquote_command
5653 {
5654 if (&is_readonly_mode() && !$_[1]) {
5655         print STDERR "Vetoing command $_[0]\n";
5656         $? = 0;
5657         return undef;
5658         }
5659 my $realcmd = &translate_command($_[0]);
5660 &webmin_debug_log('CMD', "cmd=$realcmd") if ($gconfig{'debug_what_cmd'});
5661 return `$realcmd`;
5662 }
5663
5664 =head2 kill_logged(signal, pid, ...)
5665
5666 Like Perl's built-in kill function, but also logs the fact that some process
5667 was killed. On Windows, falls back to calling process.exe to terminate a
5668 process.
5669
5670 =cut
5671 sub kill_logged
5672 {
5673 return scalar(@_)-1 if (&is_readonly_mode());
5674 &webmin_debug_log('KILL', "signal=$_[0] pids=".join(" ", @_[1..@_-1]))
5675         if ($gconfig{'debug_what_procs'});
5676 &additional_log('kill', $_[0], join(" ", @_[1..@_-1])) if (@_ > 1);
5677 if ($gconfig{'os_type'} eq 'windows') {
5678         # Emulate some kills with process.exe
5679         my $arg = $_[0] eq "KILL" ? "-k" :
5680                   $_[0] eq "TERM" ? "-q" :
5681                   $_[0] eq "STOP" ? "-s" :
5682                   $_[0] eq "CONT" ? "-r" : undef;
5683         my $ok = 0;
5684         foreach my $p (@_[1..@_-1]) {
5685                 if ($p < 0) {
5686                         $ok ||= kill($_[0], $p);
5687                         }
5688                 elsif ($arg) {
5689                         &execute_command("process $arg $p");
5690                         $ok = 1;
5691                         }
5692                 }
5693         return $ok;
5694         }
5695 else {
5696         # Normal Unix kill
5697         return kill(@_);
5698         }
5699 }
5700
5701 =head2 rename_logged(old, new)
5702
5703 Re-names a file and logs the rename. If the old and new files are on different
5704 filesystems, calls mv or the Windows rename function to do the job.
5705
5706 =cut
5707 sub rename_logged
5708 {
5709 &additional_log('rename', $_[0], $_[1]) if ($_[0] ne $_[1]);
5710 return &rename_file($_[0], $_[1]);
5711 }
5712
5713 =head2 rename_file(old, new)
5714
5715 Renames a file or directory. If the old and new files are on different
5716 filesystems, calls mv or the Windows rename function to do the job.
5717
5718 =cut
5719 sub rename_file
5720 {
5721 if (&is_readonly_mode()) {
5722         print STDERR "Vetoing rename from $_[0] to $_[1]\n";
5723         return 1;
5724         }
5725 my $src = &translate_filename($_[0]);
5726 my $dst = &translate_filename($_[1]);
5727 &webmin_debug_log('RENAME', "src=$src dst=$dst")
5728         if ($gconfig{'debug_what_ops'});
5729 my $ok = rename($src, $dst);
5730 if (!$ok && $! !~ /permission/i) {
5731         # Try the mv command, in case this is a cross-filesystem rename
5732         if ($gconfig{'os_type'} eq 'windows') {
5733                 # Need to use rename
5734                 my $out = &backquote_command("rename ".quotemeta($_[0]).
5735                                              " ".quotemeta($_[1])." 2>&1");
5736                 $ok = !$?;
5737                 $! = $out if (!$ok);
5738                 }
5739         else {
5740                 # Can use mv
5741                 my $out = &backquote_command("mv ".quotemeta($_[0]).
5742                                              " ".quotemeta($_[1])." 2>&1");
5743                 $ok = !$?;
5744                 $! = $out if (!$ok);
5745                 }
5746         }
5747 return $ok;
5748 }
5749
5750 =head2 symlink_logged(src, dest)
5751
5752 Create a symlink, and logs it. Effectively does the same thing as the Perl
5753 symlink function.
5754
5755 =cut
5756 sub symlink_logged
5757 {
5758 &lock_file($_[1]);
5759 my $rv = &symlink_file($_[0], $_[1]);
5760 &unlock_file($_[1]);
5761 return $rv;
5762 }
5763
5764 =head2 symlink_file(src, dest)
5765
5766 Creates a soft link, unless in read-only mode. Effectively does the same thing
5767 as the Perl symlink function.
5768
5769 =cut
5770 sub symlink_file
5771 {
5772 if (&is_readonly_mode()) {
5773         print STDERR "Vetoing symlink from $_[0] to $_[1]\n";
5774         return 1;
5775         }
5776 my $src = &translate_filename($_[0]);
5777 my $dst = &translate_filename($_[1]);
5778 &webmin_debug_log('SYMLINK', "src=$src dst=$dst")
5779         if ($gconfig{'debug_what_ops'});
5780 return symlink($src, $dst);
5781 }
5782
5783 =head2 link_file(src, dest)
5784
5785 Creates a hard link, unless in read-only mode. The existing new link file
5786 will be deleted if necessary. Effectively the same as Perl's link function.
5787
5788 =cut
5789 sub link_file
5790 {
5791 if (&is_readonly_mode()) {
5792         print STDERR "Vetoing link from $_[0] to $_[1]\n";
5793         return 1;
5794         }
5795 my $src = &translate_filename($_[0]);
5796 my $dst = &translate_filename($_[1]);
5797 &webmin_debug_log('LINK', "src=$src dst=$dst")
5798         if ($gconfig{'debug_what_ops'});
5799 unlink($dst);                   # make sure link works
5800 return link($src, $dst);
5801 }
5802
5803 =head2 make_dir(dir, perms, recursive)
5804
5805 Creates a directory and sets permissions on it, unless in read-only mode.
5806 The perms parameter sets the octal permissions to apply, which unlike Perl's
5807 mkdir will really get set. The recursive flag can be set to 1 to have the
5808 function create parent directories too.
5809
5810 =cut
5811 sub make_dir
5812 {
5813 my ($dir, $perms, $recur) = @_;
5814 if (&is_readonly_mode()) {
5815         print STDERR "Vetoing directory $dir\n";
5816         return 1;
5817         }
5818 $dir = &translate_filename($dir);
5819 my $exists = -d $dir ? 1 : 0;
5820 return 1 if ($exists && $recur);        # already exists
5821 &webmin_debug_log('MKDIR', $dir) if ($gconfig{'debug_what_ops'});
5822 my $rv = mkdir($dir, $perms);
5823 if (!$rv && $recur) {
5824         # Failed .. try mkdir -p
5825         my $param = $gconfig{'os_type'} eq 'windows' ? "" : "-p";
5826         my $ex = &execute_command("mkdir $param ".&quote_path($dir));
5827         if ($ex) {
5828                 return 0;
5829                 }
5830         }
5831 if (!$exists) {
5832         chmod($perms, $dir);
5833         }
5834 return 1;
5835 }
5836
5837 =head2 set_ownership_permissions(user, group, perms, file, ...)
5838
5839 Sets the user, group owner and permissions on some files. The parameters are :
5840
5841 =item user - UID or username to change the file owner to. If undef, then the owner is not changed.
5842
5843 =item group - GID or group name to change the file group to. If undef, then the group is set to the user's primary group.
5844
5845 =item perms - Octal permissions set to set on the file. If undef, they are left alone.
5846
5847 =item file - One or more files or directories to modify.
5848
5849 =cut
5850 sub set_ownership_permissions
5851 {
5852 my ($user, $group, $perms, @files) = @_;
5853 if (&is_readonly_mode()) {
5854         print STDERR "Vetoing permission changes on ",join(" ", @files),"\n";
5855         return 1;
5856         }
5857 @files = map { &translate_filename($_) } @files;
5858 if ($gconfig{'debug_what_ops'}) {
5859         foreach my $f (@files) {
5860                 &webmin_debug_log('PERMS',
5861                         "file=$f user=$user group=$group perms=$perms");
5862                 }
5863         }
5864 my $rv = 1;
5865 if (defined($user)) {
5866         my $uid = $user !~ /^\d+$/ ? getpwnam($user) : $user;
5867         my $gid;
5868         if (defined($group)) {
5869                 $gid = $group !~ /^\d+$/ ? getgrnam($group) : $group;
5870                 }
5871         else {
5872                 my @uinfo = getpwuid($uid);
5873                 $gid = $uinfo[3];
5874                 }
5875         $rv = chown($uid, $gid, @files);
5876         }
5877 if ($rv && defined($perms)) {
5878         $rv = chmod($perms, @files);
5879         }
5880 return $rv;
5881 }
5882
5883 =head2 unlink_logged(file, ...)
5884
5885 Like Perl's unlink function, but locks the files beforehand and un-locks them
5886 after so that the deletion is logged by Webmin.
5887
5888 =cut
5889 sub unlink_logged
5890 {
5891 my %locked;
5892 foreach my $f (@_) {
5893         if (!&test_lock($f)) {
5894                 &lock_file($f);
5895                 $locked{$f} = 1;
5896                 }
5897         }
5898 my @rv = &unlink_file(@_);
5899 foreach my $f (@_) {
5900         if ($locked{$f}) {
5901                 &unlock_file($f);
5902                 }
5903         }
5904 return wantarray ? @rv : $rv[0];
5905 }
5906
5907 =head2 unlink_file(file, ...)
5908
5909 Deletes some files or directories. Like Perl's unlink function, but also
5910 recursively deletes directories with the rm command if needed.
5911
5912 =cut
5913 sub unlink_file
5914 {
5915 return 1 if (&is_readonly_mode());
5916 my $rv = 1;
5917 my $err;
5918 foreach my $f (@_) {
5919         &unflush_file_lines($f);
5920         my $realf = &translate_filename($f);
5921         &webmin_debug_log('UNLINK', $realf) if ($gconfig{'debug_what_ops'});
5922         if (-d $realf) {
5923                 if (!rmdir($realf)) {
5924                         my $out;
5925                         if ($gconfig{'os_type'} eq 'windows') {
5926                                 # Call del and rmdir commands
5927                                 my $qm = $realf;
5928                                 $qm =~ s/\//\\/g;
5929                                 my $out = `del /q "$qm" 2>&1`;
5930                                 if (!$?) {
5931                                         $out = `rmdir "$qm" 2>&1`;
5932                                         }
5933                                 }
5934                         else {
5935                                 # Use rm command
5936                                 my $qm = quotemeta($realf);
5937                                 $out = `rm -rf $qm 2>&1`;
5938                                 }
5939                         if ($?) {
5940                                 $rv = 0;
5941                                 $err = $out;
5942                                 }
5943                         }
5944                 }
5945         else {
5946                 if (!unlink($realf)) {
5947                         $rv = 0;
5948                         $err = $!;
5949                         }
5950                 }
5951         }
5952 return wantarray ? ($rv, $err) : $rv;
5953 }
5954
5955 =head2 copy_source_dest(source, dest)
5956
5957 Copy some file or directory to a new location. Returns 1 on success, or 0
5958 on failure - also sets $! on failure. If the source is a directory, uses
5959 piped tar commands to copy a whole directory structure including permissions
5960 and special files.
5961
5962 =cut
5963 sub copy_source_dest
5964 {
5965 return (1, undef) if (&is_readonly_mode());
5966 my ($src, $dst) = @_;
5967 my $ok = 1;
5968 my ($err, $out);
5969 &webmin_debug_log('COPY', "src=$src dst=$dst")
5970         if ($gconfig{'debug_what_ops'});
5971 if ($gconfig{'os_type'} eq 'windows') {
5972         # No tar or cp on windows, so need to use copy command
5973         $src =~ s/\//\\/g;
5974         $dst =~ s/\//\\/g;
5975         if (-d $src) {
5976                 $out = &backquote_logged("xcopy \"$src\" \"$dst\" /Y /E /I 2>&1");
5977                 }
5978         else {
5979                 $out = &backquote_logged("copy /Y \"$src\" \"$dst\" 2>&1");
5980                 }
5981         if ($?) {
5982                 $ok = 0;
5983                 $err = $out;
5984                 }
5985         }
5986 elsif (-d $src) {
5987         # A directory .. need to copy with tar command
5988         my @st = stat($src);
5989         unlink($dst);
5990         mkdir($dst, 0755);
5991         &set_ownership_permissions($st[4], $st[5], $st[2], $dst);
5992         $out = &backquote_logged("(cd ".quotemeta($src)." ; tar cf - . | (cd ".quotemeta($dst)." ; tar xf -)) 2>&1");
5993         if ($?) {
5994                 $ok = 0;
5995                 $err = $out;
5996                 }
5997         }
5998 else {
5999         # Can just copy with cp
6000         my $out = &backquote_logged("cp -p ".quotemeta($src).
6001                                     " ".quotemeta($dst)." 2>&1");
6002         if ($?) {
6003                 $ok = 0;
6004                 $err = $out;
6005                 }
6006         }
6007 return wantarray ? ($ok, $err) : $ok;
6008 }
6009
6010 =head2 remote_session_name(host|&server)
6011
6012 Generates a session ID for some server. For this server, this will always
6013 be an empty string. For a server object it will include the hostname and
6014 port and PID. For a server name, it will include the hostname and PID. For
6015 internal use only.
6016
6017 =cut
6018 sub remote_session_name
6019 {
6020 return ref($_[0]) && $_[0]->{'host'} && $_[0]->{'port'} ?
6021                 "$_[0]->{'host'}:$_[0]->{'port'}.$$" :
6022        $_[0] eq "" || ref($_[0]) && $_[0]->{'id'} == 0 ? "" :
6023        ref($_[0]) ? "" : "$_[0].$$";
6024 }
6025
6026 =head2 remote_foreign_require(server, module, file)
6027
6028 Connects to rpc.cgi on a remote webmin server and have it open a session
6029 to a process that will actually do the require and run functions. This is the
6030 equivalent for foreign_require, but for a remote Webmin system. The server
6031 parameter can either be a hostname of a system registered in the Webmin
6032 Servers Index module, or a hash reference for a system from that module.
6033
6034 =cut
6035 sub remote_foreign_require
6036 {
6037 my $call = { 'action' => 'require',
6038              'module' => $_[1],
6039              'file' => $_[2] };
6040 my $sn = &remote_session_name($_[0]);
6041 if ($remote_session{$sn}) {
6042         $call->{'session'} = $remote_session{$sn};
6043         }
6044 else {
6045         $call->{'newsession'} = 1;
6046         }
6047 my $rv = &remote_rpc_call($_[0], $call);
6048 if ($rv->{'session'}) {
6049         $remote_session{$sn} = $rv->{'session'};
6050         $remote_session_server{$sn} = $_[0];
6051         }
6052 }
6053
6054 =head2 remote_foreign_call(server, module, function, [arg]*)
6055
6056 Call a function on a remote server. Must have been setup first with
6057 remote_foreign_require for the same server and module. Equivalent to
6058 foreign_call, but with the extra server parameter to specify the remote
6059 system's hostname.
6060
6061 =cut
6062 sub remote_foreign_call
6063 {
6064 return undef if (&is_readonly_mode());
6065 my $sn = &remote_session_name($_[0]);
6066 return &remote_rpc_call($_[0], { 'action' => 'call',
6067                                  'module' => $_[1],
6068                                  'func' => $_[2],
6069                                  'session' => $remote_session{$sn},
6070                                  'args' => [ @_[3 .. $#_] ] } );
6071 }
6072
6073 =head2 remote_foreign_check(server, module, [api-only])
6074
6075 Checks if some module is installed and supported on a remote server. Equivilant
6076 to foreign_check, but for the remote Webmin system specified by the server
6077 parameter.
6078
6079 =cut
6080 sub remote_foreign_check
6081 {
6082 return &remote_rpc_call($_[0], { 'action' => 'check',
6083                                  'module' => $_[1],
6084                                  'api' => $_[2] });
6085 }
6086
6087 =head2 remote_foreign_config(server, module)
6088
6089 Gets the configuration for some module from a remote server, as a hash.
6090 Equivalent to foreign_config, but for a remote system.
6091
6092 =cut
6093 sub remote_foreign_config
6094 {
6095 return &remote_rpc_call($_[0], { 'action' => 'config',
6096                                  'module' => $_[1] });
6097 }
6098
6099 =head2 remote_eval(server, module, code)
6100
6101 Evaluates some perl code in the context of a module on a remote webmin server.
6102 The server parameter must be the hostname of a remote system, module must
6103 be a module directory name, and code a string of Perl code to run. This can
6104 only be called after remote_foreign_require for the same server and module.
6105
6106 =cut
6107 sub remote_eval
6108 {
6109 return undef if (&is_readonly_mode());
6110 my $sn = &remote_session_name($_[0]);
6111 return &remote_rpc_call($_[0], { 'action' => 'eval',
6112                                  'module' => $_[1],
6113                                  'code' => $_[2],
6114                                  'session' => $remote_session{$sn} });
6115 }
6116
6117 =head2 remote_write(server, localfile, [remotefile], [remotebasename])
6118
6119 Transfers some local file to another server via Webmin's RPC protocol, and
6120 returns the resulting remote filename. If the remotefile parameter is given,
6121 that is the destination filename which will be used. Otherwise a randomly
6122 selected temporary filename will be used, and returned by the function.
6123
6124 =cut
6125 sub remote_write
6126 {
6127 return undef if (&is_readonly_mode());
6128 my ($data, $got);
6129 my $sn = &remote_session_name($_[0]);
6130 if (!$_[0] || $remote_server_version{$sn} >= 0.966) {
6131         # Copy data over TCP connection
6132         my $rv = &remote_rpc_call($_[0], { 'action' => 'tcpwrite',
6133                                            'file' => $_[2],
6134                                            'name' => $_[3] } );
6135         my $error;
6136         my $serv = ref($_[0]) ? $_[0]->{'host'} : $_[0];
6137         &open_socket($serv || "localhost", $rv->[1], TWRITE, \$error);
6138         return &$main::remote_error_handler("Failed to transfer file : $error")
6139                 if ($error);
6140         open(FILE, $_[1]);
6141         while(read(FILE, $got, 1024) > 0) {
6142                 print TWRITE $got;
6143                 }
6144         close(FILE);
6145         shutdown(TWRITE, 1);
6146         $error = <TWRITE>;
6147         if ($error && $error !~ /^OK/) {
6148                 # Got back an error!
6149                 return &$main::remote_error_handler("Failed to transfer file : $error");
6150                 }
6151         close(TWRITE);
6152         return $rv->[0];
6153         }
6154 else {
6155         # Just pass file contents as parameters
6156         open(FILE, $_[1]);
6157         while(read(FILE, $got, 1024) > 0) {
6158                 $data .= $got;
6159                 }
6160         close(FILE);
6161         return &remote_rpc_call($_[0], { 'action' => 'write',
6162                                          'data' => $data,
6163                                          'file' => $_[2],
6164                                          'session' => $remote_session{$sn} });
6165         }
6166 }
6167
6168 =head2 remote_read(server, localfile, remotefile)
6169
6170 Transfers a file from a remote server to this system, using Webmin's RPC
6171 protocol. The server parameter must be the hostname of a system registered
6172 in the Webmin Servers Index module, localfile is the destination path on this
6173 system, and remotefile is the file to fetch from the remote server.
6174
6175 =cut
6176 sub remote_read
6177 {
6178 my $sn = &remote_session_name($_[0]);
6179 if (!$_[0] || $remote_server_version{$sn} >= 0.966) {
6180         # Copy data over TCP connection
6181         my $rv = &remote_rpc_call($_[0], { 'action' => 'tcpread',
6182                                            'file' => $_[2] } );
6183         if (!$rv->[0]) {
6184                 return &$main::remote_error_handler("Failed to transfer file : $rv->[1]");
6185                 }
6186         my $error;
6187         my $serv = ref($_[0]) ? $_[0]->{'host'} : $_[0];
6188         &open_socket($serv || "localhost", $rv->[1], TREAD, \$error);
6189         return &$main::remote_error_handler("Failed to transfer file : $error")
6190                 if ($error);
6191         my $got;
6192         open(FILE, ">$_[1]");
6193         while(read(TREAD, $got, 1024) > 0) {
6194                 print FILE $got;
6195                 }
6196         close(FILE);
6197         close(TREAD);
6198         }
6199 else {
6200         # Just get data as return value
6201         my $d = &remote_rpc_call($_[0], { 'action' => 'read',
6202                                           'file' => $_[2],
6203                                           'session' => $remote_session{$sn} });
6204         open(FILE, ">$_[1]");
6205         print FILE $d;
6206         close(FILE);
6207         }
6208 }
6209
6210 =head2 remote_finished
6211
6212 Close all remote sessions. This happens automatically after a while
6213 anyway, but this function should be called to clean things up faster.
6214
6215 =cut
6216 sub remote_finished
6217 {
6218 foreach my $sn (keys %remote_session) {
6219         my $server = $remote_session_server{$sn};
6220         &remote_rpc_call($server, { 'action' => 'quit',
6221                                     'session' => $remote_session{$sn} } );
6222         delete($remote_session{$sn});
6223         delete($remote_session_server{$sn});
6224         }
6225 foreach my $fh (keys %fast_fh_cache) {
6226         close($fh);
6227         delete($fast_fh_cache{$fh});
6228         }
6229 }
6230
6231 =head2 remote_error_setup(&function)
6232
6233 Sets a function to be called instead of &error when a remote RPC operation
6234 fails. Useful if you want to have more control over your remote operations.
6235
6236 =cut
6237 sub remote_error_setup
6238 {
6239 $main::remote_error_handler = $_[0] || \&error;
6240 }
6241
6242 =head2 remote_rpc_call(server, &structure)
6243
6244 Calls rpc.cgi on some server and passes it a perl structure (hash,array,etc)
6245 and then reads back a reply structure. This is mainly for internal use only,
6246 and is called by the other remote_* functions.
6247
6248 =cut
6249 sub remote_rpc_call
6250 {
6251 my $serv;
6252 my $sn = &remote_session_name($_[0]);   # Will be undef for local connection
6253 if (ref($_[0])) {
6254         # Server structure was given
6255         $serv = $_[0];
6256         $serv->{'user'} || $serv->{'id'} == 0 ||
6257                 return &$main::remote_error_handler(
6258                         "No Webmin login set for server");
6259         }
6260 elsif ($_[0]) {
6261         # lookup the server in the webmin servers module if needed
6262         if (!%main::remote_servers_cache) {
6263                 &foreign_require("servers", "servers-lib.pl");
6264                 foreach $s (&foreign_call("servers", "list_servers")) {
6265                         $main::remote_servers_cache{$s->{'host'}} = $s;
6266                         $main::remote_servers_cache{$s->{'host'}.":".$s->{'port'}} = $s;
6267                         }
6268                 }
6269         $serv = $main::remote_servers_cache{$_[0]};
6270         $serv || return &$main::remote_error_handler(
6271                                 "No Webmin Servers entry for $_[0]");
6272         $serv->{'user'} || return &$main::remote_error_handler(
6273                                 "No login set for server $_[0]");
6274         }
6275 my $ip = $serv->{'ip'} || $serv->{'host'};
6276
6277 # Work out the username and password
6278 my ($user, $pass);
6279 if ($serv->{'sameuser'}) {
6280         $user = $remote_user;
6281         defined($main::remote_pass) || return &$main::remote_error_handler(
6282                                    "Password for this server is not available");
6283         $pass = $main::remote_pass;
6284         }
6285 else {
6286         $user = $serv->{'user'};
6287         $pass = $serv->{'pass'};
6288         }
6289
6290 if ($serv->{'fast'} || !$sn) {
6291         # Make TCP connection call to fastrpc.cgi
6292         if (!$fast_fh_cache{$sn} && $sn) {
6293                 # Need to open the connection
6294                 my $con = &make_http_connection(
6295                         $ip, $serv->{'port'}, $serv->{'ssl'},
6296                         "POST", "/fastrpc.cgi");
6297                 return &$main::remote_error_handler(
6298                     "Failed to connect to $serv->{'host'} : $con")
6299                         if (!ref($con));
6300                 &write_http_connection($con, "Host: $serv->{'host'}\r\n");
6301                 &write_http_connection($con, "User-agent: Webmin\r\n");
6302                 my $auth = &encode_base64("$user:$pass");
6303                 $auth =~ tr/\n//d;
6304                 &write_http_connection($con, "Authorization: basic $auth\r\n");
6305                 &write_http_connection($con, "Content-length: ",
6306                                              length($tostr),"\r\n");
6307                 &write_http_connection($con, "\r\n");
6308                 &write_http_connection($con, $tostr);
6309
6310                 # read back the response
6311                 my $line = &read_http_connection($con);
6312                 $line =~ tr/\r\n//d;
6313                 if ($line =~ /^HTTP\/1\..\s+401\s+/) {
6314                         return &$main::remote_error_handler("Login to RPC server as $user rejected");
6315                         }
6316                 $line =~ /^HTTP\/1\..\s+200\s+/ ||
6317                         return &$main::remote_error_handler("HTTP error : $line");
6318                 do {
6319                         $line = &read_http_connection($con);
6320                         $line =~ tr/\r\n//d;
6321                         } while($line);
6322                 $line = &read_http_connection($con);
6323                 if ($line =~ /^0\s+(.*)/) {
6324                         return &$main::remote_error_handler("RPC error : $1");
6325                         }
6326                 elsif ($line =~ /^1\s+(\S+)\s+(\S+)\s+(\S+)/ ||
6327                        $line =~ /^1\s+(\S+)\s+(\S+)/) {
6328                         # Started ok .. connect and save SID
6329                         &close_http_connection($con);
6330                         my ($port, $sid, $version, $error) = ($1, $2, $3);
6331                         &open_socket($ip, $port, $sid, \$error);
6332                         return &$main::remote_error_handler("Failed to connect to fastrpc.cgi : $error")
6333                                 if ($error);
6334                         $fast_fh_cache{$sn} = $sid;
6335                         $remote_server_version{$sn} = $version;
6336                         }
6337                 else {
6338                         while($stuff = &read_http_connection($con)) {
6339                                 $line .= $stuff;
6340                                 }
6341                         return &$main::remote_error_handler("Bad response from fastrpc.cgi : $line");
6342                         }
6343                 }
6344         elsif (!$fast_fh_cache{$sn}) {
6345                 # Open the connection by running fastrpc.cgi locally
6346                 pipe(RPCOUTr, RPCOUTw);
6347                 if (!fork()) {
6348                         untie(*STDIN);
6349                         untie(*STDOUT);
6350                         open(STDOUT, ">&RPCOUTw");
6351                         close(STDIN);
6352                         close(RPCOUTr);
6353                         $| = 1;
6354                         $ENV{'REQUEST_METHOD'} = 'GET';
6355                         $ENV{'SCRIPT_NAME'} = '/fastrpc.cgi';
6356                         $ENV{'SERVER_ROOT'} ||= $root_directory;
6357                         my %acl;
6358                         if ($base_remote_user ne 'root' &&
6359                             $base_remote_user ne 'admin') {
6360                                 # Need to fake up a login for the CGI!
6361                                 &read_acl(undef, \%acl, [ 'root' ]);
6362                                 $ENV{'BASE_REMOTE_USER'} =
6363                                         $ENV{'REMOTE_USER'} =
6364                                                 $acl{'root'} ? 'root' : 'admin';
6365                                 }
6366                         delete($ENV{'FOREIGN_MODULE_NAME'});
6367                         delete($ENV{'FOREIGN_ROOT_DIRECTORY'});
6368                         chdir($root_directory);
6369                         if (!exec("$root_directory/fastrpc.cgi")) {
6370                                 print "exec failed : $!\n";
6371                                 exit 1;
6372                                 }
6373                         }
6374                 close(RPCOUTw);
6375                 my $line;
6376                 do {
6377                         ($line = <RPCOUTr>) =~ tr/\r\n//d;
6378                         } while($line);
6379                 $line = <RPCOUTr>;
6380                 #close(RPCOUTr);
6381                 if ($line =~ /^0\s+(.*)/) {
6382                         return &$main::remote_error_handler("RPC error : $2");
6383                         }
6384                 elsif ($line =~ /^1\s+(\S+)\s+(\S+)/) {
6385                         # Started ok .. connect and save SID
6386                         close(SOCK);
6387                         my ($port, $sid, $error) = ($1, $2, undef);
6388                         &open_socket("localhost", $port, $sid, \$error);
6389                         return &$main::remote_error_handler("Failed to connect to fastrpc.cgi : $error") if ($error);
6390                         $fast_fh_cache{$sn} = $sid;
6391                         }
6392                 else {
6393                         local $_;
6394                         while(<RPCOUTr>) {
6395                                 $line .= $_;
6396                                 }
6397                         &error("Bad response from fastrpc.cgi : $line");
6398                         }
6399                 }
6400         # Got a connection .. send off the request
6401         my $fh = $fast_fh_cache{$sn};
6402         my $tostr = &serialise_variable($_[1]);
6403         print $fh length($tostr)," $fh\n";
6404         print $fh $tostr;
6405         my $rstr = <$fh>;
6406         if ($rstr eq '') {
6407                 return &$main::remote_error_handler(
6408                         "Error reading response length from fastrpc.cgi : $!")
6409                 }
6410         my $rlen = int($rstr);
6411         my ($fromstr, $got);
6412         while(length($fromstr) < $rlen) {
6413                 return &$main::remote_error_handler(
6414                         "Failed to read from fastrpc.cgi : $!")
6415                         if (read($fh, $got, $rlen - length($fromstr)) <= 0);
6416                 $fromstr .= $got;
6417                 }
6418         my $from = &unserialise_variable($fromstr);
6419         if (!$from) {
6420                 # No response at all
6421                 return &$main::remote_error_handler("Remote Webmin error");
6422                 }
6423         elsif (ref($from) ne 'HASH') {
6424                 # Not a hash?!
6425                 return &$main::remote_error_handler(
6426                         "Invalid remote Webmin response : $from");
6427                 }
6428         elsif (!$from->{'status'}) {
6429                 # Call failed
6430                 $from->{'rv'} =~ s/\s+at\s+(\S+)\s+line\s+(\d+)(,\s+<\S+>\s+line\s+(\d+))?//;
6431                 return &$main::remote_error_handler($from->{'rv'});
6432                 }
6433         if (defined($from->{'arv'})) {
6434                 return @{$from->{'arv'}};
6435                 }
6436         else {
6437                 return $from->{'rv'};
6438                 }
6439         }
6440 else {
6441         # Call rpc.cgi on remote server
6442         my $tostr = &serialise_variable($_[1]);
6443         my $error = 0;
6444         my $con = &make_http_connection($ip, $serv->{'port'},
6445                                         $serv->{'ssl'}, "POST", "/rpc.cgi");
6446         return &$main::remote_error_handler("Failed to connect to $serv->{'host'} : $con") if (!ref($con));
6447
6448         &write_http_connection($con, "Host: $serv->{'host'}\r\n");
6449         &write_http_connection($con, "User-agent: Webmin\r\n");
6450         my $auth = &encode_base64("$user:$pass");
6451         $auth =~ tr/\n//d;
6452         &write_http_connection($con, "Authorization: basic $auth\r\n");
6453         &write_http_connection($con, "Content-length: ",length($tostr),"\r\n");
6454         &write_http_connection($con, "\r\n");
6455         &write_http_connection($con, $tostr);
6456
6457         # read back the response
6458         my $line = &read_http_connection($con);
6459         $line =~ tr/\r\n//d;
6460         if ($line =~ /^HTTP\/1\..\s+401\s+/) {
6461                 return &$main::remote_error_handler("Login to RPC server as $user rejected");
6462                 }
6463         $line =~ /^HTTP\/1\..\s+200\s+/ || return &$main::remote_error_handler("RPC HTTP error : $line");
6464         do {
6465                 $line = &read_http_connection($con);
6466                 $line =~ tr/\r\n//d;
6467                 } while($line);
6468         my $fromstr;
6469         while($line = &read_http_connection($con)) {
6470                 $fromstr .= $line;
6471                 }
6472         close(SOCK);
6473         my $from = &unserialise_variable($fromstr);
6474         return &$main::remote_error_handler("Invalid RPC login to $serv->{'host'}") if (!$from->{'status'});
6475         if (defined($from->{'arv'})) {
6476                 return @{$from->{'arv'}};
6477                 }
6478         else {
6479                 return $from->{'rv'};
6480                 }
6481         }
6482 }
6483
6484 =head2 remote_multi_callback(&servers, parallel, &function, arg|&args, &returns, &errors, [module, library])
6485
6486 Executes some function in parallel on multiple servers at once. Fills in
6487 the returns and errors arrays respectively. If the module and library
6488 parameters are given, that module is remotely required on the server first,
6489 to check if it is connectable. The parameters are :
6490
6491 =item servers - A list of Webmin system hash references.
6492
6493 =item parallel - Number of parallel operations to perform.
6494
6495 =item function - Reference to function to call for each system.
6496
6497 =item args - Additional parameters to the function.
6498
6499 =item returns - Array ref to place return values into, in same order as servers.
6500
6501 =item errors - Array ref to place error messages into.
6502
6503 =item module - Optional module to require on the remote system first.
6504
6505 =item library - Optional library to require in the module.
6506
6507 =cut
6508 sub remote_multi_callback
6509 {
6510 my ($servs, $parallel, $func, $args, $rets, $errs, $mod, $lib) = @_;
6511 &remote_error_setup(\&remote_multi_callback_error);
6512
6513 # Call the functions
6514 my $p = 0;
6515 foreach my $g (@$servs) {
6516         my $rh = "READ$p";
6517         my $wh = "WRITE$p";
6518         pipe($rh, $wh);
6519         if (!fork()) {
6520                 close($rh);
6521                 $remote_multi_callback_err = undef;
6522                 if ($mod) {
6523                         # Require the remote lib
6524                         &remote_foreign_require($g->{'host'}, $mod, $lib);
6525                         if ($remote_multi_callback_err) {
6526                                 # Failed .. return error
6527                                 print $wh &serialise_variable(
6528                                         [ undef, $remote_multi_callback_err ]);
6529                                 exit(0);
6530                                 }
6531                         }
6532
6533                 # Call the function
6534                 my $a = ref($args) ? $args->[$p] : $args;
6535                 my $rv = &$func($g, $a);
6536
6537                 # Return the result
6538                 print $wh &serialise_variable(
6539                         [ $rv, $remote_multi_callback_err ]);
6540                 close($wh);
6541                 exit(0);
6542                 }
6543         close($wh);
6544         $p++;
6545         }
6546
6547 # Read back the results
6548 $p = 0;
6549 foreach my $g (@$servs) {
6550         my $rh = "READ$p";
6551         my $line = <$rh>;
6552         if (!$line) {
6553                 $errs->[$p] = "Failed to read response from $g->{'host'}";
6554                 }
6555         else {
6556                 my $rv = &unserialise_variable($line);
6557                 close($rh);
6558                 $rets->[$p] = $rv->[0];
6559                 $errs->[$p] = $rv->[1];
6560                 }
6561         $p++;
6562         }
6563
6564 &remote_error_setup(undef);
6565 }
6566
6567 sub remote_multi_callback_error
6568 {
6569 $remote_multi_callback_err = $_[0];
6570 }
6571
6572 =head2 serialise_variable(variable)
6573
6574 Converts some variable (maybe a scalar, hash ref, array ref or scalar ref)
6575 into a url-encoded string. In the cases of arrays and hashes, it is recursively
6576 called on each member to serialize the entire object.
6577
6578 =cut
6579 sub serialise_variable
6580 {
6581 if (!defined($_[0])) {
6582         return 'UNDEF';
6583         }
6584 my $r = ref($_[0]);
6585 my $rv;
6586 if (!$r) {
6587         $rv = &urlize($_[0]);
6588         }
6589 elsif ($r eq 'SCALAR') {
6590         $rv = &urlize(${$_[0]});
6591         }
6592 elsif ($r eq 'ARRAY') {
6593         $rv = join(",", map { &urlize(&serialise_variable($_)) } @{$_[0]});
6594         }
6595 elsif ($r eq 'HASH') {
6596         $rv = join(",", map { &urlize(&serialise_variable($_)).",".
6597                               &urlize(&serialise_variable($_[0]->{$_})) }
6598                             keys %{$_[0]});
6599         }
6600 elsif ($r eq 'REF') {
6601         $rv = &serialise_variable(${$_[0]});
6602         }
6603 elsif ($r eq 'CODE') {
6604         # Code not handled
6605         $rv = undef;
6606         }
6607 elsif ($r) {
6608         # An object - treat as a hash
6609         $r = "OBJECT ".&urlize($r);
6610         $rv = join(",", map { &urlize(&serialise_variable($_)).",".
6611                               &urlize(&serialise_variable($_[0]->{$_})) }
6612                             keys %{$_[0]});
6613         }
6614 return ($r ? $r : 'VAL').",".$rv;
6615 }
6616
6617 =head2 unserialise_variable(string)
6618
6619 Converts a string created by serialise_variable() back into the original
6620 scalar, hash ref, array ref or scalar ref. If the original variable was a Perl
6621 object, the same class is used on this system, if available.
6622
6623 =cut
6624 sub unserialise_variable
6625 {
6626 my @v = split(/,/, $_[0]);
6627 my $rv;
6628 if ($v[0] eq 'VAL') {
6629         @v = split(/,/, $_[0], -1);
6630         $rv = &un_urlize($v[1]);
6631         }
6632 elsif ($v[0] eq 'SCALAR') {
6633         local $r = &un_urlize($v[1]);
6634         $rv = \$r;
6635         }
6636 elsif ($v[0] eq 'ARRAY') {
6637         $rv = [ ];
6638         for(my $i=1; $i<@v; $i++) {
6639                 push(@$rv, &unserialise_variable(&un_urlize($v[$i])));
6640                 }
6641         }
6642 elsif ($v[0] eq 'HASH') {
6643         $rv = { };
6644         for(my $i=1; $i<@v; $i+=2) {
6645                 $rv->{&unserialise_variable(&un_urlize($v[$i]))} =
6646                         &unserialise_variable(&un_urlize($v[$i+1]));
6647                 }
6648         }
6649 elsif ($v[0] eq 'REF') {
6650         local $r = &unserialise_variable($v[1]);
6651         $rv = \$r;
6652         }
6653 elsif ($v[0] eq 'UNDEF') {
6654         $rv = undef;
6655         }
6656 elsif ($v[0] =~ /^OBJECT\s+(.*)$/) {
6657         # An object hash that we have to re-bless
6658         my $cls = $1;
6659         $rv = { };
6660         for(my $i=1; $i<@v; $i+=2) {
6661                 $rv->{&unserialise_variable(&un_urlize($v[$i]))} =
6662                         &unserialise_variable(&un_urlize($v[$i+1]));
6663                 }
6664         eval "use $cls";
6665         bless $rv, $cls;
6666         }
6667 return $rv;
6668 }
6669
6670 =head2 other_groups(user)
6671
6672 Returns a list of secondary groups a user is a member of, as a list of
6673 group names.
6674
6675 =cut
6676 sub other_groups
6677 {
6678 my ($user) = @_;
6679 my @rv;
6680 setgrent();
6681 while(my @g = getgrent()) {
6682         my @m = split(/\s+/, $g[3]);
6683         push(@rv, $g[2]) if (&indexof($user, @m) >= 0);
6684         }
6685 endgrent() if ($gconfig{'os_type'} ne 'hpux');
6686 return @rv;
6687 }
6688
6689 =head2 date_chooser_button(dayfield, monthfield, yearfield)
6690
6691 Returns HTML for a button that pops up a data chooser window. The parameters
6692 are :
6693
6694 =item dayfield - Name of the text field to place the day of the month into.
6695
6696 =item monthfield - Name of the select field to select the month of the year in, indexed from 1.
6697
6698 =item yearfield - Name of the text field to place the year into.
6699
6700 =cut
6701 sub date_chooser_button
6702 {
6703 return &theme_date_chooser_button(@_)
6704         if (defined(&theme_date_chooser_button));
6705 my ($w, $h) = (250, 225);
6706 if ($gconfig{'db_sizedate'}) {
6707         ($w, $h) = split(/x/, $gconfig{'db_sizedate'});
6708         }
6709 return "<input type=button onClick='window.dfield = form.$_[0]; window.mfield = form.$_[1]; window.yfield = form.$_[2]; window.open(\"$gconfig{'webprefix'}/date_chooser.cgi?day=\"+escape(dfield.value)+\"&month=\"+escape(mfield.selectedIndex)+\"&year=\"+yfield.value, \"chooser\", \"toolbar=no,menubar=no,scrollbars=yes,width=$w,height=$h\")' value=\"...\">\n";
6710 }
6711
6712 =head2 help_file(module, file)
6713
6714 Returns the path to a module's help file of some name, typically under the
6715 help directory with a .html extension.
6716
6717 =cut
6718 sub help_file
6719 {
6720 my $mdir = &module_root_directory($_[0]);
6721 my $dir = "$mdir/help";
6722 foreach my $o (@lang_order_list) {
6723         my $lang = "$dir/$_[1].$o.html";
6724         return $lang if (-r $lang);
6725         }
6726 return "$dir/$_[1].html";
6727 }
6728
6729 =head2 seed_random
6730
6731 Seeds the random number generator, if not already done in this script. On Linux
6732 this makes use of the current time, process ID and a read from /dev/urandom.
6733 On other systems, only the current time and process ID are used.
6734
6735 =cut
6736 sub seed_random
6737 {
6738 if (!$main::done_seed_random) {
6739         if (open(RANDOM, "/dev/urandom")) {
6740                 my $buf;
6741                 read(RANDOM, $buf, 4);
6742                 close(RANDOM);
6743                 srand(time() ^ $$ ^ $buf);
6744                 }
6745         else {
6746                 srand(time() ^ $$);
6747                 }
6748         $main::done_seed_random = 1;
6749         }
6750 }
6751
6752 =head2 disk_usage_kb(directory)
6753
6754 Returns the number of kB used by some directory and all subdirs. Implemented
6755 by calling the C<du -k> command.
6756
6757 =cut
6758 sub disk_usage_kb
6759 {
6760 my $dir = &translate_filename($_[0]);
6761 my $out;
6762 my $ex = &execute_command("du -sk ".quotemeta($dir), undef, \$out, undef, 0, 1);
6763 if ($ex) {
6764         &execute_command("du -s ".quotemeta($dir), undef, \$out, undef, 0, 1);
6765         }
6766 return $out =~ /^([0-9]+)/ ? $1 : "???";
6767 }
6768
6769 =head2 recursive_disk_usage(directory, [skip-regexp], [only-regexp])
6770
6771 Returns the number of bytes taken up by all files in some directory and all
6772 sub-directories, by summing up their lengths. The disk_usage_kb is more
6773 reflective of reality, as the filesystem typically pads file sizes to 1k or
6774 4k blocks.
6775
6776 =cut
6777 sub recursive_disk_usage
6778 {
6779 my $dir = &translate_filename($_[0]);
6780 my $skip = $_[1];
6781 my $only = $_[2];
6782 if (-l $dir) {
6783         return 0;
6784         }
6785 elsif (!-d $dir) {
6786         my @st = stat($dir);
6787         return $st[7];
6788         }
6789 else {
6790         my $rv = 0;
6791         opendir(DIR, $dir);
6792         my @files = readdir(DIR);
6793         closedir(DIR);
6794         foreach my $f (@files) {
6795                 next if ($f eq "." || $f eq "..");
6796                 next if ($skip && $f =~ /$skip/);
6797                 next if ($only && $f !~ /$only/);
6798                 $rv += &recursive_disk_usage("$dir/$f", $skip, $only);
6799                 }
6800         return $rv;
6801         }
6802 }
6803
6804 =head2 help_search_link(term, [ section, ... ] )
6805
6806 Returns HTML for a link to the man module for searching local and online
6807 docs for various search terms. The term parameter can either be a single
6808 word like 'bind', or a space-separated list of words. This function is typically
6809 used by modules that want to refer users to additional documentation in man
6810 pages or local system doc files.
6811
6812 =cut
6813 sub help_search_link
6814 {
6815 if (&foreign_available("man") && !$tconfig{'nosearch'}) {
6816         my $for = &urlize(shift(@_));
6817         return "<a href='$gconfig{'webprefix'}/man/search.cgi?".
6818                join("&", map { "section=$_" } @_)."&".
6819                "for=$for&exact=1&check=".&get_module_name()."'>".
6820                $text{'helpsearch'}."</a>\n";
6821         }
6822 else {
6823         return "";
6824         }
6825 }
6826
6827 =head2 make_http_connection(host, port, ssl, method, page, [&headers])
6828
6829 Opens a connection to some HTTP server, maybe through a proxy, and returns
6830 a handle object. The handle can then be used to send additional headers
6831 and read back a response. If anything goes wrong, returns an error string.
6832 The parameters are :
6833
6834 =item host - Hostname or IP address of the webserver to connect to.
6835
6836 =item port - HTTP port number to connect to.
6837
6838 =item ssl - Set to 1 to connect in SSL mode.
6839
6840 =item method - HTTP method, like GET or POST.
6841
6842 =item page - Page to request on the webserver, like /foo/index.html
6843
6844 =item headers - Array ref of additional HTTP headers, each of which is a 2-element array ref.
6845
6846 =cut
6847 sub make_http_connection
6848 {
6849 my ($host, $port, $ssl, $method, $page, $headers) = @_;
6850 my $htxt;
6851 if ($headers) {
6852         foreach my $h (@$headers) {
6853                 $htxt .= $h->[0].": ".$h->[1]."\r\n";
6854                 }
6855         $htxt .= "\r\n";
6856         }
6857 if (&is_readonly_mode()) {
6858         return "HTTP connections not allowed in readonly mode";
6859         }
6860 my $rv = { 'fh' => time().$$ };
6861 if ($ssl) {
6862         # Connect using SSL
6863         eval "use Net::SSLeay";
6864         $@ && return $text{'link_essl'};
6865         eval "Net::SSLeay::SSLeay_add_ssl_algorithms()";
6866         eval "Net::SSLeay::load_error_strings()";
6867         $rv->{'ssl_ctx'} = Net::SSLeay::CTX_new() ||
6868                 return "Failed to create SSL context";
6869         $rv->{'ssl_con'} = Net::SSLeay::new($rv->{'ssl_ctx'}) ||
6870                 return "Failed to create SSL connection";
6871         my $connected;
6872         if ($gconfig{'http_proxy'} =~ /^http:\/\/(\S+):(\d+)/ &&
6873             !&no_proxy($host)) {
6874                 # Via proxy
6875                 my $error;
6876                 &open_socket($1, $2, $rv->{'fh'}, \$error);
6877                 if (!$error) {
6878                         # Connected OK
6879                         my $fh = $rv->{'fh'};
6880                         print $fh "CONNECT $host:$port HTTP/1.0\r\n";
6881                         if ($gconfig{'proxy_user'}) {
6882                                 my $auth = &encode_base64(
6883                                    "$gconfig{'proxy_user'}:".
6884                                    "$gconfig{'proxy_pass'}");
6885                                 $auth =~ tr/\r\n//d;
6886                                 print $fh "Proxy-Authorization: Basic $auth\r\n";
6887                                 }
6888                         print $fh "\r\n";
6889                         my $line = <$fh>;
6890                         if ($line =~ /^HTTP(\S+)\s+(\d+)\s+(.*)/) {
6891                                 return "Proxy error : $3" if ($2 != 200);
6892                                 }
6893                         else {
6894                                 return "Proxy error : $line";
6895                                 }
6896                         $line = <$fh>;
6897                         $connected = 1;
6898                         }
6899                 elsif (!$gconfig{'proxy_fallback'}) {
6900                         # Connection to proxy failed - give up
6901                         return $error;
6902                         }
6903                 }
6904         if (!$connected) {
6905                 # Direct connection
6906                 my $error;
6907                 &open_socket($host, $port, $rv->{'fh'}, \$error);
6908                 return $error if ($error);
6909                 }
6910         Net::SSLeay::set_fd($rv->{'ssl_con'}, fileno($rv->{'fh'}));
6911         Net::SSLeay::connect($rv->{'ssl_con'}) ||
6912                 return "SSL connect() failed";
6913         my $rtxt = "$method $page HTTP/1.0\r\n".$htxt;
6914         Net::SSLeay::write($rv->{'ssl_con'}, $rtxt);
6915         }
6916 else {
6917         # Plain HTTP request
6918         my $connected;
6919         if ($gconfig{'http_proxy'} =~ /^http:\/\/(\S+):(\d+)/ &&
6920             !&no_proxy($host)) {
6921                 # Via a proxy
6922                 my $error;
6923                 &open_socket($1, $2, $rv->{'fh'}, \$error);
6924                 if (!$error) {
6925                         # Connected OK
6926                         $connected = 1;
6927                         my $fh = $rv->{'fh'};
6928                         my $rtxt = $method." ".
6929                                    "http://$host:$port$page HTTP/1.0\r\n";
6930                         if ($gconfig{'proxy_user'}) {
6931                                 my $auth = &encode_base64(
6932                                    "$gconfig{'proxy_user'}:".
6933                                    "$gconfig{'proxy_pass'}");
6934                                 $auth =~ tr/\r\n//d;
6935                                 $rtxt .= "Proxy-Authorization: Basic $auth\r\n";
6936                                 }
6937                         $rtxt .= $htxt;
6938                         print $fh $rtxt;
6939                         }
6940                 elsif (!$gconfig{'proxy_fallback'}) {
6941                         return $error;
6942                         }
6943                 }
6944         if (!$connected) {
6945                 # Connecting directly
6946                 my $error;
6947                 &open_socket($host, $port, $rv->{'fh'}, \$error);
6948                 return $error if ($error);
6949                 my $fh = $rv->{'fh'};
6950                 my $rtxt = "$method $page HTTP/1.0\r\n".$htxt;
6951                 print $fh $rtxt;
6952                 }
6953         }
6954 return $rv;
6955 }
6956
6957 =head2 read_http_connection(&handle, [bytes])
6958
6959 Reads either one line or up to the specified number of bytes from the handle,
6960 originally supplied by make_http_connection. 
6961
6962 =cut
6963 sub read_http_connection
6964 {
6965 my ($h) = @_;
6966 my $rv;
6967 if ($h->{'ssl_con'}) {
6968         if (!$_[1]) {
6969                 my ($idx, $more);
6970                 while(($idx = index($h->{'buffer'}, "\n")) < 0) {
6971                         # need to read more..
6972                         if (!($more = Net::SSLeay::read($h->{'ssl_con'}))) {
6973                                 # end of the data
6974                                 $rv = $h->{'buffer'};
6975                                 delete($h->{'buffer'});
6976                                 return $rv;
6977                                 }
6978                         $h->{'buffer'} .= $more;
6979                         }
6980                 $rv = substr($h->{'buffer'}, 0, $idx+1);
6981                 $h->{'buffer'} = substr($h->{'buffer'}, $idx+1);
6982                 }
6983         else {
6984                 if (length($h->{'buffer'})) {
6985                         $rv = $h->{'buffer'};
6986                         delete($h->{'buffer'});
6987                         }
6988                 else {
6989                         $rv = Net::SSLeay::read($h->{'ssl_con'}, $_[1]);
6990                         }
6991                 }
6992         }
6993 else {
6994         if ($_[1]) {
6995                 read($h->{'fh'}, $rv, $_[1]) > 0 || return undef;
6996                 }
6997         else {
6998                 my $fh = $h->{'fh'};
6999                 $rv = <$fh>;
7000                 }
7001         }
7002 $rv = undef if ($rv eq "");
7003 return $rv;
7004 }
7005
7006 =head2 write_http_connection(&handle, [data+])
7007
7008 Writes the given data to the given HTTP connection handle.
7009
7010 =cut
7011 sub write_http_connection
7012 {
7013 my $h = shift(@_);
7014 my $fh = $h->{'fh'};
7015 my $allok = 1;
7016 if ($h->{'ssl_ctx'}) {
7017         foreach my $s (@_) {
7018                 my $ok = Net::SSLeay::write($h->{'ssl_con'}, $s);
7019                 $allok = 0 if (!$ok);
7020                 }
7021         }
7022 else {
7023         my $ok = (print $fh @_);
7024         $allok = 0 if (!$ok);
7025         }
7026 return $allok;
7027 }
7028
7029 =head2 close_http_connection(&handle)
7030
7031 Closes a connection to an HTTP server, identified by the given handle.
7032
7033 =cut
7034 sub close_http_connection
7035 {
7036 my ($h) = @_;
7037 close($h->{'fh'});
7038 }
7039
7040 =head2 clean_environment
7041
7042 Deletes any environment variables inherited from miniserv so that they
7043 won't be passed to programs started by webmin. This is useful when calling
7044 programs that check for CGI-related environment variables and modify their
7045 behaviour, and to avoid passing sensitive variables to un-trusted programs.
7046
7047 =cut
7048 sub clean_environment
7049 {
7050 %UNCLEAN_ENV = %ENV;
7051 foreach my $k (keys %ENV) {
7052         if ($k =~ /^(HTTP|VIRTUALSERVER|QUOTA|USERADMIN)_/) {
7053                 delete($ENV{$k});
7054                 }
7055         }
7056 foreach my $e ('WEBMIN_CONFIG', 'SERVER_NAME', 'CONTENT_TYPE', 'REQUEST_URI',
7057             'PATH_INFO', 'WEBMIN_VAR', 'REQUEST_METHOD', 'GATEWAY_INTERFACE',
7058             'QUERY_STRING', 'REMOTE_USER', 'SERVER_SOFTWARE', 'SERVER_PROTOCOL',
7059             'REMOTE_HOST', 'SERVER_PORT', 'DOCUMENT_ROOT', 'SERVER_ROOT',
7060             'MINISERV_CONFIG', 'SCRIPT_NAME', 'SERVER_ADMIN', 'CONTENT_LENGTH',
7061             'HTTPS', 'FOREIGN_MODULE_NAME', 'FOREIGN_ROOT_DIRECTORY',
7062             'SCRIPT_FILENAME', 'PATH_TRANSLATED', 'BASE_REMOTE_USER',
7063             'DOCUMENT_REALROOT', 'MINISERV_CONFIG', 'MYSQL_PWD',
7064             'MINISERV_PID') {
7065         delete($ENV{$e});
7066         }
7067 }
7068
7069 =head2 reset_environment
7070
7071 Puts the environment back how it was before clean_environment was callled.
7072
7073 =cut
7074 sub reset_environment
7075 {
7076 if (%UNCLEAN_ENV) {
7077         foreach my $k (keys %UNCLEAN_ENV) {
7078                 $ENV{$k} = $UNCLEAN_ENV{$k};
7079                 }
7080         undef(%UNCLEAN_ENV);
7081         }
7082 }
7083
7084 =head2 clean_language
7085
7086 Sets all language and locale-related environment variables to US english, to
7087 ensure that commands run output in the expected language. Can be reverted by
7088 reset_environment.
7089
7090 =cut
7091 sub clean_language
7092 {
7093 %UNCLEAN_ENV = %ENV;
7094 $ENV{'LANG'} = '';
7095 $ENV{'LANGUAGE'} = '';
7096 $ENV{'LC_ALL'} = '';
7097 $ENV{'LOCALE'} = '';
7098 }
7099
7100 =head2 progress_callback
7101
7102 Never called directly, but useful for passing to &http_download to print
7103 out progress of an HTTP request.
7104
7105 =cut
7106 sub progress_callback
7107 {
7108 if (defined(&theme_progress_callback)) {
7109         # Call the theme override
7110         return &theme_progress_callback(@_);
7111         }
7112 if ($_[0] == 2) {
7113         # Got size
7114         print $progress_callback_prefix;
7115         if ($_[1]) {
7116                 $progress_size = $_[1];
7117                 $progress_step = int($_[1] / 10);
7118                 print &text('progress_size2', $progress_callback_url,
7119                             &nice_size($progress_size)),"<br>\n";
7120                 }
7121         else {
7122                 $progress_size = undef;
7123                 print &text('progress_nosize', $progress_callback_url),"<br>\n";
7124                 }
7125         $last_progress_time = $last_progress_size = undef;
7126         }
7127 elsif ($_[0] == 3) {
7128         # Got data update
7129         my $sp = $progress_callback_prefix.("&nbsp;" x 5);
7130         if ($progress_size) {
7131                 # And we have a size to compare against
7132                 my $st = int(($_[1] * 10) / $progress_size);
7133                 my $time_now = time();
7134                 if ($st != $progress_step ||
7135                     $time_now - $last_progress_time > 60) {
7136                         # Show progress every 10% or 60 seconds
7137                         print $sp,&text('progress_datan', &nice_size($_[1]),
7138                                         int($_[1]*100/$progress_size)),"<br>\n";
7139                         $last_progress_time = $time_now;
7140                         }
7141                 $progress_step = $st;
7142                 }
7143         else {
7144                 # No total size .. so only show in 100k jumps
7145                 if ($_[1] > $last_progress_size+100*1024) {
7146                         print $sp,&text('progress_data2n',
7147                                         &nice_size($_[1])),"<br>\n";
7148                         $last_progress_size = $_[1];
7149                         }
7150                 }
7151         }
7152 elsif ($_[0] == 4) {
7153         # All done downloading
7154         print $progress_callback_prefix,&text('progress_done'),"<br>\n";
7155         }
7156 elsif ($_[0] == 5) {
7157         # Got new location after redirect
7158         $progress_callback_url = $_[1];
7159         }
7160 elsif ($_[0] == 6) {
7161         # URL is in cache
7162         $progress_callback_url = $_[1];
7163         print &text('progress_incache', $progress_callback_url),"<br>\n";
7164         }
7165 }
7166
7167 =head2 switch_to_remote_user
7168
7169 Changes the user and group of the current process to that of the unix user
7170 with the same name as the current webmin login, or fails if there is none.
7171 This should be called by Usermin module scripts that only need to run with
7172 limited permissions.
7173
7174 =cut
7175 sub switch_to_remote_user
7176 {
7177 @remote_user_info = $remote_user ? getpwnam($remote_user) :
7178                                    getpwuid($<);
7179 @remote_user_info || &error(&text('switch_remote_euser', $remote_user));
7180 &create_missing_homedir(\@remote_user_info);
7181 if ($< == 0) {
7182         &switch_to_unix_user(\@remote_user_info);
7183         $ENV{'USER'} = $ENV{'LOGNAME'} = $remote_user;
7184         $ENV{'HOME'} = $remote_user_info[7];
7185         }
7186 # Export global variables to caller
7187 if ($main::export_to_caller) {
7188         my ($callpkg) = caller();
7189         eval "\@${callpkg}::remote_user_info = \@remote_user_info";
7190         }
7191 }
7192
7193 =head2 switch_to_unix_user(&user-details)
7194
7195 Switches the current process to the UID and group ID from the given list
7196 of user details, which must be in the format returned by getpwnam.
7197
7198 =cut
7199 sub switch_to_unix_user
7200 {
7201 my ($uinfo) = @_;
7202 if (!defined($uinfo->[0])) {
7203         # No username given, so just use given GID
7204         ($(, $)) = ( $uinfo->[3], "$uinfo->[3] $uinfo->[3]" );
7205         }
7206 else {
7207         # Use all groups from user
7208         ($(, $)) = ( $uinfo->[3],
7209                      "$uinfo->[3] ".join(" ", $uinfo->[3],
7210                                          &other_groups($uinfo->[0])) );
7211         }
7212 eval {
7213         POSIX::setuid($uinfo->[2]);
7214         };
7215 if ($< != $uinfo->[2] || $> != $uinfo->[2]) {
7216         ($>, $<) = ( $uinfo->[2], $uinfo->[2] );
7217         }
7218 }
7219
7220 =head2 eval_as_unix_user(username, &code)
7221
7222 Runs some code fragment with the effective UID and GID switch to that
7223 of the given Unix user, so that file IO takes place with his permissions.
7224
7225 =cut
7226
7227 sub eval_as_unix_user
7228 {
7229 my ($user, $code) = @_;
7230 my @uinfo = getpwnam($user);
7231 if (!scalar(@uinfo)) {
7232         &error("eval_as_unix_user called with invalid user $user");
7233         }
7234 $) = $uinfo[3]." ".join(" ", $uinfo[3], &other_groups($user));
7235 $> = $uinfo[2];
7236 my @rv;
7237 eval {
7238         local $main::error_must_die = 1;
7239         @rv = &$code();
7240         };
7241 my $err = $@;
7242 $) = 0;
7243 $> = 0;
7244 if ($err) {
7245         $err =~ s/\s+at\s+(\/\S+)\s+line\s+(\d+)\.?//;
7246         &error($err);
7247         }
7248 return wantarray ? @rv : $rv[0];
7249 }
7250
7251 =head2 create_user_config_dirs
7252
7253 Creates per-user config directories and sets $user_config_directory and
7254 $user_module_config_directory to them. Also reads per-user module configs
7255 into %userconfig. This should be called by Usermin module scripts that need
7256 to store per-user preferences or other settings.
7257
7258 =cut
7259 sub create_user_config_dirs
7260 {
7261 return if (!$gconfig{'userconfig'});
7262 my @uinfo = @remote_user_info ? @remote_user_info : getpwnam($remote_user);
7263 return if (!@uinfo || !$uinfo[7]);
7264 &create_missing_homedir(\@uinfo);
7265 $user_config_directory = "$uinfo[7]/$gconfig{'userconfig'}";
7266 if (!-d $user_config_directory) {
7267         mkdir($user_config_directory, 0700) ||
7268                 &error("Failed to create $user_config_directory : $!");
7269         if ($< == 0 && $uinfo[2]) {
7270                 chown($uinfo[2], $uinfo[3], $user_config_directory);
7271                 }
7272         }
7273 if (&get_module_name()) {
7274         $user_module_config_directory = $user_config_directory."/".
7275                                         &get_module_name();
7276         if (!-d $user_module_config_directory) {
7277                 mkdir($user_module_config_directory, 0700) ||
7278                         &error("Failed to create $user_module_config_directory : $!");
7279                 if ($< == 0 && $uinfo[2]) {
7280                         chown($uinfo[2], $uinfo[3], $user_config_directory);
7281                         }
7282                 }
7283         undef(%userconfig);
7284         &read_file_cached("$module_root_directory/defaultuconfig",
7285                           \%userconfig);
7286         &read_file_cached("$module_config_directory/uconfig", \%userconfig);
7287         &read_file_cached("$user_module_config_directory/config",
7288                           \%userconfig);
7289         }
7290
7291 # Export global variables to caller
7292 if ($main::export_to_caller) {
7293         my ($callpkg) = caller();
7294         foreach my $v ('$user_config_directory',
7295                        '$user_module_config_directory', '%userconfig') {
7296                 my ($vt, $vn) = split('', $v, 2);
7297                 eval "${vt}${callpkg}::${vn} = ${vt}${vn}";
7298                 }
7299         }
7300 }
7301
7302 =head2 create_missing_homedir(&uinfo)
7303
7304 If auto homedir creation is enabled, create one for this user if needed.
7305 For internal use only.
7306
7307 =cut
7308 sub create_missing_homedir
7309 {
7310 my ($uinfo) = @_;
7311 if (!-e $uinfo->[7] && $gconfig{'create_homedir'}) {
7312         # Use has no home dir .. make one
7313         system("mkdir -p ".quotemeta($uinfo->[7]));
7314         chown($uinfo->[2], $uinfo->[3], $uinfo->[7]);
7315         if ($gconfig{'create_homedir_perms'} ne '') {
7316                 chmod(oct($gconfig{'create_homedir_perms'}), $uinfo->[7]);
7317                 }
7318         }
7319 }
7320
7321 =head2 filter_javascript(text)
7322
7323 Disables all javascript <script>, onClick= and so on tags in the given HTML,
7324 and returns the new HTML. Useful for displaying HTML from an un-trusted source.
7325
7326 =cut
7327 sub filter_javascript
7328 {
7329 my ($rv) = @_;
7330 $rv =~ s/<\s*script[^>]*>([\000-\377]*?)<\s*\/script\s*>//gi;
7331 $rv =~ s/(on(Abort|Blur|Change|Click|DblClick|DragDrop|Error|Focus|KeyDown|KeyPress|KeyUp|Load|MouseDown|MouseMove|MouseOut|MouseOver|MouseUp|Move|Reset|Resize|Select|Submit|Unload)=)/x$1/gi;
7332 $rv =~ s/(javascript:)/x$1/gi;
7333 $rv =~ s/(vbscript:)/x$1/gi;
7334 return $rv;
7335 }
7336
7337 =head2 resolve_links(path)
7338
7339 Given a path that may contain symbolic links, returns the real path.
7340
7341 =cut
7342 sub resolve_links
7343 {
7344 my ($path) = @_;
7345 $path =~ s/\/+/\//g;
7346 $path =~ s/\/$// if ($path ne "/");
7347 my @p = split(/\/+/, $path);
7348 shift(@p);
7349 for(my $i=0; $i<@p; $i++) {
7350         my $sofar = "/".join("/", @p[0..$i]);
7351         my $lnk = readlink($sofar);
7352         if ($lnk eq $sofar) {
7353                 # Link to itself! Cannot do anything more really ..
7354                 last;
7355                 }
7356         elsif ($lnk =~ /^\//) {
7357                 # Link is absolute..
7358                 return &resolve_links($lnk."/".join("/", @p[$i+1 .. $#p]));
7359                 }
7360         elsif ($lnk) {
7361                 # Link is relative
7362                 return &resolve_links("/".join("/", @p[0..$i-1])."/".$lnk."/".join("/", @p[$i+1 .. $#p]));
7363                 }
7364         }
7365 return $path;
7366 }
7367
7368 =head2 simplify_path(path, bogus)
7369
7370 Given a path, maybe containing elements ".." and "." , convert it to a
7371 clean, absolute form. Returns undef if this is not possible.
7372
7373 =cut
7374 sub simplify_path
7375 {
7376 my ($dir) = @_;
7377 $dir =~ s/^\/+//g;
7378 $dir =~ s/\/+$//g;
7379 my @bits = split(/\/+/, $dir);
7380 my @fixedbits = ();
7381 $_[1] = 0;
7382 foreach my $b (@bits) {
7383         if ($b eq ".") {
7384                 # Do nothing..
7385                 }
7386         elsif ($b eq "..") {
7387                 # Remove last dir
7388                 if (scalar(@fixedbits) == 0) {
7389                         # Cannot! Already at root!
7390                         return undef;
7391                         }
7392                 pop(@fixedbits);
7393                 }
7394         else {
7395                 # Add dir to list
7396                 push(@fixedbits, $b);
7397                 }
7398         }
7399 return "/".join('/', @fixedbits);
7400 }
7401
7402 =head2 same_file(file1, file2)
7403
7404 Returns 1 if two files are actually the same
7405
7406 =cut
7407 sub same_file
7408 {
7409 return 1 if ($_[0] eq $_[1]);
7410 return 0 if ($_[0] !~ /^\// || $_[1] !~ /^\//);
7411 my @stat1 = $stat_cache{$_[0]} ? @{$stat_cache{$_[0]}}
7412                                : (@{$stat_cache{$_[0]}} = stat($_[0]));
7413 my @stat2 = $stat_cache{$_[1]} ? @{$stat_cache{$_[1]}}
7414                                : (@{$stat_cache{$_[1]}} = stat($_[1]));
7415 return 0 if (!@stat1 || !@stat2);
7416 return $stat1[0] == $stat2[0] && $stat1[1] == $stat2[1];
7417 }
7418
7419 =head2 flush_webmin_caches
7420
7421 Clears all in-memory and on-disk caches used by Webmin.
7422
7423 =cut
7424 sub flush_webmin_caches
7425 {
7426 undef(%main::read_file_cache);
7427 undef(%main::acl_hash_cache);
7428 undef(%main::acl_array_cache);
7429 undef(%main::has_command_cache);
7430 undef(@main::list_languages_cache);
7431 undef($main::got_list_usermods_cache);
7432 undef(@main::list_usermods_cache);
7433 undef(%main::foreign_installed_cache);
7434 unlink("$config_directory/module.infos.cache");
7435 &get_all_module_infos();
7436 }
7437
7438 =head2 list_usermods
7439
7440 Returns a list of additional module restrictions. For internal use in
7441 Usermin only.
7442
7443 =cut
7444 sub list_usermods
7445 {
7446 if (!$main::got_list_usermods_cache) {
7447         @main::list_usermods_cache = ( );
7448         local $_;
7449         open(USERMODS, "$config_directory/usermin.mods");
7450         while(<USERMODS>) {
7451                 if (/^([^:]+):(\+|-|):(.*)/) {
7452                         push(@main::list_usermods_cache,
7453                              [ $1, $2, [ split(/\s+/, $3) ] ]);
7454                         }
7455                 }
7456         close(USERMODS);
7457         $main::got_list_usermods_cache = 1;
7458         }
7459 return @main::list_usermods_cache;
7460 }
7461
7462 =head2 available_usermods(&allmods, &usermods)
7463
7464 Returns a list of modules that are available to the given user, based
7465 on usermod additional/subtractions. For internal use by Usermin only.
7466
7467 =cut
7468 sub available_usermods
7469 {
7470 return @{$_[0]} if (!@{$_[1]});
7471
7472 my %mods = map { $_->{'dir'}, 1 } @{$_[0]};
7473 my @uinfo = @remote_user_info;
7474 @uinfo = getpwnam($remote_user) if (!@uinfo);
7475 foreach my $u (@{$_[1]}) {
7476         my $applies;
7477         if ($u->[0] eq "*" || $u->[0] eq $remote_user) {
7478                 $applies++;
7479                 }
7480         elsif ($u->[0] =~ /^\@(.*)$/) {
7481                 # Check for group membership
7482                 my @ginfo = getgrnam($1);
7483                 $applies++ if (@ginfo && ($ginfo[2] == $uinfo[3] ||
7484                         &indexof($remote_user, split(/\s+/, $ginfo[3])) >= 0));
7485                 }
7486         elsif ($u->[0] =~ /^\//) {
7487                 # Check users and groups in file
7488                 local $_;
7489                 open(USERFILE, $u->[0]);
7490                 while(<USERFILE>) {
7491                         tr/\r\n//d;
7492                         if ($_ eq $remote_user) {
7493                                 $applies++;
7494                                 }
7495                         elsif (/^\@(.*)$/) {
7496                                 my @ginfo = getgrnam($1);
7497                                 $applies++
7498                                   if (@ginfo && ($ginfo[2] == $uinfo[3] ||
7499                                       &indexof($remote_user,
7500                                                split(/\s+/, $ginfo[3])) >= 0));
7501                                 }
7502                         last if ($applies);
7503                         }
7504                 close(USERFILE);
7505                 }
7506         if ($applies) {
7507                 if ($u->[1] eq "+") {
7508                         map { $mods{$_}++ } @{$u->[2]};
7509                         }
7510                 elsif ($u->[1] eq "-") {
7511                         map { delete($mods{$_}) } @{$u->[2]};
7512                         }
7513                 else {
7514                         undef(%mods);
7515                         map { $mods{$_}++ } @{$u->[2]};
7516                         }
7517                 }
7518         }
7519 return grep { $mods{$_->{'dir'}} } @{$_[0]};
7520 }
7521
7522 =head2 get_available_module_infos(nocache)
7523
7524 Returns a list of modules available to the current user, based on
7525 operating system support, access control and usermod restrictions. Useful
7526 in themes that need to display a list of modules the user can use.
7527 Each element of the returned array is a hash reference in the same format as
7528 returned by get_module_info.
7529
7530 =cut
7531 sub get_available_module_infos
7532 {
7533 my (%acl, %uacl);
7534 &read_acl(\%acl, \%uacl, [ $base_remote_user ]);
7535 my $risk = $gconfig{'risk_'.$base_remote_user};
7536 my @rv;
7537 foreach my $minfo (&get_all_module_infos($_[0])) {
7538         next if (!&check_os_support($minfo));
7539         if ($risk) {
7540                 # Check module risk level
7541                 next if ($risk ne 'high' && $minfo->{'risk'} &&
7542                          $minfo->{'risk'} !~ /$risk/);
7543                 }
7544         else {
7545                 # Check user's ACL
7546                 next if (!$acl{$base_remote_user,$minfo->{'dir'}} &&
7547                          !$acl{$base_remote_user,"*"});
7548                 }
7549         next if (&is_readonly_mode() && !$minfo->{'readonly'});
7550         push(@rv, $minfo);
7551         }
7552
7553 # Check usermod restrictions
7554 my @usermods = &list_usermods();
7555 @rv = sort { $a->{'desc'} cmp $b->{'desc'} }
7556             &available_usermods(\@rv, \@usermods);
7557
7558 # Check RBAC restrictions
7559 my @rbacrv;
7560 foreach my $m (@rv) {
7561         if (&supports_rbac($m->{'dir'}) &&
7562             &use_rbac_module_acl(undef, $m->{'dir'})) {
7563                 local $rbacs = &get_rbac_module_acl($remote_user,
7564                                                     $m->{'dir'});
7565                 if ($rbacs) {
7566                         # RBAC allows
7567                         push(@rbacrv, $m);
7568                         }
7569                 }
7570         else {
7571                 # Module or system doesn't support RBAC
7572                 push(@rbacrv, $m) if (!$gconfig{'rbacdeny_'.$base_remote_user});
7573                 }
7574         }
7575
7576 # Check theme vetos
7577 my @themerv;
7578 if (defined(&theme_foreign_available)) {
7579         foreach my $m (@rbacrv) {
7580                 if (&theme_foreign_available($m->{'dir'})) {
7581                         push(@themerv, $m);
7582                         }
7583                 }
7584         }
7585 else {
7586         @themerv = @rbacrv;
7587         }
7588
7589 # Check licence module vetos
7590 my @licrv;
7591 if ($main::licence_module) {
7592         foreach my $m (@themerv) {
7593                 if (&foreign_call($main::licence_module,
7594                                   "check_module_licence", $m->{'dir'})) {       
7595                         push(@licrv, $m);
7596                         }
7597                 }
7598         }
7599 else {  
7600         @licrv = @themerv;
7601         }
7602
7603 return @licrv;
7604 }
7605
7606 =head2 get_visible_module_infos(nocache)
7607
7608 Like get_available_module_infos, but excludes hidden modules from the list.
7609 Each element of the returned array is a hash reference in the same format as
7610 returned by get_module_info.
7611
7612 =cut
7613 sub get_visible_module_infos
7614 {
7615 my ($nocache) = @_;
7616 my $pn = &get_product_name();
7617 return grep { !$_->{'hidden'} &&
7618               !$_->{$pn.'_hidden'} } &get_available_module_infos($nocache);
7619 }
7620
7621 =head2 get_visible_modules_categories(nocache)
7622
7623 Returns a list of Webmin module categories, each of which is a hash ref
7624 with 'code', 'desc' and 'modules' keys. The modules value is an array ref
7625 of modules in the category, in the format returned by get_module_info.
7626 Un-used modules are automatically assigned to the 'unused' category, and
7627 those with no category are put into 'others'.
7628
7629 =cut
7630 sub get_visible_modules_categories
7631 {
7632 my ($nocache) = @_;
7633 my @mods = &get_visible_module_infos($nocache);
7634 my @unmods;
7635 if (&get_product_name() eq 'webmin') {
7636         @unmods = grep { $_->{'installed'} eq '0' } @mods;
7637         @mods = grep { $_->{'installed'} ne '0' } @mods;
7638         }
7639 my %cats = &list_categories(\@mods);
7640 my @rv;
7641 foreach my $c (keys %cats) {
7642         my $cat = { 'code' => $c || 'other',
7643                     'desc' => $cats{$c} };
7644         $cat->{'modules'} = [ grep { $_->{'category'} eq $c } @mods ];
7645         push(@rv, $cat);
7646         }
7647 @rv = sort { ($b->{'code'} eq "others" ? "" : $b->{'code'}) cmp
7648              ($a->{'code'} eq "others" ? "" : $a->{'code'}) } @rv;
7649 if (@unmods) {
7650         # Add un-installed modules in magic category
7651         my $cat = { 'code' => 'unused',
7652                     'desc' => $text{'main_unused'},
7653                     'unused' => 1,
7654                     'modules' => \@unmods };
7655         push(@rv, $cat);
7656         }
7657 return @rv;
7658 }
7659
7660 =head2 is_under_directory(directory, file)
7661
7662 Returns 1 if the given file is under the specified directory, 0 if not.
7663 Symlinks are taken into account in the file to find it's 'real' location.
7664
7665 =cut
7666 sub is_under_directory
7667 {
7668 my ($dir, $file) = @_;
7669 return 1 if ($dir eq "/");
7670 return 0 if ($file =~ /\.\./);
7671 my $ld = &resolve_links($dir);
7672 if ($ld ne $dir) {
7673         return &is_under_directory($ld, $file);
7674         }
7675 my $lp = &resolve_links($file);
7676 if ($lp ne $file) {
7677         return &is_under_directory($dir, $lp);
7678         }
7679 return 0 if (length($file) < length($dir));
7680 return 1 if ($dir eq $file);
7681 $dir =~ s/\/*$/\//;
7682 return substr($file, 0, length($dir)) eq $dir;
7683 }
7684
7685 =head2 parse_http_url(url, [basehost, baseport, basepage, basessl])
7686
7687 Given an absolute URL, returns the host, port, page and ssl flag components.
7688 If a username and password are given before the hostname, return those too.
7689 Relative URLs can also be parsed, if the base information is provided.
7690
7691 =cut
7692 sub parse_http_url
7693 {
7694 if ($_[0] =~ /^(http|https):\/\/([^\@]+\@)?\[([^\]]+)\](:(\d+))?(\/\S*)?$/ ||
7695     $_[0] =~ /^(http|https):\/\/([^\@]+\@)?([^:\/]+)(:(\d+))?(\/\S*)?$/) {
7696         # An absolute URL
7697         my $ssl = $1 eq 'https';
7698         my @rv = ($3, $4 ? $5 : $ssl ? 443 : 80, $6 || "/", $ssl);
7699         if ($2 =~ /^([^:]+):(\S+)\@/) {
7700                 push(@rv, $1, $2);
7701                 }
7702         return @rv;
7703         }
7704 elsif (!$_[1]) {
7705         # Could not parse
7706         return undef;
7707         }
7708 elsif ($_[0] =~ /^\/\S*$/) {
7709         # A relative to the server URL
7710         return ($_[1], $_[2], $_[0], $_[4], $_[5], $_[6]);
7711         }
7712 else {
7713         # A relative to the directory URL
7714         my $page = $_[3];
7715         $page =~ s/[^\/]+$//;
7716         return ($_[1], $_[2], $page.$_[0], $_[4], $_[5], $_[6]);
7717         }
7718 }
7719
7720 =head2 check_clicks_function
7721
7722 Returns HTML for a JavaScript function called check_clicks that returns
7723 true when first called, but false subsequently. Useful on onClick for
7724 critical buttons. Deprecated, as this method of preventing duplicate actions
7725 is un-reliable.
7726
7727 =cut
7728 sub check_clicks_function
7729 {
7730 return <<EOF;
7731 <script>
7732 clicks = 0;
7733 function check_clicks(form)
7734 {
7735 clicks++;
7736 if (clicks == 1)
7737         return true;
7738 else {
7739         if (form != null) {
7740                 for(i=0; i<form.length; i++)
7741                         form.elements[i].disabled = true;
7742                 }
7743         return false;
7744         }
7745 }
7746 </script>
7747 EOF
7748 }
7749
7750 =head2 load_entities_map
7751
7752 Returns a hash ref containing mappings between HTML entities (like ouml) and
7753 ascii values (like 246). Mainly for internal use.
7754
7755 =cut
7756 sub load_entities_map
7757 {
7758 if (!%entities_map_cache) {
7759         local $_;
7760         open(EMAP, "$root_directory/entities_map.txt");
7761         while(<EMAP>) {
7762                 if (/^(\d+)\s+(\S+)/) {
7763                         $entities_map_cache{$2} = $1;
7764                         }
7765                 }
7766         close(EMAP);
7767         }
7768 return \%entities_map_cache;
7769 }
7770
7771 =head2 entities_to_ascii(string)
7772
7773 Given a string containing HTML entities like &ouml; and &#55;, replace them
7774 with their ASCII equivalents.
7775
7776 =cut
7777 sub entities_to_ascii
7778 {
7779 my ($str) = @_;
7780 my $emap = &load_entities_map();
7781 $str =~ s/&([a-z]+);/chr($emap->{$1})/ge;
7782 $str =~ s/&#(\d+);/chr($1)/ge;
7783 return $str;
7784 }
7785
7786 =head2 get_product_name
7787
7788 Returns either 'webmin' or 'usermin', depending on which program the current
7789 module is in. Useful for modules that can be installed into either.
7790
7791 =cut
7792 sub get_product_name
7793 {
7794 return $gconfig{'product'} if (defined($gconfig{'product'}));
7795 return defined($gconfig{'userconfig'}) ? 'usermin' : 'webmin';
7796 }
7797
7798 =head2 get_charset
7799
7800 Returns the character set for the current language, such as iso-8859-1.
7801
7802 =cut
7803 sub get_charset
7804 {
7805 my $charset = defined($gconfig{'charset'}) ? $gconfig{'charset'} :
7806                  $current_lang_info->{'charset'} ?
7807                  $current_lang_info->{'charset'} : $default_charset;
7808 return $charset;
7809 }
7810
7811 =head2 get_display_hostname
7812
7813 Returns the system's hostname for UI display purposes. This may be different
7814 from the actual hostname if you administrator has configured it so in the
7815 Webmin Configuration module.
7816
7817 =cut
7818 sub get_display_hostname
7819 {
7820 if ($gconfig{'hostnamemode'} == 0) {
7821         return &get_system_hostname();
7822         }
7823 elsif ($gconfig{'hostnamemode'} == 3) {
7824         return $gconfig{'hostnamedisplay'};
7825         }
7826 else {
7827         my $h = $ENV{'HTTP_HOST'};
7828         $h =~ s/:\d+//g;
7829         if ($gconfig{'hostnamemode'} == 2) {
7830                 $h =~ s/^(www|ftp|mail)\.//i;
7831                 }
7832         return $h;
7833         }
7834 }
7835
7836 =head2 save_module_config([&config], [modulename])
7837
7838 Saves the configuration for some module. The config parameter is an optional
7839 hash reference of names and values to save, which defaults to the global
7840 %config hash. The modulename parameter is the module to update the config
7841 file, which defaults to the current module.
7842
7843 =cut
7844 sub save_module_config
7845 {
7846 my $c = $_[0] || { &get_module_variable('%config') };
7847 my $m = defined($_[1]) ? $_[1] : &get_module_name();
7848 &write_file("$config_directory/$m/config", $c);
7849 }
7850
7851 =head2 save_user_module_config([&config], [modulename])
7852
7853 Saves the user's Usermin preferences for some module. The config parameter is
7854 an optional hash reference of names and values to save, which defaults to the
7855 global %userconfig hash. The modulename parameter is the module to update the
7856 config file, which defaults to the current module.
7857
7858 =cut
7859 sub save_user_module_config
7860 {
7861 my $c = $_[0] || { &get_module_variable('%userconfig') };
7862 my $m = $_[1] || &get_module_name();
7863 my $ucd = $user_config_directory;
7864 if (!$ucd) {
7865         my @uinfo = @remote_user_info ? @remote_user_info
7866                                       : getpwnam($remote_user);
7867         return if (!@uinfo || !$uinfo[7]);
7868         $ucd = "$uinfo[7]/$gconfig{'userconfig'}";
7869         }
7870 &write_file("$ucd/$m/config", $c);
7871 }
7872
7873 =head2 nice_size(bytes, [min])
7874
7875 Converts a number of bytes into a number followed by a suffix like GB, MB
7876 or kB. Rounding is to two decimal digits. The optional min parameter sets the
7877 smallest units to use - so you could pass 1024*1024 to never show bytes or kB.
7878
7879 =cut
7880 sub nice_size
7881 {
7882 my ($units, $uname);
7883 if (abs($_[0]) > 1024*1024*1024*1024 || $_[1] >= 1024*1024*1024*1024) {
7884         $units = 1024*1024*1024*1024;
7885         $uname = "TB";
7886         }
7887 elsif (abs($_[0]) > 1024*1024*1024 || $_[1] >= 1024*1024*1024) {
7888         $units = 1024*1024*1024;
7889         $uname = "GB";
7890         }
7891 elsif (abs($_[0]) > 1024*1024 || $_[1] >= 1024*1024) {
7892         $units = 1024*1024;
7893         $uname = "MB";
7894         }
7895 elsif (abs($_[0]) > 1024 || $_[1] >= 1024) {
7896         $units = 1024;
7897         $uname = "kB";
7898         }
7899 else {
7900         $units = 1;
7901         $uname = "bytes";
7902         }
7903 my $sz = sprintf("%.2f", ($_[0]*1.0 / $units));
7904 $sz =~ s/\.00$//;
7905 return $sz." ".$uname;
7906 }
7907
7908 =head2 get_perl_path
7909
7910 Returns the path to Perl currently in use, such as /usr/bin/perl.
7911
7912 =cut
7913 sub get_perl_path
7914 {
7915 if (open(PERL, "$config_directory/perl-path")) {
7916         my $rv;
7917         chop($rv = <PERL>);
7918         close(PERL);
7919         return $rv;
7920         }
7921 return $^X if (-x $^X);
7922 return &has_command("perl");
7923 }
7924
7925 =head2 get_goto_module([&mods])
7926
7927 Returns the details of a module that the current user should be re-directed
7928 to after logging in, or undef if none. Useful for themes.
7929
7930 =cut
7931 sub get_goto_module
7932 {
7933 my @mods = $_[0] ? @{$_[0]} : &get_visible_module_infos();
7934 if ($gconfig{'gotomodule'}) {
7935         my ($goto) = grep { $_->{'dir'} eq $gconfig{'gotomodule'} } @mods;
7936         return $goto if ($goto);
7937         }
7938 if (@mods == 1 && $gconfig{'gotoone'}) {
7939         return $mods[0];
7940         }
7941 return undef;
7942 }
7943
7944 =head2 select_all_link(field, form, [text])
7945
7946 Returns HTML for a 'Select all' link that uses Javascript to select
7947 multiple checkboxes with the same name. The parameters are :
7948
7949 =item field - Name of the checkbox inputs.
7950
7951 =item form - Index of the form on the page.
7952
7953 =item text - Message for the link, defaulting to 'Select all'.
7954
7955 =cut
7956 sub select_all_link
7957 {
7958 return &theme_select_all_link(@_) if (defined(&theme_select_all_link));
7959 my ($field, $form, $text) = @_;
7960 $form = int($form);
7961 $text ||= $text{'ui_selall'};
7962 return "<a class='select_all' href='#' onClick='var ff = document.forms[$form].$field; ff.checked = true; for(i=0; i<ff.length; i++) { if (!ff[i].disabled) { ff[i].checked = true; } } return false'>$text</a>";
7963 }
7964
7965 =head2 select_invert_link(field, form, text)
7966
7967 Returns HTML for an 'Invert selection' link that uses Javascript to invert the
7968 selection on multiple checkboxes with the same name. The parameters are :
7969
7970 =item field - Name of the checkbox inputs.
7971
7972 =item form - Index of the form on the page.
7973
7974 =item text - Message for the link, defaulting to 'Invert selection'.
7975
7976 =cut
7977 sub select_invert_link
7978 {
7979 return &theme_select_invert_link(@_) if (defined(&theme_select_invert_link));
7980 my ($field, $form, $text) = @_;
7981 $form = int($form);
7982 $text ||= $text{'ui_selinv'};
7983 return "<a class='select_invert' href='#' onClick='var ff = document.forms[$form].$field; ff.checked = !ff.checked; for(i=0; i<ff.length; i++) { if (!ff[i].disabled) { ff[i].checked = !ff[i].checked; } } return false'>$text</a>";
7984 }
7985
7986 =head2 select_rows_link(field, form, text, &rows)
7987
7988 Returns HTML for a link that uses Javascript to select rows with particular
7989 values for their checkboxes. The parameters are :
7990
7991 =item field - Name of the checkbox inputs.
7992
7993 =item form - Index of the form on the page.
7994
7995 =item text - Message for the link, de
7996
7997 =item rows - Reference to an array of 1 or 0 values, indicating which rows to check.
7998
7999 =cut
8000 sub select_rows_link
8001 {
8002 return &theme_select_rows_link(@_) if (defined(&theme_select_rows_link));
8003 my ($field, $form, $text, $rows) = @_;
8004 $form = int($form);
8005 my $js = "var sel = { ".join(",", map { "\"".&quote_escape($_)."\":1" } @$rows)." }; ";
8006 $js .= "for(var i=0; i<document.forms[$form].${field}.length; i++) { var r = document.forms[$form].${field}[i]; r.checked = sel[r.value]; } ";
8007 $js .= "return false;";
8008 return "<a href='#' onClick='$js'>$text</a>";
8009 }
8010
8011 =head2 check_pid_file(file)
8012
8013 Given a pid file, returns the PID it contains if the process is running.
8014
8015 =cut
8016 sub check_pid_file
8017 {
8018 open(PIDFILE, $_[0]) || return undef;
8019 my $pid = <PIDFILE>;
8020 close(PIDFILE);
8021 $pid =~ /^\s*(\d+)/ || return undef;
8022 kill(0, $1) || return undef;
8023 return $1;
8024 }
8025
8026 =head2 get_mod_lib
8027
8028 Return the local os-specific library name to this module. For internal use only.
8029
8030 =cut
8031 sub get_mod_lib
8032 {
8033 my $mn = &get_module_name();
8034 my $md = &module_root_directory($mn);
8035 if (-r "$md/$mn-$gconfig{'os_type'}-$gconfig{'os_version'}-lib.pl") {
8036         return "$mn-$gconfig{'os_type'}-$gconfig{'os_version'}-lib.pl";
8037         }
8038 elsif (-r "$md/$mn-$gconfig{'os_type'}-lib.pl") {
8039         return "$mn-$gconfig{'os_type'}-lib.pl";
8040         }
8041 elsif (-r "$md/$mn-generic-lib.pl") {
8042         return "$mn-generic-lib.pl";
8043         }
8044 else {
8045         return "";
8046         }
8047 }
8048
8049 =head2 module_root_directory(module)
8050
8051 Given a module name, returns its root directory. On a typical Webmin install,
8052 all modules are under the same directory - but it is theoretically possible to
8053 have more than one.
8054
8055 =cut
8056 sub module_root_directory
8057 {
8058 my $d = ref($_[0]) ? $_[0]->{'dir'} : $_[0];
8059 if (@root_directories > 1) {
8060         foreach my $r (@root_directories) {
8061                 if (-d "$r/$d") {
8062                         return "$r/$d";
8063                         }
8064                 }
8065         }
8066 return "$root_directories[0]/$d";
8067 }
8068
8069 =head2 list_mime_types
8070
8071 Returns a list of all known MIME types and their extensions, as a list of hash
8072 references with keys :
8073
8074 =item type - The MIME type, like text/plain.
8075
8076 =item exts - A list of extensions, like .doc and .avi.
8077
8078 =item desc - A human-readable description for the MIME type.
8079
8080 =cut
8081 sub list_mime_types
8082 {
8083 if (!@list_mime_types_cache) {
8084         local $_;
8085         open(MIME, "$root_directory/mime.types");
8086         while(<MIME>) {
8087                 my $cmt;
8088                 s/\r|\n//g;
8089                 if (s/#\s*(.*)$//g) {
8090                         $cmt = $1;
8091                         }
8092                 my ($type, @exts) = split(/\s+/);
8093                 if ($type) {
8094                         push(@list_mime_types_cache, { 'type' => $type,
8095                                                        'exts' => \@exts,
8096                                                        'desc' => $cmt });
8097                         }
8098                 }
8099         close(MIME);
8100         }
8101 return @list_mime_types_cache;
8102 }
8103
8104 =head2 guess_mime_type(filename, [default])
8105
8106 Given a file name like xxx.gif or foo.html, returns a guessed MIME type.
8107 The optional default parameter sets a default type of use if none is found,
8108 which defaults to application/octet-stream.
8109
8110 =cut
8111 sub guess_mime_type
8112 {
8113 if ($_[0] =~ /\.([A-Za-z0-9\-]+)$/) {
8114         my $ext = $1;
8115         foreach my $t (&list_mime_types()) {
8116                 foreach my $e (@{$t->{'exts'}}) {
8117                         return $t->{'type'} if (lc($e) eq lc($ext));
8118                         }
8119                 }
8120         }
8121 return @_ > 1 ? $_[1] : "application/octet-stream";
8122 }
8123
8124 =head2 open_tempfile([handle], file, [no-error], [no-tempfile], [safe?])
8125
8126 Opens a file handle for writing to a temporary file, which will only be
8127 renamed over the real file when the handle is closed. This allows critical
8128 files like /etc/shadow to be updated safely, even if writing fails part way
8129 through due to lack of disk space. The parameters are :
8130
8131 =item handle - File handle to open, as you would use in Perl's open function.
8132
8133 =item file - Full path to the file to write, prefixed by > or >> to indicate over-writing or appending. In append mode, no temp file is used.
8134
8135 =item no-error - By default, this function will call error if the open fails. Setting this parameter to 1 causes it to return 0 on failure, and set $! with the error code.
8136
8137 =item no-tempfile - If set to 1, writing will be direct to the file instead of using a temporary file.
8138
8139 =item safe - Indicates to users in read-only mode that this write is safe and non-destructive.
8140
8141 =cut
8142 sub open_tempfile
8143 {
8144 if (@_ == 1) {
8145         # Just getting a temp file
8146         if (!defined($main::open_tempfiles{$_[0]})) {
8147                 $_[0] =~ /^(.*)\/(.*)$/ || return $_[0];
8148                 my $dir = $1 || "/";
8149                 my $tmp = "$dir/$2.webmintmp.$$";
8150                 $main::open_tempfiles{$_[0]} = $tmp;
8151                 push(@main::temporary_files, $tmp);
8152                 }
8153         return $main::open_tempfiles{$_[0]};
8154         }
8155 else {
8156         # Actually opening
8157         my ($fh, $file, $noerror, $notemp, $safe) = @_;
8158         $fh = &callers_package($fh);
8159
8160         my %gaccess = &get_module_acl(undef, "");
8161         my $db = $gconfig{'debug_what_write'};
8162         if ($file =~ /\r|\n|\0/) {
8163                 if ($noerror) { return 0; }
8164                 else { &error("Filename contains invalid characters"); }
8165                 }
8166         if (&is_readonly_mode() && $file =~ />/ && !$safe) {
8167                 # Read-only mode .. veto all writes
8168                 print STDERR "vetoing write to $file\n";
8169                 return open($fh, ">$null_file");
8170                 }
8171         elsif ($file =~ /^(>|>>|)nul$/i) {
8172                 # Write to Windows null device
8173                 &webmin_debug_log($1 eq ">" ? "WRITE" :
8174                           $1 eq ">>" ? "APPEND" : "READ", "nul") if ($db);
8175                 }
8176         elsif ($file =~ /^(>|>>)(\/dev\/.*)/ || lc($file) eq "nul") {
8177                 # Writes to /dev/null or TTYs don't need to be handled
8178                 &webmin_debug_log($1 eq ">" ? "WRITE" : "APPEND", $2) if ($db);
8179                 return open($fh, $file);
8180                 }
8181         elsif ($file =~ /^>\s*(([a-zA-Z]:)?\/.*)$/ && !$notemp) {
8182                 &webmin_debug_log("WRITE", $1) if ($db);
8183                 # Over-writing a file, via a temp file
8184                 $file = $1;
8185                 $file = &translate_filename($file);
8186                 while(-l $file) {
8187                         # Open the link target instead
8188                         $file = &resolve_links($file);
8189                         }
8190                 if (-d $file) {
8191                         # Cannot open a directory!
8192                         if ($noerror) { return 0; }
8193                         else { &error("Cannot write to directory $file"); }
8194                         }
8195                 my $tmp = &open_tempfile($file);
8196                 my $ex = open($fh, ">$tmp");
8197                 if (!$ex && $! =~ /permission/i) {
8198                         # Could not open temp file .. try opening actual file
8199                         # instead directly
8200                         $ex = open($fh, ">$file");
8201                         delete($main::open_tempfiles{$file});
8202                         }
8203                 else {
8204                         $main::open_temphandles{$fh} = $file;
8205                         }
8206                 binmode($fh);
8207                 if (!$ex && !$noerror) {
8208                         &error(&text("efileopen", $file, $!));
8209                         }
8210                 return $ex;
8211                 }
8212         elsif ($file =~ /^>\s*(([a-zA-Z]:)?\/.*)$/ && $notemp) {
8213                 # Just writing direct to a file
8214                 &webmin_debug_log("WRITE", $1) if ($db);
8215                 $file = $1;
8216                 $file = &translate_filename($file);
8217                 my @old_attributes = &get_clear_file_attributes($file);
8218                 my $ex = open($fh, ">$file");
8219                 &reset_file_attributes($file, \@old_attributes);
8220                 $main::open_temphandles{$fh} = $file;
8221                 if (!$ex && !$noerror) {
8222                         &error(&text("efileopen", $file, $!));
8223                         }
8224                 binmode($fh);
8225                 return $ex;
8226                 }
8227         elsif ($file =~ /^>>\s*(([a-zA-Z]:)?\/.*)$/) {
8228                 # Appending to a file .. nothing special to do
8229                 &webmin_debug_log("APPEND", $1) if ($db);
8230                 $file = $1;
8231                 $file = &translate_filename($file);
8232                 my @old_attributes = &get_clear_file_attributes($file);
8233                 my $ex = open($fh, ">>$file");
8234                 &reset_file_attributes($file, \@old_attributes);
8235                 $main::open_temphandles{$fh} = $file;
8236                 if (!$ex && !$noerror) {
8237                         &error(&text("efileopen", $file, $!));
8238                         }
8239                 binmode($fh);
8240                 return $ex;
8241                 }
8242         elsif ($file =~ /^([a-zA-Z]:)?\//) {
8243                 # Read mode .. nothing to do here
8244                 &webmin_debug_log("READ", $file) if ($db);
8245                 $file = &translate_filename($file);
8246                 return open($fh, $file);
8247                 }
8248         elsif ($file eq ">" || $file eq ">>") {
8249                 my ($package, $filename, $line) = caller;
8250                 if ($noerror) { return 0; }
8251                 else { &error("Missing file to open at ${package}::${filename} line $line"); }
8252                 }
8253         else {
8254                 my ($package, $filename, $line) = caller;
8255                 &error("Unsupported file or mode $file at ${package}::${filename} line $line");
8256                 }
8257         }
8258 }
8259
8260 =head2 close_tempfile(file|handle)
8261
8262 Copies a temp file to the actual file, assuming that all writes were
8263 successful. The handle must have been one passed to open_tempfile.
8264
8265 =cut
8266 sub close_tempfile
8267 {
8268 my $file;
8269 my $fh = &callers_package($_[0]);
8270
8271 if (defined($file = $main::open_temphandles{$fh})) {
8272         # Closing a handle
8273         close($fh) || &error(&text("efileclose", $file, $!));
8274         delete($main::open_temphandles{$fh});
8275         return &close_tempfile($file);
8276         }
8277 elsif (defined($main::open_tempfiles{$_[0]})) {
8278         # Closing a file
8279         &webmin_debug_log("CLOSE", $_[0]) if ($gconfig{'debug_what_write'});
8280         my @st = stat($_[0]);
8281         if (&is_selinux_enabled() && &has_command("chcon")) {
8282                 # Set original security context
8283                 system("chcon --reference=".quotemeta($_[0]).
8284                        " ".quotemeta($main::open_tempfiles{$_[0]}).
8285                        " >/dev/null 2>&1");
8286                 }
8287         my @old_attributes = &get_clear_file_attributes($_[0]);
8288         rename($main::open_tempfiles{$_[0]}, $_[0]) || &error("Failed to replace $_[0] with $main::open_tempfiles{$_[0]} : $!");
8289         if (@st) {
8290                 # Set original permissions and ownership
8291                 chmod($st[2], $_[0]);
8292                 chown($st[4], $st[5], $_[0]);
8293                 }
8294         &reset_file_attributes($_[0], \@old_attributes);
8295         delete($main::open_tempfiles{$_[0]});
8296         @main::temporary_files = grep { $_ ne $main::open_tempfiles{$_[0]} } @main::temporary_files;
8297         if ($main::open_templocks{$_[0]}) {
8298                 &unlock_file($_[0]);
8299                 delete($main::open_templocks{$_[0]});
8300                 }
8301         return 1;
8302         }
8303 else {
8304         # Must be closing a handle not associated with a file
8305         close($_[0]);
8306         return 1;
8307         }
8308 }
8309
8310 =head2 print_tempfile(handle, text, ...)
8311
8312 Like the normal print function, but calls &error on failure. Useful when
8313 combined with open_tempfile, to ensure that a criticial file is never
8314 only partially written.
8315
8316 =cut
8317 sub print_tempfile
8318 {
8319 my ($fh, @args) = @_;
8320 $fh = &callers_package($fh);
8321 (print $fh @args) || &error(&text("efilewrite",
8322                             $main::open_temphandles{$fh} || $fh, $!));
8323 }
8324
8325 =head2 is_selinux_enabled
8326
8327 Returns 1 if SElinux is supported on this system and enabled, 0 if not.
8328
8329 =cut
8330 sub is_selinux_enabled
8331 {
8332 if (!defined($main::selinux_enabled_cache)) {
8333         my %seconfig;
8334         if ($gconfig{'os_type'} !~ /-linux$/) {
8335                 # Not on linux, so no way
8336                 $main::selinux_enabled_cache = 0;
8337                 }
8338         elsif (&read_env_file("/etc/selinux/config", \%seconfig)) {
8339                 # Use global config file
8340                 $main::selinux_enabled_cache =
8341                         $seconfig{'SELINUX'} eq 'disabled' ||
8342                         !$seconfig{'SELINUX'} ? 0 : 1;
8343                 }
8344         else {
8345                 # Use selinuxenabled command
8346                 #$selinux_enabled_cache =
8347                 #       system("selinuxenabled >/dev/null 2>&1") ? 0 : 1;
8348                 $main::selinux_enabled_cache = 0;
8349                 }
8350         }
8351 return $main::selinux_enabled_cache;
8352 }
8353
8354 =head2 get_clear_file_attributes(file)
8355
8356 Finds file attributes that may prevent writing, clears them and returns them
8357 as a list. May call error. Mainly for internal use by open_tempfile and
8358 close_tempfile.
8359
8360 =cut
8361 sub get_clear_file_attributes
8362 {
8363 my ($file) = @_;
8364 my @old_attributes;
8365 if ($gconfig{'chattr'}) {
8366         # Get original immutable bit
8367         my $out = &backquote_command(
8368                 "lsattr ".quotemeta($file)." 2>/dev/null");
8369         if (!$?) {
8370                 $out =~ s/\s\S+\n//;
8371                 @old_attributes = grep { $_ ne '-' } split(//, $out);
8372                 }
8373         if (&indexof("i", @old_attributes) >= 0) {
8374                 my $err = &backquote_logged(
8375                         "chattr -i ".quotemeta($file)." 2>&1");
8376                 if ($?) {
8377                         &error("Failed to remove immutable bit on ".
8378                                "$file : $err");
8379                         }
8380                 }
8381         }
8382 return @old_attributes;
8383 }
8384
8385 =head2 reset_file_attributes(file, &attributes)
8386
8387 Put back cleared attributes on some file. May call error. Mainly for internal
8388 use by close_tempfile.
8389
8390 =cut
8391 sub reset_file_attributes
8392 {
8393 my ($file, $old_attributes) = @_;
8394 if (&indexof("i", @$old_attributes) >= 0) {
8395         my $err = &backquote_logged(
8396                 "chattr +i ".quotemeta($file)." 2>&1");
8397         if ($?) {
8398                 &error("Failed to restore immutable bit on ".
8399                        "$file : $err");
8400                 }
8401         }
8402 }
8403
8404 =head2 cleanup_tempnames
8405
8406 Remove all temporary files generated using transname. Typically only called
8407 internally when a Webmin script exits.
8408
8409 =cut
8410 sub cleanup_tempnames
8411 {
8412 foreach my $t (@main::temporary_files) {
8413         &unlink_file($t);
8414         }
8415 @main::temporary_files = ( );
8416 }
8417
8418 =head2 open_lock_tempfile([handle], file, [no-error])
8419
8420 Returns a temporary file for writing to some actual file, and also locks it.
8421 Effectively the same as calling lock_file and open_tempfile on the same file,
8422 but calls the unlock for you automatically when it is closed.
8423
8424 =cut
8425 sub open_lock_tempfile
8426 {
8427 my ($fh, $file, $noerror, $notemp, $safe) = @_;
8428 $fh = &callers_package($fh);
8429 my $lockfile = $file;
8430 $lockfile =~ s/^[^\/]*//;
8431 if ($lockfile =~ /^\//) {
8432         $main::open_templocks{$lockfile} = &lock_file($lockfile);
8433         }
8434 return &open_tempfile($fh, $file, $noerror, $notemp, $safe);
8435 }
8436
8437 sub END
8438 {
8439 $main::end_exit_status ||= $?;
8440 if ($$ == $main::initial_process_id) {
8441         # Exiting from initial process
8442         &cleanup_tempnames();
8443         if ($gconfig{'debug_what_start'} && $main::debug_log_start_time &&
8444             $main::debug_log_start_module eq &get_module_name()) {
8445                 my $len = time() - $main::debug_log_start_time;
8446                 &webmin_debug_log("STOP", "runtime=$len");
8447                 $main::debug_log_start_time = 0;
8448                 }
8449         if (!$ENV{'SCRIPT_NAME'} &&
8450             $main::initial_module_name eq &get_module_name()) {
8451                 # In a command-line script - call the real exit, so that the
8452                 # exit status gets properly propogated. In some cases this
8453                 # was not happening.
8454                 exit($main::end_exit_status);
8455                 }
8456         }
8457 }
8458
8459 =head2 month_to_number(month)
8460
8461 Converts a month name like feb to a number like 1.
8462
8463 =cut
8464 sub month_to_number
8465 {
8466 return $month_to_number_map{lc(substr($_[0], 0, 3))};
8467 }
8468
8469 =head2 number_to_month(number)
8470
8471 Converts a number like 1 to a month name like Feb.
8472
8473 =cut
8474 sub number_to_month
8475 {
8476 return ucfirst($number_to_month_map{$_[0]});
8477 }
8478
8479 =head2 get_rbac_module_acl(user, module)
8480
8481 Returns a hash reference of RBAC overrides ACLs for some user and module.
8482 May return undef if none exist (indicating access denied), or the string *
8483 if full access is granted.
8484
8485 =cut
8486 sub get_rbac_module_acl
8487 {
8488 my ($user, $mod) = @_;
8489 eval "use Authen::SolarisRBAC";
8490 return undef if ($@);
8491 my %rv;
8492 my $foundany = 0;
8493 if (Authen::SolarisRBAC::chkauth("webmin.$mod.admin", $user)) {
8494         # Automagic webmin.modulename.admin authorization exists .. allow access
8495         $foundany = 1;
8496         if (!Authen::SolarisRBAC::chkauth("webmin.$mod.config", $user)) {
8497                 %rv = ( 'noconfig' => 1 );
8498                 }
8499         else {
8500                 %rv = ( );
8501                 }
8502         }
8503 local $_;
8504 open(RBAC, &module_root_directory($mod)."/rbac-mapping");
8505 while(<RBAC>) {
8506         s/\r|\n//g;
8507         s/#.*$//;
8508         my ($auths, $acls) = split(/\s+/, $_);
8509         my @auths = split(/,/, $auths);
8510         next if (!$auths);
8511         my ($merge) = ($acls =~ s/^\+//);
8512         my $gotall = 1;
8513         if ($auths eq "*") {
8514                 # These ACLs apply to all RBAC users.
8515                 # Only if there is some that match a specific authorization
8516                 # later will they be used though.
8517                 }
8518         else {
8519                 # Check each of the RBAC authorizations
8520                 foreach my $a (@auths) {
8521                         if (!Authen::SolarisRBAC::chkauth($a, $user)) {
8522                                 $gotall = 0;
8523                                 last;
8524                                 }
8525                         }
8526                 $foundany++ if ($gotall);
8527                 }
8528         if ($gotall) {
8529                 # Found an RBAC authorization - return the ACLs
8530                 return "*" if ($acls eq "*");
8531                 my %acl = map { split(/=/, $_, 2) } split(/,/, $acls);
8532                 if ($merge) {
8533                         # Just add to current set
8534                         foreach my $a (keys %acl) {
8535                                 $rv{$a} = $acl{$a};
8536                                 }
8537                         }
8538                 else {
8539                         # Found final ACLs
8540                         return \%acl;
8541                         }
8542                 }
8543         }
8544 close(RBAC);
8545 return !$foundany ? undef : %rv ? \%rv : undef;
8546 }
8547
8548 =head2 supports_rbac([module])
8549
8550 Returns 1 if RBAC client support is available, such as on Solaris.
8551
8552 =cut
8553 sub supports_rbac
8554 {
8555 return 0 if ($gconfig{'os_type'} ne 'solaris');
8556 eval "use Authen::SolarisRBAC";
8557 return 0 if ($@);
8558 if ($_[0]) {
8559         #return 0 if (!-r &module_root_directory($_[0])."/rbac-mapping");
8560         }
8561 return 1;
8562 }
8563
8564 =head2 supports_ipv6()
8565
8566 Returns 1 if outgoing IPv6 connections can be made
8567
8568 =cut
8569 sub supports_ipv6
8570 {
8571 return $ipv6_module_error ? 0 : 1;
8572 }
8573
8574 =head2 use_rbac_module_acl(user, module)
8575
8576 Returns 1 if some user should use RBAC to get permissions for a module
8577
8578 =cut
8579 sub use_rbac_module_acl
8580 {
8581 my $u = defined($_[0]) ? $_[0] : $base_remote_user;
8582 my $m = defined($_[1]) ? $_[1] : &get_module_name();
8583 return 1 if ($gconfig{'rbacdeny_'.$u});         # RBAC forced for user
8584 my %access = &get_module_acl($u, $m, 1);
8585 return $access{'rbac'} ? 1 : 0;
8586 }
8587
8588 =head2 execute_command(command, stdin, stdout, stderr, translate-files?, safe?)
8589
8590 Runs some command, possibly feeding it input and capturing output to the
8591 give files or scalar references. The parameters are :
8592
8593 =item command - Full command to run, possibly including shell meta-characters.
8594
8595 =item stdin - File to read input from, or a scalar ref containing input, or undef if no input should be given.
8596
8597 =item stdout - File to write output to, or a scalar ref into which output should be placed, or undef if the output is to be discarded.
8598
8599 =item stderr - File to write error output to, or a scalar ref into which error output should be placed, or undef if the error output is to be discarded.
8600
8601 =item translate-files - Set to 1 to apply filename translation to any filenames. Usually has no effect.
8602
8603 =item safe - Set to 1 if this command is safe and does not modify the state of the system.
8604
8605 =cut
8606 sub execute_command
8607 {
8608 my ($cmd, $stdin, $stdout, $stderr, $trans, $safe) = @_;
8609 if (&is_readonly_mode() && !$safe) {
8610         print STDERR "Vetoing command $_[0]\n";
8611         $? = 0;
8612         return 0;
8613         }
8614 $cmd = &translate_command($cmd);
8615
8616 # Use ` operator where possible
8617 &webmin_debug_log('CMD', "cmd=$cmd") if ($gconfig{'debug_what_cmd'});
8618 if (!$stdin && ref($stdout) && !$stderr) {
8619         $cmd = "($cmd)" if ($gconfig{'os_type'} ne 'windows');
8620         $$stdout = `$cmd 2>$null_file`;
8621         return $?;
8622         }
8623 elsif (!$stdin && ref($stdout) && $stdout eq $stderr) {
8624         $cmd = "($cmd)" if ($gconfig{'os_type'} ne 'windows');
8625         $$stdout = `$cmd 2>&1`;
8626         return $?;
8627         }
8628 elsif (!$stdin && !$stdout && !$stderr) {
8629         $cmd = "($cmd)" if ($gconfig{'os_type'} ne 'windows');
8630         return system("$cmd >$null_file 2>$null_file <$null_file");
8631         }
8632
8633 # Setup pipes
8634 $| = 1;         # needed on some systems to flush before forking
8635 pipe(EXECSTDINr, EXECSTDINw);
8636 pipe(EXECSTDOUTr, EXECSTDOUTw);
8637 pipe(EXECSTDERRr, EXECSTDERRw);
8638 my $pid;
8639 if (!($pid = fork())) {
8640         untie(*STDIN);
8641         untie(*STDOUT);
8642         untie(*STDERR);
8643         open(STDIN, "<&EXECSTDINr");
8644         open(STDOUT, ">&EXECSTDOUTw");
8645         if (ref($stderr) && $stderr eq $stdout) {
8646                 open(STDERR, ">&EXECSTDOUTw");
8647                 }
8648         else {
8649                 open(STDERR, ">&EXECSTDERRw");
8650                 }
8651         $| = 1;
8652         close(EXECSTDINw);
8653         close(EXECSTDOUTr);
8654         close(EXECSTDERRr);
8655
8656         my $fullcmd = "($cmd)";
8657         if ($stdin && !ref($stdin)) {
8658                 $fullcmd .= " <$stdin";
8659                 }
8660         if ($stdout && !ref($stdout)) {
8661                 $fullcmd .= " >$stdout";
8662                 }
8663         if ($stderr && !ref($stderr)) {
8664                 if ($stderr eq $stdout) {
8665                         $fullcmd .= " 2>&1";
8666                         }
8667                 else {
8668                         $fullcmd .= " 2>$stderr";
8669                         }
8670                 }
8671         if ($gconfig{'os_type'} eq 'windows') {
8672                 exec($fullcmd);
8673                 }
8674         else {
8675                 exec("/bin/sh", "-c", $fullcmd);
8676                 }
8677         print "Exec failed : $!\n";
8678         exit(1);
8679         }
8680 close(EXECSTDINr);
8681 close(EXECSTDOUTw);
8682 close(EXECSTDERRw);
8683
8684 # Feed input and capture output
8685 local $_;
8686 if ($stdin && ref($stdin)) {
8687         print EXECSTDINw $$stdin;
8688         close(EXECSTDINw);
8689         }
8690 if ($stdout && ref($stdout)) {
8691         $$stdout = undef;
8692         while(<EXECSTDOUTr>) {
8693                 $$stdout .= $_;
8694                 }
8695         close(EXECSTDOUTr);
8696         }
8697 if ($stderr && ref($stderr) && $stderr ne $stdout) {
8698         $$stderr = undef;
8699         while(<EXECSTDERRr>) {
8700                 $$stderr .= $_;
8701                 }
8702         close(EXECSTDERRr);
8703         }
8704
8705 # Get exit status
8706 waitpid($pid, 0);
8707 return $?;
8708 }
8709
8710 =head2 open_readfile(handle, file)
8711
8712 Opens some file for reading. Returns 1 on success, 0 on failure. Pretty much
8713 exactly the same as Perl's open function.
8714
8715 =cut
8716 sub open_readfile
8717 {
8718 my ($fh, $file) = @_;
8719 $fh = &callers_package($fh);
8720 my $realfile = &translate_filename($file);
8721 &webmin_debug_log('READ', $file) if ($gconfig{'debug_what_read'});
8722 return open($fh, "<".$realfile);
8723 }
8724
8725 =head2 open_execute_command(handle, command, output?, safe?)
8726
8727 Runs some command, with the specified file handle set to either write to it if
8728 in-or-out is set to 0, or read to it if output is set to 1. The safe flag
8729 indicates if the command modifies the state of the system or not.
8730
8731 =cut
8732 sub open_execute_command
8733 {
8734 my ($fh, $cmd, $mode, $safe) = @_;
8735 $fh = &callers_package($fh);
8736 my $realcmd = &translate_command($cmd);
8737 if (&is_readonly_mode() && !$safe) {
8738         # Don't actually run it
8739         print STDERR "vetoing command $cmd\n";
8740         $? = 0;
8741         if ($mode == 0) {
8742                 return open($fh, ">$null_file");
8743                 }
8744         else {
8745                 return open($fh, $null_file);
8746                 }
8747         }
8748 # Really run it
8749 &webmin_debug_log('CMD', "cmd=$realcmd mode=$mode")
8750         if ($gconfig{'debug_what_cmd'});
8751 if ($mode == 0) {
8752         return open($fh, "| $cmd");
8753         }
8754 elsif ($mode == 1) {
8755         return open($fh, "$cmd 2>$null_file |");
8756         }
8757 elsif ($mode == 2) {
8758         return open($fh, "$cmd 2>&1 |");
8759         }
8760 }
8761
8762 =head2 translate_filename(filename)
8763
8764 Applies all relevant registered translation functions to a filename. Mostly
8765 for internal use, and typically does nothing.
8766
8767 =cut
8768 sub translate_filename
8769 {
8770 my ($realfile) = @_;
8771 my @funcs = grep { $_->[0] eq &get_module_name() ||
8772                    !defined($_->[0]) } @main::filename_callbacks;
8773 foreach my $f (@funcs) {
8774         my $func = $f->[1];
8775         $realfile = &$func($realfile, @{$f->[2]});
8776         }
8777 return $realfile;
8778 }
8779
8780 =head2 translate_command(filename)
8781
8782 Applies all relevant registered translation functions to a command. Mostly
8783 for internal use, and typically does nothing.
8784
8785 =cut
8786 sub translate_command
8787 {
8788 my ($realcmd) = @_;
8789 my @funcs = grep { $_->[0] eq &get_module_name() ||
8790                    !defined($_->[0]) } @main::command_callbacks;
8791 foreach my $f (@funcs) {
8792         my $func = $f->[1];
8793         $realcmd = &$func($realcmd, @{$f->[2]});
8794         }
8795 return $realcmd;
8796 }
8797
8798 =head2 register_filename_callback(module|undef, &function, &args)
8799
8800 Registers some function to be called when the specified module (or all
8801 modules) tries to open a file for reading and writing. The function must
8802 return the actual file to open. This allows you to override which files
8803 other code actually operates on, via the translate_filename function.
8804
8805 =cut
8806 sub register_filename_callback
8807 {
8808 my ($mod, $func, $args) = @_;
8809 push(@main::filename_callbacks, [ $mod, $func, $args ]);
8810 }
8811
8812 =head2 register_command_callback(module|undef, &function, &args)
8813
8814 Registers some function to be called when the specified module (or all
8815 modules) tries to execute a command. The function must return the actual
8816 command to run. This allows you to override which commands other other code
8817 actually runs, via the translate_command function.
8818
8819 =cut
8820 sub register_command_callback
8821 {
8822 my ($mod, $func, $args) = @_;
8823 push(@main::command_callbacks, [ $mod, $func, $args ]);
8824 }
8825
8826 =head2 capture_function_output(&function, arg, ...)
8827
8828 Captures output that some function prints to STDOUT, and returns it. Useful
8829 for functions outside your control that print data when you really want to
8830 manipulate it before output.
8831
8832 =cut
8833 sub capture_function_output
8834 {
8835 my ($func, @args) = @_;
8836 socketpair(SOCKET2, SOCKET1, AF_UNIX, SOCK_STREAM, PF_UNSPEC);
8837 my $old = select(SOCKET1);
8838 my @rv = &$func(@args);
8839 select($old);
8840 close(SOCKET1);
8841 my $out;
8842 local $_;
8843 while(<SOCKET2>) {
8844         $out .= $_;
8845         }
8846 close(SOCKET2);
8847 return wantarray ? ($out, \@rv) : $out;
8848 }
8849
8850 =head2 capture_function_output_tempfile(&function, arg, ...)
8851
8852 Behaves the same as capture_function_output, but uses a temporary file
8853 to avoid buffer full problems.
8854
8855 =cut
8856 sub capture_function_output_tempfile
8857 {
8858 my ($func, @args) = @_;
8859 my $temp = &transname();
8860 open(BUFFER, ">$temp");
8861 my $old = select(BUFFER);
8862 my @rv = &$func(@args);
8863 select($old);
8864 close(BUFFER);
8865 my $out = &read_file_contents($temp);
8866 &unlink_file($temp);
8867 return wantarray ? ($out, \@rv) : $out;
8868 }
8869
8870 =head2 modules_chooser_button(field, multiple, [form])
8871
8872 Returns HTML for a button for selecting one or many Webmin modules.
8873 field - Name of the HTML field to place the module names into.
8874 multiple - Set to 1 if multiple modules can be selected.
8875 form - Index of the form on the page.
8876
8877 =cut
8878 sub modules_chooser_button
8879 {
8880 return &theme_modules_chooser_button(@_)
8881         if (defined(&theme_modules_chooser_button));
8882 my $form = defined($_[2]) ? $_[2] : 0;
8883 my $w = $_[1] ? 700 : 500;
8884 my $h = 200;
8885 if ($_[1] && $gconfig{'db_sizemodules'}) {
8886         ($w, $h) = split(/x/, $gconfig{'db_sizemodules'});
8887         }
8888 elsif (!$_[1] && $gconfig{'db_sizemodule'}) {
8889         ($w, $h) = split(/x/, $gconfig{'db_sizemodule'});
8890         }
8891 return "<input type=button onClick='ifield = document.forms[$form].$_[0]; chooser = window.open(\"$gconfig{'webprefix'}/module_chooser.cgi?multi=$_[1]&module=\"+escape(ifield.value), \"chooser\", \"toolbar=no,menubar=no,scrollbars=yes,width=$w,height=$h\"); chooser.ifield = ifield; window.ifield = ifield' value=\"...\">\n";
8892 }
8893
8894 =head2 substitute_template(text, &hash)
8895
8896 Given some text and a hash reference, for each ocurrance of $FOO or ${FOO} in
8897 the text replaces it with the value of the hash key foo. Also supports blocks
8898 like ${IF-FOO} ... ${ENDIF-FOO}, whose contents are only included if foo is 
8899 non-zero, and ${IF-FOO} ... ${ELSE-FOO} ... ${ENDIF-FOO}.
8900
8901 =cut
8902 sub substitute_template
8903 {
8904 # Add some extra fixed parameters to the hash
8905 my %hash = %{$_[1]};
8906 $hash{'hostname'} = &get_system_hostname();
8907 $hash{'webmin_config'} = $config_directory;
8908 $hash{'webmin_etc'} = $config_directory;
8909 $hash{'module_config'} = &get_module_variable('$module_config_directory');
8910 $hash{'webmin_var'} = $var_directory;
8911
8912 # Add time-based parameters, for use in DNS
8913 $hash{'current_time'} = time();
8914 my @tm = localtime($hash{'current_time'});
8915 $hash{'current_year'} = $tm[5]+1900;
8916 $hash{'current_month'} = sprintf("%2.2d", $tm[4]+1);
8917 $hash{'current_day'} = sprintf("%2.2d", $tm[3]);
8918 $hash{'current_hour'} = sprintf("%2.2d", $tm[2]);
8919 $hash{'current_minute'} = sprintf("%2.2d", $tm[1]);
8920 $hash{'current_second'} = sprintf("%2.2d", $tm[0]);
8921
8922 # Actually do the substition
8923 my $rv = $_[0];
8924 foreach my $s (keys %hash) {
8925         next if ($s eq '');     # Prevent just $ from being subbed
8926         my $us = uc($s);
8927         my $sv = $hash{$s};
8928         $rv =~ s/\$\{\Q$us\E\}/$sv/g;
8929         $rv =~ s/\$\Q$us\E/$sv/g;
8930         if ($sv) {
8931                 # Replace ${IF}..${ELSE}..${ENDIF} block with first value,
8932                 # and ${IF}..${ENDIF} with value
8933                 $rv =~ s/\$\{IF-\Q$us\E\}(\n?)([\000-\377]*?)\$\{ELSE-\Q$us\E\}(\n?)([\000-\377]*?)\$\{ENDIF-\Q$us\E\}(\n?)/$2/g;
8934                 $rv =~ s/\$\{IF-\Q$us\E\}(\n?)([\000-\377]*?)\$\{ENDIF-\Q$us\E\}(\n?)/$2/g;
8935
8936                 # Replace $IF..$ELSE..$ENDIF block with first value,
8937                 # and $IF..$ENDIF with value
8938                 $rv =~ s/\$IF-\Q$us\E(\n?)([\000-\377]*?)\$ELSE-\Q$us\E(\n?)([\000-\377]*?)\$ENDIF-\Q$us\E(\n?)/$2/g;
8939                 $rv =~ s/\$IF-\Q$us\E(\n?)([\000-\377]*?)\$ENDIF-\Q$us\E(\n?)/$2/g;
8940
8941                 # Replace ${IFEQ}..${ENDIFEQ} block with first value if
8942                 # matching, nothing if not
8943                 $rv =~ s/\$\{IFEQ-\Q$us\E-\Q$sv\E\}(\n?)([\000-\377]*?)\$\{ENDIFEQ-\Q$us\E-\Q$sv\E\}(\n?)/$2/g;
8944                 $rv =~ s/\$\{IFEQ-\Q$us\E-[^\}]+}(\n?)([\000-\377]*?)\$\{ENDIFEQ-\Q$us\E-[^\}]+\}(\n?)//g;
8945
8946                 # Replace $IFEQ..$ENDIFEQ block with first value if
8947                 # matching, nothing if not
8948                 $rv =~ s/\$IFEQ-\Q$us\E-\Q$sv\E(\n?)([\000-\377]*?)\$ENDIFEQ-\Q$us\E-\Q$sv\E(\n?)/$2/g;
8949                 $rv =~ s/\$IFEQ-\Q$us\E-\S+(\n?)([\000-\377]*?)\$ENDIFEQ-\Q$us\E-\S+(\n?)//g;
8950                 }
8951         else {
8952                 # Replace ${IF}..${ELSE}..${ENDIF} block with second value,
8953                 # and ${IF}..${ENDIF} with nothing
8954                 $rv =~ s/\$\{IF-\Q$us\E\}(\n?)([\000-\377]*?)\$\{ELSE-\Q$us\E\}(\n?)([\000-\377]*?)\$\{ENDIF-\Q$us\E\}(\n?)/$4/g;
8955                 $rv =~ s/\$\{IF-\Q$us\E\}(\n?)([\000-\377]*?)\$\{ENDIF-\Q$us\E\}(\n?)//g;
8956
8957                 # Replace $IF..$ELSE..$ENDIF block with second value,
8958                 # and $IF..$ENDIF with nothing
8959                 $rv =~ s/\$IF-\Q$us\E(\n?)([\000-\377]*?)\$ELSE-\Q$us\E(\n?)([\000-\377]*?)\$ENDIF-\Q$us\E(\n?)/$4/g;
8960                 $rv =~ s/\$IF-\Q$us\E(\n?)([\000-\377]*?)\$ENDIF-\Q$us\E(\n?)//g;
8961
8962                 # Replace ${IFEQ}..${ENDIFEQ} block with nothing
8963                 $rv =~ s/\$\{IFEQ-\Q$us\E-[^\}]+}(\n?)([\000-\377]*?)\$\{ENDIFEQ-\Q$us\E-[^\}]+\}(\n?)//g;
8964                 $rv =~ s/\$IFEQ-\Q$us\E-\S+(\n?)([\000-\377]*?)\$ENDIFEQ-\Q$us\E-\S+(\n?)//g;
8965                 }
8966         }
8967
8968 # Now assume any $IF blocks whose variables are not present in the hash
8969 # evaluate to false.
8970 # $IF...$ELSE x $ENDIF => x
8971 $rv =~ s/\$\{IF\-([A-Z]+)\}.*?\$\{ELSE\-\1\}(.*?)\$\{ENDIF\-\1\}/$2/gs;
8972 # $IF...x...$ENDIF => (nothing)
8973 $rv =~ s/\$\{IF\-([A-Z]+)\}.*?\$\{ENDIF\-\1\}//gs;
8974 # ${var} => (nothing)
8975 $rv =~ s/\$\{[A-Z]+\}//g;
8976
8977 return $rv;
8978 }
8979
8980 =head2 running_in_zone
8981
8982 Returns 1 if the current Webmin instance is running in a Solaris zone. Used to
8983 disable module and features that are not appropriate, like those that modify
8984 mounted filesystems.
8985
8986 =cut
8987 sub running_in_zone
8988 {
8989 return 0 if ($gconfig{'os_type'} ne 'solaris' ||
8990              $gconfig{'os_version'} < 10);
8991 my $zn = `zonename 2>$null_file`;
8992 chop($zn);
8993 return $zn && $zn ne "global";
8994 }
8995
8996 =head2 running_in_vserver
8997
8998 Returns 1 if the current Webmin instance is running in a Linux VServer.
8999 Used to disable modules and features that are not appropriate.
9000
9001 =cut
9002 sub running_in_vserver
9003 {
9004 return 0 if ($gconfig{'os_type'} !~ /^\*-linux$/);
9005 my $vserver;
9006 local $_;
9007 open(MTAB, "/etc/mtab");
9008 while(<MTAB>) {
9009         my ($dev, $mp) = split(/\s+/, $_);
9010         if ($mp eq "/" && $dev =~ /^\/dev\/hdv/) {
9011                 $vserver = 1;
9012                 last;
9013                 }
9014         }
9015 close(MTAB);
9016 return $vserver;
9017 }
9018
9019 =head2 running_in_xen
9020
9021 Returns 1 if Webmin is running inside a Xen instance, by looking
9022 at /proc/xen/capabilities.
9023
9024 =cut
9025 sub running_in_xen
9026 {
9027 return 0 if (!-r "/proc/xen/capabilities");
9028 my $cap = &read_file_contents("/proc/xen/capabilities");
9029 return $cap =~ /control_d/ ? 0 : 1;
9030 }
9031
9032 =head2 running_in_openvz
9033
9034 Returns 1 if Webmin is running inside an OpenVZ container, by looking
9035 at /proc/vz/veinfo for a non-zero line.
9036
9037 =cut
9038 sub running_in_openvz
9039 {
9040 return 0 if (!-r "/proc/vz/veinfo");
9041 my $lref = &read_file_lines("/proc/vz/veinfo", 1);
9042 return 0 if (!$lref || !@$lref);
9043 foreach my $l (@$lref) {
9044         $l =~ s/^\s+//;
9045         my @ll = split(/\s+/, $l);
9046         return 0 if ($ll[0] eq '0');
9047         }
9048 return 1;
9049 }
9050
9051 =head2 list_categories(&modules, [include-empty])
9052
9053 Returns a hash mapping category codes to names, including any custom-defined
9054 categories. The modules parameter must be an array ref of module hash objects,
9055 as returned by get_all_module_infos.
9056
9057 =cut
9058 sub list_categories
9059 {
9060 my ($mods, $empty) = @_;
9061 my (%cats, %catnames);
9062 &read_file("$config_directory/webmin.catnames", \%catnames);
9063 foreach my $o (@lang_order_list) {
9064         &read_file("$config_directory/webmin.catnames.$o", \%catnames);
9065         }
9066 if ($empty) {
9067         %cats = %catnames;
9068         }
9069 foreach my $m (@$mods) {
9070         my $c = $m->{'category'};
9071         next if ($cats{$c});
9072         if (defined($catnames{$c})) {
9073                 $cats{$c} = $catnames{$c};
9074                 }
9075         elsif ($text{"category_$c"}) {
9076                 $cats{$c} = $text{"category_$c"};
9077                 }
9078         else {
9079                 # try to get category name from module ..
9080                 my %mtext = &load_language($m->{'dir'});
9081                 if ($mtext{"category_$c"}) {
9082                         $cats{$c} = $mtext{"category_$c"};
9083                         }
9084                 else {
9085                         $c = $m->{'category'} = "";
9086                         $cats{$c} = $text{"category_$c"};
9087                         }
9088                 }
9089         }
9090 return %cats;
9091 }
9092
9093 =head2 is_readonly_mode
9094
9095 Returns 1 if the current user is in read-only mode, and thus all writes
9096 to files and command execution should fail.
9097
9098 =cut
9099 sub is_readonly_mode
9100 {
9101 if (!defined($main::readonly_mode_cache)) {
9102         my %gaccess = &get_module_acl(undef, "");
9103         $main::readonly_mode_cache = $gaccess{'readonly'} ? 1 : 0;
9104         }
9105 return $main::readonly_mode_cache;
9106 }
9107
9108 =head2 command_as_user(user, with-env?, command, ...)
9109
9110 Returns a command to execute some command as the given user, using the
9111 su statement. If on Linux, the /bin/sh shell is forced in case the user
9112 does not have a valid shell. If with-env is set to 1, the -s flag is added
9113 to the su command to read the user's .profile or .bashrc file.
9114
9115 =cut
9116 sub command_as_user
9117 {
9118 my ($user, $env, @args) = @_;
9119 my @uinfo = getpwnam($user);
9120 if ($uinfo[8] ne "/bin/sh" && $uinfo[8] !~ /\/bash$/) {
9121         # User shell doesn't appear to be valid
9122         if ($gconfig{'os_type'} =~ /-linux$/) {
9123                 # Use -s /bin/sh to force it
9124                 $shellarg = " -s /bin/sh";
9125                 }
9126         elsif ($gconfig{'os_type'} eq 'freebsd' ||
9127                $gconfig{'os_type'} eq 'solaris' &&
9128                 $gconfig{'os_version'} >= 11 ||
9129                $gconfig{'os_type'} eq 'macos') {
9130                 # Use -m and force /bin/sh
9131                 @args = ( "/bin/sh", "-c", quotemeta(join(" ", @args)) );
9132                 $shellarg = " -m";
9133                 }
9134         }
9135 my $rv = "su".($env ? " -" : "").$shellarg.
9136          " ".quotemeta($user)." -c ".quotemeta(join(" ", @args));
9137 return $rv;
9138 }
9139
9140 =head2 list_osdn_mirrors(project, file)
9141
9142 This function is now deprecated in favor of letting sourceforge just
9143 redirect to the best mirror, and now just returns their primary download URL.
9144
9145 =cut
9146 sub list_osdn_mirrors
9147 {
9148 my ($project, $file) = @_;
9149 return ( { 'url' => "http://downloads.sourceforge.net/$project/$file",
9150            'default' => 0,
9151            'mirror' => 'downloads' } );
9152 }
9153
9154 =head2 convert_osdn_url(url)
9155
9156 Given a URL like http://osdn.dl.sourceforge.net/sourceforge/project/file.zip
9157 or http://prdownloads.sourceforge.net/project/file.zip , convert it
9158 to a real URL on the sourceforge download redirector.
9159
9160 =cut
9161 sub convert_osdn_url
9162 {
9163 my ($url) = @_;
9164 if ($url =~ /^http:\/\/[^\.]+.dl.sourceforge.net\/sourceforge\/([^\/]+)\/(.*)$/ ||
9165     $url =~ /^http:\/\/prdownloads.sourceforge.net\/([^\/]+)\/(.*)$/) {
9166         # Always use the Sourceforge mail download URL, which does
9167         # a location-based redirect for us
9168         my ($project, $file) = ($1, $2);
9169         $url = "http://prdownloads.sourceforge.net/sourceforge/".
9170                "$project/$file";
9171         return wantarray ? ( $url, 0 ) : $url;
9172         }
9173 else {
9174         # Some other source .. don't change
9175         return wantarray ? ( $url, 2 ) : $url;
9176         }
9177 }
9178
9179 =head2 get_current_dir
9180
9181 Returns the directory the current process is running in.
9182
9183 =cut
9184 sub get_current_dir
9185 {
9186 my $out;
9187 if ($gconfig{'os_type'} eq 'windows') {
9188         # Use cd command
9189         $out = `cd`;
9190         }
9191 else {
9192         # Use pwd command
9193         $out = `pwd`;
9194         $out =~ s/\\/\//g;
9195         }
9196 $out =~ s/\r|\n//g;
9197 return $out;
9198 }
9199
9200 =head2 supports_users
9201
9202 Returns 1 if the current OS supports Unix user concepts and functions like
9203 su , getpw* and so on. This will be true on Linux and other Unixes, but false
9204 on Windows.
9205
9206 =cut
9207 sub supports_users
9208 {
9209 return $gconfig{'os_type'} ne 'windows';
9210 }
9211
9212 =head2 supports_symlinks
9213
9214 Returns 1 if the current OS supports symbolic and hard links. This will not
9215 be the case on Windows.
9216
9217 =cut
9218 sub supports_symlinks
9219 {
9220 return $gconfig{'os_type'} ne 'windows';
9221 }
9222
9223 =head2 quote_path(path)
9224
9225 Returns a path with safe quoting for the current operating system.
9226
9227 =cut
9228 sub quote_path
9229 {
9230 my ($path) = @_;
9231 if ($gconfig{'os_type'} eq 'windows' || $path =~ /^[a-z]:/i) {
9232         # Windows only supports "" style quoting
9233         return "\"$path\"";
9234         }
9235 else {
9236         return quotemeta($path);
9237         }
9238 }
9239
9240 =head2 get_windows_root
9241
9242 Returns the base windows system directory, like c:/windows.
9243
9244 =cut
9245 sub get_windows_root
9246 {
9247 if ($ENV{'SystemRoot'}) {
9248         my $rv = $ENV{'SystemRoot'};
9249         $rv =~ s/\\/\//g;
9250         return $rv;
9251         }
9252 else {
9253         return -d "c:/windows" ? "c:/windows" : "c:/winnt";
9254         }
9255 }
9256
9257 =head2 read_file_contents(file)
9258
9259 Given a filename, returns its complete contents as a string. Effectively
9260 the same as the Perl construct `cat file`.
9261
9262 =cut
9263 sub read_file_contents
9264 {
9265 &open_readfile(FILE, $_[0]) || return undef;
9266 local $/ = undef;
9267 my $rv = <FILE>;
9268 close(FILE);
9269 return $rv;
9270 }
9271
9272 =head2 unix_crypt(password, salt)
9273
9274 Performs Unix encryption on a password, using the built-in crypt function or
9275 the Crypt::UnixCrypt module if the former does not work. The salt parameter
9276 must be either an already-hashed password, or a two-character alpha-numeric
9277 string.
9278
9279 =cut
9280 sub unix_crypt
9281 {
9282 my ($pass, $salt) = @_;
9283 return "" if ($salt !~ /^[a-zA-Z0-9\.\/]{2}/);   # same as real crypt
9284 my $rv = eval "crypt(\$pass, \$salt)";
9285 my $err = $@;
9286 return $rv if ($rv && !$@);
9287 eval "use Crypt::UnixCrypt";
9288 if (!$@) {
9289         return Crypt::UnixCrypt::crypt($pass, $salt);
9290         }
9291 else {
9292         &error("Failed to encrypt password : $err");
9293         }
9294 }
9295
9296 =head2 split_quoted_string(string)
9297
9298 Given a string like I<foo "bar baz" quux>, returns the array :
9299 foo, bar baz, quux
9300
9301 =cut
9302 sub split_quoted_string
9303 {
9304 my ($str) = @_;
9305 my @rv;
9306 while($str =~ /^"([^"]*)"\s*([\000-\377]*)$/ ||
9307       $str =~ /^'([^']*)'\s*([\000-\377]*)$/ ||
9308       $str =~ /^(\S+)\s*([\000-\377]*)$/) {
9309         push(@rv, $1);
9310         $str = $2;
9311         }
9312 return @rv;
9313 }
9314
9315 =head2 write_to_http_cache(url, file|&data)
9316
9317 Updates the Webmin cache with the contents of the given file, possibly also
9318 clearing out old data. Mainly for internal use by http_download.
9319
9320 =cut
9321 sub write_to_http_cache
9322 {
9323 my ($url, $file) = @_;
9324 return 0 if (!$gconfig{'cache_size'});
9325
9326 # Don't cache downloads that look dynamic
9327 if ($url =~ /cgi-bin/ || $url =~ /\?/) {
9328         return 0;
9329         }
9330
9331 # Check if the current module should do caching
9332 if ($gconfig{'cache_mods'} =~ /^\!(.*)$/) {
9333         # Caching all except some modules
9334         my @mods = split(/\s+/, $1);
9335         return 0 if (&indexof(&get_module_name(), @mods) != -1);
9336         }
9337 elsif ($gconfig{'cache_mods'}) {
9338         # Only caching some modules
9339         my @mods = split(/\s+/, $gconfig{'cache_mods'});
9340         return 0 if (&indexof(&get_module_name(), @mods) == -1);
9341         }
9342
9343 # Work out the size
9344 my $size;
9345 if (ref($file)) {
9346         $size = length($$file);
9347         }
9348 else {
9349         my @st = stat($file);
9350         $size = $st[7];
9351         }
9352
9353 if ($size > $gconfig{'cache_size'}) {
9354         # Bigger than the whole cache - so don't save it
9355         return 0;
9356         }
9357 my $cfile = $url;
9358 $cfile =~ s/\//_/g;
9359 $cfile = "$main::http_cache_directory/$cfile";
9360
9361 # See how much we have cached currently, clearing old files
9362 my $total = 0;
9363 mkdir($main::http_cache_directory, 0700) if (!-d $main::http_cache_directory);
9364 opendir(CACHEDIR, $main::http_cache_directory);
9365 foreach my $f (readdir(CACHEDIR)) {
9366         next if ($f eq "." || $f eq "..");
9367         my $path = "$main::http_cache_directory/$f";
9368         my @st = stat($path);
9369         if ($gconfig{'cache_days'} &&
9370             time()-$st[9] > $gconfig{'cache_days'}*24*60*60) {
9371                 # This file is too old .. trash it
9372                 unlink($path);
9373                 }
9374         else {
9375                 $total += $st[7];
9376                 push(@cached, [ $path, $st[7], $st[9] ]);
9377                 }
9378         }
9379 closedir(CACHEDIR);
9380 @cached = sort { $a->[2] <=> $b->[2] } @cached;
9381 while($total+$size > $gconfig{'cache_size'} && @cached) {
9382         # Cache is too big .. delete some files until the new one will fit
9383         unlink($cached[0]->[0]);
9384         $total -= $cached[0]->[1];
9385         shift(@cached);
9386         }
9387
9388 # Finally, write out the new file
9389 if (ref($file)) {
9390         &open_tempfile(CACHEFILE, ">$cfile");
9391         &print_tempfile(CACHEFILE, $$file);
9392         &close_tempfile(CACHEFILE);
9393         }
9394 else {
9395         my ($ok, $err) = &copy_source_dest($file, $cfile);
9396         }
9397
9398 return 1;
9399 }
9400
9401 =head2 check_in_http_cache(url)
9402
9403 If some URL is in the cache and valid, return the filename for it. Mainly
9404 for internal use by http_download.
9405
9406 =cut
9407 sub check_in_http_cache
9408 {
9409 my ($url) = @_;
9410 return undef if (!$gconfig{'cache_size'});
9411
9412 # Check if the current module should do caching
9413 if ($gconfig{'cache_mods'} =~ /^\!(.*)$/) {
9414         # Caching all except some modules
9415         my @mods = split(/\s+/, $1);
9416         return 0 if (&indexof(&get_module_name(), @mods) != -1);
9417         }
9418 elsif ($gconfig{'cache_mods'}) {
9419         # Only caching some modules
9420         my @mods = split(/\s+/, $gconfig{'cache_mods'});
9421         return 0 if (&indexof(&get_module_name(), @mods) == -1);
9422         }
9423
9424 my $cfile = $url;
9425 $cfile =~ s/\//_/g;
9426 $cfile = "$main::http_cache_directory/$cfile";
9427 my @st = stat($cfile);
9428 return undef if (!@st || !$st[7]);
9429 if ($gconfig{'cache_days'} && time()-$st[9] > $gconfig{'cache_days'}*24*60*60) {
9430         # Too old!
9431         unlink($cfile);
9432         return undef;
9433         }
9434 open(TOUCH, ">>$cfile");        # Update the file time, to keep it in the cache
9435 close(TOUCH);
9436 return $cfile;
9437 }
9438
9439 =head2 supports_javascript
9440
9441 Returns 1 if the current browser is assumed to support javascript.
9442
9443 =cut
9444 sub supports_javascript
9445 {
9446 if (defined(&theme_supports_javascript)) {
9447         return &theme_supports_javascript();
9448         }
9449 return $ENV{'MOBILE_DEVICE'} ? 0 : 1;
9450 }
9451
9452 =head2 get_module_name
9453
9454 Returns the name of the Webmin module that called this function. For internal
9455 use only by other API functions.
9456
9457 =cut
9458 sub get_module_name
9459 {
9460 return &get_module_variable('$module_name');
9461 }
9462
9463 =head2 get_module_variable(name, [ref])
9464
9465 Returns the value of some variable which is set in the caller's context, if
9466 using the new WebminCore package. For internal use only.
9467
9468 =cut
9469 sub get_module_variable
9470 {
9471 my ($v, $wantref) = @_;
9472 my $slash = $wantref ? "\\" : "";
9473 my $thispkg = &web_libs_package();
9474 if ($thispkg eq 'WebminCore') {
9475         my ($vt, $vn) = split('', $v, 2);
9476         my $callpkg;
9477         for(my $i=0; ($callpkg) = caller($i); $i++) {
9478                 last if ($callpkg ne $thispkg);
9479                 }
9480         return eval "${slash}${vt}${callpkg}::${vn}";
9481         }
9482 return eval "${slash}${v}";
9483 }
9484
9485 =head2 clear_time_locale()
9486
9487 Temporarily force the locale to C, until reset_time_locale is called. This is
9488 useful if your code is going to call C<strftime> from the POSIX package, and
9489 you want to ensure that the output is in a consistent format.
9490
9491 =cut
9492 sub clear_time_locale
9493 {
9494 if ($main::clear_time_locale_count == 0) {
9495         eval {
9496                 use POSIX;
9497                 $main::clear_time_locale_old = POSIX::setlocale(POSIX::LC_TIME);
9498                 POSIX::setlocale(POSIX::LC_TIME, "C");
9499                 };
9500         }
9501 $main::clear_time_locale_count++;
9502 }
9503
9504 =head2 reset_time_locale()
9505
9506 Revert the locale to whatever it was before clear_time_locale was called
9507
9508 =cut
9509 sub reset_time_locale
9510 {
9511 if ($main::clear_time_locale_count == 1) {
9512         eval {
9513                 POSIX::setlocale(POSIX::LC_TIME, $main::clear_time_locale_old);
9514                 $main::clear_time_locale_old = undef;
9515                 };
9516         }
9517 $main::clear_time_locale_count--;
9518 }
9519
9520 =head2 callers_package(filehandle)
9521
9522 Convert a non-module filehandle like FOO to one qualified with the 
9523 caller's caller's package, like fsdump::FOO. For internal use only.
9524
9525 =cut
9526 sub callers_package
9527 {
9528 my ($fh) = @_;
9529 my $callpkg = (caller(1))[0];
9530 my $thispkg = &web_libs_package();
9531 if (!ref($fh) && $fh !~ /::/ &&
9532     $callpkg ne $thispkg && $thispkg eq 'WebminCore') {
9533         $fh = $callpkg."::".$fh;
9534         }
9535 return $fh;
9536 }
9537
9538 =head2 web_libs_package()
9539
9540 Returns the package this code is in. We can't always trust __PACKAGE__. For
9541 internal use only.
9542
9543 =cut
9544 sub web_libs_package
9545 {
9546 if ($called_from_webmin_core) {
9547         return "WebminCore";
9548         }
9549 return __PACKAGE__;
9550 }
9551
9552 =head2 get_userdb_string
9553
9554 Returns the URL-style string for connecting to the users and groups database
9555
9556 =cut
9557 sub get_userdb_string
9558 {
9559 return undef if ($main::no_miniserv_userdb);
9560 my %miniserv;
9561 &get_miniserv_config(\%miniserv);
9562 return $miniserv{'userdb'};
9563 }
9564
9565 =head2 connect_userdb(string)
9566
9567 Returns a handle for talking to a user database - may be a DBI or LDAP handle.
9568 On failure returns an error message string. In an array context, returns the
9569 protocol type too.
9570
9571 =cut
9572 sub connect_userdb
9573 {
9574 my ($str) = @_;
9575 my ($proto, $user, $pass, $host, $prefix, $args) = &split_userdb_string($str);
9576 if ($proto eq "mysql") {
9577         # Connect to MySQL with DBI
9578         my $drh = eval "use DBI; DBI->install_driver('mysql');";
9579         $drh || return $text{'sql_emysqldriver'};
9580         my ($host, $port) = split(/:/, $host);
9581         my $cstr = "database=$prefix;host=$host";
9582         $cstr .= ";port=$port" if ($port);
9583         my $dbh = $drh->connect($cstr, $user, $pass, { });
9584         $dbh || return &text('sql_emysqlconnect', $drh->errstr);
9585         return wantarray ? ($dbh, $proto, $prefix, $args) : $dbh;
9586         }
9587 elsif ($proto eq "postgresql") {
9588         # Connect to PostgreSQL with DBI
9589         my $drh = eval "use DBI; DBI->install_driver('Pg');";
9590         $drh || return $text{'sql_epostgresqldriver'};
9591         my ($host, $port) = split(/:/, $host);
9592         my $cstr = "dbname=$prefix;host=$host";
9593         $cstr .= ";port=$port" if ($port);
9594         my $dbh = $drh->connect($cstr, $user, $pass);
9595         $dbh || return &text('sql_epostgresqlconnect', $drh->errstr);
9596         return wantarray ? ($dbh, $proto, $prefix, $args) : $dbh;
9597         }
9598 elsif ($proto eq "ldap") {
9599         # Connect with perl LDAP module
9600         eval "use Net::LDAP";
9601         $@ && return $text{'sql_eldapdriver'};
9602         my ($host, $port) = split(/:/, $host);
9603         my $scheme = $args->{'scheme'} || 'ldap';
9604         if (!$port) {
9605                 $port = $scheme eq 'ldaps' ? 636 : 389;
9606                 }
9607         my $ldap = Net::LDAP->new($host,
9608                                   port => $port,
9609                                   'scheme' => $scheme);
9610         $ldap || return &text('sql_eldapconnect', $host);
9611         my $mesg;
9612         if ($args->{'tls'}) {
9613                 # Switch to TLS mode
9614                 eval { $mesg = $ldap->start_tls(); };
9615                 if ($@ || !$mesg || $mesg->code) {
9616                         return &text('sql_eldaptls',
9617                             $@ ? $@ : $mesg ? $mesg->error : "Unknown error");
9618                         }
9619                 }
9620         # Login to the server
9621         if ($pass) {
9622                 $mesg = $ldap->bind(dn => $user, password => $pass);
9623                 }
9624         else {
9625                 $mesg = $ldap->bind(dn => $user, anonymous => 1);
9626                 }
9627         if (!$mesg || $mesg->code) {
9628                 return &text('sql_eldaplogin', $user,
9629                              $mesg ? $mesg->error : "Unknown error");
9630                 }
9631         return wantarray ? ($ldap, $proto, $prefix, $args) : $ldap;
9632         }
9633 else {
9634         return "Unknown protocol $proto";
9635         }
9636 }
9637
9638 =head2 disconnect_userdb(string, &handle)
9639
9640 Closes a handle opened by connect_userdb
9641
9642 =cut
9643 sub disconnect_userdb
9644 {
9645 my ($str, $h) = @_;
9646 if ($str =~ /^(mysql|postgresql):/) {
9647         # DBI disconnnect
9648         if (!$h->{'AutoCommit'}) {
9649                 $h->commit();
9650                 }
9651         $h->disconnect();
9652         }
9653 elsif ($str =~ /^ldap:/) {
9654         # LDAP disconnect
9655         $h->unbind();
9656         $h->disconnect();
9657         }
9658 }
9659
9660 =head2 split_userdb_string(string)
9661
9662 Converts a string like mysql://user:pass@host/db into separate parts
9663
9664 =cut
9665 sub split_userdb_string
9666 {
9667 my ($str) = @_;
9668 if ($str =~ /^([a-z]+):\/\/([^:]*):([^\@]*)\@([a-z0-9\.\-\_]+)\/([^\?]+)(\?(.*))?$/) {
9669         my ($proto, $user, $pass, $host, $prefix, $argstr) =
9670                 ($1, $2, $3, $4, $5, $7);
9671         my %args = map { split(/=/, $_, 2) } split(/\&/, $argstr);
9672         return ($proto, $user, $pass, $host, $prefix, \%args);
9673         }
9674 return ( );
9675 }
9676
9677 $done_web_lib_funcs = 1;
9678
9679 1;