Split infobox generation out into its own function.
[pr0n] / perl / Sesse / pr0n / Common.pm
1 package Sesse::pr0n::Common;
2 use strict;
3 use warnings;
4
5 use Sesse::pr0n::Overload;
6 use Sesse::pr0n::QscaleProxy;
7 use Sesse::pr0n::Templates;
8
9 use Carp;
10 use Encode;
11 use DBI;
12 use DBD::Pg;
13 use Image::Magick;
14 use IO::String;
15 use POSIX;
16 use MIME::Base64;
17 use MIME::Types;
18 use LWP::Simple;
19 # use Image::Info;
20 use Image::ExifTool;
21 use HTML::Entities;
22 use URI::Escape;
23 use File::Basename;
24 use Crypt::Eksblowfish::Bcrypt;
25
26 BEGIN {
27         use Exporter ();
28         our ($VERSION, @ISA, @EXPORT, @EXPORT_OK, %EXPORT_TAGS);
29
30         use Sesse::pr0n::Config;
31         eval {
32                 require Sesse::pr0n::Config_local;
33         };
34
35         $VERSION     = "v3.01";
36         @ISA         = qw(Exporter);
37         @EXPORT      = qw(&error &dberror);
38         %EXPORT_TAGS = qw();
39         @EXPORT_OK   = qw(&error &dberror);
40
41         our $dbh = DBI->connect("dbi:Pg:dbname=pr0n;host=" . $Sesse::pr0n::Config::db_host,
42                 $Sesse::pr0n::Config::db_username, $Sesse::pr0n::Config::db_password)
43                 or die "Couldn't connect to PostgreSQL database: " . DBI->errstr;
44         our $mimetypes = new MIME::Types;
45         
46         print STDERR "Initializing pr0n $VERSION\n";
47 }
48 END {
49         our $dbh;
50         $dbh->disconnect;
51 }
52
53 our ($dbh, $mimetypes);
54
55 sub error {
56         my ($r,$err,$status,$title) = @_;
57
58         if (!defined($status) || !defined($title)) {
59                 $status = 500;
60                 $title = "Internal server error";
61         }
62
63         my $res = Plack::Response->new($status);
64         my $io = IO::String->new;
65         
66         $r->content_type('text/html; charset=utf-8');
67
68         header($r, $io, $title);
69         $io->print("    <p>Error: $err</p>\n");
70         footer($r, $io);
71
72         log_error($r, $err);
73         log_error($r, "Stack trace follows: " . Carp::longmess());
74
75         $io->setpos(0);
76         $res->body($io);
77         return $res;
78 }
79
80 sub dberror {
81         my ($r,$err) = @_;
82         return error($r, "$err (DB error: " . $dbh->errstr . ")");
83 }
84
85 sub header {
86         my ($r, $io, $title) = @_;
87
88         $r->content_type("text/html; charset=utf-8");
89
90         # Fetch quote if we're itk-bilder.samfundet.no
91         my $quote = "";
92         if (Sesse::pr0n::Common::get_server_name($r) eq 'itk-bilder.samfundet.no') {
93                 $quote = LWP::Simple::get("http://itk.samfundet.no/include/quotes.cli.php");
94                 $quote = "Error: Could not fetch quotes." if (!defined($quote));
95         }
96         Sesse::pr0n::Templates::print_template($r, $io, "header", { title => $title, quotes => $quote });
97 }
98
99 sub footer {
100         my ($r, $io) = @_;
101         Sesse::pr0n::Templates::print_template($r, $io, "footer",
102                 { version => $Sesse::pr0n::Common::VERSION });
103 }
104
105 sub scale_aspect {
106         my ($width, $height, $thumbxres, $thumbyres) = @_;
107
108         unless ($thumbxres >= $width &&
109                 $thumbyres >= $height) {
110                 my $sfh = $width / $thumbxres;
111                 my $sfv = $height / $thumbyres;
112                 if ($sfh > $sfv) {
113                         $width  /= $sfh;
114                         $height /= $sfh;
115                 } else {
116                         $width  /= $sfv;
117                         $height /= $sfv;
118                 }
119                 $width = POSIX::floor($width);
120                 $height = POSIX::floor($height);
121         }
122
123         return ($width, $height);
124 }
125
126 sub get_query_string {
127         my ($param, $defparam) = @_;
128         my $first = 1;
129         my $str = "";
130
131         for my $key (sort keys %$param) {
132                 my $value = $param->{$key};
133                 next unless defined($value);
134                 next if (defined($defparam->{$key}) && $value == $defparam->{$key});
135
136                 $value = pretty_escape($value);
137         
138                 $str .= ($first) ? "?" : ';';
139                 $str .= "$key=$value";
140                 $first = 0;
141         }
142         return $str;
143 }
144
145 # This is not perfect (it can't handle "_ " right, for one), but it will do for now
146 sub weird_space_encode {
147         my $val = shift;
148         if ($val =~ /_/) {
149                 return "_" x (length($val) * 2);
150         } else {
151                 return "_" x (length($val) * 2 - 1);
152         }
153 }
154
155 sub weird_space_unencode {
156         my $val = shift;
157         if (length($val) % 2 == 0) {
158                 return "_" x (length($val) / 2);
159         } else {
160                 return " " x ((length($val) + 1) / 2);
161         }
162 }
163                 
164 sub pretty_escape {
165         my $value = shift;
166
167         $value =~ s/(([_ ])\2*)/weird_space_encode($1)/ge;
168         $value = URI::Escape::uri_escape($value);
169         $value =~ s/%2F/\//g;
170
171         return $value;
172 }
173
174 sub pretty_unescape {
175         my $value = shift;
176
177         # URI unescaping is already done for us
178         $value =~ s/(_+)/weird_space_unencode($1)/ge;
179
180         return $value;
181 }
182
183 sub print_link {
184         my ($io, $title, $baseurl, $param, $defparam, $accesskey) = @_;
185         my $str = "<a href=\"$baseurl" . get_query_string($param, $defparam) . "\"";
186         if (defined($accesskey) && length($accesskey) == 1) {
187                 $str .= " accesskey=\"$accesskey\"";
188         }
189         $str .= ">$title</a>";
190         $io->print($str);
191 }
192
193 sub get_dbh {
194         # Check that we are alive
195         if (!(defined($dbh) && $dbh->ping)) {
196                 # Try to reconnect
197                 print STDERR "Lost contact with PostgreSQL server, trying to reconnect...\n";
198                 unless ($dbh = DBI->connect("dbi:Pg:dbname=pr0n;host=" . $Sesse::pr0n::Config::db_host,
199                         $Sesse::pr0n::Config::db_username, $Sesse::pr0n::Config::db_password)) {
200                         $dbh = undef;
201                         die "Couldn't connect to PostgreSQL database";
202                 }
203         }
204
205         return $dbh;
206 }
207
208 sub get_disk_location {
209         my ($r, $id) = @_;
210         my $dir = POSIX::floor($id / 256);
211         return $Sesse::pr0n::Config::image_base . "images/$dir/$id.jpg";
212 }
213
214 sub get_cache_location {
215         my ($r, $id, $width, $height, $infobox, $dpr) = @_;
216         my $dir = POSIX::floor($id / 256);
217
218         if ($infobox) {
219                 if ($dpr == 1) {
220                         return $Sesse::pr0n::Config::image_base . "cache/$dir/$id-$width-$height-box.png";
221                 } else {
222                         return $Sesse::pr0n::Config::image_base . "cache/$dir/$id-$width-$height-box\@$dpr.png";
223                 }
224         } else {
225                 return $Sesse::pr0n::Config::image_base . "cache/$dir/$id-$width-$height-nobox.jpg";
226         }
227 }
228
229 sub ensure_disk_location_exists {
230         my ($r, $id) = @_;
231         my $dir = POSIX::floor($id / 256);
232
233         my $img_dir = $Sesse::pr0n::Config::image_base . "/images/$dir/";
234         if (! -d $img_dir) {
235                 log_info($r, "Need to create new image directory $img_dir");
236                 mkdir($img_dir) or die "Couldn't create new image directory $img_dir";
237         }
238
239         my $cache_dir = $Sesse::pr0n::Config::image_base . "/cache/$dir/";
240         if (! -d $cache_dir) {
241                 log_info($r, "Need to create new cache directory $cache_dir");
242                 mkdir($cache_dir) or die "Couldn't create new image directory $cache_dir";
243         }
244 }
245
246 sub get_mipmap_location {
247         my ($r, $id, $width, $height) = @_;
248         my $dir = POSIX::floor($id / 256);
249
250         return $Sesse::pr0n::Config::image_base . "cache/$dir/$id-mipmap-$width-$height.jpg";
251 }
252
253 sub update_image_info {
254         my ($r, $id, $width, $height) = @_;
255
256         # Also find the date taken if appropriate (from the EXIF tag etc.)
257         my $exiftool = Image::ExifTool->new;
258         $exiftool->ExtractInfo(get_disk_location($r, $id));
259         my $info = $exiftool->GetInfo();
260         my $datetime = undef;
261                         
262         if (defined($info->{'DateTimeOriginal'})) {
263                 # Parse the date and time over to ISO format
264                 if ($info->{'DateTimeOriginal'} =~ /^(\d{4}):(\d\d):(\d\d) (\d\d):(\d\d):(\d\d)(?:\+\d\d:\d\d)?$/ && $1 > 1990) {
265                         $datetime = "$1-$2-$3 $4:$5:$6";
266                 }
267         }
268
269         {
270                 local $dbh->{AutoCommit} = 0;
271
272                 # EXIF information
273                 $dbh->do('DELETE FROM exif_info WHERE image=?',
274                         undef, $id)
275                         or die "Couldn't delete old EXIF information in SQL: $!";
276
277                 my $q = $dbh->prepare('INSERT INTO exif_info (image,key,value) VALUES (?,?,?)')
278                         or die "Couldn't prepare inserting EXIF information: $!";
279
280                 for my $key (keys %$info) {
281                         next if ref $info->{$key};
282                         $q->execute($id, $key, guess_charset($info->{$key}))
283                                 or die "Couldn't insert EXIF information in database: $!";
284                 }
285
286                 # Model/Lens
287                 my $model = $exiftool->GetValue('Model', 'PrintConv');
288                 my $lens = $exiftool->GetValue('Lens', 'PrintConv');
289                 $lens = $exiftool->GetValue('LensSpec', 'PrintConv') if (!defined($lens));
290
291                 $model =~ s/^\s*//;
292                 $model =~ s/\s*$//;
293                 $model = undef if (length($model) == 0);
294
295                 $lens =~ s/^\s*//;
296                 $lens =~ s/\s*$//;
297                 $lens = undef if (length($lens) == 0);
298                 
299                 # Now update the main table with the information we've got
300                 $dbh->do('UPDATE images SET width=?, height=?, date=?, model=?, lens=? WHERE id=?',
301                          undef, $width, $height, $datetime, $model, $lens, $id)
302                         or die "Couldn't update width/height in SQL: $!";
303                 
304                 # update the last_picture cache as well (this should of course be done
305                 # via a trigger, but this is less complicated :-) )
306                 $dbh->do('UPDATE last_picture_cache SET last_picture=GREATEST(last_picture, ?),last_update=CURRENT_TIMESTAMP WHERE (vhost,event)=(SELECT vhost,event FROM images WHERE id=?)',
307                         undef, $datetime, $id)
308                         or die "Couldn't update last_picture in SQL: $!";
309         }
310 }
311
312 sub check_access {
313         my $r = shift;
314         
315         #return qw(sesse Sesse);
316
317         my $auth = $r->header('authorization');
318         if (!defined($auth)) {
319                 return undef;
320         } 
321         if ($auth =~ /^Basic ([a-zA-Z0-9+\/]+=*)$/) {
322                 return check_basic_auth($r, $1);
323         }       
324         return undef;
325 }
326
327 sub generate_401 {
328         my ($r) = @_;
329         my $res = Plack::Response->new(401);
330         $res->content_type('text/plain; charset=utf-8');
331         $res->status(401);
332         $res->header('WWW-Authenticate' => 'Basic realm="pr0n.sesse.net"');
333
334         $res->body("Need authorization\n");
335         return $res;
336 }
337
338 sub check_basic_auth {
339         my ($r, $auth) = @_;    
340
341         my ($raw_user, $pass) = split /:/, MIME::Base64::decode_base64($auth);
342         my ($user, $takenby) = extract_takenby($raw_user);
343
344         my $ref = $dbh->selectrow_hashref('SELECT cryptpassword FROM users WHERE username=? AND vhost=?',
345                 undef, $user, Sesse::pr0n::Common::get_server_name($r));
346         my $bcrypt_matches = 0;
347         if (!defined($ref) || Crypt::Eksblowfish::Bcrypt::bcrypt($pass, $ref->{'cryptpassword'}) ne $ref->{'cryptpassword'}) {
348                 $r->content_type('text/plain; charset=utf-8');
349                 log_warn($r, "Authentication failed for $user/$takenby");
350                 return undef;
351         }
352         log_info($r, "Authentication succeeded for $user/$takenby");
353
354         return ($user, $takenby);
355 }
356
357 sub get_pseudorandom_bytes {
358         my $num_left = shift;
359         my $bytes = "";
360         open my $randfh, "<", "/dev/urandom"
361                 or die "/dev/urandom: $!";
362         binmode $randfh;
363         while ($num_left > 0) {
364                 my $tmp;
365                 if (sysread($randfh, $tmp, $num_left) == -1) {
366                         die "sysread(/dev/urandom): $!";
367                 }
368                 $bytes .= $tmp;
369                 $num_left -= length($bytes);
370         }
371         close $randfh;
372         return $bytes;
373 }
374
375 sub extract_takenby {
376         my ($user) = shift;
377
378         # WinXP is stupid :-)
379         if ($user =~ /^.*\\(.*)$/) {
380                 $user = $1;
381         }
382
383         my $takenby;
384         if ($user =~ /^([a-zA-Z0-9^_-]+)\@([a-zA-Z0-9^_-]+)$/) {
385                 $user = $1;
386                 $takenby = $2;
387         } else {
388                 ($takenby = $user) =~ s/^([a-zA-Z])/uc($1)/e;
389         }
390
391         return ($user, $takenby);
392 }
393         
394 sub stat_image {
395         my ($r, $event, $filename) = (@_);
396         my $ref = $dbh->selectrow_hashref(
397                 'SELECT id FROM images WHERE event=? AND filename=?',
398                 undef, $event, $filename);
399         if (!defined($ref)) {
400                 return (undef, undef, undef);
401         }
402         return stat_image_from_id($r, $ref->{'id'});
403 }
404
405 sub stat_image_from_id {
406         my ($r, $id) = @_;
407
408         my $fname = get_disk_location($r, $id);
409         my (undef, undef, undef, undef, undef, undef, undef, $size, undef, $mtime) = stat($fname)
410                 or return (undef, undef, undef);
411
412         return ($fname, $size, $mtime);
413 }
414
415 # Takes in an image ID and a set of resolutions, and returns (generates if needed)
416 # the smallest mipmap larger than the largest of them, as well as the original image
417 # dimensions.
418 sub make_mipmap {
419         my ($r, $filename, $id, $dbwidth, $dbheight, @res) = @_;
420         my ($img, $mmimg, $width, $height);
421         
422         my $physical_fname = get_disk_location($r, $id);
423
424         # If we don't know the size, we'll need to read it in anyway
425         if (!defined($dbwidth) || !defined($dbheight)) {
426                 $img = read_original_image($r, $filename, $id, $dbwidth, $dbheight);
427                 $width = $img->Get('columns');
428                 $height = $img->Get('rows');
429         } else {
430                 $width = $dbwidth;
431                 $height = $dbheight;
432         }
433
434         # Generate the list of mipmaps
435         my @mmlist = ();
436         
437         my $mmwidth = $width;
438         my $mmheight = $height;
439
440         while ($mmwidth > 1 || $mmheight > 1) {
441                 my $new_mmwidth = POSIX::floor($mmwidth / 2);           
442                 my $new_mmheight = POSIX::floor($mmheight / 2);         
443
444                 $new_mmwidth = 1 if ($new_mmwidth < 1);
445                 $new_mmheight = 1 if ($new_mmheight < 1);
446
447                 my $large_enough = 1;
448                 for my $i (0..($#res/2)) {
449                         my ($xres, $yres) = ($res[$i*2], $res[$i*2+1]);
450                         if ($xres == -1 || $xres > $new_mmwidth || $yres > $new_mmheight) {
451                                 $large_enough = 0;
452                                 last;
453                         }
454                 }
455                                 
456                 last if (!$large_enough);
457
458                 $mmwidth = $new_mmwidth;
459                 $mmheight = $new_mmheight;
460
461                 push @mmlist, [ $mmwidth, $mmheight ];
462         }
463                 
464         # Ensure that all of them are OK
465         my $last_good_mmlocation;
466         for my $i (0..$#mmlist) {
467                 my $last = ($i == $#mmlist);
468                 my $mmres = $mmlist[$i];
469
470                 my $mmlocation = get_mipmap_location($r, $id, $mmres->[0], $mmres->[1]);
471                 if (! -r $mmlocation or (-M $mmlocation > -M $physical_fname)) {
472                         if (!defined($img)) {
473                                 if (defined($last_good_mmlocation)) {
474                                         $img = Sesse::pr0n::QscaleProxy->new;
475                                         $img->Read($last_good_mmlocation);
476                                 } else {
477                                         $img = read_original_image($r, $filename, $id, $dbwidth, $dbheight);
478                                 }
479                         }
480                         my $cimg;
481                         if ($last) {
482                                 $cimg = $img;
483                         } else {
484                                 $cimg = $img->Clone();
485                         }
486                         log_info($r, "Making mipmap for $id: " . $mmres->[0] . " x " . $mmres->[1]);
487                         $cimg->Resize(width=>$mmres->[0], height=>$mmres->[1], filter=>'Lanczos', 'sampling-factor'=>'1x1');
488                         $cimg->Strip();
489                         my $err = $cimg->write(
490                                 filename => $mmlocation,
491                                 quality => 95,
492                                 'sampling-factor' => '1x1'
493                         );
494                         $img = $cimg;
495                 } else {
496                         $last_good_mmlocation = $mmlocation;
497                 }
498                 if ($last && !defined($img)) {
499                         # OK, read in the smallest one
500                         $img = Sesse::pr0n::QscaleProxy->new;
501                         my $err = $img->Read($mmlocation);
502                 }
503         }
504
505         if (!defined($img)) {
506                 $img = read_original_image($r, $filename, $id, $dbwidth, $dbheight);
507                 $width = $img->Get('columns');
508                 $height = $img->Get('rows');
509         }
510         return ($img, $width, $height);
511 }
512
513 sub read_original_image {
514         my ($r, $filename, $id, $dbwidth, $dbheight) = @_;
515
516         my $physical_fname = get_disk_location($r, $id);
517
518         # Read in the original image
519         my $magick;
520         if ($filename =~ /\.jpeg$/i || $filename =~ /\.jpg$/i) {
521                 $magick = Sesse::pr0n::QscaleProxy->new;
522         } else {
523                 $magick = Image::Magick->new;
524         }
525         my $err;
526
527         # ImageMagick can handle NEF files, but it does it by calling dcraw as a delegate.
528         # The delegate support is rather broken and causes very odd stuff to happen when
529         # more than one thread does this at the same time. Thus, we simply do it ourselves.
530         if ($filename =~ /\.(nef|cr2)$/i) {
531                 # this would suffice if ImageMagick gets to fix their handling
532                 # $physical_fname = "NEF:$physical_fname";
533                 
534                 open DCRAW, "-|", "dcraw", "-w", "-c", $physical_fname
535                         or error("dcraw: $!");
536                 $err = $magick->Read(file => \*DCRAW);
537                 close(DCRAW);
538         } else {
539                 # We always want YCbCr JPEGs. Setting this explicitly here instead of using
540                 # RGB is slightly faster (no colorspace conversion needed) and works equally
541                 # well for our uses, as long as we don't need to draw an information box,
542                 # which trickles several ImageMagick bugs related to colorspace handling.
543                 # (Ideally we'd be able to keep the image subsampled and
544                 # planar, but that would probably be difficult for ImageMagick to expose.)
545                 #if (!$infobox) {
546                 #       $magick->Set(colorspace=>'YCbCr');
547                 #}
548                 $err = $magick->Read($physical_fname);
549         }
550         
551         if ($err) {
552                 log_warn($r, "$physical_fname: $err");
553                 $err =~ /(\d+)/;
554                 if ($1 >= 400) {
555                         undef $magick;
556                         error($r, "$physical_fname: $err");
557                 }
558         }
559
560         # If we use ->[0] unconditionally, text rendering (!) seems to crash
561         my $img;
562         if (ref($magick) !~ /Image::Magick/) {
563                 $img = $magick;
564         } else {
565                 $img = (scalar @$magick > 1) ? $magick->[0] : $magick;
566         }
567
568         return $img;
569 }
570
571 sub ensure_cached {
572         my ($r, $filename, $id, $dbwidth, $dbheight, $dpr, $xres, $yres, @otherres) = @_;
573
574         my ($new_dbwidth, $new_dbheight);
575
576         my $fname = get_disk_location($r, $id);
577         unless (defined($xres) && (!defined($dbwidth) || !defined($dbheight) || $xres < $dbwidth || $yres < $dbheight || $xres == -1)) {
578                 return ($fname, undef);
579         }
580
581         my $cachename = get_cache_location($r, $id, $xres, $yres, $infobox, $dpr);
582         my $err;
583         if (! -r $cachename or (-M $cachename > -M $fname)) {
584                 # If we are in overload mode (aka Slashdot mode), refuse to generate
585                 # new thumbnails.
586                 if (Sesse::pr0n::Overload::is_in_overload($r)) {
587                         log_warn($r, "In overload mode, not scaling $id to $xres x $yres");
588                         error($r, 'System is in overload mode, not doing any scaling');
589                 }
590
591                 my $img;
592                 ($img, $new_dbwidth, $new_dbheight) = make_mipmap($r, $filename, $id, $dbwidth, $dbheight, $xres, $yres, @otherres);
593
594                 while (defined($xres) && defined($yres)) {
595                         my ($nxres, $nyres) = (shift @otherres, shift @otherres);
596                         my $cachename = get_cache_location($r, $id, $xres, $yres, $infobox, $dpr);
597                         
598                         my $cimg;
599                         if (defined($nxres) && defined($nyres)) {
600                                 # we have more resolutions to scale, so don't throw
601                                 # the image away
602                                 $cimg = $img->Clone();
603                         } else {
604                                 $cimg = $img;
605                         }
606                 
607                         my $width = $img->Get('columns');
608                         my $height = $img->Get('rows');
609                         my ($nwidth, $nheight) = scale_aspect($width, $height, $xres, $yres);
610
611                         my $filter = 'Lanczos';
612                         my $quality = 87;
613                         my $sf = "1x1";
614
615                         if ($xres != -1) {
616                                 $cimg->Resize(width=>$nwidth, height=>$nheight, filter=>$filter, 'sampling-factor'=>$sf);
617                         }
618
619                         # Strip EXIF tags etc.
620                         $cimg->Strip();
621
622                         {
623                                 my %parms = (
624                                         filename => $cachename,
625                                         quality => $quality
626                                 );
627                                 if (($nwidth >= 640 && $nheight >= 480) ||
628                                     ($nwidth >= 480 && $nheight >= 640)) {
629                                         $parms{'interlace'} = 'Plane';
630                                 }
631                                 if (defined($sf)) {
632                                         $parms{'sampling-factor'} = $sf;
633                                 }
634                                 $err = $cimg->write(%parms);
635                         }
636
637                         undef $cimg;
638
639                         ($xres, $yres) = ($nxres, $nyres);
640
641                         log_info($r, "New cache: $nwidth x $nheight for $id.jpg");
642                 }
643                 
644                 undef $img;
645                 if ($err) {
646                         log_warn($r, "$fname: $err");
647                         $err =~ /(\d+)/;
648                         if ($1 >= 400) {
649                                 #@$magick = ();
650                                 error($r, "$fname: $err");
651                         }
652                 }
653         }
654         
655         # Update the SQL database if it doesn't contain the required info
656         if (!defined($dbwidth) && defined($new_dbwidth)) {
657                 log_info($r, "Updating width/height for $id: $new_dbwidth x $new_dbheight");
658                 update_image_info($r, $id, $new_dbwidth, $new_dbheight);
659         }
660
661         return ($cachename, 'image/jpeg');
662 }
663
664 sub ensure_infobox_cached {
665         my ($r, $filename, $id, $dbwidth, $dbheight, $infobox, $dpr, $xres, $yres) = @_;
666
667         my ($new_dbwidth, $new_dbheight);
668
669         my $fname = get_disk_location($r, $id);
670         my $cachename = get_cache_location($r, $id, $xres, $yres, 1, $dpr);
671         my $err;
672         if (! -r $cachename or (-M $cachename > -M $fname)) {
673                 # If we are in overload mode (aka Slashdot mode), refuse to generate
674                 # new thumbnails.
675                 if (Sesse::pr0n::Overload::is_in_overload($r)) {
676                         log_warn($r, "In overload mode, not scaling $id to $xres x $yres");
677                         error($r, 'System is in overload mode, not doing any scaling');
678                 }
679
680                 # We need the exact width so we can make one in the right size.
681                 my ($width, $height);
682
683                 # This is slow, but should fortunately almost never happen, so don't bother
684                 # special-casing it.
685                 if (!defined($dbwidth) || !defined($dbheight)) {
686                         my $img = read_original_image($r, $filename, $id, $dbwidth, $dbheight, 0);
687                         $new_dbwidth = $width = $img->Get('columns');
688                         $new_dbheight = $height = $img->Get('rows');
689                 } else {
690                         $width = $dbwidth;
691                         $height = $dbheight;
692                 }
693                 my $img = Image::Magick->new;
694
695                 if (defined($xres) && defined($yres)) {
696                         ($width, $height) = scale_aspect($width, $height, $xres, $yres);
697                 }
698                 $height = 24 * $dpr;
699                 $img->Set(size=>($width . "x" . $height));
700                 $img->Read('xc:white');
701
702                 my $info = Image::ExifTool::ImageInfo($fname);
703                 if (make_infobox($img, $info, $r, $dpr)) {
704                         $img->Quantize(colors=>16, dither=>'False');
705
706                         # Since the image is grayscale, ImageMagick overrides us and writes this
707                         # as grayscale anyway, but at least we get rid of the alpha channel this
708                         # way.
709                         $img->Set(type=>'Palette');
710                 } else {
711                         # Not enough room for the text, make a tiny dummy transparent infobox
712                         @$img = ();
713                         $img->Set(size=>"1x1");
714                         $img->Read('null:');
715
716                         $width = 1;
717                         $height = 1;
718                 }
719
720                 $err = $img->write(filename => $cachename, quality => 90, depth => 8);
721                 log_info($r, "New infobox cache: $width x $height for $id.jpg");
722
723                 return ($cachename, 'image/png');
724         }
725 }
726
727
728 sub get_mimetype_from_filename {
729         my $filename = shift;
730         my MIME::Type $type = $mimetypes->mimeTypeOf($filename);
731         $type = "image/jpeg" if (!defined($type));
732         return $type;
733 }
734
735 sub make_infobox {
736         my ($img, $info, $r, $dpr) = @_;
737
738         # The infobox is of the form
739         # "Time - date - focal length, shutter time, aperture, sensitivity, exposure bias - flash",
740         # possibly with some parts omitted -- the middle part is known as the "classic
741         # fields"; note the comma separation. Every field has an associated "bold flag"
742         # in the second part.
743         
744         my $manual_shutter = (defined($info->{'ExposureProgram'}) &&
745                 $info->{'ExposureProgram'} =~ /shutter\b.*\bpriority/i);
746         my $manual_aperture = (defined($info->{'ExposureProgram'}) &&
747                 $info->{'ExposureProgram'} =~ /aperture\b.*\bpriority/i);
748         if ($info->{'ExposureProgram'} =~ /manual/i) {
749                 $manual_shutter = 1;
750                 $manual_aperture = 1;
751         }
752
753         my @classic_fields = ();
754         if (defined($info->{'FocalLength'}) && $info->{'FocalLength'} =~ /^(\d+)(?:\.\d+)?\s*(?:mm)?$/) {
755                 push @classic_fields, [ $1 . "mm", 0 ];
756         } elsif (defined($info->{'FocalLength'}) && $info->{'FocalLength'} =~ /^(\d+)\/(\d+)$/) {
757                 push @classic_fields, [ (sprintf "%.1fmm", ($1/$2)), 0 ];
758         }
759
760         if (defined($info->{'ExposureTime'}) && $info->{'ExposureTime'} =~ /^(\d+)\/(\d+)$/) {
761                 my ($a, $b) = ($1, $2);
762                 my $gcd = gcd($a, $b);
763                 push @classic_fields, [ $a/$gcd . "/" . $b/$gcd . "s", $manual_shutter ];
764         } elsif (defined($info->{'ExposureTime'}) && $info->{'ExposureTime'} =~ /^(\d+(?:\.\d+)?)$/) {
765                 push @classic_fields, [ $1 . "s", $manual_shutter ];
766         }
767
768         if (defined($info->{'FNumber'}) && $info->{'FNumber'} =~ /^(\d+)\/(\d+)$/) {
769                 my $f = $1/$2;
770                 if ($f >= 10) {
771                         push @classic_fields, [ (sprintf "f/%.0f", $f), $manual_aperture ];
772                 } else {
773                         push @classic_fields, [ (sprintf "f/%.1f", $f), $manual_aperture ];
774                 }
775         } elsif (defined($info->{'FNumber'}) && $info->{'FNumber'} =~ /^(\d+)\.(\d+)$/) {
776                 my $f = $info->{'FNumber'};
777                 if ($f >= 10) {
778                         push @classic_fields, [ (sprintf "f/%.0f", $f), $manual_aperture ];
779                 } else {
780                         push @classic_fields, [ (sprintf "f/%.1f", $f), $manual_aperture ];
781                 }
782         }
783
784 #       Apache2::ServerUtil->server->log_error(join(':', keys %$info));
785
786         my $iso = undef;
787         if (defined($info->{'NikonD1-ISOSetting'})) {
788                 $iso = $info->{'NikonD1-ISOSetting'};
789         } elsif (defined($info->{'ISO'})) {
790                 $iso = $info->{'ISO'};
791         } elsif (defined($info->{'ISOSetting'})) {
792                 $iso = $info->{'ISOSetting'};
793         }
794         if (defined($iso) && $iso =~ /(\d+)/) {
795                 push @classic_fields, [ $1 . " ISO", 0 ];
796         }
797
798         if (defined($info->{'ExposureBiasValue'}) && $info->{'ExposureBiasValue'} ne "0") {
799                 push @classic_fields, [ $info->{'ExposureBiasValue'} . " EV", 0 ];
800         } elsif (defined($info->{'ExposureCompensation'}) && $info->{'ExposureCompensation'} ne "0") {
801                 push @classic_fields, [ $info->{'ExposureCompensation'} . " EV", 0 ];
802         }
803
804         # Now piece together the rest
805         my @parts = ();
806         
807         if (defined($info->{'DateTimeOriginal'}) &&
808             $info->{'DateTimeOriginal'} =~ /^(\d{4}):(\d\d):(\d\d) (\d\d):(\d\d):(\d\d)$/
809             && $1 >= 1990) {
810                 push @parts, [ "$1-$2-$3 $4:$5", 0 ];
811         }
812
813         if (defined($info->{'Model'})) {
814                 my $model = $info->{'Model'}; 
815                 $model =~ s/^\s+//;
816                 $model =~ s/\s+$//;
817
818                 push @parts, [ ' - ', 0 ] if (scalar @parts > 0);
819                 push @parts, [ $model, 0 ];
820         }
821         
822         # classic fields
823         if (scalar @classic_fields > 0) {
824                 push @parts, [ ' - ', 0 ] if (scalar @parts > 0);
825
826                 my $first_elem = 1;
827                 for my $field (@classic_fields) {
828                         push @parts, [ ', ', 0 ] if (!$first_elem);
829                         $first_elem = 0;
830                         push @parts, $field;
831                 }
832         }
833
834         if (defined($info->{'Flash'})) {
835                 if ($info->{'Flash'} =~ /did not fire/i ||
836                     $info->{'Flash'} =~ /no flash/i ||
837                     $info->{'Flash'} =~ /not fired/i ||
838                     $info->{'Flash'} =~ /Off/)  {
839                         push @parts, [ ' - ', 0 ] if (scalar @parts > 0);
840                         push @parts, [ "No flash", 0 ];
841                 } elsif ($info->{'Flash'} =~ /fired/i ||
842                          $info->{'Flash'} =~ /On/) {
843                         push @parts, [ ' - ', 0 ] if (scalar @parts > 0);
844                         push @parts, [ "Flash", 0 ];
845                 } else {
846                         push @parts, [ ' - ', 0 ] if (scalar @parts > 0);
847                         push @parts, [ $info->{'Flash'}, 0 ];
848                 }
849         }
850
851         return 0 if (scalar @parts == 0);
852
853         # Find the required width
854         my $th = 0;
855         my $tw = 0;
856
857         for my $part (@parts) {
858                 my $font;
859                 if ($part->[1]) {
860                         $font = '/usr/share/fonts/truetype/msttcorefonts/Arial_Bold.ttf';
861                 } else {
862                         $font = '/usr/share/fonts/truetype/msttcorefonts/Arial.ttf';
863                 }
864
865                 my (undef, undef, $h, undef, $w) = ($img->QueryFontMetrics(text=>$part->[0], font=>$font, pointsize=>12*$dpr));
866
867                 $tw += $w;
868                 $th = $h if ($h > $th);
869         }
870
871         return 0 if ($tw > $img->Get('columns'));
872
873         my $x = 0;
874         my $y = $img->Get('rows') - 24*$dpr;
875
876         # Hit exact DCT blocks
877         $y -= ($y % 8);
878
879         my $points = sprintf "%u,%u %u,%u", $x, $y, ($img->Get('columns') - 1), ($img->Get('rows') - 1);
880         my $lpoints = sprintf "%u,%u %u,%u", $x, $y, ($img->Get('columns') - 1), $y;
881         $img->Draw(primitive=>'rectangle', stroke=>'white', fill=>'white', points=>$points);
882         $img->Draw(primitive=>'line', stroke=>'black', strokewidth=>$dpr, points=>$lpoints);
883
884         # Start writing out the text
885         $x = ($img->Get('columns') - $tw) / 2;
886
887         my $room = ($img->Get('rows') - $dpr - $y - $th);
888         $y = ($img->Get('rows') - $dpr) - $room/2;
889         
890         for my $part (@parts) {
891                 my $font;
892                 if ($part->[1]) {
893                         $font = '/usr/share/fonts/truetype/msttcorefonts/Arial_Bold.ttf';
894                 } else {
895                         $font = '/usr/share/fonts/truetype/msttcorefonts/Arial.ttf';
896                 }
897                 $img->Annotate(text=>$part->[0], font=>$font, pointsize=>12*$dpr, x=>int($x), y=>int($y));
898                 $x += ($img->QueryFontMetrics(text=>$part->[0], font=>$font, pointsize=>12*$dpr))[4];
899         }
900
901         return 1;
902 }
903
904 sub gcd {
905         my ($a, $b) = @_;
906         return $a if ($b == 0);
907         return gcd($b, $a % $b);
908 }
909
910 sub add_new_event {
911         my ($r, $res, $dbh, $id, $date, $desc) = @_;
912         my @errors = ();
913
914         if (!defined($id) || $id =~ /^\s*$/ || $id !~ /^([a-zA-Z0-9-]+)$/) {
915                 push @errors, "Manglende eller ugyldig ID.";
916         }
917         if (!defined($date) || $date =~ /^\s*$/ || $date =~ /[<>&]/ || length($date) > 100) {
918                 push @errors, "Manglende eller ugyldig dato.";
919         }
920         if (!defined($desc) || $desc =~ /^\s*$/ || $desc =~ /[<>&]/ || length($desc) > 100) {
921                 push @errors, "Manglende eller ugyldig beskrivelse.";
922         }
923         
924         if (scalar @errors > 0) {
925                 return @errors;
926         }
927                 
928         my $vhost = Sesse::pr0n::Common::get_server_name($r);
929         $dbh->do("INSERT INTO events (event,date,name,vhost) VALUES (?,?,?,?)",
930                 undef, $id, $date, $desc, $vhost)
931                 or return ("Kunne ikke sette inn ny hendelse" . $dbh->errstr);
932         $dbh->do("INSERT INTO last_picture_cache (vhost,event,last_picture) VALUES (?,?,NULL)",
933                 undef, $vhost, $id)
934                 or return ("Kunne ikke sette inn ny cache-rad" . $dbh->errstr);
935         purge_cache($r, $res, "/");
936
937         return ();
938 }
939
940 sub guess_charset {
941         my $text = shift;
942         my $decoded;
943
944         eval {
945                 $decoded = Encode::decode("utf-8", $text, Encode::FB_CROAK);
946         };
947         if ($@) {
948                 $decoded = Encode::decode("iso8859-1", $text);
949         }
950
951         return $decoded;
952 }
953
954 # Depending on your front-end cache, you might want to get creative somehow here.
955 # This example assumes you have a front-end cache and it can translate an X-Pr0n-Purge
956 # regex tacked onto a request into something useful. The elements given in
957 # should not be regexes, though, as e.g. Squid will not be able to handle that.
958 sub purge_cache {
959         my ($r, $res, @elements) = @_;
960         return if (scalar @elements == 0);
961
962         my @pe = ();
963         for my $elem (@elements) {
964                 log_info($r, "Purging $elem");
965                 (my $e = $elem) =~ s/[.+*|()]/\\$&/g;
966                 push @pe, $e;
967         }
968
969         my $regex = "^";
970         if (scalar @pe == 1) {
971                 $regex .= $pe[0];
972         } else {
973                 $regex .= "(" . join('|', @pe) . ")";
974         }
975         $regex .= "(\\?.*)?\$";
976         $res->header('X-Pr0n-Purge' => $regex);
977 }
978                                 
979 # Find a list of all cache URLs for a given image, given what we have on disk.
980 sub get_all_cache_urls {
981         my ($r, $dbh, $id) = @_;
982         my $dir = POSIX::floor($id / 256);
983         my @ret = ();
984
985         my $q = $dbh->prepare('SELECT event, filename FROM images WHERE id=?')
986                 or die "Couldn't prepare: " . $dbh->errstr;
987         $q->execute($id)
988                 or die "Couldn't find event and filename: " . $dbh->errstr;
989         my $ref = $q->fetchrow_hashref; 
990         my $event = $ref->{'event'};
991         my $filename = $ref->{'filename'};
992         $q->finish;
993
994         my $base = $Sesse::pr0n::Config::image_base . "cache/$dir";
995         for my $file (<$base/$id-*>) {
996                 my $fname = File::Basename::basename($file);
997                 if ($fname =~ /^$id-mipmap-.*\.jpg$/) {
998                         # Mipmaps don't have an URL, ignore
999                 } elsif ($fname =~ /^$id--1--1\.jpg$/) {
1000                         push @ret, "/$event/$filename";
1001                 } elsif ($fname =~ /^$id-(\d+)-(\d+)\.jpg$/) {
1002                         push @ret, "/$event/$1x$2/$filename";
1003                 } elsif ($fname =~ /^$id-(\d+)-(\d+)-nobox\.jpg$/) {
1004                         push @ret, "/$event/$1x$2/nobox/$filename";
1005                 } elsif ($fname =~ /^$id--1--1-box\.png$/) {
1006                         push @ret, "/$event/box/$filename";
1007                 } elsif ($fname =~ /^$id-(\d+)-(\d+)-box\.png$/) {
1008                         push @ret, "/$event/$1x$2/box/$filename";
1009                 } else {
1010                         log_warn($r, "Couldn't find a purging URL for $fname");
1011                 }
1012         }
1013
1014         return @ret;
1015 }
1016
1017 sub set_last_modified {
1018         my ($res, $mtime) = @_;
1019
1020         my $str = POSIX::strftime("%a, %d %b %Y %H:%M:%S GMT", gmtime($mtime));
1021         $res->header('Last-Modified' => $str);
1022 }
1023
1024 sub get_server_name {
1025         my $r = shift;
1026         my $host = $r->env->{'HTTP_HOST'};
1027         $host =~ s/:.*//;
1028         return $host;
1029 }
1030
1031 sub log_info {
1032         my ($r, $msg) = @_;
1033         if (defined($r->logger)) {
1034                 $r->logger->({ level => 'info', message => $msg });
1035         } else {
1036                 print STDERR "[INFO] $msg\n";
1037         }
1038 }
1039
1040 sub log_warn {
1041         my ($r, $msg) = @_;
1042         if (defined($r->logger)) {
1043                 $r->logger->({ level => 'warn', message => $msg });
1044         } else {
1045                 print STDERR "[WARN] $msg\n";
1046         }
1047 }
1048
1049 sub log_error {
1050         my ($r, $msg) = @_;
1051         if (defined($r->logger)) {
1052                 $r->logger->({ level => 'error', message => $msg });
1053         } else {
1054                 print STDERR "[ERROR] $msg\n";
1055         }
1056 }
1057
1058 1;
1059
1060