0f15cd28e96cf726275508faa63b07d4a75e190b
[paraslash.git] / aft.c
1 #include "para.h"
2 #include "error.h"
3 #include <sys/mman.h>
4 #include <fnmatch.h>
5 #include "afh.h"
6 #include "afs.h"
7 #include "net.h"
8 #include "string.h"
9 #include "vss.h"
10
11 #define AFS_AUDIO_FILE_DIR "/home/mp3"
12
13 static struct osl_table *audio_file_table;
14
15 /**
16  * Describes the layout of the mmapped-afs info struct.
17  *
18  * \sa struct afs_info.
19  */
20 enum afsi_offsets {
21         /** Where .last_played is stored. */
22         AFSI_LAST_PLAYED_OFFSET = 0,
23         /** Storage position of the attributes bitmap. */
24         AFSI_ATTRIBUTES_OFFSET = 8,
25         /** Storage position of the .num_played field. */
26         AFSI_NUM_PLAYED_OFFSET = 16,
27         /** Storage position of the .image_id field. */
28         AFSI_IMAGE_ID_OFFSET = 20,
29         /** Storage position of the .lyrics_id field. */
30         AFSI_LYRICS_ID_OFFSET = 24,
31         /** Storage position of the .audio_format_id field. */
32         AFSI_AUDIO_FORMAT_ID_OFFSET = 28,
33         /** On-disk storage space needed. */
34         AFSI_SIZE = 29
35 };
36
37 /**
38  * Convert a struct afs_info to an osl object.
39  *
40  * \param afsi Pointer to the audio file info to be converted.
41  * \param obj Result pointer.
42  *
43  * \sa load_afsi().
44  */
45 void save_afsi(struct afs_info *afsi, struct osl_object *obj)
46 {
47         char *buf = obj->data;
48
49         write_u64(buf + AFSI_LAST_PLAYED_OFFSET, afsi->last_played);
50         write_u64(buf + AFSI_ATTRIBUTES_OFFSET, afsi->attributes);
51         write_u32(buf + AFSI_NUM_PLAYED_OFFSET, afsi->num_played);
52         write_u32(buf + AFSI_IMAGE_ID_OFFSET, afsi->image_id);
53         write_u32(buf + AFSI_LYRICS_ID_OFFSET, afsi->lyrics_id);
54         write_u8(buf + AFSI_AUDIO_FORMAT_ID_OFFSET,
55                 afsi->audio_format_id);
56 }
57
58 /**
59  *  Get the audio file selector info struct stored in an osl object.
60  *
61  * \param afsi Points to the audio_file info structure to be filled in.
62  * \param obj The osl object holding the data.
63  *
64  * \return Positive on success, negative on errors. Possible errors: \p E_BAD_AFS.
65  *
66  * \sa save_afsi().
67  */
68 int load_afsi(struct afs_info *afsi, struct osl_object *obj)
69 {
70         char *buf = obj->data;
71         if (obj->size < AFSI_SIZE)
72                 return -E_BAD_AFSI;
73         afsi->last_played = read_u64(buf + AFSI_LAST_PLAYED_OFFSET);
74         afsi->attributes = read_u64(buf + AFSI_ATTRIBUTES_OFFSET);
75         afsi->num_played = read_u32(buf + AFSI_NUM_PLAYED_OFFSET);
76         afsi->image_id = read_u32(buf + AFSI_IMAGE_ID_OFFSET);
77         afsi->lyrics_id = read_u32(buf + AFSI_LYRICS_ID_OFFSET);
78         afsi->audio_format_id = read_u8(buf +
79                 AFSI_AUDIO_FORMAT_ID_OFFSET);
80         return 1;
81 }
82
83 /** The columns of the audio file table. */
84 enum audio_file_table_columns {
85         /** The hash on the content of the audio file. */
86         AFTCOL_HASH,
87         /** The full path in the filesystem. */
88         AFTCOL_PATH,
89         /** The audio file selector info. */
90         AFTCOL_AFSI,
91         /** The audio format handler info. */
92         AFTCOL_AFHI,
93         /** The chunk table info and the chunk table of the audio file. */
94         AFTCOL_CHUNKS,
95         /** The number of columns of this table. */
96         NUM_AFT_COLUMNS
97 };
98
99 static struct osl_column_description aft_cols[] = {
100         [AFTCOL_HASH] = {
101                 .storage_type = OSL_MAPPED_STORAGE,
102                 .storage_flags = OSL_RBTREE | OSL_FIXED_SIZE | OSL_UNIQUE,
103                 .name = "hash",
104                 .compare_function = osl_hash_compare,
105                 .data_size = HASH_SIZE
106         },
107         [AFTCOL_PATH] = {
108                 .storage_type = OSL_MAPPED_STORAGE,
109                 .storage_flags = OSL_RBTREE | OSL_UNIQUE,
110                 .name = "path",
111                 .compare_function = string_compare,
112         },
113         [AFTCOL_AFSI] = {
114                 .storage_type = OSL_MAPPED_STORAGE,
115                 .storage_flags = OSL_FIXED_SIZE,
116                 .name = "afs_info",
117                 .data_size = AFSI_SIZE
118         },
119         [AFTCOL_AFHI] = {
120                 .storage_type = OSL_MAPPED_STORAGE,
121                 .name = "afh_info",
122         },
123         [AFTCOL_CHUNKS] = {
124                 .storage_type = OSL_DISK_STORAGE,
125                 .name = "chunks",
126         }
127 };
128
129 static struct osl_table_description audio_file_table_desc = {
130         .name = "audio_files",
131         .num_columns = NUM_AFT_COLUMNS,
132         .flags = OSL_LARGE_TABLE,
133         .column_descriptions = aft_cols
134 };
135
136 static char *prefix_path(const char *prefix, int len, const char *path)
137 {
138         int speclen;
139         char *n;
140
141         for (;;) {
142                 char c;
143                 if (*path != '.')
144                         break;
145                 c = path[1];
146                 /* "." */
147                 if (!c) {
148                         path++;
149                         break;
150                 }
151                 /* "./" */
152                 if (c == '/') {
153                         path += 2;
154                         continue;
155                 }
156                 if (c != '.')
157                         break;
158                 c = path[2];
159                 if (!c)
160                         path += 2;
161                 else if (c == '/')
162                         path += 3;
163                 else
164                         break;
165                 /* ".." and "../" */
166                 /* Remove last component of the prefix */
167                 do {
168                         if (!len)
169                                 return NULL;
170                         len--;
171                 } while (len && prefix[len-1] != '/');
172                 continue;
173         }
174         if (!len)
175                 return para_strdup(path);
176         speclen = strlen(path);
177         n = para_malloc(speclen + len + 1);
178         memcpy(n, prefix, len);
179         memcpy(n + len, path, speclen+1);
180         return n;
181 }
182
183 /*
184  * We fundamentally don't like some paths: we don't want
185  * dot or dot-dot anywhere.
186  *
187  * Also, we don't want double slashes or slashes at the
188  * end that can make pathnames ambiguous.
189  */
190 static int verify_dotfile(const char *rest)
191 {
192         /*
193          * The first character was '.', but that has already been discarded, we
194          * now test the rest.
195          */
196         switch (*rest) {
197         /* "." is not allowed */
198         case '\0': case '/':
199                 return 1;
200
201         case '.':
202                 if (rest[1] == '\0' || rest[1] == '/')
203                         return -1;
204         }
205         return 1;
206 }
207
208 static int verify_path(const char *orig_path, char **resolved_path)
209 {
210         char c;
211         const char prefix[] = AFS_AUDIO_FILE_DIR "/";
212         const char *path = orig_path;
213         const size_t prefix_len = strlen(prefix);
214
215         c = *path++;
216         if (!c)
217                 goto bad_path;
218         while (c) {
219                 if (c == '/') {
220                         c = *path++;
221                         switch (c) {
222                         default:
223                                 continue;
224                         case '/': /* double slash */
225                                 goto bad_path;
226                         case '.':
227                                 if (verify_dotfile(path) < 0)
228                                         goto bad_path;
229                         }
230                 }
231                 c = *path++;
232         }
233         if (*orig_path != '/')
234                 *resolved_path = prefix_path(prefix, prefix_len, orig_path);
235         else
236                 *resolved_path = para_strdup(orig_path);
237         return 1;
238 bad_path:
239         return -E_BAD_PATH;
240 }
241
242 enum afhi_offsets {
243         AFHI_SECONDS_TOTAL_OFFSET = 0,
244         AFHI_BITRATE_OFFSET = 4,
245         AFHI_FREQUENCY_OFFSET = 8,
246         AFHI_CHANNELS_OFFSET = 12,
247         AFHI_INFO_STRING_OFFSET = 13,
248         MIN_AFHI_SIZE = 14
249 };
250
251 static unsigned sizeof_afhi_buf(const struct audio_format_info *afhi)
252 {
253         if (!afhi)
254                 return 0;
255         return strlen(afhi->info_string) + MIN_AFHI_SIZE;
256 }
257
258 static void save_afhi(struct audio_format_info *afhi, char *buf)
259 {
260         if (!afhi)
261                 return;
262         write_u32(buf + AFHI_SECONDS_TOTAL_OFFSET,
263                 afhi->seconds_total);
264         write_u32(buf + AFHI_BITRATE_OFFSET, afhi->bitrate);
265         write_u32(buf + AFHI_FREQUENCY_OFFSET, afhi->frequency);
266         write_u8(buf + AFHI_CHANNELS_OFFSET, afhi->channels);
267         strcpy(buf + AFHI_INFO_STRING_OFFSET, afhi->info_string); /* OK */
268         PARA_DEBUG_LOG("last byte written: %p\n", buf + AFHI_INFO_STRING_OFFSET + strlen(afhi->info_string));
269 }
270
271 static void load_afhi(const char *buf, struct audio_format_info *afhi)
272 {
273         afhi->seconds_total = read_u32(buf + AFHI_SECONDS_TOTAL_OFFSET);
274         afhi->bitrate = read_u32(buf + AFHI_BITRATE_OFFSET);
275         afhi->frequency = read_u32(buf + AFHI_FREQUENCY_OFFSET);
276         afhi->channels = read_u8(buf + AFHI_CHANNELS_OFFSET);
277         strcpy(afhi->info_string, buf + AFHI_INFO_STRING_OFFSET);
278 }
279
280 static unsigned sizeof_chunk_info_buf(struct audio_format_info *afhi)
281 {
282         if (!afhi)
283                 return 0;
284         return 4 * afhi->chunks_total + 20;
285
286 }
287
288 /** The offsets of the data contained in the AFTCOL_CHUNKS column. */
289 enum chunk_info_offsets{
290         /** The total number of chunks (4 bytes). */
291         CHUNKS_TOTAL_OFFSET = 0,
292         /** The length of the audio file header (4 bytes). */
293         HEADER_LEN_OFFSET = 4,
294         /** The start of the audio file header (4 bytes). */
295         HEADER_OFFSET_OFFSET = 8,
296         /** The seconds part of the chunk time (4 bytes). */
297         CHUNK_TV_TV_SEC_OFFSET = 12,
298         /** The microseconds part of the chunk time (4 bytes). */
299         CHUNK_TV_TV_USEC = 16,
300         /** Chunk table entries start here. */
301         CHUNK_TABLE_OFFSET = 20,
302 };
303
304 /* TODO: audio format handlers could just produce this */
305 static void save_chunk_info(struct audio_format_info *afhi, char *buf)
306 {
307         int i;
308
309         if (!afhi)
310                 return;
311         write_u32(buf + CHUNKS_TOTAL_OFFSET, afhi->chunks_total);
312         write_u32(buf + HEADER_LEN_OFFSET, afhi->header_len);
313         write_u32(buf + HEADER_OFFSET_OFFSET, afhi->header_offset);
314         write_u32(buf + CHUNK_TV_TV_SEC_OFFSET, afhi->chunk_tv.tv_sec);
315         write_u32(buf + CHUNK_TV_TV_USEC, afhi->chunk_tv.tv_usec);
316         for (i = 0; i < afhi->chunks_total; i++)
317                 write_u32(buf + CHUNK_TABLE_OFFSET + 4 * i, afhi->chunk_table[i]);
318 }
319
320 static int load_chunk_info(struct osl_object *obj, struct audio_format_info *afhi)
321 {
322         char *buf = obj->data;
323         int i;
324
325         if (obj->size < CHUNK_TABLE_OFFSET)
326                 return -E_BAD_DATA_SIZE;
327
328         afhi->chunks_total = read_u32(buf + CHUNKS_TOTAL_OFFSET);
329         afhi->header_len = read_u32(buf + HEADER_LEN_OFFSET);
330         afhi->header_offset = read_u32(buf + HEADER_OFFSET_OFFSET);
331         afhi->chunk_tv.tv_sec = read_u32(buf + CHUNK_TV_TV_SEC_OFFSET);
332         afhi->chunk_tv.tv_usec = read_u32(buf + CHUNK_TV_TV_USEC);
333
334         if (afhi->chunks_total * 4 + CHUNK_TABLE_OFFSET > obj->size)
335                 return -E_BAD_DATA_SIZE;
336         afhi->chunk_table = para_malloc(afhi->chunks_total * sizeof(size_t));
337         for (i = 0; i < afhi->chunks_total; i++)
338                 afhi->chunk_table[i] = read_u32(buf + CHUNK_TABLE_OFFSET + 4 * i);
339         return 1;
340 }
341
342 /**
343  * Get the row of the audio file table corresponding to the given path.
344  *
345  * \param path The full path of the audio file.
346  * \param row Result pointer.
347  *
348  * \return The return value of the underlying call to osl_get_row().
349  */
350 int aft_get_row_of_path(char *path, struct osl_row **row)
351 {
352         struct osl_object obj = {.data = path, .size = strlen(path) + 1};
353
354         return osl_get_row(audio_file_table, AFTCOL_PATH, &obj, row);
355 }
356
357 /**
358  * Get the row of the audio file table corresponding to the given hash value.
359  *
360  * \param hash The hash value of the desired audio file.
361  * \param row resul pointer.
362  *
363  * \return The return value of the underlying call to osl_get_row().
364  */
365 int aft_get_row_of_hash(HASH_TYPE *hash, struct osl_row **row)
366 {
367         const struct osl_object obj = {.data = hash, .size = HASH_SIZE};
368         return osl_get_row(audio_file_table, AFTCOL_HASH, &obj, row);
369 }
370
371 /**
372  * Get the osl object holding the audio file selector info of a row.
373  *
374  * \param row Pointer to a row in the audio file table.
375  * \param obj Result pointer.
376  *
377  * \return The return value of the underlying call to osl_get_object().
378  */
379 int get_afsi_object_of_row(const struct osl_row *row, struct osl_object *obj)
380 {
381         return osl_get_object(audio_file_table, row, AFTCOL_AFSI, obj);
382 }
383
384 /**
385  * Get the osl object holding the audio file selector info, given a path.
386  *
387  *
388  * \param path The full path of the audio file.
389  * \param obj Result pointer.
390  *
391  * \return Positive on success, negative on errors.
392  */
393 int get_afsi_object_of_path(char *path, struct osl_object *obj)
394 {
395         struct osl_row *row;
396         int ret = aft_get_row_of_path(path, &row);
397         if (ret < 0)
398                 return ret;
399         return get_afsi_object_of_row(row, obj);
400 }
401
402 /**
403  * Get the audio file selector info, given a row of the audio file table.
404  *
405  * \param row Pointer to a row in the audio file table.
406  * \param afsi Result pointer.
407  *
408  * \return Positive on success, negative on errors.
409  */
410 int get_afsi_of_row(const struct osl_row *row, struct afs_info *afsi)
411 {
412         struct osl_object obj;
413         int ret = get_afsi_object_of_row(row, &obj);
414         if (ret < 0)
415                 return ret;
416         return load_afsi(afsi, &obj);
417 }
418
419 /**
420  * Get the path of an audio file, given a row of the audio file table.
421  *
422  * \param row Pointer to a row in the audio file table.
423  * \param path Result pointer.
424  *
425  * \return Positive on success, negative on errors.
426  */
427 int get_audio_file_path_of_row(const struct osl_row *row, char **path)
428 {
429         struct osl_object path_obj;
430         int ret = osl_get_object(audio_file_table, row, AFTCOL_PATH,
431                 &path_obj);
432         if (ret < 0)
433                 return ret;
434         *path = path_obj.data;
435         return 1;
436 }
437
438 /**
439  * Get the object containing the hash value of an audio file, given a row.
440  *
441  * \param row Pointer to a row of the audio file table.
442  * \param obj Result pointer.
443  *
444  * \return The return value of the underlying call to osl_get_object().
445  *
446  * \sa get_hash_of_row().
447  */
448 static int get_hash_object_of_aft_row(const struct osl_row *row, struct osl_object *obj)
449 {
450         return osl_get_object(audio_file_table, row, AFTCOL_HASH, obj);
451 }
452
453 /**
454  * Get the hash value of an audio file, given a row of the audio file table.
455  *
456  * \param row Pointer to a row of the audio file table.
457  * \param hash Result pointer.
458  *
459  * \a hash points to mapped data and must not be freed by the caller.
460  *
461  * \return The return value of the underlying call to
462  * get_hash_object_of_aft_row().
463  */
464 static int get_hash_of_row(const struct osl_row *row, HASH_TYPE **hash)
465 {
466         struct osl_object obj;
467         int ret = get_hash_object_of_aft_row(row, &obj);
468
469         if (ret < 0)
470                 return ret;
471         *hash = obj.data;
472         return 1;
473 }
474
475 /**
476  * Get the audio format handler info, given a row of the audio file table.
477  *
478  * \param row Pointer to a row of the audio file table.
479  * \param afhi Result pointer.
480  *
481  * \return The return value of the underlying call to osl_get_object().
482  *
483  * \sa get_chunk_table_of_row().
484  */
485 static int get_afhi_of_row(const struct osl_row *row, struct audio_format_info *afhi)
486 {
487         struct osl_object obj;
488         int ret = osl_get_object(audio_file_table, row, AFTCOL_AFHI,
489                 &obj);
490         if (ret < 0)
491                 return ret;
492         load_afhi(obj.data, afhi);
493         return 1;
494 }
495
496 /**
497  * Get the chunk table of an audio file, given a row of the audio file table.
498  *
499  * \param row Pointer to a row of the audio file table.
500  * \param afhi Result pointer.
501  *
502  * \return The return value of the underlying call to osl_open_disk_object().
503  *
504  * \sa get_afhi_of_row().
505  */
506 static int get_chunk_table_of_row(const struct osl_row *row, struct audio_format_info *afhi)
507 {
508         struct osl_object obj;
509         int ret = osl_open_disk_object(audio_file_table, row, AFTCOL_CHUNKS,
510                 &obj);
511         if (ret < 0)
512                 return ret;
513         ret = load_chunk_info(&obj, afhi);
514         osl_close_disk_object(&obj);
515         return ret;
516 }
517
518 /**
519  * Mmap the given audio file and update statistics.
520  *
521  * \param aft_row Determines the audio file to be opened and updated.
522  * \param afd Result pointer.
523  *
524  * On success, the numplayed field of the audio file selector info is increased
525  * and the lastplayed time is set to the current time. Finally, the score of
526  * the audio file is updated.
527  *
528  * \return Positive on success, negative on errors.
529  */
530 int open_and_update_audio_file(struct osl_row *aft_row, struct audio_file_data *afd)
531 {
532         HASH_TYPE *aft_hash, file_hash[HASH_SIZE];
533         struct osl_object afsi_obj;
534         struct afs_info new_afsi;
535         int ret = get_hash_of_row(aft_row, &aft_hash);
536
537         if (ret < 0)
538                 return ret;
539         ret = get_audio_file_path_of_row(aft_row, &afd->path);
540         if (ret < 0)
541                 return ret;
542         ret = get_afsi_object_of_row(aft_row, &afsi_obj);
543         if (ret < 0)
544                 return ret;
545         ret = load_afsi(&afd->afsi, &afsi_obj);
546         if (ret < 0)
547                 return ret;
548         ret = get_afhi_of_row(aft_row, &afd->afhi);
549         if (ret < 0)
550                 return ret;
551         ret = get_chunk_table_of_row(aft_row, &afd->afhi);
552         if (ret < 0)
553                 return ret;
554         ret = mmap_full_file(afd->path, O_RDONLY, &afd->map);
555         if (ret < 0)
556                 goto err;
557         hash_function(afd->map.data, afd->map.size, file_hash);
558         ret = -E_HASH_MISMATCH;
559         if (hash_compare(file_hash, aft_hash))
560                 goto err;
561         new_afsi = afd->afsi;
562         new_afsi.num_played++;
563         new_afsi.last_played = time(NULL);
564         save_afsi(&new_afsi, &afsi_obj); /* in-place update */
565         if (afd->current_play_mode == PLAY_MODE_PLAYLIST)
566                 ret = playlist_update_audio_file(aft_row);
567         else
568                 ret = mood_update_audio_file(aft_row, &afd->afsi);
569         return ret;
570 err:
571         free(afd->afhi.chunk_table);
572         return ret;
573 }
574
575 static int get_local_time(uint64_t *seconds, char *buf, size_t size,
576         time_t current_time)
577 {
578         struct tm t;
579
580         if (!localtime_r((time_t *)seconds, &t))
581                 return -E_LOCALTIME;
582         if (*seconds + 6 * 30 * 24 * 3600 > current_time) {
583                 if (!strftime(buf, size, "%b %e %k:%M", &t))
584                         return -E_STRFTIME;
585                 return 1;
586         }
587         if (!strftime(buf, size, "%b %e  %Y", &t))
588                 return -E_STRFTIME;
589         return 1;
590 }
591
592 #define GET_NUM_DIGITS(x, num) { \
593         typeof((x)) _tmp = PARA_ABS(x); \
594         *num = 1; \
595         if ((x)) \
596                 while ((_tmp) > 9) { \
597                         (_tmp) /= 10; \
598                         (*num)++; \
599                 } \
600         }
601
602 static short unsigned get_duration_width(int seconds)
603 {
604         short unsigned width;
605         unsigned hours = seconds / 3600, mins = (seconds % 3600) / 60;
606
607         if (!hours) /* less than one hour => m:ss or mm:ss => 4 or 5 digits */
608                 return 4 + (mins > 9);
609         /* more than one hour => h:mm:ss, hh:mm:ss, hhh:mm:ss, ... */
610         GET_NUM_DIGITS(hours, &width);
611         return width + 6;
612 }
613
614 static void get_duration_buf(int seconds, char *buf, short unsigned max_width)
615 {
616         unsigned hours = seconds / 3600, mins = (seconds % 3600) / 60;
617
618         if (!hours) /* m:ss or mm:ss */
619                 sprintf(buf, "%*u:%02u", max_width - 3, mins, seconds % 60);
620         else /* more than one hour => h:mm:ss, hh:mm:ss, hhh:mm:ss, ... */
621                 sprintf(buf, "%*u:%02u:%02u", max_width - 6, hours, mins,
622                         seconds % 60);
623 }
624
625 static char *make_attribute_line(const char *att_bitmap, struct afs_info *afsi)
626 {
627         char *att_text, *att_line;
628
629         get_attribute_text(&afsi->attributes, " ", &att_text);
630         if (!att_text)
631                 return para_strdup(att_bitmap);
632         att_line = make_message("%s (%s)", att_bitmap, att_text);
633         free(att_text);
634         return att_line;
635 }
636
637 static char *make_lyrics_line(struct afs_info *afsi)
638 {
639         char *lyrics_name;
640         lyr_get_name_by_id(afsi->lyrics_id, &lyrics_name);
641         if (!lyrics_name)
642                 return make_message("%u", afsi->lyrics_id);
643         return make_message("%u (%s)", afsi->lyrics_id, lyrics_name);
644 }
645
646 static char *make_image_line(struct afs_info *afsi)
647 {
648         char *image_name;
649         img_get_name_by_id(afsi->image_id, &image_name);
650         if (!image_name)
651                 return make_message("%u", afsi->image_id);
652         return make_message("%u (%s)", afsi->image_id, image_name);
653 }
654
655 static int print_list_item(struct ls_data *d, struct ls_options *opts,
656         struct para_buffer *b, time_t current_time)
657 {
658         int ret;
659         char att_buf[65];
660         char last_played_time[30];
661         char duration_buf[30]; /* nobody has an audio file long enough to overflow this */
662         char score_buf[30] = "";
663         struct afs_info *afsi = &d->afsi;
664         struct audio_format_info *afhi = &d->afhi;
665         struct ls_widths *w = &opts->widths;
666         int have_score = opts->flags & LS_FLAG_ADMISSIBLE_ONLY;
667
668         if (opts->mode == LS_MODE_SHORT) {
669                 para_printf(b, "%s\n", d->path);
670                 return 1;
671         }
672         get_attribute_bitmap(&afsi->attributes, att_buf);
673         ret = get_local_time(&afsi->last_played, last_played_time,
674                 sizeof(last_played_time), current_time);
675         if (ret < 0)
676                 return ret;
677         get_duration_buf(afhi->seconds_total, duration_buf, w->duration_width);
678         if (have_score) {
679                 if (opts->mode == LS_MODE_LONG)
680                         sprintf(score_buf, "%*li ", w->score_width, d->score);
681                 else
682                         sprintf(score_buf, "%li ", d->score);
683         }
684
685         PARA_NOTICE_LOG("id: %s, %d\n", d->path, afsi->audio_format_id);
686         if (opts->mode == LS_MODE_LONG) {
687                 para_printf(b,
688                         "%s"    /* score */
689                         "%s "   /* attributes */
690                         "%*d "  /* image_id  */
691                         "%*d "  /* lyrics_id */
692                         "%*d "  /* bitrate */
693                         "%s "   /* audio format */
694                         "%*d "  /* frequency */
695                         "%d "   /* channels */
696                         "%s "   /* duration */
697                         "%*d "  /* num_played */
698                         "%s "   /* last_played */
699                         "%s\n", /* path */
700                         score_buf,
701                         att_buf,
702                         w->image_id_width, afsi->image_id,
703                         w->lyrics_id_width, afsi->lyrics_id,
704                         w->bitrate_width, afhi->bitrate,
705                         audio_format_name(afsi->audio_format_id),
706                         w->frequency_width, afhi->frequency,
707                         afhi->channels,
708                         duration_buf,
709                         w->num_played_width, afsi->num_played,
710                         last_played_time,
711                         d->path
712                 );
713                 return 1;
714         }
715         if (opts->mode == LS_MODE_VERBOSE) {
716                 char asc_hash[2 * HASH_SIZE + 1];
717                 char *att_line, *lyrics_line, *image_line;
718
719                 hash_to_asc(d->hash, asc_hash);
720                 att_line = make_attribute_line(att_buf, afsi);
721                 lyrics_line = make_lyrics_line(afsi);
722                 image_line = make_image_line(afsi);
723                 para_printf(b,
724                         "%s: %s\n" /* path */
725                         "%s%s%s" /* score */
726                         "attributes: %s\n"
727                         "hash: %s\n"
728                         "image_id: %s\n"
729                         "lyrics_id: %s\n"
730                         "bitrate: %dkbit/s\n"
731                         "format: %s\n"
732                         "frequency: %dHz\n"
733                         "channels: %d\n"
734                         "duration: %s\n"
735                         "num_played: %d\n"
736                         "last_played: %s\n\n",
737                         (opts->flags & LS_FLAG_FULL_PATH)?
738                                 "path" : "file", d->path,
739                         have_score? "score: " : "", score_buf,
740                                 have_score? "\n" : "",
741                         att_line,
742                         asc_hash,
743                         image_line,
744                         lyrics_line,
745                         afhi->bitrate,
746                         audio_format_name(afsi->audio_format_id),
747                         afhi->frequency,
748                         afhi->channels,
749                         duration_buf,
750                         afsi->num_played,
751                         last_played_time
752                 );
753                 free(att_line);
754                 free(lyrics_line);
755                 free(image_line);
756                 return 1;
757         }
758         return 1;
759 }
760
761 static int ls_audio_format_compare(const void *a, const void *b)
762 {
763         struct ls_data *d1 = *(struct ls_data **)a, *d2 = *(struct ls_data **)b;
764         return NUM_COMPARE(d1->afsi.audio_format_id, d2->afsi.audio_format_id);
765 }
766
767 static int ls_duration_compare(const void *a, const void *b)
768 {
769         struct ls_data *d1 = *(struct ls_data **)a, *d2 = *(struct ls_data **)b;
770         return NUM_COMPARE(d1->afhi.seconds_total, d2->afhi.seconds_total);
771 }
772
773 static int ls_bitrate_compare(const void *a, const void *b)
774 {
775         struct ls_data *d1 = *(struct ls_data **)a, *d2 = *(struct ls_data **)b;
776         return NUM_COMPARE(d1->afhi.bitrate, d2->afhi.bitrate);
777 }
778
779 static int ls_lyrics_id_compare(const void *a, const void *b)
780 {
781         struct ls_data *d1 = *(struct ls_data **)a, *d2 = *(struct ls_data **)b;
782         return NUM_COMPARE(d1->afsi.lyrics_id, d2->afsi.lyrics_id);
783 }
784
785 static int ls_image_id_compare(const void *a, const void *b)
786 {
787         struct ls_data *d1 = *(struct ls_data **)a, *d2 = *(struct ls_data **)b;
788         return NUM_COMPARE(d1->afsi.image_id, d2->afsi.image_id);
789 }
790
791 static int ls_channels_compare(const void *a, const void *b)
792 {
793         struct ls_data *d1 = *(struct ls_data **)a, *d2 = *(struct ls_data **)b;
794         return NUM_COMPARE(d1->afhi.channels, d2->afhi.channels);
795 }
796
797 static int ls_frequency_compare(const void *a, const void *b)
798 {
799         struct ls_data *d1 = *(struct ls_data **)a, *d2 = *(struct ls_data **)b;
800         return NUM_COMPARE(d1->afhi.frequency, d2->afhi.frequency);
801 }
802
803 static int ls_num_played_compare(const void *a, const void *b)
804 {
805         struct ls_data *d1 = *(struct ls_data **)a, *d2 = *(struct ls_data **)b;
806         return NUM_COMPARE(d1->afsi.num_played, d2->afsi.num_played);
807 }
808
809 static int ls_last_played_compare(const void *a, const void *b)
810 {
811         struct ls_data *d1 = *(struct ls_data **)a, *d2 = *(struct ls_data **)b;
812         return NUM_COMPARE(d1->afsi.last_played, d2->afsi.last_played);
813 }
814
815 static int ls_score_compare(const void *a, const void *b)
816 {
817         struct ls_data *d1 = *(struct ls_data **)a, *d2 = *(struct ls_data **)b;
818         return NUM_COMPARE(d1->score, d2->score);
819 }
820
821 static int ls_path_compare(const void *a, const void *b)
822 {
823         struct ls_data *d1 = *(struct ls_data **)a, *d2 = *(struct ls_data **)b;
824         return strcmp(d1->path, d2->path);
825 }
826
827 static int sort_matching_paths(struct ls_options *options)
828 {
829         size_t nmemb = options->num_matching_paths;
830         size_t size = sizeof(*options->data_ptr);
831         int (*compar)(const void *, const void *);
832         int i;
833
834         options->data_ptr = para_malloc(nmemb * sizeof(*options->data_ptr));
835         for (i = 0; i < nmemb; i++)
836                 options->data_ptr[i] = options->data + i;
837
838         /* In these cases the array is already sorted */
839         if (options->sorting == LS_SORT_BY_PATH
840                 && !(options->flags & LS_FLAG_ADMISSIBLE_ONLY)
841                 && (options->flags & LS_FLAG_FULL_PATH))
842                 return 1;
843         if (options->sorting == LS_SORT_BY_SCORE &&
844                         options->flags & LS_FLAG_ADMISSIBLE_ONLY)
845                 return 1;
846
847         switch (options->sorting) {
848         case LS_SORT_BY_PATH:
849                 compar = ls_path_compare; break;
850         case LS_SORT_BY_SCORE:
851                 compar = ls_score_compare; break;
852         case LS_SORT_BY_LAST_PLAYED:
853                 compar = ls_last_played_compare; break;
854         case LS_SORT_BY_NUM_PLAYED:
855                 compar = ls_num_played_compare; break;
856         case LS_SORT_BY_FREQUENCY:
857                 compar = ls_frequency_compare; break;
858         case LS_SORT_BY_CHANNELS:
859                 compar = ls_channels_compare; break;
860         case LS_SORT_BY_IMAGE_ID:
861                 compar = ls_image_id_compare; break;
862         case LS_SORT_BY_LYRICS_ID:
863                 compar = ls_lyrics_id_compare; break;
864         case LS_SORT_BY_BITRATE:
865                 compar = ls_bitrate_compare; break;
866         case LS_SORT_BY_DURATION:
867                 compar = ls_duration_compare; break;
868         case LS_SORT_BY_AUDIO_FORMAT:
869                 compar = ls_audio_format_compare; break;
870         default:
871                 return -E_BAD_SORT;
872         }
873         qsort(options->data_ptr, nmemb, size, compar);
874         return 1;
875 }
876
877 /* row is either an aft_row or a row of the score table */
878 /* TODO: Only compute widths if we need them */
879 static int prepare_ls_row(struct osl_row *row, void *ls_opts)
880 {
881         int ret, i;
882         struct ls_options *options = ls_opts;
883         struct ls_data *d;
884         struct ls_widths *w;
885         unsigned short num_digits;
886         unsigned tmp;
887         struct osl_row *aft_row;
888         long score;
889         char *path;
890
891         if (options->flags & LS_FLAG_ADMISSIBLE_ONLY) {
892                 ret = get_score_and_aft_row(row, &score, &aft_row);
893                 if (ret < 0)
894                         return ret;
895         } else
896                 aft_row = row;
897         ret = get_audio_file_path_of_row(aft_row, &path);
898         if (ret < 0)
899                 return ret;
900         if (!(options->flags & LS_FLAG_FULL_PATH)) {
901                 char *p = strrchr(path, '/');
902                 if (p)
903                         path = p + 1;
904         }
905         if (options->num_patterns) {
906                 for (i = 0; i < options->num_patterns; i++) {
907                         ret = fnmatch(options->patterns[i], path, FNM_PATHNAME);
908                         if (!ret)
909                                 break;
910                         if (ret == FNM_NOMATCH)
911                                 continue;
912                         return -E_FNMATCH;
913                 }
914                 if (i >= options->num_patterns) /* no match */
915                         return 1;
916         }
917         tmp = options->num_matching_paths++;
918         if (options->num_matching_paths > options->array_size) {
919                 options->array_size++;
920                 options->array_size *= 2;
921                 options->data = para_realloc(options->data, options->array_size
922                         * sizeof(*options->data));
923         }
924         d = options->data + tmp;
925         ret = get_afsi_of_row(aft_row, &d->afsi);
926         if (ret < 0)
927                 return ret;
928         ret = get_afhi_of_row(aft_row, &d->afhi);
929         if (ret < 0)
930                 return ret;
931         d->path = path;
932         ret = get_hash_of_row(aft_row, &d->hash);
933         if (ret < 0)
934                 return ret;
935         w = &options->widths;
936         GET_NUM_DIGITS(d->afsi.image_id, &num_digits);
937         w->image_id_width = PARA_MAX(w->image_id_width, num_digits);
938         GET_NUM_DIGITS(d->afsi.lyrics_id, &num_digits);
939         w->lyrics_id_width = PARA_MAX(w->lyrics_id_width, num_digits);
940         GET_NUM_DIGITS(d->afhi.bitrate, &num_digits);
941         w->bitrate_width = PARA_MAX(w->bitrate_width, num_digits);
942         GET_NUM_DIGITS(d->afhi.frequency, &num_digits);
943         w->frequency_width = PARA_MAX(w->frequency_width, num_digits);
944         GET_NUM_DIGITS(d->afsi.num_played, &num_digits);
945         w->num_played_width = PARA_MAX(w->num_played_width, num_digits);
946         /* get the number of chars to print this amount of time */
947         tmp = get_duration_width(d->afhi.seconds_total);
948         w->duration_width = PARA_MAX(w->duration_width, tmp);
949         if (options->flags & LS_FLAG_ADMISSIBLE_ONLY) {
950                 GET_NUM_DIGITS(score, &num_digits);
951                 num_digits++; /* add one for the sign (space or "-") */
952                 w->score_width = PARA_MAX(w->score_width, num_digits);
953                 d->score = score;
954         }
955         return 1;
956 }
957
958 static int com_ls_callback(const struct osl_object *query,
959                 struct osl_object *ls_output)
960 {
961         struct ls_options *opts = query->data;
962         char *p, *pattern_start = (char *)query->data + sizeof(*opts);
963         struct para_buffer b = {.buf = NULL, .size = 0};
964         int i = 0, ret;
965         time_t current_time;
966
967
968         PARA_NOTICE_LOG("%d patterns\n", opts->num_patterns);
969         if (opts->num_patterns) {
970                 opts->patterns = para_malloc(opts->num_patterns * sizeof(char *));
971                 for (i = 0, p = pattern_start; i < opts->num_patterns; i++) {
972                         opts->patterns[i] = p;
973                         p += strlen(p) + 1;
974                         PARA_NOTICE_LOG("pattern %d: %s\n", i, opts->patterns[i]);
975                 }
976         } else
977                 opts->patterns = NULL;
978         if (opts->flags & LS_FLAG_ADMISSIBLE_ONLY)
979                 ret = admissible_file_loop(opts, prepare_ls_row);
980         else
981                 ret = osl_rbtree_loop(audio_file_table, AFTCOL_PATH, opts,
982                         prepare_ls_row);
983         if (ret < 0)
984                 goto out;
985         ret = opts->num_patterns? -E_NO_MATCH : 0;
986         if (!opts->num_matching_paths) {
987                 PARA_NOTICE_LOG("no match, ret: %d\n", ret);
988                 goto out;
989         }
990         ret = sort_matching_paths(opts);
991         if (ret < 0)
992                 goto out;
993         time(&current_time);
994         if (opts->flags & LS_FLAG_REVERSE)
995                 for (i = opts->num_matching_paths - 1; i >= 0; i--) {
996                         ret = print_list_item(opts->data_ptr[i], opts, &b, current_time);
997                         if (ret < 0)
998                                 break;
999                 }
1000         else
1001                 for (i = 0; i < opts->num_matching_paths; i++) {
1002                         ret = print_list_item(opts->data_ptr[i], opts, &b, current_time);
1003                         if (ret < 0)
1004                                 break;
1005                 }
1006         ret = 1;
1007 out:
1008         ls_output->data = b.buf;
1009         PARA_NOTICE_LOG("ls_outoute.data: %p\n", ls_output->data);
1010         ls_output->size = b.size;
1011         free(opts->data);
1012         free(opts->data_ptr);
1013         free(opts->patterns);
1014         return ret;
1015 }
1016
1017 /*
1018  * TODO: flags -h (sort by hash) -lm (list in mbox format)
1019  *
1020  * long list: list hash, attributes as (xx--x-x-), file size, lastplayed
1021  * full list: list everything, including afsi, afhi, atts as clear text
1022  *
1023  * */
1024 int com_afs_ls(int fd, int argc, char * const * const argv)
1025 {
1026         int i, ret;
1027         unsigned flags = 0;
1028         enum ls_sorting_method sort = LS_SORT_BY_PATH;
1029         enum ls_listing_mode mode = LS_MODE_SHORT;
1030         struct ls_options opts = {.patterns = NULL};
1031         struct osl_object query = {.data = &opts, .size = sizeof(opts)},
1032                 ls_output;
1033
1034         for (i = 1; i < argc; i++) {
1035                 const char *arg = argv[i];
1036                 if (arg[0] != '-')
1037                         break;
1038                 if (!strcmp(arg, "--")) {
1039                         i++;
1040                         break;
1041                 }
1042                 if (!strncmp(arg, "-l", 2)) {
1043                         if (!*(arg + 2)) {
1044                                 mode = LS_MODE_LONG;
1045                                 continue;
1046                         }
1047                         if (*(arg + 3))
1048                                 return -E_AFT_SYNTAX;
1049                         switch(*(arg + 2)) {
1050                         case 's':
1051                                 mode = LS_MODE_SHORT;
1052                                 continue;
1053                         case 'l':
1054                                 mode = LS_MODE_LONG;
1055                                 continue;
1056                         case 'v':
1057                                 mode = LS_MODE_VERBOSE;
1058                                 continue;
1059                         case 'm':
1060                                 mode = LS_MODE_MBOX;
1061                                 continue;
1062                         default:
1063                                 return -E_AFT_SYNTAX;
1064                         }
1065                 }
1066                 if (!strcmp(arg, "-p")) {
1067                         flags |= LS_FLAG_FULL_PATH;
1068                         continue;
1069                 }
1070                 if (!strcmp(arg, "-a")) {
1071                         flags |= LS_FLAG_ADMISSIBLE_ONLY;
1072                         continue;
1073                 }
1074                 if (!strcmp(arg, "-r")) {
1075                         flags |= LS_FLAG_REVERSE;
1076                         continue;
1077                 }
1078                 if (!strncmp(arg, "-s", 2)) {
1079                         if (!*(arg + 2) || *(arg + 3))
1080                                 return -E_AFT_SYNTAX;
1081                         switch(*(arg + 2)) {
1082                         case 'p':
1083                                 sort = LS_SORT_BY_PATH;
1084                                 continue;
1085                         case 's': /* -ss implies -a */
1086                                 sort = LS_SORT_BY_SCORE;
1087                                 flags |= LS_FLAG_ADMISSIBLE_ONLY;
1088                                 continue;
1089                         case 'l':
1090                                 sort = LS_SORT_BY_LAST_PLAYED;
1091                                 continue;
1092                         case 'n':
1093                                 sort = LS_SORT_BY_NUM_PLAYED;
1094                                 continue;
1095                         case 'f':
1096                                 sort = LS_SORT_BY_FREQUENCY;
1097                                 continue;
1098                         case 'c':
1099                                 sort = LS_SORT_BY_CHANNELS;
1100                                 continue;
1101                         case 'i':
1102                                 sort = LS_SORT_BY_IMAGE_ID;
1103                                 continue;
1104                         case 'y':
1105                                 sort = LS_SORT_BY_LYRICS_ID;
1106                                 continue;
1107                         case 'b':
1108                                 sort = LS_SORT_BY_BITRATE;
1109                                 continue;
1110                         case 'd':
1111                                 sort = LS_SORT_BY_DURATION;
1112                                 continue;
1113                         case 'a':
1114                                 sort = LS_SORT_BY_AUDIO_FORMAT;
1115                                 continue;
1116                         default:
1117                                 return -E_AFT_SYNTAX;
1118                         }
1119                 }
1120                 return -E_AFT_SYNTAX;
1121         }
1122         opts.flags = flags;
1123         opts.sorting = sort;
1124         opts.mode = mode;
1125         opts.num_patterns = argc - i;
1126         ret = send_option_arg_callback_request(&query, opts.num_patterns,
1127                 argv + i, com_ls_callback, &ls_output);
1128         if (ret > 0) {
1129                 ret = send_buffer(fd, (char *)ls_output.data);
1130                 free(ls_output.data);
1131         }
1132         return ret;
1133 }
1134
1135 /**
1136  * Call the given function for each file in the audio file table.
1137  *
1138  * \param private_data An arbitrary data pointer, passed to \a func.
1139  * \param func The custom function to be called.
1140  *
1141  * \return The return value of the underlying call to osl_rbtree_loop().
1142  */
1143 int audio_file_loop(void *private_data, osl_rbtree_loop_func *func)
1144 {
1145         return osl_rbtree_loop(audio_file_table, AFTCOL_HASH, private_data,
1146                 func);
1147 }
1148
1149 static struct osl_row *find_hash_sister(HASH_TYPE *hash)
1150 {
1151         const struct osl_object obj = {.data = hash, .size = HASH_SIZE};
1152         struct osl_row *row;
1153
1154         osl_get_row(audio_file_table, AFTCOL_HASH, &obj, &row);
1155         return row;
1156 }
1157
1158 enum aft_row_offsets {
1159         AFTROW_AFHI_OFFSET_POS = 0,
1160         AFTROW_CHUNKS_OFFSET_POS = 2,
1161         AFTROW_AUDIO_FORMAT_OFFSET = 4,
1162         AFTROW_FLAGS_OFFSET = 5,
1163         AFTROW_HASH_OFFSET = 9,
1164         AFTROW_PATH_OFFSET = (AFTROW_HASH_OFFSET + HASH_SIZE),
1165 };
1166
1167 /* never save the afsi, as the server knows it too. Note that afhi might be NULL.
1168  * In this case, afhi won't be stored in the buffer  */
1169 static void save_audio_file_info(HASH_TYPE *hash, const char *path,
1170                 struct audio_format_info *afhi, uint32_t flags,
1171                 uint8_t audio_format_num, struct osl_object *obj)
1172 {
1173         size_t path_len = strlen(path) + 1;
1174         size_t afhi_size = sizeof_afhi_buf(afhi);
1175         size_t size = AFTROW_PATH_OFFSET + path_len + afhi_size
1176                 + sizeof_chunk_info_buf(afhi);
1177         char *buf = para_malloc(size);
1178         uint16_t pos;
1179
1180         write_u8(buf + AFTROW_AUDIO_FORMAT_OFFSET, audio_format_num);
1181         write_u32(buf + AFTROW_FLAGS_OFFSET, flags);
1182
1183         memcpy(buf + AFTROW_HASH_OFFSET, hash, HASH_SIZE);
1184         strcpy(buf + AFTROW_PATH_OFFSET, path);
1185
1186         pos = AFTROW_PATH_OFFSET + path_len;
1187         PARA_DEBUG_LOG("size: %zu, afhi starts at %d\n", size, pos);
1188         PARA_DEBUG_LOG("last afhi byte: %p, pos %zu\n", buf + pos + afhi_size - 1,
1189                 pos + afhi_size - 1);
1190         write_u16(buf + AFTROW_AFHI_OFFSET_POS, pos);
1191         save_afhi(afhi, buf + pos);
1192
1193         pos += afhi_size;
1194         PARA_DEBUG_LOG("size: %zu, chunks start at %d\n", size, pos);
1195         write_u16(buf + AFTROW_CHUNKS_OFFSET_POS, pos);
1196         save_chunk_info(afhi, buf + pos);
1197         PARA_DEBUG_LOG("last byte in buf: %p\n", buf + size - 1);
1198         obj->data = buf;
1199         obj->size = size;
1200 }
1201
1202 /*
1203 input:
1204 ~~~~~~
1205 HS:     hash sister
1206 PB:     path brother
1207 F:      force flag given
1208
1209 output:
1210 ~~~~~~~
1211 AFHI:   whether afhi and chunk table are computed and sent
1212 ACTION: table modifications to be performed
1213
1214 +---+----+-----+------+---------------------------------------------------+
1215 | HS | PB | F  | AFHI | ACTION
1216 +---+----+-----+------+---------------------------------------------------+
1217 | Y |  Y |  Y  |  Y   | if HS != PB: remove PB. HS: force afhi update,
1218 |                     | update path, keep afsi
1219 +---+----+-----+------+---------------------------------------------------+
1220 | Y |  Y |  N  |  N   | if HS == PB: do not send callback request at all.
1221 |                     | otherwise: remove PB, HS: update path, keep afhi,
1222 |                     | afsi.
1223 +---+----+-----+------+---------------------------------------------------+
1224 | Y |  N |  Y  |  Y   | (rename) force afhi update of HS, update path of
1225 |                     | HS, keep afsi
1226 +---+----+-----+------+---------------------------------------------------+
1227 | Y |  N |  N  |  N   | (file rename) update path of HS, keep afsi, afhi
1228 +---+----+-----+------+---------------------------------------------------+
1229 | N |  Y |  Y  |  Y   | (file change) update afhi, hash, of PB, keep afsi
1230 |                     | (force has no effect)
1231 +---+----+-----+------+---------------------------------------------------+
1232 | N |  Y |  N  |  Y   | (file change) update afhi, hash of PB, keep afsi
1233 +---+----+-----+------+---------------------------------------------------+
1234 | N |  N |  Y  |  Y   | (new file) create new entry (force has no effect)
1235 +---+----+-----+------+---------------------------------------------------+
1236 | N |  N |  N  |  Y   | (new file) create new entry
1237 +---+----+-----+------+---------------------------------------------------+
1238
1239 afhi <=> force or no HS
1240
1241 */
1242
1243
1244 #define ADD_FLAG_LAZY 1
1245 #define ADD_FLAG_FORCE 2
1246 #define ADD_FLAG_VERBOSE 4
1247
1248 /* TODO: change log messages so that they get written to the result buffer */
1249
1250 static int com_add_callback(const struct osl_object *query,
1251                 __a_unused struct osl_object *result)
1252 {
1253         char *buf = query->data, *path;
1254         struct osl_row *pb, *aft_row;
1255         const struct osl_row *hs;
1256         struct osl_object objs[NUM_AFT_COLUMNS];
1257         HASH_TYPE *hash;
1258         char asc[2 * HASH_SIZE + 1];
1259         int ret;
1260         char afsi_buf[AFSI_SIZE];
1261         uint32_t flags = read_u32(buf + AFTROW_FLAGS_OFFSET);
1262         struct afs_info default_afsi = {.last_played = 0};
1263
1264         hash = (HASH_TYPE *)buf + AFTROW_HASH_OFFSET;
1265         hash_to_asc(hash, asc);;
1266         objs[AFTCOL_HASH].data = buf + AFTROW_HASH_OFFSET;
1267         objs[AFTCOL_HASH].size = HASH_SIZE;
1268
1269         path = buf + AFTROW_PATH_OFFSET;
1270         objs[AFTCOL_PATH].data = path;
1271         objs[AFTCOL_PATH].size = strlen(path) + 1;
1272
1273         PARA_INFO_LOG("request to add %s\n", path);
1274         hs = find_hash_sister(hash);
1275         ret = aft_get_row_of_path(path, &pb);
1276         if (ret < 0 && ret != -E_RB_KEY_NOT_FOUND)
1277                 return ret;
1278         if (hs && pb && hs == pb && !(flags & ADD_FLAG_FORCE)) {
1279                 if (flags & ADD_FLAG_VERBOSE)
1280                         PARA_NOTICE_LOG("ignoring duplicate %p\n", path);
1281                 return 1;
1282         }
1283         if (hs && hs != pb) {
1284                 struct osl_object obj;
1285                 if (pb) { /* hs trumps pb, remove pb */
1286                         if (flags & ADD_FLAG_VERBOSE)
1287                                 PARA_NOTICE_LOG("removing path brother\n");
1288                         ret = osl_del_row(audio_file_table, pb);
1289                         if (ret < 0)
1290                                 return ret;
1291                         pb = NULL;
1292                 }
1293                 /* file rename, update hs' path */
1294                 ret = osl_get_object(audio_file_table, hs, AFTCOL_PATH, &obj);
1295                 if (flags & ADD_FLAG_VERBOSE)
1296                         PARA_NOTICE_LOG("rename %s -> %s\n", (char *)obj.data, path);
1297                 ret = osl_update_object(audio_file_table, hs, AFTCOL_PATH,
1298                         &objs[AFTCOL_PATH]);
1299                 if (ret < 0)
1300                         return ret;
1301                 if (!(flags & ADD_FLAG_FORCE))
1302                         return ret;
1303         }
1304         /* no hs or force mode, child must have sent afhi */
1305         uint16_t afhi_offset = read_u16(buf + AFTROW_AFHI_OFFSET_POS);
1306         uint16_t chunks_offset = read_u16(buf + AFTROW_CHUNKS_OFFSET_POS);
1307
1308         objs[AFTCOL_AFHI].data = buf + afhi_offset;
1309         objs[AFTCOL_AFHI].size = chunks_offset - afhi_offset;
1310         if (!objs[AFTCOL_AFHI].size) /* "impossible" */
1311                 return -E_NO_AFHI;
1312         objs[AFTCOL_CHUNKS].data = buf + chunks_offset;
1313         objs[AFTCOL_CHUNKS].size = query->size - chunks_offset;
1314         if (pb && !hs) { /* update pb's hash */
1315                 char old_asc[2 * HASH_SIZE + 1];
1316                 HASH_TYPE *old_hash;
1317                 ret = get_hash_of_row(pb, &old_hash);
1318                 if (ret < 0)
1319                         return ret;
1320                 hash_to_asc(old_hash, old_asc);
1321                 if (flags & ADD_FLAG_VERBOSE)
1322                         PARA_NOTICE_LOG("file change: %s %s -> %s\n", path,
1323                                 old_asc, asc);
1324                 ret = osl_update_object(audio_file_table, pb, AFTCOL_HASH,
1325                         &objs[AFTCOL_HASH]);
1326                 if (ret < 0)
1327                         return ret;
1328         }
1329         if (hs || pb) { /* (hs != NULL and pb != NULL) implies hs == pb */
1330                 const struct osl_row *row = pb? pb : hs;
1331                 /* update afhi and chunk_table */
1332                 if (flags & ADD_FLAG_VERBOSE)
1333                         PARA_DEBUG_LOG("updating audio format handler info (%zd bytes)\n",
1334                                 objs[AFTCOL_AFHI].size);
1335                 ret = osl_update_object(audio_file_table, row, AFTCOL_AFHI,
1336                         &objs[AFTCOL_AFHI]);
1337                 if (ret < 0)
1338                         return ret;
1339                 if (flags & ADD_FLAG_VERBOSE)
1340                         PARA_DEBUG_LOG("updating chunk table\n");
1341                 ret = osl_update_object(audio_file_table, row, AFTCOL_CHUNKS,
1342                         &objs[AFTCOL_CHUNKS]);
1343                 if (ret < 0)
1344                         return ret;
1345                 return mood_update_audio_file(row, NULL);
1346         }
1347         /* new entry, use default afsi */
1348         default_afsi.last_played = time(NULL) - 365 * 24 * 60 * 60;
1349         default_afsi.audio_format_id = read_u8(buf + AFTROW_AUDIO_FORMAT_OFFSET);
1350
1351         objs[AFTCOL_AFSI].data = &afsi_buf;
1352         objs[AFTCOL_AFSI].size = AFSI_SIZE;
1353         save_afsi(&default_afsi, &objs[AFTCOL_AFSI]);
1354         ret = osl_add_and_get_row(audio_file_table, objs, &aft_row);
1355         if (ret < 0)
1356                 return ret;
1357         return mood_update_audio_file(aft_row, NULL);
1358 }
1359
1360 struct private_add_data {
1361         int fd;
1362         uint32_t flags;
1363 };
1364
1365 static int path_brother_callback(const struct osl_object *query,
1366                 struct osl_object *result)
1367 {
1368         char *path = query->data;
1369         struct osl_row *path_brother;
1370         int ret = aft_get_row_of_path(path, &path_brother);
1371         if (ret < 0)
1372                 return ret;
1373         result->data = para_malloc(sizeof(path_brother));
1374         result->size = sizeof(path_brother);
1375         *(struct osl_row **)(result->data) = path_brother;
1376         return 1;
1377 }
1378
1379 static int hash_sister_callback(const struct osl_object *query,
1380                 struct osl_object *result)
1381 {
1382         HASH_TYPE *hash = query->data;
1383         struct osl_row *hash_sister;
1384
1385         hash_sister = find_hash_sister(hash);
1386         if (!hash_sister)
1387                 return -E_RB_KEY_NOT_FOUND;
1388         result->data = para_malloc(sizeof(hash_sister));
1389         result->size = sizeof(hash_sister);
1390         *(struct osl_row **)(result->data) = hash_sister;
1391         return 1;
1392 }
1393
1394 static int add_one_audio_file(const char *arg, const void *private_data)
1395 {
1396         int ret;
1397         uint8_t format_num = -1;
1398         const struct private_add_data *pad = private_data;
1399         struct audio_format_info afhi, *afhi_ptr = NULL;
1400         struct osl_row *pb = NULL, *hs = NULL; /* path brother/hash sister */
1401         struct osl_object map, obj = {.data = NULL}, query, result;
1402         char *path = NULL;
1403         HASH_TYPE hash[HASH_SIZE];
1404
1405         afhi.header_offset = 0;
1406         afhi.header_len = 0;
1407         ret = verify_path(arg, &path);
1408         if (ret < 0)
1409                 goto out_free;
1410         query.data = path;
1411         query.size = strlen(path) + 1;
1412         ret = send_callback_request(path_brother_callback, &query, &result);
1413         if (ret < 0 && ret != -E_RB_KEY_NOT_FOUND)
1414                 goto out_free;
1415         if (ret >= 0) {
1416                 pb = *(struct osl_row **)result.data;
1417                 free(result.data);
1418         }
1419         ret = 1;
1420         if (pb && (pad->flags & ADD_FLAG_LAZY)) { /* lazy is really cheap */
1421                 if (pad->flags & ADD_FLAG_VERBOSE)
1422                         ret = send_va_buffer(pad->fd, "lazy-ignore: %s\n", path);
1423                 goto out_free;
1424         }
1425         /* We still want to add this file. Compute its hash. */
1426         ret = mmap_full_file(path, O_RDONLY, &map);
1427         if (ret < 0)
1428                 goto out_free;
1429         hash_function(map.data, map.size, hash);
1430
1431         /* Check whether database contains file with the same hash. */
1432         query.data = hash;
1433         query.size = HASH_SIZE;
1434         ret = send_callback_request(hash_sister_callback, &query, &result);
1435         if (ret < 0 && ret != -E_RB_KEY_NOT_FOUND)
1436                 goto out_free;
1437         if (ret >= 0) {
1438                 hs = *(struct osl_row **)result.data;
1439                 free(result.data);
1440         }
1441         /* Return success if we already know this file. */
1442         ret = 1;
1443         if (pb && hs && hs == pb && (!(pad->flags & ADD_FLAG_FORCE))) {
1444                 if (pad->flags & ADD_FLAG_VERBOSE)
1445                         ret = send_va_buffer(pad->fd,
1446                                 "not forcing update: %s\n", path);
1447                 goto out_unmap;
1448         }
1449         /*
1450          * we won't recalculate the audio format info and the chunk table if
1451          * there is a hash sister unless in FORCE mode.
1452          */
1453         if (!hs || (pad->flags & ADD_FLAG_FORCE)) {
1454                 ret = compute_afhi(path, map.data, map.size, &afhi);
1455                 if (ret < 0)
1456                         goto out_unmap;
1457                 format_num = ret;
1458                 afhi_ptr = &afhi;
1459         }
1460         if (pad->flags & ADD_FLAG_VERBOSE)
1461                 send_va_buffer(pad->fd, "adding %s\n", path);
1462         munmap(map.data, map.size);
1463         save_audio_file_info(hash, path, afhi_ptr, pad->flags, format_num, &obj);
1464         /* Ask afs to consider this entry for adding. */
1465         ret = send_callback_request(com_add_callback, &obj, NULL);
1466         goto out_free;
1467
1468 out_unmap:
1469         munmap(map.data, map.size);
1470 out_free:
1471         if (ret < 0)
1472                 send_va_buffer(pad->fd, "failed to add %s (%s)\n", path?
1473                         path : arg, PARA_STRERROR(-ret));
1474         free(obj.data);
1475         free(path);
1476         if (afhi_ptr)
1477                 free(afhi_ptr->chunk_table);
1478         return 1; /* it's not an error if not all files could be added */
1479 }
1480
1481 int com_add(int fd, int argc, char * const * const argv)
1482 {
1483         int i, ret;
1484         struct private_add_data pad = {.fd = fd, .flags = 0};
1485         struct stat statbuf;
1486
1487         for (i = 1; i < argc; i++) {
1488                 const char *arg = argv[i];
1489                 if (arg[0] != '-')
1490                         break;
1491                 if (!strcmp(arg, "--")) {
1492                         i++;
1493                         break;
1494                 }
1495                 if (!strcmp(arg, "-l")) {
1496                         pad.flags |= ADD_FLAG_LAZY;
1497                         continue;
1498                 }
1499                 if (!strcmp(arg, "-f")) {
1500                         pad.flags |= ADD_FLAG_FORCE;
1501                         continue;
1502                 }
1503                 if (!strcmp(arg, "-v")) {
1504                         pad.flags |= ADD_FLAG_VERBOSE;
1505                         continue;
1506                 }
1507         }
1508         if (argc <= i)
1509                 return -E_AFT_SYNTAX;
1510         for (; i < argc; i++) {
1511                 char *path = para_strdup(argv[i]);
1512                 size_t len = strlen(path);
1513                 while (len > 1 && path[--len] == '/')
1514                         path[len] = '\0';
1515                 ret = stat(path, &statbuf);
1516                 if (ret < 0)
1517                         PARA_NOTICE_LOG("failed to stat %s (%s)", path,
1518                                 strerror(errno));
1519                 else
1520                         if (S_ISDIR(statbuf.st_mode))
1521                                 for_each_file_in_dir(path, add_one_audio_file,
1522                                         &pad);
1523                         else
1524                                 add_one_audio_file(path, &pad);
1525                 free(path);
1526         }
1527         ret = 1;
1528         return ret;
1529
1530 }
1531
1532 struct com_touch_options {
1533         long num_played;
1534         long last_played;
1535         long lyrics_id;
1536         long image_id;
1537 };
1538
1539 static int com_touch_callback(const struct osl_object *query,
1540                 __a_unused struct osl_object *result)
1541 {
1542         struct com_touch_options *cto = query->data;
1543         char *p = (char *)query->data + sizeof(*cto);
1544         size_t len;
1545         int ret, no_options = cto->num_played < 0 && cto->last_played < 0 &&
1546                 cto->lyrics_id < 0 && cto->image_id < 0;
1547
1548         for (;p < (char *)query->data + query->size; p += len + 1) {
1549                 struct afs_info old_afsi, new_afsi;
1550                 struct osl_object obj;
1551                 struct osl_row *row;
1552
1553                 len = strlen(p);
1554                 ret = aft_get_row_of_path(p, &row);
1555                 if (ret < 0)
1556                         return ret;
1557                 ret = get_afsi_object_of_row(row, &obj);
1558                 if (ret < 0)
1559                         return ret;
1560                 ret = load_afsi(&old_afsi, &obj);
1561                 if (ret < 0)
1562                         return ret;
1563                 new_afsi = old_afsi;
1564                 if (no_options) {
1565                         new_afsi.num_played++;
1566                         new_afsi.last_played = time(NULL);
1567                 } else {
1568                         if (cto->lyrics_id >= 0)
1569                                 new_afsi.lyrics_id = cto->lyrics_id;
1570                         if (cto->image_id >= 0)
1571                                 new_afsi.image_id = cto->image_id;
1572                         if (cto->num_played >= 0)
1573                                 new_afsi.num_played = cto->num_played;
1574                         if (cto->last_played >= 0)
1575                                 new_afsi.last_played = cto->last_played;
1576                 }
1577                 save_afsi(&new_afsi, &obj); /* in-place update */
1578                 ret = mood_update_audio_file(row, &old_afsi);
1579                 if (ret < 0)
1580                         return ret;
1581         }
1582         return 1;
1583 }
1584
1585 int com_touch(__a_unused int fd, int argc, char * const * const argv)
1586 {
1587         struct com_touch_options cto = {
1588                 .num_played = -1,
1589                 .last_played = -1,
1590                 .lyrics_id = -1,
1591                 .image_id = -1
1592         };
1593         struct osl_object options = {.data = &cto, .size = sizeof(cto)};
1594         int i, ret;
1595
1596
1597         for (i = 1; i < argc; i++) {
1598                 const char *arg = argv[i];
1599                 if (arg[0] != '-')
1600                         break;
1601                 if (!strcmp(arg, "--")) {
1602                         i++;
1603                         break;
1604                 }
1605                 if (!strncmp(arg, "-n", 2)) {
1606                         ret = para_atol(arg + 2, &cto.num_played);
1607                         if (ret < 0)
1608                                 goto err;
1609                         continue;
1610                 }
1611                 if (!strncmp(arg, "-l", 2)) {
1612                         ret = para_atol(arg + 2, &cto.last_played);
1613                         if (ret < 0)
1614                                 goto err;
1615                         continue;
1616                 }
1617                 if (!strncmp(arg, "-y", 2)) {
1618                         ret = para_atol(arg + 2, &cto.lyrics_id);
1619                         if (ret < 0)
1620                                 goto err;
1621                         continue;
1622                 }
1623                 if (!strncmp(arg, "-i", 2)) {
1624                         ret = para_atol(arg + 2, &cto.image_id);
1625                         if (ret < 0)
1626                                 goto err;
1627                         continue;
1628                 }
1629         }
1630         ret = -E_AFT_SYNTAX;
1631         if (i >= argc)
1632                 goto err;
1633         return send_option_arg_callback_request(&options, argc - i,
1634                 argv + i, com_touch_callback, NULL);
1635 err:
1636         return ret;
1637 }
1638
1639 struct com_rm_options {
1640         uint32_t flags;
1641 };
1642
1643 static int com_rm_callback(const struct osl_object *query,
1644                 __a_unused struct osl_object *result)
1645 {
1646         struct com_rm_options *cro = query->data;
1647         char *p = (char *)query->data + sizeof(*cro);
1648         size_t len;
1649         int ret;
1650
1651         for (;p < (char *)query->data + query->size; p += len + 1) {
1652                 struct osl_row *row;
1653
1654                 len = strlen(p);
1655                 ret = aft_get_row_of_path(p, &row);
1656                 if (ret < 0)
1657                         return ret;
1658                 ret = mood_delete_audio_file(row);
1659                 if (ret < 0)
1660                         return ret;
1661                 ret = osl_del_row(audio_file_table, row);
1662                 if (ret < 0)
1663                         return ret;
1664         }
1665         return 1;
1666 }
1667
1668 /*
1669  * TODO options: -v verbose, -f dont stop if file not found
1670  * -h remove by hash, use fnmatch
1671  *
1672  * */
1673
1674 int com_afs_rm(__a_unused int fd, int argc,  char * const * const argv)
1675 {
1676         struct com_rm_options cro = {.flags = 0};
1677         struct osl_object options = {.data = &cro, .size = sizeof(cro)};
1678         int i, ret;
1679
1680         for (i = 1; i < argc; i++) {
1681                 const char *arg = argv[i];
1682                 if (arg[0] != '-')
1683                         break;
1684                 if (!strcmp(arg, "--")) {
1685                         i++;
1686                         break;
1687                 }
1688         }
1689         ret = -E_AFT_SYNTAX;
1690         if (i >= argc)
1691                 goto err;
1692         return send_option_arg_callback_request(&options, argc - i,
1693                 argv + i, com_rm_callback, NULL);
1694 err:
1695         return ret;
1696 }
1697
1698 /* TODO: optionally fix problems by removing offending rows */
1699 static int check_audio_file(struct osl_row *row, void *data)
1700 {
1701         char *path;
1702         struct para_buffer *pb = data;
1703         struct stat statbuf;
1704         int ret = get_audio_file_path_of_row(row, &path);
1705         struct afs_info afsi;
1706         char *blob_name;
1707
1708         if (ret < 0) {
1709                 para_printf(pb, "%s\n", PARA_STRERROR(-ret));
1710                 return 1;
1711         }
1712         if (stat(path, &statbuf) < 0)
1713                 para_printf(pb, "%s: stat error (%s)\n", path, strerror(errno));
1714         else {
1715                 if (!S_ISREG(statbuf.st_mode))
1716                         para_printf(pb, "%s: not a regular file\n", path);
1717         }
1718         ret = get_afsi_of_row(row, &afsi);
1719         if (ret < 0) {
1720                 para_printf(pb, "%s: %s\n", path, PARA_STRERROR(-ret));
1721                 return 1;
1722         }
1723         ret = lyr_get_name_by_id(afsi.lyrics_id, &blob_name);
1724         if (ret < 0)
1725                 para_printf(pb, "%s lyrics id %u: %s\n", path, afsi.lyrics_id,
1726                         PARA_STRERROR(-ret));
1727         ret = img_get_name_by_id(afsi.image_id, &blob_name);
1728         if (ret < 0)
1729                 para_printf(pb, "%s image id %u: %s\n", path, afsi.image_id,
1730                         PARA_STRERROR(-ret));
1731         return 1;
1732 }
1733
1734 int aft_check_callback(__a_unused const struct osl_object *query, struct osl_object *result)
1735 {
1736         struct para_buffer pb = {.buf = NULL};
1737
1738         para_printf(&pb, "checking audio file table...\n");
1739         audio_file_loop(&pb, check_audio_file);
1740         result->data = pb.buf;
1741         result->size = pb.size;
1742         return 1;
1743
1744 }
1745
1746 /**
1747  * Close the audio file table.
1748  *
1749  * \param flags Ususal flags that are passed to osl_close_table().
1750  *
1751  * \sa osl_close_table().
1752  */
1753 void aft_shutdown(enum osl_close_flags flags)
1754 {
1755         osl_close_table(audio_file_table, flags);
1756         audio_file_table = NULL;
1757 }
1758
1759 /**
1760  * Open the audio file table.
1761  *
1762  * \param ti Gets initialized by this function.
1763  * \param db The database directory.
1764  *
1765  * \return Positive on success, negative on errors.
1766  *
1767  * \sa osl_open_table().
1768  */
1769 int aft_init(struct table_info *ti, const char *db)
1770 {
1771         int ret;
1772
1773         audio_file_table_desc.dir = db;
1774         ti->desc = &audio_file_table_desc;
1775         ret = osl_open_table(ti->desc, &ti->table);
1776         if (ret >= 0) {
1777                 unsigned num;
1778                 audio_file_table = ti->table;
1779                 osl_get_num_rows(audio_file_table, &num);
1780                 PARA_INFO_LOG("audio file table contains %d files\n", num);
1781                 return ret;
1782         }
1783         PARA_INFO_LOG("failed to open audio file table\n");
1784         audio_file_table = NULL;
1785         return ret == -E_NOENT? 1 : ret;
1786 }