vlog: abstract out interface to syslog daemon
[cascardo/ovs.git] / lib / vlog.c
1 /*
2  * Copyright (c) 2008, 2009, 2010, 2011, 2012, 2013 Nicira, Inc.
3  *
4  * Licensed under the Apache License, Version 2.0 (the "License");
5  * you may not use this file except in compliance with the License.
6  * You may obtain a copy of the License at:
7  *
8  *     http://www.apache.org/licenses/LICENSE-2.0
9  *
10  * Unless required by applicable law or agreed to in writing, software
11  * distributed under the License is distributed on an "AS IS" BASIS,
12  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
13  * See the License for the specific language governing permissions and
14  * limitations under the License.
15  */
16
17 #include <config.h>
18 #include "openvswitch/vlog.h"
19 #include <assert.h>
20 #include <ctype.h>
21 #include <errno.h>
22 #include <fcntl.h>
23 #include <stdarg.h>
24 #include <stdlib.h>
25 #include <string.h>
26 #include <sys/stat.h>
27 #include <sys/types.h>
28 #include <syslog.h>
29 #include <time.h>
30 #include <unistd.h>
31 #include "async-append.h"
32 #include "coverage.h"
33 #include "dirs.h"
34 #include "dynamic-string.h"
35 #include "ofpbuf.h"
36 #include "ovs-thread.h"
37 #include "sat-math.h"
38 #include "socket-util.h"
39 #include "svec.h"
40 #include "syslog-direct.h"
41 #include "syslog-libc.h"
42 #include "syslog-provider.h"
43 #include "timeval.h"
44 #include "unixctl.h"
45 #include "util.h"
46
47 VLOG_DEFINE_THIS_MODULE(vlog);
48
49 /* ovs_assert() logs the assertion message, so using ovs_assert() in this
50  * source file could cause recursion. */
51 #undef ovs_assert
52 #define ovs_assert use_assert_instead_of_ovs_assert_in_this_module
53
54 /* Name for each logging level. */
55 static const char *const level_names[VLL_N_LEVELS] = {
56 #define VLOG_LEVEL(NAME, SYSLOG_LEVEL, RFC5424) #NAME,
57     VLOG_LEVELS
58 #undef VLOG_LEVEL
59 };
60
61 /* Syslog value for each logging level. */
62 static const int syslog_levels[VLL_N_LEVELS] = {
63 #define VLOG_LEVEL(NAME, SYSLOG_LEVEL, RFC5424) SYSLOG_LEVEL,
64     VLOG_LEVELS
65 #undef VLOG_LEVEL
66 };
67
68 /* RFC 5424 defines specific values for each syslog level.  Normally LOG_* use
69  * the same values.  Verify that in fact they're the same.  If we get assertion
70  * failures here then we need to define a separate rfc5424_levels[] array. */
71 #define VLOG_LEVEL(NAME, SYSLOG_LEVEL, RFC5424) \
72     BUILD_ASSERT_DECL(SYSLOG_LEVEL == RFC5424);
73 VLOG_LEVELS
74 #undef VLOG_LEVELS
75
76 /* Similarly, RFC 5424 defines the local0 facility with the value ordinarily
77  * used for LOG_LOCAL0. */
78 BUILD_ASSERT_DECL(LOG_LOCAL0 == (16 << 3));
79
80 /* The log modules. */
81 struct ovs_list vlog_modules = OVS_LIST_INITIALIZER(&vlog_modules);
82
83 /* Protects the 'pattern' in all "struct destination"s, so that a race between
84  * changing and reading the pattern does not cause an access to freed
85  * memory. */
86 static struct ovs_rwlock pattern_rwlock = OVS_RWLOCK_INITIALIZER;
87
88 /* Information about each destination. */
89 struct destination {
90     const char *name;           /* Name. */
91     char *pattern OVS_GUARDED_BY(pattern_rwlock); /* Current pattern. */
92     bool default_pattern;       /* Whether current pattern is the default. */
93 };
94 static struct destination destinations[VLF_N_DESTINATIONS] = {
95 #define VLOG_DESTINATION(NAME, PATTERN) {#NAME, PATTERN, true},
96     VLOG_DESTINATIONS
97 #undef VLOG_DESTINATION
98 };
99
100 /* Sequence number for the message currently being composed. */
101 DEFINE_STATIC_PER_THREAD_DATA(unsigned int, msg_num, 0);
102
103 /* VLF_FILE configuration.
104  *
105  * All of the following is protected by 'log_file_mutex', which nests inside
106  * pattern_rwlock. */
107 static struct ovs_mutex log_file_mutex = OVS_MUTEX_INITIALIZER;
108 static char *log_file_name OVS_GUARDED_BY(log_file_mutex);
109 static int log_fd OVS_GUARDED_BY(log_file_mutex) = -1;
110 static struct async_append *log_writer OVS_GUARDED_BY(log_file_mutex);
111 static bool log_async OVS_GUARDED_BY(log_file_mutex);
112 static struct syslogger *syslogger = NULL;
113
114 /* Syslog export configuration. */
115 static int syslog_fd OVS_GUARDED_BY(pattern_rwlock) = -1;
116
117 /* Log facility configuration. */
118 static atomic_int log_facility = ATOMIC_VAR_INIT(0);
119
120 /* Facility name and its value. */
121 struct vlog_facility {
122     char *name;           /* Name. */
123     unsigned int value;   /* Facility associated with 'name'. */
124 };
125 static struct vlog_facility vlog_facilities[] = {
126     {"kern", LOG_KERN},
127     {"user", LOG_USER},
128     {"mail", LOG_MAIL},
129     {"daemon", LOG_DAEMON},
130     {"auth", LOG_AUTH},
131     {"syslog", LOG_SYSLOG},
132     {"lpr", LOG_LPR},
133     {"news", LOG_NEWS},
134     {"uucp", LOG_UUCP},
135     {"clock", LOG_CRON},
136     {"ftp", LOG_FTP},
137     {"ntp", 12<<3},
138     {"audit", 13<<3},
139     {"alert", 14<<3},
140     {"clock2", 15<<3},
141     {"local0", LOG_LOCAL0},
142     {"local1", LOG_LOCAL1},
143     {"local2", LOG_LOCAL2},
144     {"local3", LOG_LOCAL3},
145     {"local4", LOG_LOCAL4},
146     {"local5", LOG_LOCAL5},
147     {"local6", LOG_LOCAL6},
148     {"local7", LOG_LOCAL7}
149 };
150 static bool vlog_facility_exists(const char* facility, int *value);
151
152 static void format_log_message(const struct vlog_module *, enum vlog_level,
153                                const char *pattern,
154                                const char *message, va_list, struct ds *)
155     OVS_PRINTF_FORMAT(4, 0);
156
157 /* Searches the 'n_names' in 'names'.  Returns the index of a match for
158  * 'target', or 'n_names' if no name matches. */
159 static size_t
160 search_name_array(const char *target, const char *const *names, size_t n_names)
161 {
162     size_t i;
163
164     for (i = 0; i < n_names; i++) {
165         assert(names[i]);
166         if (!strcasecmp(names[i], target)) {
167             break;
168         }
169     }
170     return i;
171 }
172
173 /* Returns the name for logging level 'level'. */
174 const char *
175 vlog_get_level_name(enum vlog_level level)
176 {
177     assert(level < VLL_N_LEVELS);
178     return level_names[level];
179 }
180
181 /* Returns the logging level with the given 'name', or VLL_N_LEVELS if 'name'
182  * is not the name of a logging level. */
183 enum vlog_level
184 vlog_get_level_val(const char *name)
185 {
186     return search_name_array(name, level_names, ARRAY_SIZE(level_names));
187 }
188
189 /* Returns the name for logging destination 'destination'. */
190 const char *
191 vlog_get_destination_name(enum vlog_destination destination)
192 {
193     assert(destination < VLF_N_DESTINATIONS);
194     return destinations[destination].name;
195 }
196
197 /* Returns the logging destination named 'name', or VLF_N_DESTINATIONS if
198  * 'name' is not the name of a logging destination. */
199 enum vlog_destination
200 vlog_get_destination_val(const char *name)
201 {
202     size_t i;
203
204     for (i = 0; i < VLF_N_DESTINATIONS; i++) {
205         if (!strcasecmp(destinations[i].name, name)) {
206             break;
207         }
208     }
209     return i;
210 }
211
212 void vlog_insert_module(struct ovs_list *vlog)
213 {
214     list_insert(&vlog_modules, vlog);
215 }
216
217 /* Returns the name for logging module 'module'. */
218 const char *
219 vlog_get_module_name(const struct vlog_module *module)
220 {
221     return module->name;
222 }
223
224 /* Returns the logging module named 'name', or NULL if 'name' is not the name
225  * of a logging module. */
226 struct vlog_module *
227 vlog_module_from_name(const char *name)
228 {
229     struct vlog_module *mp;
230
231     LIST_FOR_EACH (mp, list, &vlog_modules) {
232         if (!strcasecmp(name, mp->name)) {
233             return mp;
234         }
235     }
236
237     return NULL;
238 }
239
240 /* Returns the current logging level for the given 'module' and
241  * 'destination'. */
242 enum vlog_level
243 vlog_get_level(const struct vlog_module *module,
244                enum vlog_destination destination)
245 {
246     assert(destination < VLF_N_DESTINATIONS);
247     return module->levels[destination];
248 }
249
250 static void
251 update_min_level(struct vlog_module *module) OVS_REQUIRES(&log_file_mutex)
252 {
253     enum vlog_destination destination;
254
255     module->min_level = VLL_OFF;
256     for (destination = 0; destination < VLF_N_DESTINATIONS; destination++) {
257         if (log_fd >= 0 || destination != VLF_FILE) {
258             enum vlog_level level = module->levels[destination];
259             if (level > module->min_level) {
260                 module->min_level = level;
261             }
262         }
263     }
264 }
265
266 static void
267 set_destination_level(enum vlog_destination destination,
268                       struct vlog_module *module, enum vlog_level level)
269 {
270     assert(destination >= 0 && destination < VLF_N_DESTINATIONS);
271     assert(level < VLL_N_LEVELS);
272
273     ovs_mutex_lock(&log_file_mutex);
274     if (!module) {
275         struct vlog_module *mp;
276         LIST_FOR_EACH (mp, list, &vlog_modules) {
277             mp->levels[destination] = level;
278             update_min_level(mp);
279         }
280     } else {
281         module->levels[destination] = level;
282         update_min_level(module);
283     }
284     ovs_mutex_unlock(&log_file_mutex);
285 }
286
287 /* Sets the logging level for the given 'module' and 'destination' to 'level'.
288  * A null 'module' or a 'destination' of VLF_ANY_DESTINATION is treated as a
289  * wildcard across all modules or destinations, respectively. */
290 void
291 vlog_set_levels(struct vlog_module *module, enum vlog_destination destination,
292                 enum vlog_level level)
293 {
294     assert(destination < VLF_N_DESTINATIONS ||
295            destination == VLF_ANY_DESTINATION);
296     if (destination == VLF_ANY_DESTINATION) {
297         for (destination = 0; destination < VLF_N_DESTINATIONS;
298              destination++) {
299             set_destination_level(destination, module, level);
300         }
301     } else {
302         set_destination_level(destination, module, level);
303     }
304 }
305
306 static void
307 do_set_pattern(enum vlog_destination destination, const char *pattern)
308 {
309     struct destination *f = &destinations[destination];
310
311     ovs_rwlock_wrlock(&pattern_rwlock);
312     if (!f->default_pattern) {
313         free(f->pattern);
314     } else {
315         f->default_pattern = false;
316     }
317     f->pattern = xstrdup(pattern);
318     ovs_rwlock_unlock(&pattern_rwlock);
319 }
320
321 /* Sets the pattern for the given 'destination' to 'pattern'. */
322 void
323 vlog_set_pattern(enum vlog_destination destination, const char *pattern)
324 {
325     assert(destination < VLF_N_DESTINATIONS ||
326            destination == VLF_ANY_DESTINATION);
327     if (destination == VLF_ANY_DESTINATION) {
328         for (destination = 0; destination < VLF_N_DESTINATIONS;
329              destination++) {
330             do_set_pattern(destination, pattern);
331         }
332     } else {
333         do_set_pattern(destination, pattern);
334     }
335 }
336
337 /* Sets the name of the log file used by VLF_FILE to 'file_name', or to the
338  * default file name if 'file_name' is null.  Returns 0 if successful,
339  * otherwise a positive errno value. */
340 int
341 vlog_set_log_file(const char *file_name)
342 {
343     char *new_log_file_name;
344     struct vlog_module *mp;
345     struct stat old_stat;
346     struct stat new_stat;
347     int new_log_fd;
348     bool same_file;
349     bool log_close;
350
351     /* Open new log file. */
352     new_log_file_name = (file_name
353                          ? xstrdup(file_name)
354                          : xasprintf("%s/%s.log", ovs_logdir(), program_name));
355     new_log_fd = open(new_log_file_name, O_WRONLY | O_CREAT | O_APPEND, 0666);
356     if (new_log_fd < 0) {
357         VLOG_WARN("failed to open %s for logging: %s",
358                   new_log_file_name, ovs_strerror(errno));
359         free(new_log_file_name);
360         return errno;
361     }
362
363     /* If the new log file is the same one we already have open, bail out. */
364     ovs_mutex_lock(&log_file_mutex);
365     same_file = (log_fd >= 0
366                  && new_log_fd >= 0
367                  && !fstat(log_fd, &old_stat)
368                  && !fstat(new_log_fd, &new_stat)
369                  && old_stat.st_dev == new_stat.st_dev
370                  && old_stat.st_ino == new_stat.st_ino);
371     ovs_mutex_unlock(&log_file_mutex);
372     if (same_file) {
373         close(new_log_fd);
374         free(new_log_file_name);
375         return 0;
376     }
377
378     /* Log closing old log file (we can't log while holding log_file_mutex). */
379     ovs_mutex_lock(&log_file_mutex);
380     log_close = log_fd >= 0;
381     ovs_mutex_unlock(&log_file_mutex);
382     if (log_close) {
383         VLOG_INFO("closing log file");
384     }
385
386     /* Close old log file, if any, and install new one. */
387     ovs_mutex_lock(&log_file_mutex);
388     if (log_fd >= 0) {
389         free(log_file_name);
390         close(log_fd);
391         async_append_destroy(log_writer);
392     }
393
394     log_file_name = xstrdup(new_log_file_name);
395     log_fd = new_log_fd;
396     if (log_async) {
397         log_writer = async_append_create(new_log_fd);
398     }
399
400     LIST_FOR_EACH (mp, list, &vlog_modules) {
401         update_min_level(mp);
402     }
403     ovs_mutex_unlock(&log_file_mutex);
404
405     /* Log opening new log file (we can't log while holding log_file_mutex). */
406     VLOG_INFO("opened log file %s", new_log_file_name);
407     free(new_log_file_name);
408
409     return 0;
410 }
411
412 /* Closes and then attempts to re-open the current log file.  (This is useful
413  * just after log rotation, to ensure that the new log file starts being used.)
414  * Returns 0 if successful, otherwise a positive errno value. */
415 int
416 vlog_reopen_log_file(void)
417 {
418     char *fn;
419
420     ovs_mutex_lock(&log_file_mutex);
421     fn = log_file_name ? xstrdup(log_file_name) : NULL;
422     ovs_mutex_unlock(&log_file_mutex);
423
424     if (fn) {
425         int error = vlog_set_log_file(fn);
426         free(fn);
427         return error;
428     } else {
429         return 0;
430     }
431 }
432
433 /* Set debugging levels.  Returns null if successful, otherwise an error
434  * message that the caller must free(). */
435 char *
436 vlog_set_levels_from_string(const char *s_)
437 {
438     char *s = xstrdup(s_);
439     char *save_ptr = NULL;
440     char *msg = NULL;
441     char *word;
442
443     word = strtok_r(s, " ,:\t", &save_ptr);
444     if (word && !strcasecmp(word, "PATTERN")) {
445         enum vlog_destination destination;
446
447         word = strtok_r(NULL, " ,:\t", &save_ptr);
448         if (!word) {
449             msg = xstrdup("missing destination");
450             goto exit;
451         }
452
453         destination = (!strcasecmp(word, "ANY")
454                        ? VLF_ANY_DESTINATION
455                        : vlog_get_destination_val(word));
456         if (destination == VLF_N_DESTINATIONS) {
457             msg = xasprintf("unknown destination \"%s\"", word);
458             goto exit;
459         }
460         vlog_set_pattern(destination, save_ptr);
461     } else if (word && !strcasecmp(word, "FACILITY")) {
462         int value;
463
464         if (!vlog_facility_exists(save_ptr, &value)) {
465             msg = xstrdup("invalid facility");
466             goto exit;
467         }
468         atomic_store_explicit(&log_facility, value, memory_order_relaxed);
469     } else {
470         struct vlog_module *module = NULL;
471         enum vlog_level level = VLL_N_LEVELS;
472         enum vlog_destination destination = VLF_N_DESTINATIONS;
473
474         for (; word != NULL; word = strtok_r(NULL, " ,:\t", &save_ptr)) {
475             if (!strcasecmp(word, "ANY")) {
476                 continue;
477             } else if (vlog_get_destination_val(word) != VLF_N_DESTINATIONS) {
478                 if (destination != VLF_N_DESTINATIONS) {
479                     msg = xstrdup("cannot specify multiple destinations");
480                     goto exit;
481                 }
482                 destination = vlog_get_destination_val(word);
483             } else if (vlog_get_level_val(word) != VLL_N_LEVELS) {
484                 if (level != VLL_N_LEVELS) {
485                     msg = xstrdup("cannot specify multiple levels");
486                     goto exit;
487                 }
488                 level = vlog_get_level_val(word);
489             } else if (vlog_module_from_name(word)) {
490                 if (module) {
491                     msg = xstrdup("cannot specify multiple modules");
492                     goto exit;
493                 }
494                 module = vlog_module_from_name(word);
495             } else {
496                 msg = xasprintf("no destination, level, or module \"%s\"",
497                                 word);
498                 goto exit;
499             }
500         }
501
502         if (destination == VLF_N_DESTINATIONS) {
503             destination = VLF_ANY_DESTINATION;
504         }
505         if (level == VLL_N_LEVELS) {
506             level = VLL_DBG;
507         }
508         vlog_set_levels(module, destination, level);
509     }
510
511 exit:
512     free(s);
513     return msg;
514 }
515
516 /* Set debugging levels.  Abort with an error message if 's' is invalid. */
517 void
518 vlog_set_levels_from_string_assert(const char *s)
519 {
520     char *error = vlog_set_levels_from_string(s);
521     if (error) {
522         ovs_fatal(0, "%s", error);
523     }
524 }
525
526 /* If 'arg' is null, configure maximum verbosity.  Otherwise, sets
527  * configuration according to 'arg' (see vlog_set_levels_from_string()). */
528 void
529 vlog_set_verbosity(const char *arg)
530 {
531     if (arg) {
532         char *msg = vlog_set_levels_from_string(arg);
533         if (msg) {
534             ovs_fatal(0, "processing \"%s\": %s", arg, msg);
535         }
536     } else {
537         vlog_set_levels(NULL, VLF_ANY_DESTINATION, VLL_DBG);
538     }
539 }
540
541 void
542 vlog_set_syslog_method(const char *method)
543 {
544     if (syslogger) {
545         /* Set syslogger only, if one is not already set.  This effectively
546          * means that only the first --syslog-method argument is honored. */
547         return;
548     }
549
550     if (!strcmp(method, "libc")) {
551         syslogger = syslog_libc_create();
552     } else if (!strncmp(method, "udp:", 4) || !strncmp(method, "unix:", 5)) {
553         syslogger = syslog_direct_create(method);
554     } else {
555         ovs_fatal(0, "unsupported syslog method '%s'", method);
556     }
557 }
558
559 /* Set the vlog udp syslog target. */
560 void
561 vlog_set_syslog_target(const char *target)
562 {
563     int new_fd;
564
565     inet_open_active(SOCK_DGRAM, target, 0, NULL, &new_fd, 0);
566
567     ovs_rwlock_wrlock(&pattern_rwlock);
568     if (syslog_fd >= 0) {
569         close(syslog_fd);
570     }
571     syslog_fd = new_fd;
572     ovs_rwlock_unlock(&pattern_rwlock);
573 }
574
575 /* Returns 'false' if 'facility' is not a valid string. If 'facility'
576  * is a valid string, sets 'value' with the integer value of 'facility'
577  * and returns 'true'. */
578 static bool
579 vlog_facility_exists(const char* facility, int *value)
580 {
581     size_t i;
582     for (i = 0; i < ARRAY_SIZE(vlog_facilities); i++) {
583         if (!strcasecmp(vlog_facilities[i].name, facility)) {
584             *value = vlog_facilities[i].value;
585             return true;
586         }
587     }
588     return false;
589 }
590
591 static void
592 vlog_unixctl_set(struct unixctl_conn *conn, int argc, const char *argv[],
593                  void *aux OVS_UNUSED)
594 {
595     int i;
596
597     for (i = 1; i < argc; i++) {
598         char *msg = vlog_set_levels_from_string(argv[i]);
599         if (msg) {
600             unixctl_command_reply_error(conn, msg);
601             free(msg);
602             return;
603         }
604     }
605     unixctl_command_reply(conn, NULL);
606 }
607
608 static void
609 vlog_unixctl_list(struct unixctl_conn *conn, int argc OVS_UNUSED,
610                   const char *argv[] OVS_UNUSED, void *aux OVS_UNUSED)
611 {
612     char *msg = vlog_get_levels();
613     unixctl_command_reply(conn, msg);
614     free(msg);
615 }
616
617 static void
618 vlog_unixctl_reopen(struct unixctl_conn *conn, int argc OVS_UNUSED,
619                     const char *argv[] OVS_UNUSED, void *aux OVS_UNUSED)
620 {
621     bool has_log_file;
622
623     ovs_mutex_lock(&log_file_mutex);
624     has_log_file = log_file_name != NULL;
625     ovs_mutex_unlock(&log_file_mutex);
626
627     if (has_log_file) {
628         int error = vlog_reopen_log_file();
629         if (error) {
630             unixctl_command_reply_error(conn, ovs_strerror(errno));
631         } else {
632             unixctl_command_reply(conn, NULL);
633         }
634     } else {
635         unixctl_command_reply_error(conn, "Logging to file not configured");
636     }
637 }
638
639 static void
640 set_all_rate_limits(bool enable)
641 {
642     struct vlog_module *mp;
643
644     LIST_FOR_EACH (mp, list, &vlog_modules) {
645         mp->honor_rate_limits = enable;
646     }
647 }
648
649 static void
650 set_rate_limits(struct unixctl_conn *conn, int argc,
651                 const char *argv[], bool enable)
652 {
653     if (argc > 1) {
654         int i;
655
656         for (i = 1; i < argc; i++) {
657             if (!strcasecmp(argv[i], "ANY")) {
658                 set_all_rate_limits(enable);
659             } else {
660                 struct vlog_module *module = vlog_module_from_name(argv[i]);
661                 if (!module) {
662                     unixctl_command_reply_error(conn, "unknown module");
663                     return;
664                 }
665                 module->honor_rate_limits = enable;
666             }
667         }
668     } else {
669         set_all_rate_limits(enable);
670     }
671     unixctl_command_reply(conn, NULL);
672 }
673
674 static void
675 vlog_enable_rate_limit(struct unixctl_conn *conn, int argc,
676                        const char *argv[], void *aux OVS_UNUSED)
677 {
678     set_rate_limits(conn, argc, argv, true);
679 }
680
681 static void
682 vlog_disable_rate_limit(struct unixctl_conn *conn, int argc,
683                        const char *argv[], void *aux OVS_UNUSED)
684 {
685     set_rate_limits(conn, argc, argv, false);
686 }
687
688 /* Initializes the logging subsystem and registers its unixctl server
689  * commands. */
690 void
691 vlog_init(void)
692 {
693     static struct ovsthread_once once = OVSTHREAD_ONCE_INITIALIZER;
694
695     if (ovsthread_once_start(&once)) {
696         long long int now;
697         int facility;
698
699         /* Do initialization work that needs to be done before any logging
700          * occurs.  We want to keep this really minimal because any attempt to
701          * log anything before calling ovsthread_once_done() will deadlock. */
702         atomic_read_explicit(&log_facility, &facility, memory_order_relaxed);
703         if (!syslogger) {
704             syslogger = syslog_libc_create();
705         }
706         syslogger->class->openlog(syslogger, facility ? facility : LOG_DAEMON);
707         ovsthread_once_done(&once);
708
709         /* Now do anything that we want to happen only once but doesn't have to
710          * finish before we start logging. */
711
712         now = time_wall_msec();
713         if (now < 0) {
714             char *s = xastrftime_msec("%a, %d %b %Y %H:%M:%S", now, true);
715             VLOG_ERR("current time is negative: %s (%lld)", s, now);
716             free(s);
717         }
718
719         unixctl_command_register(
720             "vlog/set", "{spec | PATTERN:destination:pattern}",
721             1, INT_MAX, vlog_unixctl_set, NULL);
722         unixctl_command_register("vlog/list", "", 0, 0, vlog_unixctl_list,
723                                  NULL);
724         unixctl_command_register("vlog/enable-rate-limit", "[module]...",
725                                  0, INT_MAX, vlog_enable_rate_limit, NULL);
726         unixctl_command_register("vlog/disable-rate-limit", "[module]...",
727                                  0, INT_MAX, vlog_disable_rate_limit, NULL);
728         unixctl_command_register("vlog/reopen", "", 0, 0,
729                                  vlog_unixctl_reopen, NULL);
730     }
731 }
732
733 /* Enables VLF_FILE log output to be written asynchronously to disk.
734  * Asynchronous file writes avoid blocking the process in the case of a busy
735  * disk, but on the other hand they are less robust: there is a chance that the
736  * write will not make it to the log file if the process crashes soon after the
737  * log call. */
738 void
739 vlog_enable_async(void)
740 {
741     ovs_mutex_lock(&log_file_mutex);
742     log_async = true;
743     if (log_fd >= 0 && !log_writer) {
744         log_writer = async_append_create(log_fd);
745     }
746     ovs_mutex_unlock(&log_file_mutex);
747 }
748
749 /* Print the current logging level for each module. */
750 char *
751 vlog_get_levels(void)
752 {
753     struct ds s = DS_EMPTY_INITIALIZER;
754     struct vlog_module *mp;
755     struct svec lines = SVEC_EMPTY_INITIALIZER;
756     char *line;
757     size_t i;
758
759     ds_put_format(&s, "                 console    syslog    file\n");
760     ds_put_format(&s, "                 -------    ------    ------\n");
761
762     LIST_FOR_EACH (mp, list, &vlog_modules) {
763         struct ds line;
764
765         ds_init(&line);
766         ds_put_format(&line, "%-16s  %4s       %4s       %4s",
767                       vlog_get_module_name(mp),
768                       vlog_get_level_name(vlog_get_level(mp, VLF_CONSOLE)),
769                       vlog_get_level_name(vlog_get_level(mp, VLF_SYSLOG)),
770                       vlog_get_level_name(vlog_get_level(mp, VLF_FILE)));
771         if (!mp->honor_rate_limits) {
772             ds_put_cstr(&line, "    (rate limiting disabled)");
773         }
774         ds_put_char(&line, '\n');
775
776         svec_add_nocopy(&lines, ds_steal_cstr(&line));
777     }
778
779     svec_sort(&lines);
780     SVEC_FOR_EACH (i, line, &lines) {
781         ds_put_cstr(&s, line);
782     }
783     svec_destroy(&lines);
784
785     return ds_cstr(&s);
786 }
787
788 /* Returns true if a log message emitted for the given 'module' and 'level'
789  * would cause some log output, false if that module and level are completely
790  * disabled. */
791 bool
792 vlog_is_enabled(const struct vlog_module *module, enum vlog_level level)
793 {
794     return module->min_level >= level;
795 }
796
797 static const char *
798 fetch_braces(const char *p, const char *def, char *out, size_t out_size)
799 {
800     if (*p == '{') {
801         size_t n = strcspn(p + 1, "}");
802         size_t n_copy = MIN(n, out_size - 1);
803         memcpy(out, p + 1, n_copy);
804         out[n_copy] = '\0';
805         p += n + 2;
806     } else {
807         ovs_strlcpy(out, def, out_size);
808     }
809     return p;
810 }
811
812 static void
813 format_log_message(const struct vlog_module *module, enum vlog_level level,
814                    const char *pattern, const char *message,
815                    va_list args_, struct ds *s)
816 {
817     char tmp[128];
818     va_list args;
819     const char *p;
820     int facility;
821
822     ds_clear(s);
823     for (p = pattern; *p != '\0'; ) {
824         const char *subprogram_name;
825         enum { LEFT, RIGHT } justify = RIGHT;
826         int pad = '0';
827         size_t length, field, used;
828
829         if (*p != '%') {
830             ds_put_char(s, *p++);
831             continue;
832         }
833
834         p++;
835         if (*p == '-') {
836             justify = LEFT;
837             p++;
838         }
839         if (*p == '0') {
840             pad = '0';
841             p++;
842         }
843         field = 0;
844         while (isdigit((unsigned char)*p)) {
845             field = (field * 10) + (*p - '0');
846             p++;
847         }
848
849         length = s->length;
850         switch (*p++) {
851         case 'A':
852             ds_put_cstr(s, program_name);
853             break;
854         case 'B':
855             atomic_read_explicit(&log_facility, &facility,
856                                  memory_order_relaxed);
857             facility = facility ? facility : LOG_LOCAL0;
858             ds_put_format(s, "%d", facility + syslog_levels[level]);
859             break;
860         case 'c':
861             p = fetch_braces(p, "", tmp, sizeof tmp);
862             ds_put_cstr(s, vlog_get_module_name(module));
863             break;
864         case 'd':
865             p = fetch_braces(p, "%Y-%m-%d %H:%M:%S.###", tmp, sizeof tmp);
866             ds_put_strftime_msec(s, tmp, time_wall_msec(), false);
867             break;
868         case 'D':
869             p = fetch_braces(p, "%Y-%m-%d %H:%M:%S.###", tmp, sizeof tmp);
870             ds_put_strftime_msec(s, tmp, time_wall_msec(), true);
871             break;
872         case 'E':
873             gethostname(tmp, sizeof tmp);
874             tmp[sizeof tmp - 1] = '\0';
875             ds_put_cstr(s, tmp);
876             break;
877         case 'm':
878             /* Format user-supplied log message and trim trailing new-lines. */
879             length = s->length;
880             va_copy(args, args_);
881             ds_put_format_valist(s, message, args);
882             va_end(args);
883             while (s->length > length && s->string[s->length - 1] == '\n') {
884                 s->length--;
885             }
886             break;
887         case 'N':
888             ds_put_format(s, "%u", *msg_num_get_unsafe());
889             break;
890         case 'n':
891             ds_put_char(s, '\n');
892             break;
893         case 'p':
894             ds_put_cstr(s, vlog_get_level_name(level));
895             break;
896         case 'P':
897             ds_put_format(s, "%ld", (long int) getpid());
898             break;
899         case 'r':
900             ds_put_format(s, "%lld", time_msec() - time_boot_msec());
901             break;
902         case 't':
903             subprogram_name = get_subprogram_name();
904             ds_put_cstr(s, subprogram_name[0] ? subprogram_name : "main");
905             break;
906         case 'T':
907             subprogram_name = get_subprogram_name();
908             if (subprogram_name[0]) {
909                 ds_put_format(s, "(%s)", subprogram_name);
910             }
911             break;
912         default:
913             ds_put_char(s, p[-1]);
914             break;
915         }
916         used = s->length - length;
917         if (used < field) {
918             size_t n_pad = field - used;
919             if (justify == RIGHT) {
920                 ds_put_uninit(s, n_pad);
921                 memmove(&s->string[length + n_pad], &s->string[length], used);
922                 memset(&s->string[length], pad, n_pad);
923             } else {
924                 ds_put_char_multiple(s, pad, n_pad);
925             }
926         }
927     }
928 }
929
930 /* Exports the given 'syslog_message' to the configured udp syslog sink. */
931 static void
932 send_to_syslog_fd(const char *s, size_t length)
933     OVS_REQ_RDLOCK(pattern_rwlock)
934 {
935     static size_t max_length = SIZE_MAX;
936     size_t send_len = MIN(length, max_length);
937
938     while (write(syslog_fd, s, send_len) < 0 && errno == EMSGSIZE) {
939         send_len -= send_len / 20;
940         max_length = send_len;
941     }
942 }
943
944 /* Writes 'message' to the log at the given 'level' and as coming from the
945  * given 'module'.
946  *
947  * Guaranteed to preserve errno. */
948 void
949 vlog_valist(const struct vlog_module *module, enum vlog_level level,
950             const char *message, va_list args)
951 {
952     bool log_to_console = module->levels[VLF_CONSOLE] >= level;
953     bool log_to_syslog = module->levels[VLF_SYSLOG] >= level;
954     bool log_to_file;
955
956     ovs_mutex_lock(&log_file_mutex);
957     log_to_file = module->levels[VLF_FILE] >= level && log_fd >= 0;
958     ovs_mutex_unlock(&log_file_mutex);
959     if (log_to_console || log_to_syslog || log_to_file) {
960         int save_errno = errno;
961         struct ds s;
962
963         vlog_init();
964
965         ds_init(&s);
966         ds_reserve(&s, 1024);
967         ++*msg_num_get();
968
969         ovs_rwlock_rdlock(&pattern_rwlock);
970         if (log_to_console) {
971             format_log_message(module, level,
972                                destinations[VLF_CONSOLE].pattern, message,
973                                args, &s);
974             ds_put_char(&s, '\n');
975             fputs(ds_cstr(&s), stderr);
976         }
977
978         if (log_to_syslog) {
979             int syslog_level = syslog_levels[level];
980             char *save_ptr = NULL;
981             char *line;
982             int facility;
983
984             format_log_message(module, level, destinations[VLF_SYSLOG].pattern,
985                                message, args, &s);
986             for (line = strtok_r(s.string, "\n", &save_ptr); line;
987                  line = strtok_r(NULL, "\n", &save_ptr)) {
988                 atomic_read_explicit(&log_facility, &facility,
989                                      memory_order_relaxed);
990                 syslogger->class->syslog(syslogger, syslog_level|facility, line);
991             }
992
993             if (syslog_fd >= 0) {
994                 format_log_message(module, level,
995                                    "<%B>1 %D{%Y-%m-%dT%H:%M:%S.###Z} "
996                                    "%E %A %P %c - \xef\xbb\xbf%m",
997                                    message, args, &s);
998                 send_to_syslog_fd(ds_cstr(&s), s.length);
999             }
1000         }
1001
1002         if (log_to_file) {
1003             format_log_message(module, level, destinations[VLF_FILE].pattern,
1004                                message, args, &s);
1005             ds_put_char(&s, '\n');
1006
1007             ovs_mutex_lock(&log_file_mutex);
1008             if (log_fd >= 0) {
1009                 if (log_writer) {
1010                     async_append_write(log_writer, s.string, s.length);
1011                     if (level == VLL_EMER) {
1012                         async_append_flush(log_writer);
1013                     }
1014                 } else {
1015                     ignore(write(log_fd, s.string, s.length));
1016                 }
1017             }
1018             ovs_mutex_unlock(&log_file_mutex);
1019         }
1020         ovs_rwlock_unlock(&pattern_rwlock);
1021
1022         ds_destroy(&s);
1023         errno = save_errno;
1024     }
1025 }
1026
1027 void
1028 vlog(const struct vlog_module *module, enum vlog_level level,
1029      const char *message, ...)
1030 {
1031     va_list args;
1032
1033     va_start(args, message);
1034     vlog_valist(module, level, message, args);
1035     va_end(args);
1036 }
1037
1038 /* Logs 'message' to 'module' at maximum verbosity, then exits with a failure
1039  * exit code.  Always writes the message to stderr, even if the console
1040  * destination is disabled.
1041  *
1042  * Choose this function instead of vlog_abort_valist() if the daemon monitoring
1043  * facility shouldn't automatically restart the current daemon.  */
1044 void
1045 vlog_fatal_valist(const struct vlog_module *module_,
1046                   const char *message, va_list args)
1047 {
1048     struct vlog_module *module = CONST_CAST(struct vlog_module *, module_);
1049
1050     /* Don't log this message to the console to avoid redundancy with the
1051      * message written by the later ovs_fatal_valist(). */
1052     module->levels[VLF_CONSOLE] = VLL_OFF;
1053
1054     vlog_valist(module, VLL_EMER, message, args);
1055     ovs_fatal_valist(0, message, args);
1056 }
1057
1058 /* Logs 'message' to 'module' at maximum verbosity, then exits with a failure
1059  * exit code.  Always writes the message to stderr, even if the console
1060  * destination is disabled.
1061  *
1062  * Choose this function instead of vlog_abort() if the daemon monitoring
1063  * facility shouldn't automatically restart the current daemon.  */
1064 void
1065 vlog_fatal(const struct vlog_module *module, const char *message, ...)
1066 {
1067     va_list args;
1068
1069     va_start(args, message);
1070     vlog_fatal_valist(module, message, args);
1071     va_end(args);
1072 }
1073
1074 /* Logs 'message' to 'module' at maximum verbosity, then calls abort().  Always
1075  * writes the message to stderr, even if the console destination is disabled.
1076  *
1077  * Choose this function instead of vlog_fatal_valist() if the daemon monitoring
1078  * facility should automatically restart the current daemon.  */
1079 void
1080 vlog_abort_valist(const struct vlog_module *module_,
1081                   const char *message, va_list args)
1082 {
1083     struct vlog_module *module = (struct vlog_module *) module_;
1084
1085     /* Don't log this message to the console to avoid redundancy with the
1086      * message written by the later ovs_abort_valist(). */
1087     module->levels[VLF_CONSOLE] = VLL_OFF;
1088
1089     vlog_valist(module, VLL_EMER, message, args);
1090     ovs_abort_valist(0, message, args);
1091 }
1092
1093 /* Logs 'message' to 'module' at maximum verbosity, then calls abort().  Always
1094  * writes the message to stderr, even if the console destination is disabled.
1095  *
1096  * Choose this function instead of vlog_fatal() if the daemon monitoring
1097  * facility should automatically restart the current daemon.  */
1098 void
1099 vlog_abort(const struct vlog_module *module, const char *message, ...)
1100 {
1101     va_list args;
1102
1103     va_start(args, message);
1104     vlog_abort_valist(module, message, args);
1105     va_end(args);
1106 }
1107
1108 bool
1109 vlog_should_drop(const struct vlog_module *module, enum vlog_level level,
1110                  struct vlog_rate_limit *rl)
1111 {
1112     if (!module->honor_rate_limits) {
1113         return false;
1114     }
1115
1116     if (!vlog_is_enabled(module, level)) {
1117         return true;
1118     }
1119
1120     ovs_mutex_lock(&rl->mutex);
1121     if (!token_bucket_withdraw(&rl->token_bucket, VLOG_MSG_TOKENS)) {
1122         time_t now = time_now();
1123         if (!rl->n_dropped) {
1124             rl->first_dropped = now;
1125         }
1126         rl->last_dropped = now;
1127         rl->n_dropped++;
1128         ovs_mutex_unlock(&rl->mutex);
1129         return true;
1130     }
1131
1132     if (!rl->n_dropped) {
1133         ovs_mutex_unlock(&rl->mutex);
1134     } else {
1135         time_t now = time_now();
1136         unsigned int n_dropped = rl->n_dropped;
1137         unsigned int first_dropped_elapsed = now - rl->first_dropped;
1138         unsigned int last_dropped_elapsed = now - rl->last_dropped;
1139         rl->n_dropped = 0;
1140         ovs_mutex_unlock(&rl->mutex);
1141
1142         vlog(module, level,
1143              "Dropped %u log messages in last %u seconds (most recently, "
1144              "%u seconds ago) due to excessive rate",
1145              n_dropped, first_dropped_elapsed, last_dropped_elapsed);
1146     }
1147
1148     return false;
1149 }
1150
1151 void
1152 vlog_rate_limit(const struct vlog_module *module, enum vlog_level level,
1153                 struct vlog_rate_limit *rl, const char *message, ...)
1154 {
1155     if (!vlog_should_drop(module, level, rl)) {
1156         va_list args;
1157
1158         va_start(args, message);
1159         vlog_valist(module, level, message, args);
1160         va_end(args);
1161     }
1162 }
1163
1164 void
1165 vlog_usage(void)
1166 {
1167     printf("\n\
1168 Logging options:\n\
1169   -vSPEC, --verbose=SPEC   set logging levels\n\
1170   -v, --verbose            set maximum verbosity level\n\
1171   --log-file[=FILE]        enable logging to specified FILE\n\
1172                            (default: %s/%s.log)\n\
1173   --syslog-method=(libc|unix:file|udp:ip:port)\n\
1174                            specify how to send messages to syslog daemon\n\
1175   --syslog-target=HOST:PORT  also send syslog msgs to HOST:PORT via UDP\n",
1176            ovs_logdir(), program_name);
1177 }