vswitchd/bridge.c

   1 /* Copyright (c) 2008, 2009, 2010, 2011, 2012, 2013, 2014 Nicira, Inc.
   2  *
   3  * Licensed under the Apache License, Version 2.0 (the "License");
   4  * you may not use this file except in compliance with the License.
   5  * You may obtain a copy of the License at:
   6  *
   7  *     http://www.apache.org/licenses/LICENSE-2.0
   8  *
   9  * Unless required by applicable law or agreed to in writing, software
  10  * distributed under the License is distributed on an "AS IS" BASIS,
  11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  12  * See the License for the specific language governing permissions and
  13  * limitations under the License.
  14  */
  15
  16 #include <config.h>
  17 #include "bridge.h"
  18 #include <errno.h>
  19 #include <inttypes.h>
  20 #include <stdlib.h>
  21 #include "async-append.h"
  22 #include "bfd.h"
  23 #include "bitmap.h"
  24 #include "cfm.h"
  25 #include "connectivity.h"
  26 #include "coverage.h"
  27 #include "daemon.h"
  28 #include "dirs.h"
  29 #include "dynamic-string.h"
  30 #include "hash.h"
  31 #include "hmap.h"
  32 #include "hmapx.h"
  33 #include "jsonrpc.h"
  34 #include "lacp.h"
  35 #include "list.h"
  36 #include "mac-learning.h"
  37 #include "meta-flow.h"
  38 #include "netdev.h"
  39 #include "ofp-print.h"
  40 #include "ofp-util.h"
  41 #include "ofpbuf.h"
  42 #include "ofproto/bond.h"
  43 #include "ofproto/ofproto.h"
  44 #include "poll-loop.h"
  45 #include "seq.h"
  46 #include "sha1.h"
  47 #include "shash.h"
  48 #include "smap.h"
  49 #include "socket-util.h"
  50 #include "stream.h"
  51 #include "stream-ssl.h"
  52 #include "sset.h"
  53 #include "system-stats.h"
  54 #include "timeval.h"
  55 #include "util.h"
  56 #include "unixctl.h"
  57 #include "vlandev.h"
  58 #include "lib/vswitch-idl.h"
  59 #include "xenserver.h"
  60 #include "vlog.h"
  61 #include "sflow_api.h"
  62 #include "vlan-bitmap.h"
  63
  64 VLOG_DEFINE_THIS_MODULE(bridge);
  65
  66 COVERAGE_DEFINE(bridge_reconfigure);
  67
  68 struct iface {
  69     /* These members are always valid.
  70      *
  71      * They are immutable: they never change between iface_create() and
  72      * iface_destroy(). */
  73     struct list port_elem;      /* Element in struct port's "ifaces" list. */
  74     struct hmap_node name_node; /* In struct bridge's "iface_by_name" hmap. */
  75     struct hmap_node ofp_port_node; /* In struct bridge's "ifaces" hmap. */
  76     struct port *port;          /* Containing port. */
  77     char *name;                 /* Host network device name. */
  78     struct netdev *netdev;      /* Network device. */
  79     ofp_port_t ofp_port;        /* OpenFlow port number. */
  80     uint64_t change_seq;
  81
  82     /* These members are valid only within bridge_reconfigure(). */
  83     const char *type;           /* Usually same as cfg->type. */
  84     const struct ovsrec_interface *cfg;
  85 };
  86
  87 struct mirror {
  88     struct uuid uuid;           /* UUID of this "mirror" record in database. */
  89     struct hmap_node hmap_node; /* In struct bridge's "mirrors" hmap. */
  90     struct bridge *bridge;
  91     char *name;
  92     const struct ovsrec_mirror *cfg;
  93 };
  94
  95 struct port {
  96     struct hmap_node hmap_node; /* Element in struct bridge's "ports" hmap. */
  97     struct bridge *bridge;
  98     char *name;
  99
 100     const struct ovsrec_port *cfg;
 101
 102     /* An ordinary bridge port has 1 interface.
 103      * A bridge port for bonding has at least 2 interfaces. */
 104     struct list ifaces;         /* List of "struct iface"s. */
 105 };
 106
 107 struct bridge {
 108     struct hmap_node node;      /* In 'all_bridges'. */
 109     char *name;                 /* User-specified arbitrary name. */
 110     char *type;                 /* Datapath type. */
 111     uint8_t ea[ETH_ADDR_LEN];   /* Bridge Ethernet Address. */
 112     uint8_t default_ea[ETH_ADDR_LEN]; /* Default MAC. */
 113     const struct ovsrec_bridge *cfg;
 114
 115     /* OpenFlow switch processing. */
 116     struct ofproto *ofproto;    /* OpenFlow switch. */
 117
 118     /* Bridge ports. */
 119     struct hmap ports;          /* "struct port"s indexed by name. */
 120     struct hmap ifaces;         /* "struct iface"s indexed by ofp_port. */
 121     struct hmap iface_by_name;  /* "struct iface"s indexed by name. */
 122
 123     /* Port mirroring. */
 124     struct hmap mirrors;        /* "struct mirror" indexed by UUID. */
 125
 126     /* Used during reconfiguration. */
 127     struct shash wanted_ports;
 128
 129     /* Synthetic local port if necessary. */
 130     struct ovsrec_port synth_local_port;
 131     struct ovsrec_interface synth_local_iface;
 132     struct ovsrec_interface *synth_local_ifacep;
 133 };
 134
 135 /* All bridges, indexed by name. */
 136 static struct hmap all_bridges = HMAP_INITIALIZER(&all_bridges);
 137
 138 /* OVSDB IDL used to obtain configuration. */
 139 static struct ovsdb_idl *idl;
 140
 141 /* We want to complete daemonization, fully detaching from our parent process,
 142  * only after we have completed our initial configuration, committed our state
 143  * to the database, and received confirmation back from the database server
 144  * that it applied the commit.  This allows our parent process to know that,
 145  * post-detach, ephemeral fields such as datapath-id and ofport are very likely
 146  * to have already been filled in.  (It is only "very likely" rather than
 147  * certain because there is always a slim possibility that the transaction will
 148  * fail or that some other client has added new bridges, ports, etc. while
 149  * ovs-vswitchd was configuring using an old configuration.)
 150  *
 151  * We only need to do this once for our initial configuration at startup, so
 152  * 'initial_config_done' tracks whether we've already done it.  While we are
 153  * waiting for a response to our commit, 'daemonize_txn' tracks the transaction
 154  * itself and is otherwise NULL. */
 155 static bool initial_config_done;
 156 static struct ovsdb_idl_txn *daemonize_txn;
 157
 158 /* Most recently processed IDL sequence number. */
 159 static unsigned int idl_seqno;
 160
 161 /* Track changes to port connectivity. */
 162 static uint64_t connectivity_seqno = LLONG_MIN;
 163
 164 /* Status update to database.
 165  *
 166  * Some information in the database must be kept as up-to-date as possible to
 167  * allow controllers to respond rapidly to network outages.  Those status are
 168  * updated via the 'status_txn'.
 169  *
 170  * We use the global connectivity sequence number to detect the status change.
 171  * Also, to prevent the status update from sending too much to the database,
 172  * we check the return status of each update transaction and do not start new
 173  * update if the previous transaction status is 'TXN_INCOMPLETE'.
 174  *
 175  * 'statux_txn' is NULL if there is no ongoing status update.
 176  */
 177 static struct ovsdb_idl_txn *status_txn;
 178
 179 /* When the status update transaction returns 'TXN_INCOMPLETE', should register a
 180  * timeout in 'STATUS_CHECK_AGAIN_MSEC' to check again. */
 181 #define STATUS_CHECK_AGAIN_MSEC 100
 182
 183 /* Each time this timer expires, the bridge fetches interface and mirror
 184  * statistics and pushes them into the database. */
 185 static int stats_timer_interval;
 186 static long long int stats_timer = LLONG_MIN;
 187
 188 /* In some datapaths, creating and destroying OpenFlow ports can be extremely
 189  * expensive.  This can cause bridge_reconfigure() to take a long time during
 190  * which no other work can be done.  To deal with this problem, we limit port
 191  * adds and deletions to a window of OFP_PORT_ACTION_WINDOW milliseconds per
 192  * call to bridge_reconfigure().  If there is more work to do after the limit
 193  * is reached, 'need_reconfigure', is flagged and it's done on the next loop.
 194  * This allows the rest of the code to catch up on important things like
 195  * forwarding packets. */
 196 #define OFP_PORT_ACTION_WINDOW 10
 197
 198 static void add_del_bridges(const struct ovsrec_open_vswitch *);
 199 static void bridge_run__(void);
 200 static void bridge_create(const struct ovsrec_bridge *);
 201 static void bridge_destroy(struct bridge *);
 202 static struct bridge *bridge_lookup(const char *name);
 203 static unixctl_cb_func bridge_unixctl_dump_flows;
 204 static unixctl_cb_func bridge_unixctl_reconnect;
 205 static size_t bridge_get_controllers(const struct bridge *br,
 206                                      struct ovsrec_controller ***controllersp);
 207 static void bridge_collect_wanted_ports(struct bridge *,
 208                                         const unsigned long *splinter_vlans,
 209                                         struct shash *wanted_ports);
 210 static void bridge_delete_ofprotos(void);
 211 static void bridge_delete_or_reconfigure_ports(struct bridge *);
 212 static void bridge_del_ports(struct bridge *,
 213                              const struct shash *wanted_ports);
 214 static void bridge_add_ports(struct bridge *,
 215                              const struct shash *wanted_ports);
 216
 217 static void bridge_configure_datapath_id(struct bridge *);
 218 static void bridge_configure_netflow(struct bridge *);
 219 static void bridge_configure_forward_bpdu(struct bridge *);
 220 static void bridge_configure_mac_table(struct bridge *);
 221 static void bridge_configure_sflow(struct bridge *, int *sflow_bridge_number);
 222 static void bridge_configure_ipfix(struct bridge *);
 223 static void bridge_configure_stp(struct bridge *);
 224 static void bridge_configure_tables(struct bridge *);
 225 static void bridge_configure_dp_desc(struct bridge *);
 226 static void bridge_configure_remotes(struct bridge *,
 227                                      const struct sockaddr_in *managers,
 228                                      size_t n_managers);
 229 static void bridge_pick_local_hw_addr(struct bridge *,
 230                                       uint8_t ea[ETH_ADDR_LEN],
 231                                       struct iface **hw_addr_iface);
 232 static uint64_t bridge_pick_datapath_id(struct bridge *,
 233                                         const uint8_t bridge_ea[ETH_ADDR_LEN],
 234                                         struct iface *hw_addr_iface);
 235 static uint64_t dpid_from_hash(const void *, size_t nbytes);
 236 static bool bridge_has_bond_fake_iface(const struct bridge *,
 237                                        const char *name);
 238 static bool port_is_bond_fake_iface(const struct port *);
 239
 240 static unixctl_cb_func qos_unixctl_show;
 241
 242 static struct port *port_create(struct bridge *, const struct ovsrec_port *);
 243 static void port_del_ifaces(struct port *);
 244 static void port_destroy(struct port *);
 245 static struct port *port_lookup(const struct bridge *, const char *name);
 246 static void port_configure(struct port *);
 247 static struct lacp_settings *port_configure_lacp(struct port *,
 248                                                  struct lacp_settings *);
 249 static void port_configure_bond(struct port *, struct bond_settings *);
 250 static bool port_is_synthetic(const struct port *);
 251
 252 static void reconfigure_system_stats(const struct ovsrec_open_vswitch *);
 253 static void run_system_stats(void);
 254
 255 static void bridge_configure_mirrors(struct bridge *);
 256 static struct mirror *mirror_create(struct bridge *,
 257                                     const struct ovsrec_mirror *);
 258 static void mirror_destroy(struct mirror *);
 259 static bool mirror_configure(struct mirror *);
 260 static void mirror_refresh_stats(struct mirror *);
 261
 262 static void iface_configure_lacp(struct iface *, struct lacp_slave_settings *);
 263 static bool iface_create(struct bridge *, const struct ovsrec_interface *,
 264                          const struct ovsrec_port *);
 265 static bool iface_is_internal(const struct ovsrec_interface *iface,
 266                               const struct ovsrec_bridge *br);
 267 static const char *iface_get_type(const struct ovsrec_interface *,
 268                                   const struct ovsrec_bridge *);
 269 static void iface_destroy(struct iface *);
 270 static void iface_destroy__(struct iface *);
 271 static struct iface *iface_lookup(const struct bridge *, const char *name);
 272 static struct iface *iface_find(const char *name);
 273 static struct iface *iface_from_ofp_port(const struct bridge *,
 274                                          ofp_port_t ofp_port);
 275 static void iface_set_mac(const struct bridge *, const struct port *, struct iface *);
 276 static void iface_set_ofport(const struct ovsrec_interface *, ofp_port_t ofport);
 277 static void iface_clear_db_record(const struct ovsrec_interface *if_cfg, char *errp);
 278 static void iface_configure_qos(struct iface *, const struct ovsrec_qos *);
 279 static void iface_configure_cfm(struct iface *);
 280 static void iface_refresh_cfm_stats(struct iface *);
 281 static void iface_refresh_stats(struct iface *);
 282 static void iface_refresh_netdev_status(struct iface *);
 283 static void iface_refresh_ofproto_status(struct iface *);
 284 static bool iface_is_synthetic(const struct iface *);
 285 static ofp_port_t iface_get_requested_ofp_port(
 286     const struct ovsrec_interface *);
 287 static ofp_port_t iface_pick_ofport(const struct ovsrec_interface *);
 288
 289 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
 290  *
 291  * This is deprecated.  It is only for compatibility with broken device drivers
 292  * in old versions of Linux that do not properly support VLANs when VLAN
 293  * devices are not used.  When broken device drivers are no longer in
 294  * widespread use, we will delete these interfaces. */
 295
 296 /* True if VLAN splinters are enabled on any interface, false otherwise.*/
 297 static bool vlan_splinters_enabled_anywhere;
 298
 299 static bool vlan_splinters_is_enabled(const struct ovsrec_interface *);
 300 static unsigned long int *collect_splinter_vlans(
 301     const struct ovsrec_open_vswitch *);
 302 static void configure_splinter_port(struct port *);
 303 static void add_vlan_splinter_ports(struct bridge *,
 304                                     const unsigned long int *splinter_vlans,
 305                                     struct shash *ports);
 306
 307 static void
 308 bridge_init_ofproto(const struct ovsrec_open_vswitch *cfg)
 309 {
 310     struct shash iface_hints;
 311     static bool initialized = false;
 312     int i;
 313
 314     if (initialized) {
 315         return;
 316     }
 317
 318     shash_init(&iface_hints);
 319
 320     if (cfg) {
 321         for (i = 0; i < cfg->n_bridges; i++) {
 322             const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
 323             int j;
 324
 325             for (j = 0; j < br_cfg->n_ports; j++) {
 326                 struct ovsrec_port *port_cfg = br_cfg->ports[j];
 327                 int k;
 328
 329                 for (k = 0; k < port_cfg->n_interfaces; k++) {
 330                     struct ovsrec_interface *if_cfg = port_cfg->interfaces[k];
 331                     struct iface_hint *iface_hint;
 332
 333                     iface_hint = xmalloc(sizeof *iface_hint);
 334                     iface_hint->br_name = br_cfg->name;
 335                     iface_hint->br_type = br_cfg->datapath_type;
 336                     iface_hint->ofp_port = iface_pick_ofport(if_cfg);
 337
 338                     shash_add(&iface_hints, if_cfg->name, iface_hint);
 339                 }
 340             }
 341         }
 342     }
 343
 344     ofproto_init(&iface_hints);
 345
 346     shash_destroy_free_data(&iface_hints);
 347     initialized = true;
 348 }
 349 \f
 350 /* Public functions. */
 351
 352 /* Initializes the bridge module, configuring it to obtain its configuration
 353  * from an OVSDB server accessed over 'remote', which should be a string in a
 354  * form acceptable to ovsdb_idl_create(). */
 355 void
 356 bridge_init(const char *remote)
 357 {
 358     /* Create connection to database. */
 359     idl = ovsdb_idl_create(remote, &ovsrec_idl_class, true, true);
 360     idl_seqno = ovsdb_idl_get_seqno(idl);
 361     ovsdb_idl_set_lock(idl, "ovs_vswitchd");
 362     ovsdb_idl_verify_write_only(idl);
 363
 364     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_cur_cfg);
 365     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_statistics);
 366     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_external_ids);
 367     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_ovs_version);
 368     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_db_version);
 369     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_type);
 370     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_version);
 371
 372     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_datapath_id);
 373     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_status);
 374     ovsdb_idl_omit(idl, &ovsrec_bridge_col_external_ids);
 375
 376     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_status);
 377     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_statistics);
 378     ovsdb_idl_omit(idl, &ovsrec_port_col_external_ids);
 379
 380     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_admin_state);
 381     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_duplex);
 382     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_speed);
 383     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_state);
 384     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_resets);
 385     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_mac_in_use);
 386     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_ifindex);
 387     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_mtu);
 388     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_ofport);
 389     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_statistics);
 390     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_status);
 391     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault);
 392     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault_status);
 393     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_remote_mpids);
 394     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_flap_count);
 395     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_health);
 396     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_remote_opstate);
 397     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_bfd_status);
 398     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_lacp_current);
 399     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_error);
 400     ovsdb_idl_omit(idl, &ovsrec_interface_col_external_ids);
 401
 402     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_is_connected);
 403     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_role);
 404     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_status);
 405     ovsdb_idl_omit(idl, &ovsrec_controller_col_external_ids);
 406
 407     ovsdb_idl_omit(idl, &ovsrec_qos_col_external_ids);
 408
 409     ovsdb_idl_omit(idl, &ovsrec_queue_col_external_ids);
 410
 411     ovsdb_idl_omit(idl, &ovsrec_mirror_col_external_ids);
 412     ovsdb_idl_omit_alert(idl, &ovsrec_mirror_col_statistics);
 413
 414     ovsdb_idl_omit(idl, &ovsrec_netflow_col_external_ids);
 415     ovsdb_idl_omit(idl, &ovsrec_sflow_col_external_ids);
 416     ovsdb_idl_omit(idl, &ovsrec_ipfix_col_external_ids);
 417     ovsdb_idl_omit(idl, &ovsrec_flow_sample_collector_set_col_external_ids);
 418
 419     ovsdb_idl_omit(idl, &ovsrec_manager_col_external_ids);
 420     ovsdb_idl_omit(idl, &ovsrec_manager_col_inactivity_probe);
 421     ovsdb_idl_omit(idl, &ovsrec_manager_col_is_connected);
 422     ovsdb_idl_omit(idl, &ovsrec_manager_col_max_backoff);
 423     ovsdb_idl_omit(idl, &ovsrec_manager_col_status);
 424
 425     ovsdb_idl_omit(idl, &ovsrec_ssl_col_external_ids);
 426
 427     /* Register unixctl commands. */
 428     unixctl_command_register("qos/show", "interface", 1, 1,
 429                              qos_unixctl_show, NULL);
 430     unixctl_command_register("bridge/dump-flows", "bridge", 1, 1,
 431                              bridge_unixctl_dump_flows, NULL);
 432     unixctl_command_register("bridge/reconnect", "[bridge]", 0, 1,
 433                              bridge_unixctl_reconnect, NULL);
 434     lacp_init();
 435     bond_init();
 436     cfm_init();
 437     stp_init();
 438 }
 439
 440 void
 441 bridge_exit(void)
 442 {
 443     struct bridge *br, *next_br;
 444
 445     HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
 446         bridge_destroy(br);
 447     }
 448     ovsdb_idl_destroy(idl);
 449 }
 450
 451 /* Looks at the list of managers in 'ovs_cfg' and extracts their remote IP
 452  * addresses and ports into '*managersp' and '*n_managersp'.  The caller is
 453  * responsible for freeing '*managersp' (with free()).
 454  *
 455  * You may be asking yourself "why does ovs-vswitchd care?", because
 456  * ovsdb-server is responsible for connecting to the managers, and ovs-vswitchd
 457  * should not be and in fact is not directly involved in that.  But
 458  * ovs-vswitchd needs to make sure that ovsdb-server can reach the managers, so
 459  * it has to tell in-band control where the managers are to enable that.
 460  * (Thus, only managers connected in-band are collected.)
 461  */
 462 static void
 463 collect_in_band_managers(const struct ovsrec_open_vswitch *ovs_cfg,
 464                          struct sockaddr_in **managersp, size_t *n_managersp)
 465 {
 466     struct sockaddr_in *managers = NULL;
 467     size_t n_managers = 0;
 468     struct sset targets;
 469     size_t i;
 470
 471     /* Collect all of the potential targets from the "targets" columns of the
 472      * rows pointed to by "manager_options", excluding any that are
 473      * out-of-band. */
 474     sset_init(&targets);
 475     for (i = 0; i < ovs_cfg->n_manager_options; i++) {
 476         struct ovsrec_manager *m = ovs_cfg->manager_options[i];
 477
 478         if (m->connection_mode && !strcmp(m->connection_mode, "out-of-band")) {
 479             sset_find_and_delete(&targets, m->target);
 480         } else {
 481             sset_add(&targets, m->target);
 482         }
 483     }
 484
 485     /* Now extract the targets' IP addresses. */
 486     if (!sset_is_empty(&targets)) {
 487         const char *target;
 488
 489         managers = xmalloc(sset_count(&targets) * sizeof *managers);
 490         SSET_FOR_EACH (target, &targets) {
 491             struct sockaddr_storage ss;
 492
 493             if (stream_parse_target_with_default_port(target, OVSDB_OLD_PORT,
 494                                                       &ss)
 495                 && ss.ss_family == AF_INET) {
 496                 managers[n_managers++] = *(struct sockaddr_in *) &ss;
 497             }
 498         }
 499     }
 500     sset_destroy(&targets);
 501
 502     *managersp = managers;
 503     *n_managersp = n_managers;
 504 }
 505
 506 static void
 507 bridge_reconfigure(const struct ovsrec_open_vswitch *ovs_cfg)
 508 {
 509     unsigned long int *splinter_vlans;
 510     struct sockaddr_in *managers;
 511     struct bridge *br, *next;
 512     int sflow_bridge_number;
 513     size_t n_managers;
 514
 515     COVERAGE_INC(bridge_reconfigure);
 516
 517     ofproto_set_flow_limit(smap_get_int(&ovs_cfg->other_config, "flow-limit",
 518                                         OFPROTO_FLOW_LIMIT_DEFAULT));
 519     ofproto_set_max_idle(smap_get_int(&ovs_cfg->other_config, "max-idle",
 520                                       OFPROTO_MAX_IDLE_DEFAULT));
 521
 522     ofproto_set_threads(
 523         smap_get_int(&ovs_cfg->other_config, "n-handler-threads", 0),
 524         smap_get_int(&ovs_cfg->other_config, "n-revalidator-threads", 0));
 525
 526     /* Destroy "struct bridge"s, "struct port"s, and "struct iface"s according
 527      * to 'ovs_cfg', with only very minimal configuration otherwise.
 528      *
 529      * This is mostly an update to bridge data structures. Nothing is pushed
 530      * down to ofproto or lower layers. */
 531     add_del_bridges(ovs_cfg);
 532     splinter_vlans = collect_splinter_vlans(ovs_cfg);
 533     HMAP_FOR_EACH (br, node, &all_bridges) {
 534         bridge_collect_wanted_ports(br, splinter_vlans, &br->wanted_ports);
 535         bridge_del_ports(br, &br->wanted_ports);
 536     }
 537     free(splinter_vlans);
 538
 539     /* Start pushing configuration changes down to the ofproto layer:
 540      *
 541      *   - Delete ofprotos that are no longer configured.
 542      *
 543      *   - Delete ports that are no longer configured.
 544      *
 545      *   - Reconfigure existing ports to their desired configurations, or
 546      *     delete them if not possible.
 547      *
 548      * We have to do all the deletions before we can do any additions, because
 549      * the ports to be added might require resources that will be freed up by
 550      * deletions (they might especially overlap in name). */
 551     bridge_delete_ofprotos();
 552     HMAP_FOR_EACH (br, node, &all_bridges) {
 553         if (br->ofproto) {
 554             bridge_delete_or_reconfigure_ports(br);
 555         }
 556     }
 557
 558     /* Finish pushing configuration changes to the ofproto layer:
 559      *
 560      *     - Create ofprotos that are missing.
 561      *
 562      *     - Add ports that are missing. */
 563     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
 564         if (!br->ofproto) {
 565             int error;
 566
 567             error = ofproto_create(br->name, br->type, &br->ofproto);
 568             if (error) {
 569                 VLOG_ERR("failed to create bridge %s: %s", br->name,
 570                          ovs_strerror(error));
 571                 shash_destroy(&br->wanted_ports);
 572                 bridge_destroy(br);
 573             }
 574         }
 575     }
 576     HMAP_FOR_EACH (br, node, &all_bridges) {
 577         bridge_add_ports(br, &br->wanted_ports);
 578         shash_destroy(&br->wanted_ports);
 579     }
 580
 581     reconfigure_system_stats(ovs_cfg);
 582
 583     /* Complete the configuration. */
 584     sflow_bridge_number = 0;
 585     collect_in_band_managers(ovs_cfg, &managers, &n_managers);
 586     HMAP_FOR_EACH (br, node, &all_bridges) {
 587         struct port *port;
 588
 589         /* We need the datapath ID early to allow LACP ports to use it as the
 590          * default system ID. */
 591         bridge_configure_datapath_id(br);
 592
 593         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
 594             struct iface *iface;
 595
 596             port_configure(port);
 597
 598             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 599                 iface_set_ofport(iface->cfg, iface->ofp_port);
 600                 /* Clear eventual previous errors */
 601                 ovsrec_interface_set_error(iface->cfg, NULL);
 602                 iface_configure_cfm(iface);
 603                 iface_configure_qos(iface, port->cfg->qos);
 604                 iface_set_mac(br, port, iface);
 605                 ofproto_port_set_bfd(br->ofproto, iface->ofp_port,
 606                                      &iface->cfg->bfd);
 607             }
 608         }
 609         bridge_configure_mirrors(br);
 610         bridge_configure_forward_bpdu(br);
 611         bridge_configure_mac_table(br);
 612         bridge_configure_remotes(br, managers, n_managers);
 613         bridge_configure_netflow(br);
 614         bridge_configure_sflow(br, &sflow_bridge_number);
 615         bridge_configure_ipfix(br);
 616         bridge_configure_stp(br);
 617         bridge_configure_tables(br);
 618         bridge_configure_dp_desc(br);
 619     }
 620     free(managers);
 621
 622     /* The ofproto-dpif provider does some final reconfiguration in its
 623      * ->type_run() function.  We have to call it before notifying the database
 624      * client that reconfiguration is complete, otherwise there is a very
 625      * narrow race window in which e.g. ofproto/trace will not recognize the
 626      * new configuration (sometimes this causes unit test failures). */
 627     bridge_run__();
 628 }
 629
 630 /* Delete ofprotos which aren't configured or have the wrong type.  Create
 631  * ofprotos which don't exist but need to. */
 632 static void
 633 bridge_delete_ofprotos(void)
 634 {
 635     struct bridge *br;
 636     struct sset names;
 637     struct sset types;
 638     const char *type;
 639
 640     /* Delete ofprotos with no bridge or with the wrong type. */
 641     sset_init(&names);
 642     sset_init(&types);
 643     ofproto_enumerate_types(&types);
 644     SSET_FOR_EACH (type, &types) {
 645         const char *name;
 646
 647         ofproto_enumerate_names(type, &names);
 648         SSET_FOR_EACH (name, &names) {
 649             br = bridge_lookup(name);
 650             if (!br || strcmp(type, br->type)) {
 651                 ofproto_delete(name, type);
 652             }
 653         }
 654     }
 655     sset_destroy(&names);
 656     sset_destroy(&types);
 657 }
 658
 659 static ofp_port_t *
 660 add_ofp_port(ofp_port_t port, ofp_port_t *ports, size_t *n, size_t *allocated)
 661 {
 662     if (*n >= *allocated) {
 663         ports = x2nrealloc(ports, allocated, sizeof *ports);
 664     }
 665     ports[(*n)++] = port;
 666     return ports;
 667 }
 668
 669 static void
 670 bridge_delete_or_reconfigure_ports(struct bridge *br)
 671 {
 672     struct ofproto_port ofproto_port;
 673     struct ofproto_port_dump dump;
 674
 675     struct sset ofproto_ports;
 676     struct port *port, *port_next;
 677
 678     /* List of "ofp_port"s to delete.  We make a list instead of deleting them
 679      * right away because ofproto implementations aren't necessarily able to
 680      * iterate through a changing list of ports in an entirely robust way. */
 681     ofp_port_t *del;
 682     size_t n, allocated;
 683     size_t i;
 684
 685     del = NULL;
 686     n = allocated = 0;
 687     sset_init(&ofproto_ports);
 688
 689     /* Main task: Iterate over the ports in 'br->ofproto' and remove the ports
 690      * that are not configured in the database.  (This commonly happens when
 691      * ports have been deleted, e.g. with "ovs-vsctl del-port".)
 692      *
 693      * Side tasks: Reconfigure the ports that are still in 'br'.  Delete ports
 694      * that have the wrong OpenFlow port number (and arrange to add them back
 695      * with the correct OpenFlow port number). */
 696     OFPROTO_PORT_FOR_EACH (&ofproto_port, &dump, br->ofproto) {
 697         ofp_port_t requested_ofp_port;
 698         struct iface *iface;
 699
 700         sset_add(&ofproto_ports, ofproto_port.name);
 701
 702         iface = iface_lookup(br, ofproto_port.name);
 703         if (!iface) {
 704             /* No such iface is configured, so we should delete this
 705              * ofproto_port.
 706              *
 707              * As a corner case exception, keep the port if it's a bond fake
 708              * interface. */
 709             if (bridge_has_bond_fake_iface(br, ofproto_port.name)
 710                 && !strcmp(ofproto_port.type, "internal")) {
 711                 continue;
 712             }
 713             goto delete;
 714         }
 715
 716         if (strcmp(ofproto_port.type, iface->type)
 717             || netdev_set_config(iface->netdev, &iface->cfg->options, NULL)) {
 718             /* The interface is the wrong type or can't be configured.
 719              * Delete it. */
 720             goto delete;
 721         }
 722
 723         /* If the requested OpenFlow port for 'iface' changed, and it's not
 724          * already the correct port, then we might want to temporarily delete
 725          * this interface, so we can add it back again with the new OpenFlow
 726          * port number. */
 727         requested_ofp_port = iface_get_requested_ofp_port(iface->cfg);
 728         if (iface->ofp_port != OFPP_LOCAL &&
 729             requested_ofp_port != OFPP_NONE &&
 730             requested_ofp_port != iface->ofp_port) {
 731             ofp_port_t victim_request;
 732             struct iface *victim;
 733
 734             /* Check for an existing OpenFlow port currently occupying
 735              * 'iface''s requested port number.  If there isn't one, then
 736              * delete this port.  Otherwise we need to consider further. */
 737             victim = iface_from_ofp_port(br, requested_ofp_port);
 738             if (!victim) {
 739                 goto delete;
 740             }
 741
 742             /* 'victim' is a port currently using 'iface''s requested port
 743              * number.  Unless 'victim' specifically requested that port
 744              * number, too, then we can delete both 'iface' and 'victim'
 745              * temporarily.  (We'll add both of them back again later with new
 746              * OpenFlow port numbers.)
 747              *
 748              * If 'victim' did request port number 'requested_ofp_port', just
 749              * like 'iface', then that's a configuration inconsistency that we
 750              * can't resolve.  We might as well let it keep its current port
 751              * number. */
 752             victim_request = iface_get_requested_ofp_port(victim->cfg);
 753             if (victim_request != requested_ofp_port) {
 754                 del = add_ofp_port(victim->ofp_port, del, &n, &allocated);
 755                 iface_destroy(victim);
 756                 goto delete;
 757             }
 758         }
 759
 760         /* Keep it. */
 761         continue;
 762
 763     delete:
 764         iface_destroy(iface);
 765         del = add_ofp_port(ofproto_port.ofp_port, del, &n, &allocated);
 766     }
 767     for (i = 0; i < n; i++) {
 768         ofproto_port_del(br->ofproto, del[i]);
 769     }
 770     free(del);
 771
 772     /* Iterate over this module's idea of interfaces in 'br'.  Remove any ports
 773      * that we didn't see when we iterated through the datapath, i.e. ports
 774      * that disappeared underneath use.  This is an unusual situation, but it
 775      * can happen in some cases:
 776      *
 777      *     - An admin runs a command like "ovs-dpctl del-port" (which is a bad
 778      *       idea but could happen).
 779      *
 780      *     - The port represented a device that disappeared, e.g. a tuntap
 781      *       device destroyed via "tunctl -d", a physical Ethernet device
 782      *       whose module was just unloaded via "rmmod", or a virtual NIC for a
 783      *       VM whose VM was just terminated. */
 784     HMAP_FOR_EACH_SAFE (port, port_next, hmap_node, &br->ports) {
 785         struct iface *iface, *iface_next;
 786
 787         LIST_FOR_EACH_SAFE (iface, iface_next, port_elem, &port->ifaces) {
 788             if (!sset_contains(&ofproto_ports, iface->name)) {
 789                 iface_destroy__(iface);
 790             }
 791         }
 792
 793         if (list_is_empty(&port->ifaces)) {
 794             port_destroy(port);
 795         }
 796     }
 797     sset_destroy(&ofproto_ports);
 798 }
 799
 800 static void
 801 bridge_add_ports__(struct bridge *br, const struct shash *wanted_ports,
 802                    bool with_requested_port)
 803 {
 804     struct shash_node *port_node;
 805
 806     SHASH_FOR_EACH (port_node, wanted_ports) {
 807         const struct ovsrec_port *port_cfg = port_node->data;
 808         size_t i;
 809
 810         for (i = 0; i < port_cfg->n_interfaces; i++) {
 811             const struct ovsrec_interface *iface_cfg = port_cfg->interfaces[i];
 812             ofp_port_t requested_ofp_port;
 813
 814             requested_ofp_port = iface_get_requested_ofp_port(iface_cfg);
 815             if ((requested_ofp_port != OFPP_NONE) == with_requested_port) {
 816                 struct iface *iface = iface_lookup(br, iface_cfg->name);
 817
 818                 if (!iface) {
 819                     iface_create(br, iface_cfg, port_cfg);
 820                 }
 821             }
 822         }
 823     }
 824 }
 825
 826 static void
 827 bridge_add_ports(struct bridge *br, const struct shash *wanted_ports)
 828 {
 829     /* First add interfaces that request a particular port number. */
 830     bridge_add_ports__(br, wanted_ports, true);
 831
 832     /* Then add interfaces that want automatic port number assignment.
 833      * We add these afterward to avoid accidentally taking a specifically
 834      * requested port number. */
 835     bridge_add_ports__(br, wanted_ports, false);
 836 }
 837
 838 static void
 839 port_configure(struct port *port)
 840 {
 841     const struct ovsrec_port *cfg = port->cfg;
 842     struct bond_settings bond_settings;
 843     struct lacp_settings lacp_settings;
 844     struct ofproto_bundle_settings s;
 845     struct iface *iface;
 846
 847     if (cfg->vlan_mode && !strcmp(cfg->vlan_mode, "splinter")) {
 848         configure_splinter_port(port);
 849         return;
 850     }
 851
 852     /* Get name. */
 853     s.name = port->name;
 854
 855     /* Get slaves. */
 856     s.n_slaves = 0;
 857     s.slaves = xmalloc(list_size(&port->ifaces) * sizeof *s.slaves);
 858     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 859         s.slaves[s.n_slaves++] = iface->ofp_port;
 860     }
 861
 862     /* Get VLAN tag. */
 863     s.vlan = -1;
 864     if (cfg->tag && *cfg->tag >= 0 && *cfg->tag <= 4095) {
 865         s.vlan = *cfg->tag;
 866     }
 867
 868     /* Get VLAN trunks. */
 869     s.trunks = NULL;
 870     if (cfg->n_trunks) {
 871         s.trunks = vlan_bitmap_from_array(cfg->trunks, cfg->n_trunks);
 872     }
 873
 874     /* Get VLAN mode. */
 875     if (cfg->vlan_mode) {
 876         if (!strcmp(cfg->vlan_mode, "access")) {
 877             s.vlan_mode = PORT_VLAN_ACCESS;
 878         } else if (!strcmp(cfg->vlan_mode, "trunk")) {
 879             s.vlan_mode = PORT_VLAN_TRUNK;
 880         } else if (!strcmp(cfg->vlan_mode, "native-tagged")) {
 881             s.vlan_mode = PORT_VLAN_NATIVE_TAGGED;
 882         } else if (!strcmp(cfg->vlan_mode, "native-untagged")) {
 883             s.vlan_mode = PORT_VLAN_NATIVE_UNTAGGED;
 884         } else {
 885             /* This "can't happen" because ovsdb-server should prevent it. */
 886             VLOG_WARN("port %s: unknown VLAN mode %s, falling "
 887                       "back to trunk mode", port->name, cfg->vlan_mode);
 888             s.vlan_mode = PORT_VLAN_TRUNK;
 889         }
 890     } else {
 891         if (s.vlan >= 0) {
 892             s.vlan_mode = PORT_VLAN_ACCESS;
 893             if (cfg->n_trunks) {
 894                 VLOG_WARN("port %s: ignoring trunks in favor of implicit vlan",
 895                           port->name);
 896             }
 897         } else {
 898             s.vlan_mode = PORT_VLAN_TRUNK;
 899         }
 900     }
 901     s.use_priority_tags = smap_get_bool(&cfg->other_config, "priority-tags",
 902                                         false);
 903
 904     /* Get LACP settings. */
 905     s.lacp = port_configure_lacp(port, &lacp_settings);
 906     if (s.lacp) {
 907         size_t i = 0;
 908
 909         s.lacp_slaves = xmalloc(s.n_slaves * sizeof *s.lacp_slaves);
 910         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 911             iface_configure_lacp(iface, &s.lacp_slaves[i++]);
 912         }
 913     } else {
 914         s.lacp_slaves = NULL;
 915     }
 916
 917     /* Get bond settings. */
 918     if (s.n_slaves > 1) {
 919         s.bond = &bond_settings;
 920         port_configure_bond(port, &bond_settings);
 921     } else {
 922         s.bond = NULL;
 923         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 924             netdev_set_miimon_interval(iface->netdev, 0);
 925         }
 926     }
 927
 928     /* Register. */
 929     ofproto_bundle_register(port->bridge->ofproto, port, &s);
 930
 931     /* Clean up. */
 932     free(s.slaves);
 933     free(s.trunks);
 934     free(s.lacp_slaves);
 935 }
 936
 937 /* Pick local port hardware address and datapath ID for 'br'. */
 938 static void
 939 bridge_configure_datapath_id(struct bridge *br)
 940 {
 941     uint8_t ea[ETH_ADDR_LEN];
 942     uint64_t dpid;
 943     struct iface *local_iface;
 944     struct iface *hw_addr_iface;
 945     char *dpid_string;
 946
 947     bridge_pick_local_hw_addr(br, ea, &hw_addr_iface);
 948     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
 949     if (local_iface) {
 950         int error = netdev_set_etheraddr(local_iface->netdev, ea);
 951         if (error) {
 952             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
 953             VLOG_ERR_RL(&rl, "bridge %s: failed to set bridge "
 954                         "Ethernet address: %s",
 955                         br->name, ovs_strerror(error));
 956         }
 957     }
 958     memcpy(br->ea, ea, ETH_ADDR_LEN);
 959
 960     dpid = bridge_pick_datapath_id(br, ea, hw_addr_iface);
 961     if (dpid != ofproto_get_datapath_id(br->ofproto)) {
 962         VLOG_INFO("bridge %s: using datapath ID %016"PRIx64, br->name, dpid);
 963         ofproto_set_datapath_id(br->ofproto, dpid);
 964     }
 965
 966     dpid_string = xasprintf("%016"PRIx64, dpid);
 967     ovsrec_bridge_set_datapath_id(br->cfg, dpid_string);
 968     free(dpid_string);
 969 }
 970
 971 /* Returns a bitmap of "enum ofputil_protocol"s that are allowed for use with
 972  * 'br'. */
 973 static uint32_t
 974 bridge_get_allowed_versions(struct bridge *br)
 975 {
 976     if (!br->cfg->n_protocols)
 977         return 0;
 978
 979     return ofputil_versions_from_strings(br->cfg->protocols,
 980                                          br->cfg->n_protocols);
 981 }
 982
 983 /* Set NetFlow configuration on 'br'. */
 984 static void
 985 bridge_configure_netflow(struct bridge *br)
 986 {
 987     struct ovsrec_netflow *cfg = br->cfg->netflow;
 988     struct netflow_options opts;
 989
 990     if (!cfg) {
 991         ofproto_set_netflow(br->ofproto, NULL);
 992         return;
 993     }
 994
 995     memset(&opts, 0, sizeof opts);
 996
 997     /* Get default NetFlow configuration from datapath.
 998      * Apply overrides from 'cfg'. */
 999     ofproto_get_netflow_ids(br->ofproto, &opts.engine_type, &opts.engine_id);
1000     if (cfg->engine_type) {
1001         opts.engine_type = *cfg->engine_type;
1002     }
1003     if (cfg->engine_id) {
1004         opts.engine_id = *cfg->engine_id;
1005     }
1006
1007     /* Configure active timeout interval. */
1008     opts.active_timeout = cfg->active_timeout;
1009     if (!opts.active_timeout) {
1010         opts.active_timeout = -1;
1011     } else if (opts.active_timeout < 0) {
1012         VLOG_WARN("bridge %s: active timeout interval set to negative "
1013                   "value, using default instead (%d seconds)", br->name,
1014                   NF_ACTIVE_TIMEOUT_DEFAULT);
1015         opts.active_timeout = -1;
1016     }
1017
1018     /* Add engine ID to interface number to disambiguate bridgs? */
1019     opts.add_id_to_iface = cfg->add_id_to_interface;
1020     if (opts.add_id_to_iface) {
1021         if (opts.engine_id > 0x7f) {
1022             VLOG_WARN("bridge %s: NetFlow port mangling may conflict with "
1023                       "another vswitch, choose an engine id less than 128",
1024                       br->name);
1025         }
1026         if (hmap_count(&br->ports) > 508) {
1027             VLOG_WARN("bridge %s: NetFlow port mangling will conflict with "
1028                       "another port when more than 508 ports are used",
1029                       br->name);
1030         }
1031     }
1032
1033     /* Collectors. */
1034     sset_init(&opts.collectors);
1035     sset_add_array(&opts.collectors, cfg->targets, cfg->n_targets);
1036
1037     /* Configure. */
1038     if (ofproto_set_netflow(br->ofproto, &opts)) {
1039         VLOG_ERR("bridge %s: problem setting netflow collectors", br->name);
1040     }
1041     sset_destroy(&opts.collectors);
1042 }
1043
1044 /* Set sFlow configuration on 'br'. */
1045 static void
1046 bridge_configure_sflow(struct bridge *br, int *sflow_bridge_number)
1047 {
1048     const struct ovsrec_sflow *cfg = br->cfg->sflow;
1049     struct ovsrec_controller **controllers;
1050     struct ofproto_sflow_options oso;
1051     size_t n_controllers;
1052     size_t i;
1053
1054     if (!cfg) {
1055         ofproto_set_sflow(br->ofproto, NULL);
1056         return;
1057     }
1058
1059     memset(&oso, 0, sizeof oso);
1060
1061     sset_init(&oso.targets);
1062     sset_add_array(&oso.targets, cfg->targets, cfg->n_targets);
1063
1064     oso.sampling_rate = SFL_DEFAULT_SAMPLING_RATE;
1065     if (cfg->sampling) {
1066         oso.sampling_rate = *cfg->sampling;
1067     }
1068
1069     oso.polling_interval = SFL_DEFAULT_POLLING_INTERVAL;
1070     if (cfg->polling) {
1071         oso.polling_interval = *cfg->polling;
1072     }
1073
1074     oso.header_len = SFL_DEFAULT_HEADER_SIZE;
1075     if (cfg->header) {
1076         oso.header_len = *cfg->header;
1077     }
1078
1079     oso.sub_id = (*sflow_bridge_number)++;
1080     oso.agent_device = cfg->agent;
1081
1082     oso.control_ip = NULL;
1083     n_controllers = bridge_get_controllers(br, &controllers);
1084     for (i = 0; i < n_controllers; i++) {
1085         if (controllers[i]->local_ip) {
1086             oso.control_ip = controllers[i]->local_ip;
1087             break;
1088         }
1089     }
1090     ofproto_set_sflow(br->ofproto, &oso);
1091
1092     sset_destroy(&oso.targets);
1093 }
1094
1095 /* Returns whether a IPFIX row is valid. */
1096 static bool
1097 ovsrec_ipfix_is_valid(const struct ovsrec_ipfix *ipfix)
1098 {
1099     return ipfix && ipfix->n_targets > 0;
1100 }
1101
1102 /* Returns whether a Flow_Sample_Collector_Set row is valid. */
1103 static bool
1104 ovsrec_fscs_is_valid(const struct ovsrec_flow_sample_collector_set *fscs,
1105                      const struct bridge *br)
1106 {
1107     return ovsrec_ipfix_is_valid(fscs->ipfix) && fscs->bridge == br->cfg;
1108 }
1109
1110 /* Set IPFIX configuration on 'br'. */
1111 static void
1112 bridge_configure_ipfix(struct bridge *br)
1113 {
1114     const struct ovsrec_ipfix *be_cfg = br->cfg->ipfix;
1115     bool valid_be_cfg = ovsrec_ipfix_is_valid(be_cfg);
1116     const struct ovsrec_flow_sample_collector_set *fe_cfg;
1117     struct ofproto_ipfix_bridge_exporter_options be_opts;
1118     struct ofproto_ipfix_flow_exporter_options *fe_opts = NULL;
1119     size_t n_fe_opts = 0;
1120
1121     OVSREC_FLOW_SAMPLE_COLLECTOR_SET_FOR_EACH(fe_cfg, idl) {
1122         if (ovsrec_fscs_is_valid(fe_cfg, br)) {
1123             n_fe_opts++;
1124         }
1125     }
1126
1127     if (!valid_be_cfg && n_fe_opts == 0) {
1128         ofproto_set_ipfix(br->ofproto, NULL, NULL, 0);
1129         return;
1130     }
1131
1132     if (valid_be_cfg) {
1133         memset(&be_opts, 0, sizeof be_opts);
1134
1135         sset_init(&be_opts.targets);
1136         sset_add_array(&be_opts.targets, be_cfg->targets, be_cfg->n_targets);
1137
1138         if (be_cfg->sampling) {
1139             be_opts.sampling_rate = *be_cfg->sampling;
1140         } else {
1141             be_opts.sampling_rate = SFL_DEFAULT_SAMPLING_RATE;
1142         }
1143         if (be_cfg->obs_domain_id) {
1144             be_opts.obs_domain_id = *be_cfg->obs_domain_id;
1145         }
1146         if (be_cfg->obs_point_id) {
1147             be_opts.obs_point_id = *be_cfg->obs_point_id;
1148         }
1149         if (be_cfg->cache_active_timeout) {
1150             be_opts.cache_active_timeout = *be_cfg->cache_active_timeout;
1151         }
1152         if (be_cfg->cache_max_flows) {
1153             be_opts.cache_max_flows = *be_cfg->cache_max_flows;
1154         }
1155     }
1156
1157     if (n_fe_opts > 0) {
1158         struct ofproto_ipfix_flow_exporter_options *opts;
1159         fe_opts = xcalloc(n_fe_opts, sizeof *fe_opts);
1160         opts = fe_opts;
1161         OVSREC_FLOW_SAMPLE_COLLECTOR_SET_FOR_EACH(fe_cfg, idl) {
1162             if (ovsrec_fscs_is_valid(fe_cfg, br)) {
1163                 opts->collector_set_id = fe_cfg->id;
1164                 sset_init(&opts->targets);
1165                 sset_add_array(&opts->targets, fe_cfg->ipfix->targets,
1166                                fe_cfg->ipfix->n_targets);
1167                 opts->cache_active_timeout = fe_cfg->ipfix->cache_active_timeout
1168                     ? *fe_cfg->ipfix->cache_active_timeout : 0;
1169                 opts->cache_max_flows = fe_cfg->ipfix->cache_max_flows
1170                     ? *fe_cfg->ipfix->cache_max_flows : 0;
1171                 opts++;
1172             }
1173         }
1174     }
1175
1176     ofproto_set_ipfix(br->ofproto, valid_be_cfg ? &be_opts : NULL, fe_opts,
1177                       n_fe_opts);
1178
1179     if (valid_be_cfg) {
1180         sset_destroy(&be_opts.targets);
1181     }
1182
1183     if (n_fe_opts > 0) {
1184         struct ofproto_ipfix_flow_exporter_options *opts = fe_opts;
1185         size_t i;
1186         for (i = 0; i < n_fe_opts; i++) {
1187             sset_destroy(&opts->targets);
1188             opts++;
1189         }
1190         free(fe_opts);
1191     }
1192 }
1193
1194 static void
1195 port_configure_stp(const struct ofproto *ofproto, struct port *port,
1196                    struct ofproto_port_stp_settings *port_s,
1197                    int *port_num_counter, unsigned long *port_num_bitmap)
1198 {
1199     const char *config_str;
1200     struct iface *iface;
1201
1202     if (!smap_get_bool(&port->cfg->other_config, "stp-enable", true)) {
1203         port_s->enable = false;
1204         return;
1205     } else {
1206         port_s->enable = true;
1207     }
1208
1209     /* STP over bonds is not supported. */
1210     if (!list_is_singleton(&port->ifaces)) {
1211         VLOG_ERR("port %s: cannot enable STP on bonds, disabling",
1212                  port->name);
1213         port_s->enable = false;
1214         return;
1215     }
1216
1217     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
1218
1219     /* Internal ports shouldn't participate in spanning tree, so
1220      * skip them. */
1221     if (!strcmp(iface->type, "internal")) {
1222         VLOG_DBG("port %s: disable STP on internal ports", port->name);
1223         port_s->enable = false;
1224         return;
1225     }
1226
1227     /* STP on mirror output ports is not supported. */
1228     if (ofproto_is_mirror_output_bundle(ofproto, port)) {
1229         VLOG_DBG("port %s: disable STP on mirror ports", port->name);
1230         port_s->enable = false;
1231         return;
1232     }
1233
1234     config_str = smap_get(&port->cfg->other_config, "stp-port-num");
1235     if (config_str) {
1236         unsigned long int port_num = strtoul(config_str, NULL, 0);
1237         int port_idx = port_num - 1;
1238
1239         if (port_num < 1 || port_num > STP_MAX_PORTS) {
1240             VLOG_ERR("port %s: invalid stp-port-num", port->name);
1241             port_s->enable = false;
1242             return;
1243         }
1244
1245         if (bitmap_is_set(port_num_bitmap, port_idx)) {
1246             VLOG_ERR("port %s: duplicate stp-port-num %lu, disabling",
1247                     port->name, port_num);
1248             port_s->enable = false;
1249             return;
1250         }
1251         bitmap_set1(port_num_bitmap, port_idx);
1252         port_s->port_num = port_idx;
1253     } else {
1254         if (*port_num_counter >= STP_MAX_PORTS) {
1255             VLOG_ERR("port %s: too many STP ports, disabling", port->name);
1256             port_s->enable = false;
1257             return;
1258         }
1259
1260         port_s->port_num = (*port_num_counter)++;
1261     }
1262
1263     config_str = smap_get(&port->cfg->other_config, "stp-path-cost");
1264     if (config_str) {
1265         port_s->path_cost = strtoul(config_str, NULL, 10);
1266     } else {
1267         enum netdev_features current;
1268         unsigned int mbps;
1269
1270         netdev_get_features(iface->netdev, &current, NULL, NULL, NULL);
1271         mbps = netdev_features_to_bps(current, 100 * 1000 * 1000) / 1000000;
1272         port_s->path_cost = stp_convert_speed_to_cost(mbps);
1273     }
1274
1275     config_str = smap_get(&port->cfg->other_config, "stp-port-priority");
1276     if (config_str) {
1277         port_s->priority = strtoul(config_str, NULL, 0);
1278     } else {
1279         port_s->priority = STP_DEFAULT_PORT_PRIORITY;
1280     }
1281 }
1282
1283 /* Set spanning tree configuration on 'br'. */
1284 static void
1285 bridge_configure_stp(struct bridge *br)
1286 {
1287     if (!br->cfg->stp_enable) {
1288         ofproto_set_stp(br->ofproto, NULL);
1289     } else {
1290         struct ofproto_stp_settings br_s;
1291         const char *config_str;
1292         struct port *port;
1293         int port_num_counter;
1294         unsigned long *port_num_bitmap;
1295
1296         config_str = smap_get(&br->cfg->other_config, "stp-system-id");
1297         if (config_str) {
1298             uint8_t ea[ETH_ADDR_LEN];
1299
1300             if (eth_addr_from_string(config_str, ea)) {
1301                 br_s.system_id = eth_addr_to_uint64(ea);
1302             } else {
1303                 br_s.system_id = eth_addr_to_uint64(br->ea);
1304                 VLOG_ERR("bridge %s: invalid stp-system-id, defaulting "
1305                          "to "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(br->ea));
1306             }
1307         } else {
1308             br_s.system_id = eth_addr_to_uint64(br->ea);
1309         }
1310
1311         config_str = smap_get(&br->cfg->other_config, "stp-priority");
1312         if (config_str) {
1313             br_s.priority = strtoul(config_str, NULL, 0);
1314         } else {
1315             br_s.priority = STP_DEFAULT_BRIDGE_PRIORITY;
1316         }
1317
1318         config_str = smap_get(&br->cfg->other_config, "stp-hello-time");
1319         if (config_str) {
1320             br_s.hello_time = strtoul(config_str, NULL, 10) * 1000;
1321         } else {
1322             br_s.hello_time = STP_DEFAULT_HELLO_TIME;
1323         }
1324
1325         config_str = smap_get(&br->cfg->other_config, "stp-max-age");
1326         if (config_str) {
1327             br_s.max_age = strtoul(config_str, NULL, 10) * 1000;
1328         } else {
1329             br_s.max_age = STP_DEFAULT_MAX_AGE;
1330         }
1331
1332         config_str = smap_get(&br->cfg->other_config, "stp-forward-delay");
1333         if (config_str) {
1334             br_s.fwd_delay = strtoul(config_str, NULL, 10) * 1000;
1335         } else {
1336             br_s.fwd_delay = STP_DEFAULT_FWD_DELAY;
1337         }
1338
1339         /* Configure STP on the bridge. */
1340         if (ofproto_set_stp(br->ofproto, &br_s)) {
1341             VLOG_ERR("bridge %s: could not enable STP", br->name);
1342             return;
1343         }
1344
1345         /* Users must either set the port number with the "stp-port-num"
1346          * configuration on all ports or none.  If manual configuration
1347          * is not done, then we allocate them sequentially. */
1348         port_num_counter = 0;
1349         port_num_bitmap = bitmap_allocate(STP_MAX_PORTS);
1350         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1351             struct ofproto_port_stp_settings port_s;
1352             struct iface *iface;
1353
1354             port_configure_stp(br->ofproto, port, &port_s,
1355                                &port_num_counter, port_num_bitmap);
1356
1357             /* As bonds are not supported, just apply configuration to
1358              * all interfaces. */
1359             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1360                 if (ofproto_port_set_stp(br->ofproto, iface->ofp_port,
1361                                          &port_s)) {
1362                     VLOG_ERR("port %s: could not enable STP", port->name);
1363                     continue;
1364                 }
1365             }
1366         }
1367
1368         if (bitmap_scan(port_num_bitmap, 1, 0, STP_MAX_PORTS) != STP_MAX_PORTS
1369                     && port_num_counter) {
1370             VLOG_ERR("bridge %s: must manually configure all STP port "
1371                      "IDs or none, disabling", br->name);
1372             ofproto_set_stp(br->ofproto, NULL);
1373         }
1374         bitmap_free(port_num_bitmap);
1375     }
1376 }
1377
1378 static bool
1379 bridge_has_bond_fake_iface(const struct bridge *br, const char *name)
1380 {
1381     const struct port *port = port_lookup(br, name);
1382     return port && port_is_bond_fake_iface(port);
1383 }
1384
1385 static bool
1386 port_is_bond_fake_iface(const struct port *port)
1387 {
1388     return port->cfg->bond_fake_iface && !list_is_short(&port->ifaces);
1389 }
1390
1391 static void
1392 add_del_bridges(const struct ovsrec_open_vswitch *cfg)
1393 {
1394     struct bridge *br, *next;
1395     struct shash new_br;
1396     size_t i;
1397
1398     /* Collect new bridges' names and types. */
1399     shash_init(&new_br);
1400     for (i = 0; i < cfg->n_bridges; i++) {
1401         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
1402         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1403
1404         if (strchr(br_cfg->name, '/')) {
1405             /* Prevent remote ovsdb-server users from accessing arbitrary
1406              * directories, e.g. consider a bridge named "../../../etc/". */
1407             VLOG_WARN_RL(&rl, "ignoring bridge with invalid name \"%s\"",
1408                          br_cfg->name);
1409         } else if (!shash_add_once(&new_br, br_cfg->name, br_cfg)) {
1410             VLOG_WARN_RL(&rl, "bridge %s specified twice", br_cfg->name);
1411         }
1412     }
1413
1414     /* Get rid of deleted bridges or those whose types have changed.
1415      * Update 'cfg' of bridges that still exist. */
1416     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
1417         br->cfg = shash_find_data(&new_br, br->name);
1418         if (!br->cfg || strcmp(br->type, ofproto_normalize_type(
1419                                    br->cfg->datapath_type))) {
1420             bridge_destroy(br);
1421         }
1422     }
1423
1424     /* Add new bridges. */
1425     for (i = 0; i < cfg->n_bridges; i++) {
1426         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1427         struct bridge *br = bridge_lookup(br_cfg->name);
1428         if (!br) {
1429             bridge_create(br_cfg);
1430         }
1431     }
1432
1433     shash_destroy(&new_br);
1434 }
1435
1436 /* Configures 'netdev' based on the "options" column in 'iface_cfg'.
1437  * Returns 0 if successful, otherwise a positive errno value. */
1438 static int
1439 iface_set_netdev_config(const struct ovsrec_interface *iface_cfg,
1440                         struct netdev *netdev, char **errp)
1441 {
1442     return netdev_set_config(netdev, &iface_cfg->options, errp);
1443 }
1444
1445 /* Opens a network device for 'if_cfg' and configures it.  Adds the network
1446  * device to br->ofproto and stores the OpenFlow port number in '*ofp_portp'.
1447  *
1448  * If successful, returns 0 and stores the network device in '*netdevp'.  On
1449  * failure, returns a positive errno value and stores NULL in '*netdevp'. */
1450 static int
1451 iface_do_create(const struct bridge *br,
1452                 const struct ovsrec_interface *iface_cfg,
1453                 const struct ovsrec_port *port_cfg,
1454                 ofp_port_t *ofp_portp, struct netdev **netdevp,
1455                 char **errp)
1456 {
1457     struct netdev *netdev = NULL;
1458     int error;
1459
1460     if (netdev_is_reserved_name(iface_cfg->name)) {
1461         VLOG_WARN("could not create interface %s, name is reserved",
1462                   iface_cfg->name);
1463         error = EINVAL;
1464         goto error;
1465     }
1466
1467     error = netdev_open(iface_cfg->name,
1468                         iface_get_type(iface_cfg, br->cfg), &netdev);
1469     if (error) {
1470         VLOG_WARN_BUF(errp, "could not open network device %s (%s)",
1471                       iface_cfg->name, ovs_strerror(error));
1472         goto error;
1473     }
1474
1475     error = iface_set_netdev_config(iface_cfg, netdev, errp);
1476     if (error) {
1477         goto error;
1478     }
1479
1480     *ofp_portp = iface_pick_ofport(iface_cfg);
1481     error = ofproto_port_add(br->ofproto, netdev, ofp_portp);
1482     if (error) {
1483         goto error;
1484     }
1485
1486     VLOG_INFO("bridge %s: added interface %s on port %d",
1487               br->name, iface_cfg->name, *ofp_portp);
1488
1489     if (port_cfg->vlan_mode && !strcmp(port_cfg->vlan_mode, "splinter")) {
1490         netdev_turn_flags_on(netdev, NETDEV_UP, NULL);
1491     }
1492
1493     *netdevp = netdev;
1494     return 0;
1495
1496 error:
1497     *netdevp = NULL;
1498     netdev_close(netdev);
1499     return error;
1500 }
1501
1502 /* Creates a new iface on 'br' based on 'if_cfg'.  The new iface has OpenFlow
1503  * port number 'ofp_port'.  If ofp_port is OFPP_NONE, an OpenFlow port is
1504  * automatically allocated for the iface.  Takes ownership of and
1505  * deallocates 'if_cfg'.
1506  *
1507  * Return true if an iface is successfully created, false otherwise. */
1508 static bool
1509 iface_create(struct bridge *br, const struct ovsrec_interface *iface_cfg,
1510              const struct ovsrec_port *port_cfg)
1511 {
1512     struct netdev *netdev;
1513     struct iface *iface;
1514     ofp_port_t ofp_port;
1515     struct port *port;
1516     char *errp = NULL;
1517     int error;
1518
1519     /* Do the bits that can fail up front. */
1520     ovs_assert(!iface_lookup(br, iface_cfg->name));
1521     error = iface_do_create(br, iface_cfg, port_cfg, &ofp_port, &netdev, &errp);
1522     if (error) {
1523         iface_clear_db_record(iface_cfg, errp);
1524         free(errp);
1525         return false;
1526     }
1527
1528     /* Get or create the port structure. */
1529     port = port_lookup(br, port_cfg->name);
1530     if (!port) {
1531         port = port_create(br, port_cfg);
1532     }
1533
1534     /* Create the iface structure. */
1535     iface = xzalloc(sizeof *iface);
1536     list_push_back(&port->ifaces, &iface->port_elem);
1537     hmap_insert(&br->iface_by_name, &iface->name_node,
1538                 hash_string(iface_cfg->name, 0));
1539     iface->port = port;
1540     iface->name = xstrdup(iface_cfg->name);
1541     iface->ofp_port = ofp_port;
1542     iface->netdev = netdev;
1543     iface->type = iface_get_type(iface_cfg, br->cfg);
1544     iface->cfg = iface_cfg;
1545     hmap_insert(&br->ifaces, &iface->ofp_port_node,
1546                 hash_ofp_port(ofp_port));
1547
1548     /* Populate initial status in database. */
1549     iface_refresh_stats(iface);
1550     iface_refresh_netdev_status(iface);
1551
1552     /* Add bond fake iface if necessary. */
1553     if (port_is_bond_fake_iface(port)) {
1554         struct ofproto_port ofproto_port;
1555
1556         if (ofproto_port_query_by_name(br->ofproto, port->name,
1557                                        &ofproto_port)) {
1558             struct netdev *netdev;
1559             int error;
1560
1561             error = netdev_open(port->name, "internal", &netdev);
1562             if (!error) {
1563                 ofp_port_t fake_ofp_port = OFPP_NONE;
1564                 ofproto_port_add(br->ofproto, netdev, &fake_ofp_port);
1565                 netdev_close(netdev);
1566             } else {
1567                 VLOG_WARN("could not open network device %s (%s)",
1568                           port->name, ovs_strerror(error));
1569             }
1570         } else {
1571             /* Already exists, nothing to do. */
1572             ofproto_port_destroy(&ofproto_port);
1573         }
1574     }
1575
1576     return true;
1577 }
1578
1579 /* Set forward BPDU option. */
1580 static void
1581 bridge_configure_forward_bpdu(struct bridge *br)
1582 {
1583     ofproto_set_forward_bpdu(br->ofproto,
1584                              smap_get_bool(&br->cfg->other_config,
1585                                            "forward-bpdu",
1586                                            false));
1587 }
1588
1589 /* Set MAC learning table configuration for 'br'. */
1590 static void
1591 bridge_configure_mac_table(struct bridge *br)
1592 {
1593     const char *idle_time_str;
1594     int idle_time;
1595
1596     const char *mac_table_size_str;
1597     int mac_table_size;
1598
1599     idle_time_str = smap_get(&br->cfg->other_config, "mac-aging-time");
1600     idle_time = (idle_time_str && atoi(idle_time_str)
1601                  ? atoi(idle_time_str)
1602                  : MAC_ENTRY_DEFAULT_IDLE_TIME);
1603
1604     mac_table_size_str = smap_get(&br->cfg->other_config, "mac-table-size");
1605     mac_table_size = (mac_table_size_str && atoi(mac_table_size_str)
1606                       ? atoi(mac_table_size_str)
1607                       : MAC_DEFAULT_MAX);
1608
1609     ofproto_set_mac_table_config(br->ofproto, idle_time, mac_table_size);
1610 }
1611
1612 static void
1613 find_local_hw_addr(const struct bridge *br, uint8_t ea[ETH_ADDR_LEN],
1614                    const struct port *fake_br, struct iface **hw_addr_iface)
1615 {
1616     struct hmapx mirror_output_ports;
1617     struct port *port;
1618     bool found_addr = false;
1619     int error;
1620     int i;
1621
1622     /* Mirror output ports don't participate in picking the local hardware
1623      * address.  ofproto can't help us find out whether a given port is a
1624      * mirror output because we haven't configured mirrors yet, so we need to
1625      * accumulate them ourselves. */
1626     hmapx_init(&mirror_output_ports);
1627     for (i = 0; i < br->cfg->n_mirrors; i++) {
1628         struct ovsrec_mirror *m = br->cfg->mirrors[i];
1629         if (m->output_port) {
1630             hmapx_add(&mirror_output_ports, m->output_port);
1631         }
1632     }
1633
1634     /* Otherwise choose the minimum non-local MAC address among all of the
1635      * interfaces. */
1636     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1637         uint8_t iface_ea[ETH_ADDR_LEN];
1638         struct iface *candidate;
1639         struct iface *iface;
1640
1641         /* Mirror output ports don't participate. */
1642         if (hmapx_contains(&mirror_output_ports, port->cfg)) {
1643             continue;
1644         }
1645
1646         /* Choose the MAC address to represent the port. */
1647         iface = NULL;
1648         if (port->cfg->mac && eth_addr_from_string(port->cfg->mac, iface_ea)) {
1649             /* Find the interface with this Ethernet address (if any) so that
1650              * we can provide the correct devname to the caller. */
1651             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1652                 uint8_t candidate_ea[ETH_ADDR_LEN];
1653                 if (!netdev_get_etheraddr(candidate->netdev, candidate_ea)
1654                     && eth_addr_equals(iface_ea, candidate_ea)) {
1655                     iface = candidate;
1656                 }
1657             }
1658         } else {
1659             /* Choose the interface whose MAC address will represent the port.
1660              * The Linux kernel bonding code always chooses the MAC address of
1661              * the first slave added to a bond, and the Fedora networking
1662              * scripts always add slaves to a bond in alphabetical order, so
1663              * for compatibility we choose the interface with the name that is
1664              * first in alphabetical order. */
1665             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1666                 if (!iface || strcmp(candidate->name, iface->name) < 0) {
1667                     iface = candidate;
1668                 }
1669             }
1670
1671             /* The local port doesn't count (since we're trying to choose its
1672              * MAC address anyway). */
1673             if (iface->ofp_port == OFPP_LOCAL) {
1674                 continue;
1675             }
1676
1677             /* For fake bridges we only choose from ports with the same tag */
1678             if (fake_br && fake_br->cfg && fake_br->cfg->tag) {
1679                 if (!port->cfg->tag) {
1680                     continue;
1681                 }
1682                 if (*port->cfg->tag != *fake_br->cfg->tag) {
1683                     continue;
1684                 }
1685             }
1686
1687             /* Grab MAC. */
1688             error = netdev_get_etheraddr(iface->netdev, iface_ea);
1689             if (error) {
1690                 continue;
1691             }
1692         }
1693
1694         /* Compare against our current choice. */
1695         if (!eth_addr_is_multicast(iface_ea) &&
1696             !eth_addr_is_local(iface_ea) &&
1697             !eth_addr_is_reserved(iface_ea) &&
1698             !eth_addr_is_zero(iface_ea) &&
1699             (!found_addr || eth_addr_compare_3way(iface_ea, ea) < 0))
1700         {
1701             memcpy(ea, iface_ea, ETH_ADDR_LEN);
1702             *hw_addr_iface = iface;
1703             found_addr = true;
1704         }
1705     }
1706
1707     if (!found_addr) {
1708         memcpy(ea, br->default_ea, ETH_ADDR_LEN);
1709         *hw_addr_iface = NULL;
1710     }
1711
1712     hmapx_destroy(&mirror_output_ports);
1713 }
1714
1715 static void
1716 bridge_pick_local_hw_addr(struct bridge *br, uint8_t ea[ETH_ADDR_LEN],
1717                           struct iface **hw_addr_iface)
1718 {
1719     const char *hwaddr;
1720     *hw_addr_iface = NULL;
1721
1722     /* Did the user request a particular MAC? */
1723     hwaddr = smap_get(&br->cfg->other_config, "hwaddr");
1724     if (hwaddr && eth_addr_from_string(hwaddr, ea)) {
1725         if (eth_addr_is_multicast(ea)) {
1726             VLOG_ERR("bridge %s: cannot set MAC address to multicast "
1727                      "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1728         } else if (eth_addr_is_zero(ea)) {
1729             VLOG_ERR("bridge %s: cannot set MAC address to zero", br->name);
1730         } else {
1731             return;
1732         }
1733     }
1734
1735     /* Find a local hw address */
1736     find_local_hw_addr(br, ea, NULL, hw_addr_iface);
1737 }
1738
1739 /* Choose and returns the datapath ID for bridge 'br' given that the bridge
1740  * Ethernet address is 'bridge_ea'.  If 'bridge_ea' is the Ethernet address of
1741  * an interface on 'br', then that interface must be passed in as
1742  * 'hw_addr_iface'; if 'bridge_ea' was derived some other way, then
1743  * 'hw_addr_iface' must be passed in as a null pointer. */
1744 static uint64_t
1745 bridge_pick_datapath_id(struct bridge *br,
1746                         const uint8_t bridge_ea[ETH_ADDR_LEN],
1747                         struct iface *hw_addr_iface)
1748 {
1749     /*
1750      * The procedure for choosing a bridge MAC address will, in the most
1751      * ordinary case, also choose a unique MAC that we can use as a datapath
1752      * ID.  In some special cases, though, multiple bridges will end up with
1753      * the same MAC address.  This is OK for the bridges, but it will confuse
1754      * the OpenFlow controller, because each datapath needs a unique datapath
1755      * ID.
1756      *
1757      * Datapath IDs must be unique.  It is also very desirable that they be
1758      * stable from one run to the next, so that policy set on a datapath
1759      * "sticks".
1760      */
1761     const char *datapath_id;
1762     uint64_t dpid;
1763
1764     datapath_id = smap_get(&br->cfg->other_config, "datapath-id");
1765     if (datapath_id && dpid_from_string(datapath_id, &dpid)) {
1766         return dpid;
1767     }
1768
1769     if (!hw_addr_iface) {
1770         /*
1771          * A purely internal bridge, that is, one that has no non-virtual
1772          * network devices on it at all, is difficult because it has no
1773          * natural unique identifier at all.
1774          *
1775          * When the host is a XenServer, we handle this case by hashing the
1776          * host's UUID with the name of the bridge.  Names of bridges are
1777          * persistent across XenServer reboots, although they can be reused if
1778          * an internal network is destroyed and then a new one is later
1779          * created, so this is fairly effective.
1780          *
1781          * When the host is not a XenServer, we punt by using a random MAC
1782          * address on each run.
1783          */
1784         const char *host_uuid = xenserver_get_host_uuid();
1785         if (host_uuid) {
1786             char *combined = xasprintf("%s,%s", host_uuid, br->name);
1787             dpid = dpid_from_hash(combined, strlen(combined));
1788             free(combined);
1789             return dpid;
1790         }
1791     }
1792
1793     return eth_addr_to_uint64(bridge_ea);
1794 }
1795
1796 static uint64_t
1797 dpid_from_hash(const void *data, size_t n)
1798 {
1799     uint8_t hash[SHA1_DIGEST_SIZE];
1800
1801     BUILD_ASSERT_DECL(sizeof hash >= ETH_ADDR_LEN);
1802     sha1_bytes(data, n, hash);
1803     eth_addr_mark_random(hash);
1804     return eth_addr_to_uint64(hash);
1805 }
1806
1807 static void
1808 iface_refresh_netdev_status(struct iface *iface)
1809 {
1810     struct smap smap;
1811
1812     enum netdev_features current;
1813     enum netdev_flags flags;
1814     const char *link_state;
1815     uint8_t mac[ETH_ADDR_LEN];
1816     int64_t bps, mtu_64, ifindex64, link_resets;
1817     int mtu, error;
1818
1819     if (iface_is_synthetic(iface)) {
1820         return;
1821     }
1822
1823     if (iface->change_seq == netdev_get_change_seq(iface->netdev)) {
1824         return;
1825     }
1826
1827     iface->change_seq = netdev_get_change_seq(iface->netdev);
1828
1829     smap_init(&smap);
1830
1831     if (!netdev_get_status(iface->netdev, &smap)) {
1832         ovsrec_interface_set_status(iface->cfg, &smap);
1833     } else {
1834         ovsrec_interface_set_status(iface->cfg, NULL);
1835     }
1836
1837     smap_destroy(&smap);
1838
1839     error = netdev_get_flags(iface->netdev, &flags);
1840     if (!error) {
1841         const char *state = flags & NETDEV_UP ? "up" : "down";
1842
1843         ovsrec_interface_set_admin_state(iface->cfg, state);
1844     } else {
1845         ovsrec_interface_set_admin_state(iface->cfg, NULL);
1846     }
1847
1848     link_state = netdev_get_carrier(iface->netdev) ? "up" : "down";
1849     ovsrec_interface_set_link_state(iface->cfg, link_state);
1850
1851     link_resets = netdev_get_carrier_resets(iface->netdev);
1852     ovsrec_interface_set_link_resets(iface->cfg, &link_resets, 1);
1853
1854     error = netdev_get_features(iface->netdev, &current, NULL, NULL, NULL);
1855     bps = !error ? netdev_features_to_bps(current, 0) : 0;
1856     if (bps) {
1857         ovsrec_interface_set_duplex(iface->cfg,
1858                                     netdev_features_is_full_duplex(current)
1859                                     ? "full" : "half");
1860         ovsrec_interface_set_link_speed(iface->cfg, &bps, 1);
1861     } else {
1862         ovsrec_interface_set_duplex(iface->cfg, NULL);
1863         ovsrec_interface_set_link_speed(iface->cfg, NULL, 0);
1864     }
1865
1866     error = netdev_get_mtu(iface->netdev, &mtu);
1867     if (!error) {
1868         mtu_64 = mtu;
1869         ovsrec_interface_set_mtu(iface->cfg, &mtu_64, 1);
1870     } else {
1871         ovsrec_interface_set_mtu(iface->cfg, NULL, 0);
1872     }
1873
1874     error = netdev_get_etheraddr(iface->netdev, mac);
1875     if (!error) {
1876         char mac_string[32];
1877
1878         sprintf(mac_string, ETH_ADDR_FMT, ETH_ADDR_ARGS(mac));
1879         ovsrec_interface_set_mac_in_use(iface->cfg, mac_string);
1880     } else {
1881         ovsrec_interface_set_mac_in_use(iface->cfg, NULL);
1882     }
1883
1884     /* The netdev may return a negative number (such as -EOPNOTSUPP)
1885      * if there is no valid ifindex number. */
1886     ifindex64 = netdev_get_ifindex(iface->netdev);
1887     if (ifindex64 < 0) {
1888         ifindex64 = 0;
1889     }
1890     ovsrec_interface_set_ifindex(iface->cfg, &ifindex64, 1);
1891 }
1892
1893 static void
1894 iface_refresh_ofproto_status(struct iface *iface)
1895 {
1896     struct smap smap;
1897     int current, error;
1898
1899     if (iface_is_synthetic(iface)) {
1900         return;
1901     }
1902
1903     current = ofproto_port_is_lacp_current(iface->port->bridge->ofproto,
1904                                            iface->ofp_port);
1905     if (current >= 0) {
1906         bool bl = current;
1907         ovsrec_interface_set_lacp_current(iface->cfg, &bl, 1);
1908     } else {
1909         ovsrec_interface_set_lacp_current(iface->cfg, NULL, 0);
1910     }
1911
1912     iface_refresh_cfm_stats(iface);
1913
1914     smap_init(&smap);
1915     error = ofproto_port_get_bfd_status(iface->port->bridge->ofproto,
1916                                         iface->ofp_port, &smap);
1917     if (error >= 0) {
1918         ovsrec_interface_set_bfd_status(iface->cfg, &smap);
1919     }
1920     smap_destroy(&smap);
1921 }
1922
1923 /* Writes 'iface''s CFM statistics to the database. 'iface' must not be
1924  * synthetic. */
1925 static void
1926 iface_refresh_cfm_stats(struct iface *iface)
1927 {
1928     const struct ovsrec_interface *cfg = iface->cfg;
1929     struct ofproto_cfm_status status;
1930     int error;
1931
1932     error = ofproto_port_get_cfm_status(iface->port->bridge->ofproto,
1933                                         iface->ofp_port, &status);
1934     if (error < 0) {
1935         /* Do nothing if there is no status change since last update. */
1936     } else if (error > 0) {
1937         ovsrec_interface_set_cfm_fault(cfg, NULL, 0);
1938         ovsrec_interface_set_cfm_fault_status(cfg, NULL, 0);
1939         ovsrec_interface_set_cfm_remote_opstate(cfg, NULL);
1940         ovsrec_interface_set_cfm_flap_count(cfg, NULL, 0);
1941         ovsrec_interface_set_cfm_health(cfg, NULL, 0);
1942         ovsrec_interface_set_cfm_remote_mpids(cfg, NULL, 0);
1943     } else {
1944         const char *reasons[CFM_FAULT_N_REASONS];
1945         int64_t cfm_health = status.health;
1946         int64_t cfm_flap_count = status.flap_count;
1947         bool faulted = status.faults != 0;
1948         size_t i, j;
1949
1950         ovsrec_interface_set_cfm_fault(cfg, &faulted, 1);
1951
1952         j = 0;
1953         for (i = 0; i < CFM_FAULT_N_REASONS; i++) {
1954             int reason = 1 << i;
1955             if (status.faults & reason) {
1956                 reasons[j++] = cfm_fault_reason_to_str(reason);
1957             }
1958         }
1959         ovsrec_interface_set_cfm_fault_status(cfg, (char **) reasons, j);
1960
1961         ovsrec_interface_set_cfm_flap_count(cfg, &cfm_flap_count, 1);
1962
1963         if (status.remote_opstate >= 0) {
1964             const char *remote_opstate = status.remote_opstate ? "up" : "down";
1965             ovsrec_interface_set_cfm_remote_opstate(cfg, remote_opstate);
1966         } else {
1967             ovsrec_interface_set_cfm_remote_opstate(cfg, NULL);
1968         }
1969
1970         ovsrec_interface_set_cfm_remote_mpids(cfg,
1971                                               (const int64_t *)status.rmps,
1972                                               status.n_rmps);
1973         if (cfm_health >= 0) {
1974             ovsrec_interface_set_cfm_health(cfg, &cfm_health, 1);
1975         } else {
1976             ovsrec_interface_set_cfm_health(cfg, NULL, 0);
1977         }
1978
1979         free(status.rmps);
1980     }
1981 }
1982
1983 static void
1984 iface_refresh_stats(struct iface *iface)
1985 {
1986 #define IFACE_STATS                             \
1987     IFACE_STAT(rx_packets,      "rx_packets")   \
1988     IFACE_STAT(tx_packets,      "tx_packets")   \
1989     IFACE_STAT(rx_bytes,        "rx_bytes")     \
1990     IFACE_STAT(tx_bytes,        "tx_bytes")     \
1991     IFACE_STAT(rx_dropped,      "rx_dropped")   \
1992     IFACE_STAT(tx_dropped,      "tx_dropped")   \
1993     IFACE_STAT(rx_errors,       "rx_errors")    \
1994     IFACE_STAT(tx_errors,       "tx_errors")    \
1995     IFACE_STAT(rx_frame_errors, "rx_frame_err") \
1996     IFACE_STAT(rx_over_errors,  "rx_over_err")  \
1997     IFACE_STAT(rx_crc_errors,   "rx_crc_err")   \
1998     IFACE_STAT(collisions,      "collisions")
1999
2000 #define IFACE_STAT(MEMBER, NAME) + 1
2001     enum { N_IFACE_STATS = IFACE_STATS };
2002 #undef IFACE_STAT
2003     int64_t values[N_IFACE_STATS];
2004     char *keys[N_IFACE_STATS];
2005     int n;
2006
2007     struct netdev_stats stats;
2008
2009     if (iface_is_synthetic(iface)) {
2010         return;
2011     }
2012
2013     /* Intentionally ignore return value, since errors will set 'stats' to
2014      * all-1s, and we will deal with that correctly below. */
2015     netdev_get_stats(iface->netdev, &stats);
2016
2017     /* Copy statistics into keys[] and values[]. */
2018     n = 0;
2019 #define IFACE_STAT(MEMBER, NAME)                \
2020     if (stats.MEMBER != UINT64_MAX) {           \
2021         keys[n] = NAME;                         \
2022         values[n] = stats.MEMBER;               \
2023         n++;                                    \
2024     }
2025     IFACE_STATS;
2026 #undef IFACE_STAT
2027     ovs_assert(n <= N_IFACE_STATS);
2028
2029     ovsrec_interface_set_statistics(iface->cfg, keys, values, n);
2030 #undef IFACE_STATS
2031 }
2032
2033 static void
2034 br_refresh_stp_status(struct bridge *br)
2035 {
2036     struct smap smap = SMAP_INITIALIZER(&smap);
2037     struct ofproto *ofproto = br->ofproto;
2038     struct ofproto_stp_status status;
2039
2040     if (ofproto_get_stp_status(ofproto, &status)) {
2041         return;
2042     }
2043
2044     if (!status.enabled) {
2045         ovsrec_bridge_set_status(br->cfg, NULL);
2046         return;
2047     }
2048
2049     smap_add_format(&smap, "stp_bridge_id", STP_ID_FMT,
2050                     STP_ID_ARGS(status.bridge_id));
2051     smap_add_format(&smap, "stp_designated_root", STP_ID_FMT,
2052                     STP_ID_ARGS(status.designated_root));
2053     smap_add_format(&smap, "stp_root_path_cost", "%d", status.root_path_cost);
2054
2055     ovsrec_bridge_set_status(br->cfg, &smap);
2056     smap_destroy(&smap);
2057 }
2058
2059 static void
2060 port_refresh_stp_status(struct port *port)
2061 {
2062     struct ofproto *ofproto = port->bridge->ofproto;
2063     struct iface *iface;
2064     struct ofproto_port_stp_status status;
2065     struct smap smap;
2066
2067     if (port_is_synthetic(port)) {
2068         return;
2069     }
2070
2071     /* STP doesn't currently support bonds. */
2072     if (!list_is_singleton(&port->ifaces)) {
2073         ovsrec_port_set_status(port->cfg, NULL);
2074         return;
2075     }
2076
2077     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
2078     if (ofproto_port_get_stp_status(ofproto, iface->ofp_port, &status)) {
2079         return;
2080     }
2081
2082     if (!status.enabled) {
2083         ovsrec_port_set_status(port->cfg, NULL);
2084         return;
2085     }
2086
2087     /* Set Status column. */
2088     smap_init(&smap);
2089     smap_add_format(&smap, "stp_port_id", STP_PORT_ID_FMT, status.port_id);
2090     smap_add(&smap, "stp_state", stp_state_name(status.state));
2091     smap_add_format(&smap, "stp_sec_in_state", "%u", status.sec_in_state);
2092     smap_add(&smap, "stp_role", stp_role_name(status.role));
2093     ovsrec_port_set_status(port->cfg, &smap);
2094     smap_destroy(&smap);
2095 }
2096
2097 static void
2098 port_refresh_stp_stats(struct port *port)
2099 {
2100     struct ofproto *ofproto = port->bridge->ofproto;
2101     struct iface *iface;
2102     struct ofproto_port_stp_stats stats;
2103     char *keys[3];
2104     int64_t int_values[3];
2105
2106     if (port_is_synthetic(port)) {
2107         return;
2108     }
2109
2110     /* STP doesn't currently support bonds. */
2111     if (!list_is_singleton(&port->ifaces)) {
2112         return;
2113     }
2114
2115     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
2116     if (ofproto_port_get_stp_stats(ofproto, iface->ofp_port, &stats)) {
2117         return;
2118     }
2119
2120     if (!stats.enabled) {
2121         ovsrec_port_set_statistics(port->cfg, NULL, NULL, 0);
2122         return;
2123     }
2124
2125     /* Set Statistics column. */
2126     keys[0] = "stp_tx_count";
2127     int_values[0] = stats.tx_count;
2128     keys[1] = "stp_rx_count";
2129     int_values[1] = stats.rx_count;
2130     keys[2] = "stp_error_count";
2131     int_values[2] = stats.error_count;
2132
2133     ovsrec_port_set_statistics(port->cfg, keys, int_values,
2134                                ARRAY_SIZE(int_values));
2135 }
2136
2137 static bool
2138 enable_system_stats(const struct ovsrec_open_vswitch *cfg)
2139 {
2140     return smap_get_bool(&cfg->other_config, "enable-statistics", false);
2141 }
2142
2143 static void
2144 reconfigure_system_stats(const struct ovsrec_open_vswitch *cfg)
2145 {
2146     bool enable = enable_system_stats(cfg);
2147
2148     system_stats_enable(enable);
2149     if (!enable) {
2150         ovsrec_open_vswitch_set_statistics(cfg, NULL);
2151     }
2152 }
2153
2154 static void
2155 run_system_stats(void)
2156 {
2157     const struct ovsrec_open_vswitch *cfg = ovsrec_open_vswitch_first(idl);
2158     struct smap *stats;
2159
2160     stats = system_stats_run();
2161     if (stats && cfg) {
2162         struct ovsdb_idl_txn *txn;
2163         struct ovsdb_datum datum;
2164
2165         txn = ovsdb_idl_txn_create(idl);
2166         ovsdb_datum_from_smap(&datum, stats);
2167         ovsdb_idl_txn_write(&cfg->header_, &ovsrec_open_vswitch_col_statistics,
2168                             &datum);
2169         ovsdb_idl_txn_commit(txn);
2170         ovsdb_idl_txn_destroy(txn);
2171
2172         free(stats);
2173     }
2174 }
2175
2176 static const char *
2177 ofp12_controller_role_to_str(enum ofp12_controller_role role)
2178 {
2179     switch (role) {
2180     case OFPCR12_ROLE_EQUAL:
2181         return "other";
2182     case OFPCR12_ROLE_MASTER:
2183         return "master";
2184     case OFPCR12_ROLE_SLAVE:
2185         return "slave";
2186     case OFPCR12_ROLE_NOCHANGE:
2187     default:
2188         return "*** INVALID ROLE ***";
2189     }
2190 }
2191
2192 static void
2193 refresh_controller_status(void)
2194 {
2195     struct bridge *br;
2196     struct shash info;
2197     const struct ovsrec_controller *cfg;
2198
2199     shash_init(&info);
2200
2201     /* Accumulate status for controllers on all bridges. */
2202     HMAP_FOR_EACH (br, node, &all_bridges) {
2203         ofproto_get_ofproto_controller_info(br->ofproto, &info);
2204     }
2205
2206     /* Update each controller in the database with current status. */
2207     OVSREC_CONTROLLER_FOR_EACH(cfg, idl) {
2208         struct ofproto_controller_info *cinfo =
2209             shash_find_data(&info, cfg->target);
2210
2211         if (cinfo) {
2212             struct smap smap = SMAP_INITIALIZER(&smap);
2213             const char **values = cinfo->pairs.values;
2214             const char **keys = cinfo->pairs.keys;
2215             size_t i;
2216
2217             for (i = 0; i < cinfo->pairs.n; i++) {
2218                 smap_add(&smap, keys[i], values[i]);
2219             }
2220
2221             ovsrec_controller_set_is_connected(cfg, cinfo->is_connected);
2222             ovsrec_controller_set_role(cfg, ofp12_controller_role_to_str(
2223                                            cinfo->role));
2224             ovsrec_controller_set_status(cfg, &smap);
2225             smap_destroy(&smap);
2226         } else {
2227             ovsrec_controller_set_is_connected(cfg, false);
2228             ovsrec_controller_set_role(cfg, NULL);
2229             ovsrec_controller_set_status(cfg, NULL);
2230         }
2231     }
2232
2233     ofproto_free_ofproto_controller_info(&info);
2234 }
2235 \f
2236 static void
2237 bridge_run__(void)
2238 {
2239     struct bridge *br;
2240     struct sset types;
2241     const char *type;
2242
2243     /* Let each datapath type do the work that it needs to do. */
2244     sset_init(&types);
2245     ofproto_enumerate_types(&types);
2246     SSET_FOR_EACH (type, &types) {
2247         ofproto_type_run(type);
2248     }
2249     sset_destroy(&types);
2250
2251     /* Let each bridge do the work that it needs to do. */
2252     HMAP_FOR_EACH (br, node, &all_bridges) {
2253         ofproto_run(br->ofproto);
2254     }
2255 }
2256
2257 void
2258 bridge_run(void)
2259 {
2260     static struct ovsrec_open_vswitch null_cfg;
2261     const struct ovsrec_open_vswitch *cfg;
2262
2263     bool vlan_splinters_changed;
2264     struct bridge *br;
2265     int stats_interval;
2266
2267     ovsrec_open_vswitch_init(&null_cfg);
2268
2269     ovsdb_idl_run(idl);
2270
2271     if (ovsdb_idl_is_lock_contended(idl)) {
2272         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
2273         struct bridge *br, *next_br;
2274
2275         VLOG_ERR_RL(&rl, "another ovs-vswitchd process is running, "
2276                     "disabling this process (pid %ld) until it goes away",
2277                     (long int) getpid());
2278
2279         HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
2280             bridge_destroy(br);
2281         }
2282         /* Since we will not be running system_stats_run() in this process
2283          * with the current situation of multiple ovs-vswitchd daemons,
2284          * disable system stats collection. */
2285         system_stats_enable(false);
2286         return;
2287     } else if (!ovsdb_idl_has_lock(idl)) {
2288         return;
2289     }
2290     cfg = ovsrec_open_vswitch_first(idl);
2291
2292     /* Initialize the ofproto library.  This only needs to run once, but
2293      * it must be done after the configuration is set.  If the
2294      * initialization has already occurred, bridge_init_ofproto()
2295      * returns immediately. */
2296     bridge_init_ofproto(cfg);
2297
2298     /* Once the value of flow-restore-wait is false, we no longer should
2299      * check its value from the database. */
2300     if (cfg && ofproto_get_flow_restore_wait()) {
2301         ofproto_set_flow_restore_wait(smap_get_bool(&cfg->other_config,
2302                                         "flow-restore-wait", false));
2303     }
2304
2305     bridge_run__();
2306
2307     /* Re-configure SSL.  We do this on every trip through the main loop,
2308      * instead of just when the database changes, because the contents of the
2309      * key and certificate files can change without the database changing.
2310      *
2311      * We do this before bridge_reconfigure() because that function might
2312      * initiate SSL connections and thus requires SSL to be configured. */
2313     if (cfg && cfg->ssl) {
2314         const struct ovsrec_ssl *ssl = cfg->ssl;
2315
2316         stream_ssl_set_key_and_cert(ssl->private_key, ssl->certificate);
2317         stream_ssl_set_ca_cert_file(ssl->ca_cert, ssl->bootstrap_ca_cert);
2318     }
2319
2320     /* If VLAN splinters are in use, then we need to reconfigure if VLAN
2321      * usage has changed. */
2322     vlan_splinters_changed = false;
2323     if (vlan_splinters_enabled_anywhere) {
2324         HMAP_FOR_EACH (br, node, &all_bridges) {
2325             if (ofproto_has_vlan_usage_changed(br->ofproto)) {
2326                 vlan_splinters_changed = true;
2327                 break;
2328             }
2329         }
2330     }
2331
2332     if (ovsdb_idl_get_seqno(idl) != idl_seqno || vlan_splinters_changed) {
2333         struct ovsdb_idl_txn *txn;
2334
2335         idl_seqno = ovsdb_idl_get_seqno(idl);
2336         txn = ovsdb_idl_txn_create(idl);
2337         bridge_reconfigure(cfg ? cfg : &null_cfg);
2338
2339         if (cfg) {
2340             ovsrec_open_vswitch_set_cur_cfg(cfg, cfg->next_cfg);
2341         }
2342
2343         /* If we are completing our initial configuration for this run
2344          * of ovs-vswitchd, then keep the transaction around to monitor
2345          * it for completion. */
2346         if (initial_config_done) {
2347             ovsdb_idl_txn_commit(txn);
2348             ovsdb_idl_txn_destroy(txn);
2349         } else {
2350             initial_config_done = true;
2351             daemonize_txn = txn;
2352         }
2353     }
2354
2355     if (daemonize_txn) {
2356         enum ovsdb_idl_txn_status status = ovsdb_idl_txn_commit(daemonize_txn);
2357         if (status != TXN_INCOMPLETE) {
2358             ovsdb_idl_txn_destroy(daemonize_txn);
2359             daemonize_txn = NULL;
2360
2361             /* ovs-vswitchd has completed initialization, so allow the
2362              * process that forked us to exit successfully. */
2363             daemonize_complete();
2364
2365             vlog_enable_async();
2366
2367             VLOG_INFO_ONCE("%s (Open vSwitch) %s", program_name, VERSION);
2368         }
2369     }
2370
2371     /* Statistics update interval should always be greater than or equal to
2372      * 5000 ms. */
2373     if (cfg) {
2374         stats_interval = MAX(smap_get_int(&cfg->other_config,
2375                                           "stats-update-interval",
2376                                           5000), 5000);
2377     } else {
2378         stats_interval = 5000;
2379     }
2380     if (stats_timer_interval != stats_interval) {
2381         stats_timer_interval = stats_interval;
2382         stats_timer = LLONG_MIN;
2383     }
2384
2385     /* Refresh interface and mirror stats if necessary. */
2386     if (time_msec() >= stats_timer) {
2387         if (cfg) {
2388             struct ovsdb_idl_txn *txn;
2389
2390             txn = ovsdb_idl_txn_create(idl);
2391             HMAP_FOR_EACH (br, node, &all_bridges) {
2392                 struct port *port;
2393                 struct mirror *m;
2394
2395                 HMAP_FOR_EACH (port, hmap_node, &br->ports) {
2396                     struct iface *iface;
2397
2398                     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
2399                         iface_refresh_stats(iface);
2400                     }
2401
2402                     port_refresh_stp_stats(port);
2403                 }
2404
2405                 HMAP_FOR_EACH (m, hmap_node, &br->mirrors) {
2406                     mirror_refresh_stats(m);
2407                 }
2408
2409             }
2410             refresh_controller_status();
2411             ovsdb_idl_txn_commit(txn);
2412             ovsdb_idl_txn_destroy(txn); /* XXX */
2413         }
2414
2415         stats_timer = time_msec() + stats_timer_interval;
2416     }
2417
2418     if (!status_txn) {
2419         uint64_t seq;
2420
2421         /* Check the need to update status. */
2422         seq = seq_read(connectivity_seq_get());
2423         if (seq != connectivity_seqno) {
2424             connectivity_seqno = seq;
2425             status_txn = ovsdb_idl_txn_create(idl);
2426             HMAP_FOR_EACH (br, node, &all_bridges) {
2427                 struct port *port;
2428
2429                 br_refresh_stp_status(br);
2430                 HMAP_FOR_EACH (port, hmap_node, &br->ports) {
2431                     struct iface *iface;
2432
2433                     port_refresh_stp_status(port);
2434                     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
2435                         iface_refresh_netdev_status(iface);
2436                         iface_refresh_ofproto_status(iface);
2437                     }
2438                 }
2439             }
2440         }
2441     }
2442
2443     if (status_txn) {
2444         enum ovsdb_idl_txn_status status;
2445
2446         status = ovsdb_idl_txn_commit(status_txn);
2447         /* Do not destroy "status_txn" if the transaction is
2448          * "TXN_INCOMPLETE". */
2449         if (status != TXN_INCOMPLETE) {
2450             ovsdb_idl_txn_destroy(status_txn);
2451             status_txn = NULL;
2452         }
2453     }
2454
2455     run_system_stats();
2456 }
2457
2458 void
2459 bridge_wait(void)
2460 {
2461     struct sset types;
2462     const char *type;
2463
2464     ovsdb_idl_wait(idl);
2465     if (daemonize_txn) {
2466         ovsdb_idl_txn_wait(daemonize_txn);
2467     }
2468
2469     sset_init(&types);
2470     ofproto_enumerate_types(&types);
2471     SSET_FOR_EACH (type, &types) {
2472         ofproto_type_wait(type);
2473     }
2474     sset_destroy(&types);
2475
2476     if (!hmap_is_empty(&all_bridges)) {
2477         struct bridge *br;
2478
2479         HMAP_FOR_EACH (br, node, &all_bridges) {
2480             ofproto_wait(br->ofproto);
2481         }
2482
2483         poll_timer_wait_until(stats_timer);
2484     }
2485
2486     /* If the status database transaction is 'TXN_INCOMPLETE' in this run,
2487      * register a timeout in 'STATUS_CHECK_AGAIN_MSEC'.  Else, wait on the
2488      * global connectivity sequence number.  Note, this also helps batch
2489      * multiple status changes into one transaction. */
2490     if (status_txn) {
2491         poll_timer_wait_until(time_msec() + STATUS_CHECK_AGAIN_MSEC);
2492     } else {
2493         seq_wait(connectivity_seq_get(), connectivity_seqno);
2494     }
2495
2496     system_stats_wait();
2497 }
2498
2499 /* Adds some memory usage statistics for bridges into 'usage', for use with
2500  * memory_report(). */
2501 void
2502 bridge_get_memory_usage(struct simap *usage)
2503 {
2504     struct bridge *br;
2505     struct sset types;
2506     const char *type;
2507
2508     sset_init(&types);
2509     ofproto_enumerate_types(&types);
2510     SSET_FOR_EACH (type, &types) {
2511         ofproto_type_get_memory_usage(type, usage);
2512     }
2513     sset_destroy(&types);
2514
2515     HMAP_FOR_EACH (br, node, &all_bridges) {
2516         ofproto_get_memory_usage(br->ofproto, usage);
2517     }
2518 }
2519 \f
2520 /* QoS unixctl user interface functions. */
2521
2522 struct qos_unixctl_show_cbdata {
2523     struct ds *ds;
2524     struct iface *iface;
2525 };
2526
2527 static void
2528 qos_unixctl_show_queue(unsigned int queue_id,
2529                        const struct smap *details,
2530                        struct iface *iface,
2531                        struct ds *ds)
2532 {
2533     struct netdev_queue_stats stats;
2534     struct smap_node *node;
2535     int error;
2536
2537     ds_put_cstr(ds, "\n");
2538     if (queue_id) {
2539         ds_put_format(ds, "Queue %u:\n", queue_id);
2540     } else {
2541         ds_put_cstr(ds, "Default:\n");
2542     }
2543
2544     SMAP_FOR_EACH (node, details) {
2545         ds_put_format(ds, "\t%s: %s\n", node->key, node->value);
2546     }
2547
2548     error = netdev_get_queue_stats(iface->netdev, queue_id, &stats);
2549     if (!error) {
2550         if (stats.tx_packets != UINT64_MAX) {
2551             ds_put_format(ds, "\ttx_packets: %"PRIu64"\n", stats.tx_packets);
2552         }
2553
2554         if (stats.tx_bytes != UINT64_MAX) {
2555             ds_put_format(ds, "\ttx_bytes: %"PRIu64"\n", stats.tx_bytes);
2556         }
2557
2558         if (stats.tx_errors != UINT64_MAX) {
2559             ds_put_format(ds, "\ttx_errors: %"PRIu64"\n", stats.tx_errors);
2560         }
2561     } else {
2562         ds_put_format(ds, "\tFailed to get statistics for queue %u: %s",
2563                       queue_id, ovs_strerror(error));
2564     }
2565 }
2566
2567 static void
2568 qos_unixctl_show(struct unixctl_conn *conn, int argc OVS_UNUSED,
2569                  const char *argv[], void *aux OVS_UNUSED)
2570 {
2571     struct ds ds = DS_EMPTY_INITIALIZER;
2572     struct smap smap = SMAP_INITIALIZER(&smap);
2573     struct iface *iface;
2574     const char *type;
2575     struct smap_node *node;
2576
2577     iface = iface_find(argv[1]);
2578     if (!iface) {
2579         unixctl_command_reply_error(conn, "no such interface");
2580         return;
2581     }
2582
2583     netdev_get_qos(iface->netdev, &type, &smap);
2584
2585     if (*type != '\0') {
2586         struct netdev_queue_dump dump;
2587         struct smap details;
2588         unsigned int queue_id;
2589
2590         ds_put_format(&ds, "QoS: %s %s\n", iface->name, type);
2591
2592         SMAP_FOR_EACH (node, &smap) {
2593             ds_put_format(&ds, "%s: %s\n", node->key, node->value);
2594         }
2595
2596         smap_init(&details);
2597         NETDEV_QUEUE_FOR_EACH (&queue_id, &details, &dump, iface->netdev) {
2598             qos_unixctl_show_queue(queue_id, &details, iface, &ds);
2599         }
2600         smap_destroy(&details);
2601
2602         unixctl_command_reply(conn, ds_cstr(&ds));
2603     } else {
2604         ds_put_format(&ds, "QoS not configured on %s\n", iface->name);
2605         unixctl_command_reply_error(conn, ds_cstr(&ds));
2606     }
2607
2608     smap_destroy(&smap);
2609     ds_destroy(&ds);
2610 }
2611 \f
2612 /* Bridge reconfiguration functions. */
2613 static void
2614 bridge_create(const struct ovsrec_bridge *br_cfg)
2615 {
2616     struct bridge *br;
2617
2618     ovs_assert(!bridge_lookup(br_cfg->name));
2619     br = xzalloc(sizeof *br);
2620
2621     br->name = xstrdup(br_cfg->name);
2622     br->type = xstrdup(ofproto_normalize_type(br_cfg->datapath_type));
2623     br->cfg = br_cfg;
2624
2625     /* Derive the default Ethernet address from the bridge's UUID.  This should
2626      * be unique and it will be stable between ovs-vswitchd runs.  */
2627     memcpy(br->default_ea, &br_cfg->header_.uuid, ETH_ADDR_LEN);
2628     eth_addr_mark_random(br->default_ea);
2629
2630     hmap_init(&br->ports);
2631     hmap_init(&br->ifaces);
2632     hmap_init(&br->iface_by_name);
2633     hmap_init(&br->mirrors);
2634
2635     hmap_insert(&all_bridges, &br->node, hash_string(br->name, 0));
2636 }
2637
2638 static void
2639 bridge_destroy(struct bridge *br)
2640 {
2641     if (br) {
2642         struct mirror *mirror, *next_mirror;
2643         struct port *port, *next_port;
2644
2645         HMAP_FOR_EACH_SAFE (port, next_port, hmap_node, &br->ports) {
2646             port_destroy(port);
2647         }
2648         HMAP_FOR_EACH_SAFE (mirror, next_mirror, hmap_node, &br->mirrors) {
2649             mirror_destroy(mirror);
2650         }
2651
2652         hmap_remove(&all_bridges, &br->node);
2653         ofproto_destroy(br->ofproto);
2654         hmap_destroy(&br->ifaces);
2655         hmap_destroy(&br->ports);
2656         hmap_destroy(&br->iface_by_name);
2657         hmap_destroy(&br->mirrors);
2658         free(br->name);
2659         free(br->type);
2660         free(br);
2661     }
2662 }
2663
2664 static struct bridge *
2665 bridge_lookup(const char *name)
2666 {
2667     struct bridge *br;
2668
2669     HMAP_FOR_EACH_WITH_HASH (br, node, hash_string(name, 0), &all_bridges) {
2670         if (!strcmp(br->name, name)) {
2671             return br;
2672         }
2673     }
2674     return NULL;
2675 }
2676
2677 /* Handle requests for a listing of all flows known by the OpenFlow
2678  * stack, including those normally hidden. */
2679 static void
2680 bridge_unixctl_dump_flows(struct unixctl_conn *conn, int argc OVS_UNUSED,
2681                           const char *argv[], void *aux OVS_UNUSED)
2682 {
2683     struct bridge *br;
2684     struct ds results;
2685
2686     br = bridge_lookup(argv[1]);
2687     if (!br) {
2688         unixctl_command_reply_error(conn, "Unknown bridge");
2689         return;
2690     }
2691
2692     ds_init(&results);
2693     ofproto_get_all_flows(br->ofproto, &results);
2694
2695     unixctl_command_reply(conn, ds_cstr(&results));
2696     ds_destroy(&results);
2697 }
2698
2699 /* "bridge/reconnect [BRIDGE]": makes BRIDGE drop all of its controller
2700  * connections and reconnect.  If BRIDGE is not specified, then all bridges
2701  * drop their controller connections and reconnect. */
2702 static void
2703 bridge_unixctl_reconnect(struct unixctl_conn *conn, int argc,
2704                          const char *argv[], void *aux OVS_UNUSED)
2705 {
2706     struct bridge *br;
2707     if (argc > 1) {
2708         br = bridge_lookup(argv[1]);
2709         if (!br) {
2710             unixctl_command_reply_error(conn,  "Unknown bridge");
2711             return;
2712         }
2713         ofproto_reconnect_controllers(br->ofproto);
2714     } else {
2715         HMAP_FOR_EACH (br, node, &all_bridges) {
2716             ofproto_reconnect_controllers(br->ofproto);
2717         }
2718     }
2719     unixctl_command_reply(conn, NULL);
2720 }
2721
2722 static size_t
2723 bridge_get_controllers(const struct bridge *br,
2724                        struct ovsrec_controller ***controllersp)
2725 {
2726     struct ovsrec_controller **controllers;
2727     size_t n_controllers;
2728
2729     controllers = br->cfg->controller;
2730     n_controllers = br->cfg->n_controller;
2731
2732     if (n_controllers == 1 && !strcmp(controllers[0]->target, "none")) {
2733         controllers = NULL;
2734         n_controllers = 0;
2735     }
2736
2737     if (controllersp) {
2738         *controllersp = controllers;
2739     }
2740     return n_controllers;
2741 }
2742
2743 static void
2744 bridge_collect_wanted_ports(struct bridge *br,
2745                             const unsigned long int *splinter_vlans,
2746                             struct shash *wanted_ports)
2747 {
2748     size_t i;
2749
2750     shash_init(wanted_ports);
2751
2752     for (i = 0; i < br->cfg->n_ports; i++) {
2753         const char *name = br->cfg->ports[i]->name;
2754         if (!shash_add_once(wanted_ports, name, br->cfg->ports[i])) {
2755             VLOG_WARN("bridge %s: %s specified twice as bridge port",
2756                       br->name, name);
2757         }
2758     }
2759     if (bridge_get_controllers(br, NULL)
2760         && !shash_find(wanted_ports, br->name)) {
2761         VLOG_WARN("bridge %s: no port named %s, synthesizing one",
2762                   br->name, br->name);
2763
2764         ovsrec_interface_init(&br->synth_local_iface);
2765         ovsrec_port_init(&br->synth_local_port);
2766
2767         br->synth_local_port.interfaces = &br->synth_local_ifacep;
2768         br->synth_local_port.n_interfaces = 1;
2769         br->synth_local_port.name = br->name;
2770
2771         br->synth_local_iface.name = br->name;
2772         br->synth_local_iface.type = "internal";
2773
2774         br->synth_local_ifacep = &br->synth_local_iface;
2775
2776         shash_add(wanted_ports, br->name, &br->synth_local_port);
2777     }
2778
2779     if (splinter_vlans) {
2780         add_vlan_splinter_ports(br, splinter_vlans, wanted_ports);
2781     }
2782 }
2783
2784 /* Deletes "struct port"s and "struct iface"s under 'br' which aren't
2785  * consistent with 'br->cfg'.  Updates 'br->if_cfg_queue' with interfaces which
2786  * 'br' needs to complete its configuration. */
2787 static void
2788 bridge_del_ports(struct bridge *br, const struct shash *wanted_ports)
2789 {
2790     struct shash_node *port_node;
2791     struct port *port, *next;
2792
2793     /* Get rid of deleted ports.
2794      * Get rid of deleted interfaces on ports that still exist. */
2795     HMAP_FOR_EACH_SAFE (port, next, hmap_node, &br->ports) {
2796         port->cfg = shash_find_data(wanted_ports, port->name);
2797         if (!port->cfg) {
2798             port_destroy(port);
2799         } else {
2800             port_del_ifaces(port);
2801         }
2802     }
2803
2804     /* Update iface->cfg and iface->type in interfaces that still exist. */
2805     SHASH_FOR_EACH (port_node, wanted_ports) {
2806         const struct ovsrec_port *port = port_node->data;
2807         size_t i;
2808
2809         for (i = 0; i < port->n_interfaces; i++) {
2810             const struct ovsrec_interface *cfg = port->interfaces[i];
2811             struct iface *iface = iface_lookup(br, cfg->name);
2812             const char *type = iface_get_type(cfg, br->cfg);
2813
2814             if (iface) {
2815                 iface->cfg = cfg;
2816                 iface->type = type;
2817             } else if (!strcmp(type, "null")) {
2818                 VLOG_WARN_ONCE("%s: The null interface type is deprecated and"
2819                                " may be removed in February 2013. Please email"
2820                                " dev@openvswitch.org with concerns.",
2821                                cfg->name);
2822             } else {
2823                 /* We will add new interfaces later. */
2824             }
2825         }
2826     }
2827 }
2828
2829 /* Initializes 'oc' appropriately as a management service controller for
2830  * 'br'.
2831  *
2832  * The caller must free oc->target when it is no longer needed. */
2833 static void
2834 bridge_ofproto_controller_for_mgmt(const struct bridge *br,
2835                                    struct ofproto_controller *oc)
2836 {
2837     oc->target = xasprintf("punix:%s/%s.mgmt", ovs_rundir(), br->name);
2838     oc->max_backoff = 0;
2839     oc->probe_interval = 60;
2840     oc->band = OFPROTO_OUT_OF_BAND;
2841     oc->rate_limit = 0;
2842     oc->burst_limit = 0;
2843     oc->enable_async_msgs = true;
2844 }
2845
2846 /* Converts ovsrec_controller 'c' into an ofproto_controller in 'oc'.  */
2847 static void
2848 bridge_ofproto_controller_from_ovsrec(const struct ovsrec_controller *c,
2849                                       struct ofproto_controller *oc)
2850 {
2851     int dscp;
2852
2853     oc->target = c->target;
2854     oc->max_backoff = c->max_backoff ? *c->max_backoff / 1000 : 8;
2855     oc->probe_interval = c->inactivity_probe ? *c->inactivity_probe / 1000 : 5;
2856     oc->band = (!c->connection_mode || !strcmp(c->connection_mode, "in-band")
2857                 ? OFPROTO_IN_BAND : OFPROTO_OUT_OF_BAND);
2858     oc->rate_limit = c->controller_rate_limit ? *c->controller_rate_limit : 0;
2859     oc->burst_limit = (c->controller_burst_limit
2860                        ? *c->controller_burst_limit : 0);
2861     oc->enable_async_msgs = (!c->enable_async_messages
2862                              || *c->enable_async_messages);
2863     dscp = smap_get_int(&c->other_config, "dscp", DSCP_DEFAULT);
2864     if (dscp < 0 || dscp > 63) {
2865         dscp = DSCP_DEFAULT;
2866     }
2867     oc->dscp = dscp;
2868 }
2869
2870 /* Configures the IP stack for 'br''s local interface properly according to the
2871  * configuration in 'c'.  */
2872 static void
2873 bridge_configure_local_iface_netdev(struct bridge *br,
2874                                     struct ovsrec_controller *c)
2875 {
2876     struct netdev *netdev;
2877     struct in_addr mask, gateway;
2878
2879     struct iface *local_iface;
2880     struct in_addr ip;
2881
2882     /* If there's no local interface or no IP address, give up. */
2883     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
2884     if (!local_iface || !c->local_ip
2885         || !inet_pton(AF_INET, c->local_ip, &ip)) {
2886         return;
2887     }
2888
2889     /* Bring up the local interface. */
2890     netdev = local_iface->netdev;
2891     netdev_turn_flags_on(netdev, NETDEV_UP, NULL);
2892
2893     /* Configure the IP address and netmask. */
2894     if (!c->local_netmask
2895         || !inet_pton(AF_INET, c->local_netmask, &mask)
2896         || !mask.s_addr) {
2897         mask.s_addr = guess_netmask(ip.s_addr);
2898     }
2899     if (!netdev_set_in4(netdev, ip, mask)) {
2900         VLOG_INFO("bridge %s: configured IP address "IP_FMT", netmask "IP_FMT,
2901                   br->name, IP_ARGS(ip.s_addr), IP_ARGS(mask.s_addr));
2902     }
2903
2904     /* Configure the default gateway. */
2905     if (c->local_gateway
2906         && inet_pton(AF_INET, c->local_gateway, &gateway)
2907         && gateway.s_addr) {
2908         if (!netdev_add_router(netdev, gateway)) {
2909             VLOG_INFO("bridge %s: configured gateway "IP_FMT,
2910                       br->name, IP_ARGS(gateway.s_addr));
2911         }
2912     }
2913 }
2914
2915 /* Returns true if 'a' and 'b' are the same except that any number of slashes
2916  * in either string are treated as equal to any number of slashes in the other,
2917  * e.g. "x///y" is equal to "x/y".
2918  *
2919  * Also, if 'b_stoplen' bytes from 'b' are found to be equal to corresponding
2920  * bytes from 'a', the function considers this success.  Specify 'b_stoplen' as
2921  * SIZE_MAX to compare all of 'a' to all of 'b' rather than just a prefix of
2922  * 'b' against a prefix of 'a'.
2923  */
2924 static bool
2925 equal_pathnames(const char *a, const char *b, size_t b_stoplen)
2926 {
2927     const char *b_start = b;
2928     for (;;) {
2929         if (b - b_start >= b_stoplen) {
2930             return true;
2931         } else if (*a != *b) {
2932             return false;
2933         } else if (*a == '/') {
2934             a += strspn(a, "/");
2935             b += strspn(b, "/");
2936         } else if (*a == '\0') {
2937             return true;
2938         } else {
2939             a++;
2940             b++;
2941         }
2942     }
2943 }
2944
2945 static void
2946 bridge_configure_remotes(struct bridge *br,
2947                          const struct sockaddr_in *managers, size_t n_managers)
2948 {
2949     bool disable_in_band;
2950
2951     struct ovsrec_controller **controllers;
2952     size_t n_controllers;
2953
2954     enum ofproto_fail_mode fail_mode;
2955
2956     struct ofproto_controller *ocs;
2957     size_t n_ocs;
2958     size_t i;
2959
2960     /* Check if we should disable in-band control on this bridge. */
2961     disable_in_band = smap_get_bool(&br->cfg->other_config, "disable-in-band",
2962                                     false);
2963
2964     /* Set OpenFlow queue ID for in-band control. */
2965     ofproto_set_in_band_queue(br->ofproto,
2966                               smap_get_int(&br->cfg->other_config,
2967                                            "in-band-queue", -1));
2968
2969     if (disable_in_band) {
2970         ofproto_set_extra_in_band_remotes(br->ofproto, NULL, 0);
2971     } else {
2972         ofproto_set_extra_in_band_remotes(br->ofproto, managers, n_managers);
2973     }
2974
2975     n_controllers = bridge_get_controllers(br, &controllers);
2976
2977     ocs = xmalloc((n_controllers + 1) * sizeof *ocs);
2978     n_ocs = 0;
2979
2980     bridge_ofproto_controller_for_mgmt(br, &ocs[n_ocs++]);
2981     for (i = 0; i < n_controllers; i++) {
2982         struct ovsrec_controller *c = controllers[i];
2983
2984         if (!strncmp(c->target, "punix:", 6)
2985             || !strncmp(c->target, "unix:", 5)) {
2986             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
2987             char *whitelist;
2988
2989             if (!strncmp(c->target, "unix:", 5)) {
2990                 /* Connect to a listening socket */
2991                 whitelist = xasprintf("unix:%s/", ovs_rundir());
2992                 if (strchr(c->target, '/') &&
2993                    !equal_pathnames(c->target, whitelist,
2994                      strlen(whitelist))) {
2995                     /* Absolute path specified, but not in ovs_rundir */
2996                     VLOG_ERR_RL(&rl, "bridge %s: Not connecting to socket "
2997                                   "controller \"%s\" due to possibility for "
2998                                   "remote exploit.  Instead, specify socket "
2999                                   "in whitelisted \"%s\" or connect to "
3000                                   "\"unix:%s/%s.mgmt\" (which is always "
3001                                   "available without special configuration).",
3002                                   br->name, c->target, whitelist,
3003                                   ovs_rundir(), br->name);
3004                     free(whitelist);
3005                     continue;
3006                 }
3007             } else {
3008                whitelist = xasprintf("punix:%s/%s.controller",
3009                                      ovs_rundir(), br->name);
3010                if (!equal_pathnames(c->target, whitelist, SIZE_MAX)) {
3011                    /* Prevent remote ovsdb-server users from accessing
3012                     * arbitrary Unix domain sockets and overwriting arbitrary
3013                     * local files. */
3014                    VLOG_ERR_RL(&rl, "bridge %s: Not adding Unix domain socket "
3015                                   "controller \"%s\" due to possibility of "
3016                                   "overwriting local files. Instead, specify "
3017                                   "whitelisted \"%s\" or connect to "
3018                                   "\"unix:%s/%s.mgmt\" (which is always "
3019                                   "available without special configuration).",
3020                                   br->name, c->target, whitelist,
3021                                   ovs_rundir(), br->name);
3022                    free(whitelist);
3023                    continue;
3024                }
3025             }
3026
3027             free(whitelist);
3028         }
3029
3030         bridge_configure_local_iface_netdev(br, c);
3031         bridge_ofproto_controller_from_ovsrec(c, &ocs[n_ocs]);
3032         if (disable_in_band) {
3033             ocs[n_ocs].band = OFPROTO_OUT_OF_BAND;
3034         }
3035         n_ocs++;
3036     }
3037
3038     ofproto_set_controllers(br->ofproto, ocs, n_ocs,
3039                             bridge_get_allowed_versions(br));
3040     free(ocs[0].target); /* From bridge_ofproto_controller_for_mgmt(). */
3041     free(ocs);
3042
3043     /* Set the fail-mode. */
3044     fail_mode = !br->cfg->fail_mode
3045                 || !strcmp(br->cfg->fail_mode, "standalone")
3046                     ? OFPROTO_FAIL_STANDALONE
3047                     : OFPROTO_FAIL_SECURE;
3048     ofproto_set_fail_mode(br->ofproto, fail_mode);
3049
3050     /* Configure OpenFlow controller connection snooping. */
3051     if (!ofproto_has_snoops(br->ofproto)) {
3052         struct sset snoops;
3053
3054         sset_init(&snoops);
3055         sset_add_and_free(&snoops, xasprintf("punix:%s/%s.snoop",
3056                                              ovs_rundir(), br->name));
3057         ofproto_set_snoops(br->ofproto, &snoops);
3058         sset_destroy(&snoops);
3059     }
3060 }
3061
3062 static void
3063 bridge_configure_tables(struct bridge *br)
3064 {
3065     static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
3066     int n_tables;
3067     int i, j, k;
3068
3069     n_tables = ofproto_get_n_tables(br->ofproto);
3070     j = 0;
3071     for (i = 0; i < n_tables; i++) {
3072         struct ofproto_table_settings s;
3073
3074         s.name = NULL;
3075         s.max_flows = UINT_MAX;
3076         s.groups = NULL;
3077         s.n_groups = 0;
3078         s.n_prefix_fields = 0;
3079         memset(s.prefix_fields, ~0, sizeof(s.prefix_fields));
3080
3081         if (j < br->cfg->n_flow_tables && i == br->cfg->key_flow_tables[j]) {
3082             struct ovsrec_flow_table *cfg = br->cfg->value_flow_tables[j++];
3083             bool no_prefixes;
3084
3085             s.name = cfg->name;
3086             if (cfg->n_flow_limit && *cfg->flow_limit < UINT_MAX) {
3087                 s.max_flows = *cfg->flow_limit;
3088             }
3089             if (cfg->overflow_policy
3090                 && !strcmp(cfg->overflow_policy, "evict")) {
3091
3092                 s.groups = xmalloc(cfg->n_groups * sizeof *s.groups);
3093                 for (k = 0; k < cfg->n_groups; k++) {
3094                     const char *string = cfg->groups[k];
3095                     char *msg;
3096
3097                     msg = mf_parse_subfield__(&s.groups[k], &string);
3098                     if (msg) {
3099                         VLOG_WARN_RL(&rl, "bridge %s table %d: error parsing "
3100                                      "'groups' (%s)", br->name, i, msg);
3101                         free(msg);
3102                     } else if (*string) {
3103                         VLOG_WARN_RL(&rl, "bridge %s table %d: 'groups' "
3104                                      "element '%s' contains trailing garbage",
3105                                      br->name, i, cfg->groups[k]);
3106                     } else {
3107                         s.n_groups++;
3108                     }
3109                 }
3110             }
3111             /* Prefix lookup fields. */
3112             no_prefixes = false;
3113             s.n_prefix_fields = 0;
3114             for (k = 0; k < cfg->n_prefixes; k++) {
3115                 const char *name = cfg->prefixes[k];
3116                 const struct mf_field *mf;
3117
3118                 if (strcmp(name, "none") == 0) {
3119                     no_prefixes = true;
3120                     continue;
3121                 }
3122                 mf = mf_from_name(name);
3123                 if (!mf) {
3124                     VLOG_WARN("bridge %s: 'prefixes' with unknown field: %s",
3125                               br->name, name);
3126                     continue;
3127                 }
3128                 if (mf->flow_be32ofs < 0 || mf->n_bits % 32) {
3129                     VLOG_WARN("bridge %s: 'prefixes' with incompatible field: "
3130                               "%s", br->name, name);
3131                     continue;
3132                 }
3133                 if (s.n_prefix_fields >= ARRAY_SIZE(s.prefix_fields)) {
3134                     VLOG_WARN("bridge %s: 'prefixes' with too many fields, "
3135                               "field not used: %s", br->name, name);
3136                     continue;
3137                 }
3138                 s.prefix_fields[s.n_prefix_fields++] = mf->id;
3139             }
3140             if (s.n_prefix_fields == 0 && !no_prefixes) {
3141                 /* Use default values. */
3142                 s.n_prefix_fields = ARRAY_SIZE(default_prefix_fields);
3143                 memcpy(s.prefix_fields, default_prefix_fields,
3144                        sizeof default_prefix_fields);
3145             }
3146             if (s.n_prefix_fields > 0) {
3147                 int k;
3148                 struct ds ds = DS_EMPTY_INITIALIZER;
3149                 for (k = 0; k < s.n_prefix_fields; k++) {
3150                     if (k) {
3151                         ds_put_char(&ds, ',');
3152                     }
3153                     ds_put_cstr(&ds, mf_from_id(s.prefix_fields[k])->name);
3154                 }
3155                 VLOG_INFO("bridge %s table %d: Prefix lookup with: %s.",
3156                           br->name, i, ds_cstr(&ds));
3157                 ds_destroy(&ds);
3158             }
3159         }
3160
3161         ofproto_configure_table(br->ofproto, i, &s);
3162
3163         free(s.groups);
3164     }
3165     for (; j < br->cfg->n_flow_tables; j++) {
3166         VLOG_WARN_RL(&rl, "bridge %s: ignoring configuration for flow table "
3167                      "%"PRId64" not supported by this datapath", br->name,
3168                      br->cfg->key_flow_tables[j]);
3169     }
3170 }
3171
3172 static void
3173 bridge_configure_dp_desc(struct bridge *br)
3174 {
3175     ofproto_set_dp_desc(br->ofproto,
3176                         smap_get(&br->cfg->other_config, "dp-desc"));
3177 }
3178 \f
3179 /* Port functions. */
3180
3181 static struct port *
3182 port_create(struct bridge *br, const struct ovsrec_port *cfg)
3183 {
3184     struct port *port;
3185
3186     port = xzalloc(sizeof *port);
3187     port->bridge = br;
3188     port->name = xstrdup(cfg->name);
3189     port->cfg = cfg;
3190     list_init(&port->ifaces);
3191
3192     hmap_insert(&br->ports, &port->hmap_node, hash_string(port->name, 0));
3193     return port;
3194 }
3195
3196 /* Deletes interfaces from 'port' that are no longer configured for it. */
3197 static void
3198 port_del_ifaces(struct port *port)
3199 {
3200     struct iface *iface, *next;
3201     struct sset new_ifaces;
3202     size_t i;
3203
3204     /* Collect list of new interfaces. */
3205     sset_init(&new_ifaces);
3206     for (i = 0; i < port->cfg->n_interfaces; i++) {
3207         const char *name = port->cfg->interfaces[i]->name;
3208         const char *type = port->cfg->interfaces[i]->type;
3209         if (strcmp(type, "null")) {
3210             sset_add(&new_ifaces, name);
3211         }
3212     }
3213
3214     /* Get rid of deleted interfaces. */
3215     LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
3216         if (!sset_contains(&new_ifaces, iface->name)) {
3217             iface_destroy(iface);
3218         }
3219     }
3220
3221     sset_destroy(&new_ifaces);
3222 }
3223
3224 static void
3225 port_destroy(struct port *port)
3226 {
3227     if (port) {
3228         struct bridge *br = port->bridge;
3229         struct iface *iface, *next;
3230
3231         if (br->ofproto) {
3232             ofproto_bundle_unregister(br->ofproto, port);
3233         }
3234
3235         LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
3236             iface_destroy__(iface);
3237         }
3238
3239         hmap_remove(&br->ports, &port->hmap_node);
3240         free(port->name);
3241         free(port);
3242     }
3243 }
3244
3245 static struct port *
3246 port_lookup(const struct bridge *br, const char *name)
3247 {
3248     struct port *port;
3249
3250     HMAP_FOR_EACH_WITH_HASH (port, hmap_node, hash_string(name, 0),
3251                              &br->ports) {
3252         if (!strcmp(port->name, name)) {
3253             return port;
3254         }
3255     }
3256     return NULL;
3257 }
3258
3259 static bool
3260 enable_lacp(struct port *port, bool *activep)
3261 {
3262     if (!port->cfg->lacp) {
3263         /* XXX when LACP implementation has been sufficiently tested, enable by
3264          * default and make active on bonded ports. */
3265         return false;
3266     } else if (!strcmp(port->cfg->lacp, "off")) {
3267         return false;
3268     } else if (!strcmp(port->cfg->lacp, "active")) {
3269         *activep = true;
3270         return true;
3271     } else if (!strcmp(port->cfg->lacp, "passive")) {
3272         *activep = false;
3273         return true;
3274     } else {
3275         VLOG_WARN("port %s: unknown LACP mode %s",
3276                   port->name, port->cfg->lacp);
3277         return false;
3278     }
3279 }
3280
3281 static struct lacp_settings *
3282 port_configure_lacp(struct port *port, struct lacp_settings *s)
3283 {
3284     const char *lacp_time, *system_id;
3285     int priority;
3286
3287     if (!enable_lacp(port, &s->active)) {
3288         return NULL;
3289     }
3290
3291     s->name = port->name;
3292
3293     system_id = smap_get(&port->cfg->other_config, "lacp-system-id");
3294     if (system_id) {
3295         if (!ovs_scan(system_id, ETH_ADDR_SCAN_FMT,
3296                       ETH_ADDR_SCAN_ARGS(s->id))) {
3297             VLOG_WARN("port %s: LACP system ID (%s) must be an Ethernet"
3298                       " address.", port->name, system_id);
3299             return NULL;
3300         }
3301     } else {
3302         memcpy(s->id, port->bridge->ea, ETH_ADDR_LEN);
3303     }
3304
3305     if (eth_addr_is_zero(s->id)) {
3306         VLOG_WARN("port %s: Invalid zero LACP system ID.", port->name);
3307         return NULL;
3308     }
3309
3310     /* Prefer bondable links if unspecified. */
3311     priority = smap_get_int(&port->cfg->other_config, "lacp-system-priority",
3312                             0);
3313     s->priority = (priority > 0 && priority <= UINT16_MAX
3314                    ? priority
3315                    : UINT16_MAX - !list_is_short(&port->ifaces));
3316
3317     lacp_time = smap_get(&port->cfg->other_config, "lacp-time");
3318     s->fast = lacp_time && !strcasecmp(lacp_time, "fast");
3319
3320     s->fallback_ab_cfg = smap_get_bool(&port->cfg->other_config,
3321                                        "lacp-fallback-ab", false);
3322
3323     return s;
3324 }
3325
3326 static void
3327 iface_configure_lacp(struct iface *iface, struct lacp_slave_settings *s)
3328 {
3329     int priority, portid, key;
3330
3331     portid = smap_get_int(&iface->cfg->other_config, "lacp-port-id", 0);
3332     priority = smap_get_int(&iface->cfg->other_config, "lacp-port-priority",
3333                             0);
3334     key = smap_get_int(&iface->cfg->other_config, "lacp-aggregation-key", 0);
3335
3336     if (portid <= 0 || portid > UINT16_MAX) {
3337         portid = ofp_to_u16(iface->ofp_port);
3338     }
3339
3340     if (priority <= 0 || priority > UINT16_MAX) {
3341         priority = UINT16_MAX;
3342     }
3343
3344     if (key < 0 || key > UINT16_MAX) {
3345         key = 0;
3346     }
3347
3348     s->name = iface->name;
3349     s->id = portid;
3350     s->priority = priority;
3351     s->key = key;
3352 }
3353
3354 static void
3355 port_configure_bond(struct port *port, struct bond_settings *s)
3356 {
3357     const char *detect_s;
3358     struct iface *iface;
3359     int miimon_interval;
3360
3361     s->name = port->name;
3362     s->balance = BM_AB;
3363     if (port->cfg->bond_mode) {
3364         if (!bond_mode_from_string(&s->balance, port->cfg->bond_mode)) {
3365             VLOG_WARN("port %s: unknown bond_mode %s, defaulting to %s",
3366                       port->name, port->cfg->bond_mode,
3367                       bond_mode_to_string(s->balance));
3368         }
3369     } else {
3370         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
3371
3372         /* XXX: Post version 1.5.*, the default bond_mode changed from SLB to
3373          * active-backup. At some point we should remove this warning. */
3374         VLOG_WARN_RL(&rl, "port %s: Using the default bond_mode %s. Note that"
3375                      " in previous versions, the default bond_mode was"
3376                      " balance-slb", port->name,
3377                      bond_mode_to_string(s->balance));
3378     }
3379     if (s->balance == BM_SLB && port->bridge->cfg->n_flood_vlans) {
3380         VLOG_WARN("port %s: SLB bonds are incompatible with flood_vlans, "
3381                   "please use another bond type or disable flood_vlans",
3382                   port->name);
3383     }
3384
3385     miimon_interval = smap_get_int(&port->cfg->other_config,
3386                                    "bond-miimon-interval", 0);
3387     if (miimon_interval <= 0) {
3388         miimon_interval = 200;
3389     }
3390
3391     detect_s = smap_get(&port->cfg->other_config, "bond-detect-mode");
3392     if (!detect_s || !strcmp(detect_s, "carrier")) {
3393         miimon_interval = 0;
3394     } else if (strcmp(detect_s, "miimon")) {
3395         VLOG_WARN("port %s: unsupported bond-detect-mode %s, "
3396                   "defaulting to carrier", port->name, detect_s);
3397         miimon_interval = 0;
3398     }
3399
3400     s->up_delay = MAX(0, port->cfg->bond_updelay);
3401     s->down_delay = MAX(0, port->cfg->bond_downdelay);
3402     s->basis = smap_get_int(&port->cfg->other_config, "bond-hash-basis", 0);
3403     s->rebalance_interval = smap_get_int(&port->cfg->other_config,
3404                                            "bond-rebalance-interval", 10000);
3405     if (s->rebalance_interval && s->rebalance_interval < 1000) {
3406         s->rebalance_interval = 1000;
3407     }
3408
3409     s->fake_iface = port->cfg->bond_fake_iface;
3410
3411     s->lacp_fallback_ab_cfg = smap_get_bool(&port->cfg->other_config,
3412                                        "lacp-fallback-ab", false);
3413
3414     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
3415         netdev_set_miimon_interval(iface->netdev, miimon_interval);
3416     }
3417 }
3418
3419 /* Returns true if 'port' is synthetic, that is, if we constructed it locally
3420  * instead of obtaining it from the database. */
3421 static bool
3422 port_is_synthetic(const struct port *port)
3423 {
3424     return ovsdb_idl_row_is_synthetic(&port->cfg->header_);
3425 }
3426 \f
3427 /* Interface functions. */
3428
3429 static bool
3430 iface_is_internal(const struct ovsrec_interface *iface,
3431                   const struct ovsrec_bridge *br)
3432 {
3433     /* The local port and "internal" ports are always "internal". */
3434     return !strcmp(iface->type, "internal") || !strcmp(iface->name, br->name);
3435 }
3436
3437 /* Returns the correct network device type for interface 'iface' in bridge
3438  * 'br'. */
3439 static const char *
3440 iface_get_type(const struct ovsrec_interface *iface,
3441                const struct ovsrec_bridge *br)
3442 {
3443     const char *type;
3444
3445     /* The local port always has type "internal".  Other ports take
3446      * their type from the database and default to "system" if none is
3447      * specified. */
3448     if (iface_is_internal(iface, br)) {
3449         type = "internal";
3450     } else {
3451         type = iface->type[0] ? iface->type : "system";
3452     }
3453
3454     return ofproto_port_open_type(br->datapath_type, type);
3455 }
3456
3457 static void
3458 iface_destroy__(struct iface *iface)
3459 {
3460     if (iface) {
3461         struct port *port = iface->port;
3462         struct bridge *br = port->bridge;
3463
3464         if (br->ofproto && iface->ofp_port != OFPP_NONE) {
3465             ofproto_port_unregister(br->ofproto, iface->ofp_port);
3466         }
3467
3468         if (iface->ofp_port != OFPP_NONE) {
3469             hmap_remove(&br->ifaces, &iface->ofp_port_node);
3470         }
3471
3472         list_remove(&iface->port_elem);
3473         hmap_remove(&br->iface_by_name, &iface->name_node);
3474
3475         /* The user is changing configuration here, so netdev_remove needs to be
3476          * used as opposed to netdev_close */
3477         netdev_remove(iface->netdev);
3478
3479         free(iface->name);
3480         free(iface);
3481     }
3482 }
3483
3484 static void
3485 iface_destroy(struct iface *iface)
3486 {
3487     if (iface) {
3488         struct port *port = iface->port;
3489
3490         iface_destroy__(iface);
3491         if (list_is_empty(&port->ifaces)) {
3492             port_destroy(port);
3493         }
3494     }
3495 }
3496
3497 static struct iface *
3498 iface_lookup(const struct bridge *br, const char *name)
3499 {
3500     struct iface *iface;
3501
3502     HMAP_FOR_EACH_WITH_HASH (iface, name_node, hash_string(name, 0),
3503                              &br->iface_by_name) {
3504         if (!strcmp(iface->name, name)) {
3505             return iface;
3506         }
3507     }
3508
3509     return NULL;
3510 }
3511
3512 static struct iface *
3513 iface_find(const char *name)
3514 {
3515     const struct bridge *br;
3516
3517     HMAP_FOR_EACH (br, node, &all_bridges) {
3518         struct iface *iface = iface_lookup(br, name);
3519
3520         if (iface) {
3521             return iface;
3522         }
3523     }
3524     return NULL;
3525 }
3526
3527 static struct iface *
3528 iface_from_ofp_port(const struct bridge *br, ofp_port_t ofp_port)
3529 {
3530     struct iface *iface;
3531
3532     HMAP_FOR_EACH_IN_BUCKET (iface, ofp_port_node, hash_ofp_port(ofp_port),
3533                              &br->ifaces) {
3534         if (iface->ofp_port == ofp_port) {
3535             return iface;
3536         }
3537     }
3538     return NULL;
3539 }
3540
3541 /* Set Ethernet address of 'iface', if one is specified in the configuration
3542  * file. */
3543 static void
3544 iface_set_mac(const struct bridge *br, const struct port *port, struct iface *iface)
3545 {
3546     uint8_t ea[ETH_ADDR_LEN], *mac = NULL;
3547     struct iface *hw_addr_iface;
3548
3549     if (strcmp(iface->type, "internal")) {
3550         return;
3551     }
3552
3553     if (iface->cfg->mac && eth_addr_from_string(iface->cfg->mac, ea)) {
3554         mac = ea;
3555     } else if (port->cfg->fake_bridge) {
3556         /* Fake bridge and no MAC set in the configuration. Pick a local one. */
3557         find_local_hw_addr(br, ea, port, &hw_addr_iface);
3558         mac = ea;
3559     }
3560
3561     if (mac) {
3562         if (iface->ofp_port == OFPP_LOCAL) {
3563             VLOG_ERR("interface %s: ignoring mac in Interface record "
3564                      "(use Bridge record to set local port's mac)",
3565                      iface->name);
3566         } else if (eth_addr_is_multicast(mac)) {
3567             VLOG_ERR("interface %s: cannot set MAC to multicast address",
3568                      iface->name);
3569         } else {
3570             int error = netdev_set_etheraddr(iface->netdev, mac);
3571             if (error) {
3572                 VLOG_ERR("interface %s: setting MAC failed (%s)",
3573                          iface->name, ovs_strerror(error));
3574             }
3575         }
3576     }
3577 }
3578
3579 /* Sets the ofport column of 'if_cfg' to 'ofport'. */
3580 static void
3581 iface_set_ofport(const struct ovsrec_interface *if_cfg, ofp_port_t ofport)
3582 {
3583     if (if_cfg && !ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
3584         int64_t port = ofport == OFPP_NONE ? -1 : ofp_to_u16(ofport);
3585         ovsrec_interface_set_ofport(if_cfg, &port, 1);
3586     }
3587 }
3588
3589 /* Clears all of the fields in 'if_cfg' that indicate interface status, and
3590  * sets the "ofport" field to -1.
3591  *
3592  * This is appropriate when 'if_cfg''s interface cannot be created or is
3593  * otherwise invalid. */
3594 static void
3595 iface_clear_db_record(const struct ovsrec_interface *if_cfg, char *errp)
3596 {
3597     if (!ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
3598         iface_set_ofport(if_cfg, OFPP_NONE);
3599         ovsrec_interface_set_error(if_cfg, errp);
3600         ovsrec_interface_set_status(if_cfg, NULL);
3601         ovsrec_interface_set_admin_state(if_cfg, NULL);
3602         ovsrec_interface_set_duplex(if_cfg, NULL);
3603         ovsrec_interface_set_link_speed(if_cfg, NULL, 0);
3604         ovsrec_interface_set_link_state(if_cfg, NULL);
3605         ovsrec_interface_set_mac_in_use(if_cfg, NULL);
3606         ovsrec_interface_set_mtu(if_cfg, NULL, 0);
3607         ovsrec_interface_set_cfm_fault(if_cfg, NULL, 0);
3608         ovsrec_interface_set_cfm_fault_status(if_cfg, NULL, 0);
3609         ovsrec_interface_set_cfm_remote_mpids(if_cfg, NULL, 0);
3610         ovsrec_interface_set_lacp_current(if_cfg, NULL, 0);
3611         ovsrec_interface_set_statistics(if_cfg, NULL, NULL, 0);
3612         ovsrec_interface_set_ifindex(if_cfg, NULL, 0);
3613     }
3614 }
3615
3616 static bool
3617 queue_ids_include(const struct ovsdb_datum *queues, int64_t target)
3618 {
3619     union ovsdb_atom atom;
3620
3621     atom.integer = target;
3622     return ovsdb_datum_find_key(queues, &atom, OVSDB_TYPE_INTEGER) != UINT_MAX;
3623 }
3624
3625 static void
3626 iface_configure_qos(struct iface *iface, const struct ovsrec_qos *qos)
3627 {
3628     struct ofpbuf queues_buf;
3629
3630     ofpbuf_init(&queues_buf, 0);
3631
3632     if (!qos || qos->type[0] == '\0' || qos->n_queues < 1) {
3633         netdev_set_qos(iface->netdev, NULL, NULL);
3634     } else {
3635         const struct ovsdb_datum *queues;
3636         struct netdev_queue_dump dump;
3637         unsigned int queue_id;
3638         struct smap details;
3639         bool queue_zero;
3640         size_t i;
3641
3642         /* Configure top-level Qos for 'iface'. */
3643         netdev_set_qos(iface->netdev, qos->type, &qos->other_config);
3644
3645         /* Deconfigure queues that were deleted. */
3646         queues = ovsrec_qos_get_queues(qos, OVSDB_TYPE_INTEGER,
3647                                        OVSDB_TYPE_UUID);
3648         smap_init(&details);
3649         NETDEV_QUEUE_FOR_EACH (&queue_id, &details, &dump, iface->netdev) {
3650             if (!queue_ids_include(queues, queue_id)) {
3651                 netdev_delete_queue(iface->netdev, queue_id);
3652             }
3653         }
3654         smap_destroy(&details);
3655
3656         /* Configure queues for 'iface'. */
3657         queue_zero = false;
3658         for (i = 0; i < qos->n_queues; i++) {
3659             const struct ovsrec_queue *queue = qos->value_queues[i];
3660             unsigned int queue_id = qos->key_queues[i];
3661
3662             if (queue_id == 0) {
3663                 queue_zero = true;
3664             }
3665
3666             if (queue->n_dscp == 1) {
3667                 struct ofproto_port_queue *port_queue;
3668
3669                 port_queue = ofpbuf_put_uninit(&queues_buf,
3670                                                sizeof *port_queue);
3671                 port_queue->queue = queue_id;
3672                 port_queue->dscp = queue->dscp[0];
3673             }
3674
3675             netdev_set_queue(iface->netdev, queue_id, &queue->other_config);
3676         }
3677         if (!queue_zero) {
3678             struct smap details;
3679
3680             smap_init(&details);
3681             netdev_set_queue(iface->netdev, 0, &details);
3682             smap_destroy(&details);
3683         }
3684     }
3685
3686     if (iface->ofp_port != OFPP_NONE) {
3687         const struct ofproto_port_queue *port_queues = ofpbuf_data(&queues_buf);
3688         size_t n_queues = ofpbuf_size(&queues_buf) / sizeof *port_queues;
3689
3690         ofproto_port_set_queues(iface->port->bridge->ofproto, iface->ofp_port,
3691                                 port_queues, n_queues);
3692     }
3693
3694     netdev_set_policing(iface->netdev,
3695                         iface->cfg->ingress_policing_rate,
3696                         iface->cfg->ingress_policing_burst);
3697
3698     ofpbuf_uninit(&queues_buf);
3699 }
3700
3701 static void
3702 iface_configure_cfm(struct iface *iface)
3703 {
3704     const struct ovsrec_interface *cfg = iface->cfg;
3705     const char *opstate_str;
3706     const char *cfm_ccm_vlan;
3707     struct cfm_settings s;
3708     struct smap netdev_args;
3709
3710     if (!cfg->n_cfm_mpid) {
3711         ofproto_port_clear_cfm(iface->port->bridge->ofproto, iface->ofp_port);
3712         return;
3713     }
3714
3715     s.check_tnl_key = false;
3716     smap_init(&netdev_args);
3717     if (!netdev_get_config(iface->netdev, &netdev_args)) {
3718         const char *key = smap_get(&netdev_args, "key");
3719         const char *in_key = smap_get(&netdev_args, "in_key");
3720
3721         s.check_tnl_key = (key && !strcmp(key, "flow"))
3722                            || (in_key && !strcmp(in_key, "flow"));
3723     }
3724     smap_destroy(&netdev_args);
3725
3726     s.mpid = *cfg->cfm_mpid;
3727     s.interval = smap_get_int(&iface->cfg->other_config, "cfm_interval", 0);
3728     cfm_ccm_vlan = smap_get(&iface->cfg->other_config, "cfm_ccm_vlan");
3729     s.ccm_pcp = smap_get_int(&iface->cfg->other_config, "cfm_ccm_pcp", 0);
3730
3731     if (s.interval <= 0) {
3732         s.interval = 1000;
3733     }
3734
3735     if (!cfm_ccm_vlan) {
3736         s.ccm_vlan = 0;
3737     } else if (!strcasecmp("random", cfm_ccm_vlan)) {
3738         s.ccm_vlan = CFM_RANDOM_VLAN;
3739     } else {
3740         s.ccm_vlan = atoi(cfm_ccm_vlan);
3741         if (s.ccm_vlan == CFM_RANDOM_VLAN) {
3742             s.ccm_vlan = 0;
3743         }
3744     }
3745
3746     s.extended = smap_get_bool(&iface->cfg->other_config, "cfm_extended",
3747                                false);
3748     s.demand = smap_get_bool(&iface->cfg->other_config, "cfm_demand", false);
3749
3750     opstate_str = smap_get(&iface->cfg->other_config, "cfm_opstate");
3751     s.opup = !opstate_str || !strcasecmp("up", opstate_str);
3752
3753     ofproto_port_set_cfm(iface->port->bridge->ofproto, iface->ofp_port, &s);
3754 }
3755
3756 /* Returns true if 'iface' is synthetic, that is, if we constructed it locally
3757  * instead of obtaining it from the database. */
3758 static bool
3759 iface_is_synthetic(const struct iface *iface)
3760 {
3761     return ovsdb_idl_row_is_synthetic(&iface->cfg->header_);
3762 }
3763
3764 static ofp_port_t
3765 iface_validate_ofport__(size_t n, int64_t *ofport)
3766 {
3767     return (n && *ofport >= 1 && *ofport < ofp_to_u16(OFPP_MAX)
3768             ? u16_to_ofp(*ofport)
3769             : OFPP_NONE);
3770 }
3771
3772 static ofp_port_t
3773 iface_get_requested_ofp_port(const struct ovsrec_interface *cfg)
3774 {
3775     return iface_validate_ofport__(cfg->n_ofport_request, cfg->ofport_request);
3776 }
3777
3778 static ofp_port_t
3779 iface_pick_ofport(const struct ovsrec_interface *cfg)
3780 {
3781     ofp_port_t requested_ofport = iface_get_requested_ofp_port(cfg);
3782     return (requested_ofport != OFPP_NONE
3783             ? requested_ofport
3784             : iface_validate_ofport__(cfg->n_ofport, cfg->ofport));
3785 }
3786 \f
3787 /* Port mirroring. */
3788
3789 static struct mirror *
3790 mirror_find_by_uuid(struct bridge *br, const struct uuid *uuid)
3791 {
3792     struct mirror *m;
3793
3794     HMAP_FOR_EACH_IN_BUCKET (m, hmap_node, uuid_hash(uuid), &br->mirrors) {
3795         if (uuid_equals(uuid, &m->uuid)) {
3796             return m;
3797         }
3798     }
3799     return NULL;
3800 }
3801
3802 static void
3803 bridge_configure_mirrors(struct bridge *br)
3804 {
3805     const struct ovsdb_datum *mc;
3806     unsigned long *flood_vlans;
3807     struct mirror *m, *next;
3808     size_t i;
3809
3810     /* Get rid of deleted mirrors. */
3811     mc = ovsrec_bridge_get_mirrors(br->cfg, OVSDB_TYPE_UUID);
3812     HMAP_FOR_EACH_SAFE (m, next, hmap_node, &br->mirrors) {
3813         union ovsdb_atom atom;
3814
3815         atom.uuid = m->uuid;
3816         if (ovsdb_datum_find_key(mc, &atom, OVSDB_TYPE_UUID) == UINT_MAX) {
3817             mirror_destroy(m);
3818         }
3819     }
3820
3821     /* Add new mirrors and reconfigure existing ones. */
3822     for (i = 0; i < br->cfg->n_mirrors; i++) {
3823         const struct ovsrec_mirror *cfg = br->cfg->mirrors[i];
3824         struct mirror *m = mirror_find_by_uuid(br, &cfg->header_.uuid);
3825         if (!m) {
3826             m = mirror_create(br, cfg);
3827         }
3828         m->cfg = cfg;
3829         if (!mirror_configure(m)) {
3830             mirror_destroy(m);
3831         }
3832     }
3833
3834     /* Update flooded vlans (for RSPAN). */
3835     flood_vlans = vlan_bitmap_from_array(br->cfg->flood_vlans,
3836                                          br->cfg->n_flood_vlans);
3837     ofproto_set_flood_vlans(br->ofproto, flood_vlans);
3838     bitmap_free(flood_vlans);
3839 }
3840
3841 static struct mirror *
3842 mirror_create(struct bridge *br, const struct ovsrec_mirror *cfg)
3843 {
3844     struct mirror *m;
3845
3846     m = xzalloc(sizeof *m);
3847     m->uuid = cfg->header_.uuid;
3848     hmap_insert(&br->mirrors, &m->hmap_node, uuid_hash(&m->uuid));
3849     m->bridge = br;
3850     m->name = xstrdup(cfg->name);
3851
3852     return m;
3853 }
3854
3855 static void
3856 mirror_destroy(struct mirror *m)
3857 {
3858     if (m) {
3859         struct bridge *br = m->bridge;
3860
3861         if (br->ofproto) {
3862             ofproto_mirror_unregister(br->ofproto, m);
3863         }
3864
3865         hmap_remove(&br->mirrors, &m->hmap_node);
3866         free(m->name);
3867         free(m);
3868     }
3869 }
3870
3871 static void
3872 mirror_collect_ports(struct mirror *m,
3873                      struct ovsrec_port **in_ports, int n_in_ports,
3874                      void ***out_portsp, size_t *n_out_portsp)
3875 {
3876     void **out_ports = xmalloc(n_in_ports * sizeof *out_ports);
3877     size_t n_out_ports = 0;
3878     size_t i;
3879
3880     for (i = 0; i < n_in_ports; i++) {
3881         const char *name = in_ports[i]->name;
3882         struct port *port = port_lookup(m->bridge, name);
3883         if (port) {
3884             out_ports[n_out_ports++] = port;
3885         } else {
3886             VLOG_WARN("bridge %s: mirror %s cannot match on nonexistent "
3887                       "port %s", m->bridge->name, m->name, name);
3888         }
3889     }
3890     *out_portsp = out_ports;
3891     *n_out_portsp = n_out_ports;
3892 }
3893
3894 static bool
3895 mirror_configure(struct mirror *m)
3896 {
3897     const struct ovsrec_mirror *cfg = m->cfg;
3898     struct ofproto_mirror_settings s;
3899
3900     /* Set name. */
3901     if (strcmp(cfg->name, m->name)) {
3902         free(m->name);
3903         m->name = xstrdup(cfg->name);
3904     }
3905     s.name = m->name;
3906
3907     /* Get output port or VLAN. */
3908     if (cfg->output_port) {
3909         s.out_bundle = port_lookup(m->bridge, cfg->output_port->name);
3910         if (!s.out_bundle) {
3911             VLOG_ERR("bridge %s: mirror %s outputs to port not on bridge",
3912                      m->bridge->name, m->name);
3913             return false;
3914         }
3915         s.out_vlan = UINT16_MAX;
3916
3917         if (cfg->output_vlan) {
3918             VLOG_ERR("bridge %s: mirror %s specifies both output port and "
3919                      "output vlan; ignoring output vlan",
3920                      m->bridge->name, m->name);
3921         }
3922     } else if (cfg->output_vlan) {
3923         /* The database should prevent invalid VLAN values. */
3924         s.out_bundle = NULL;
3925         s.out_vlan = *cfg->output_vlan;
3926     } else {
3927         VLOG_ERR("bridge %s: mirror %s does not specify output; ignoring",
3928                  m->bridge->name, m->name);
3929         return false;
3930     }
3931
3932     /* Get port selection. */
3933     if (cfg->select_all) {
3934         size_t n_ports = hmap_count(&m->bridge->ports);
3935         void **ports = xmalloc(n_ports * sizeof *ports);
3936         struct port *port;
3937         size_t i;
3938
3939         i = 0;
3940         HMAP_FOR_EACH (port, hmap_node, &m->bridge->ports) {
3941             ports[i++] = port;
3942         }
3943
3944         s.srcs = ports;
3945         s.n_srcs = n_ports;
3946
3947         s.dsts = ports;
3948         s.n_dsts = n_ports;
3949     } else {
3950         /* Get ports, dropping ports that don't exist.
3951          * The IDL ensures that there are no duplicates. */
3952         mirror_collect_ports(m, cfg->select_src_port, cfg->n_select_src_port,
3953                              &s.srcs, &s.n_srcs);
3954         mirror_collect_ports(m, cfg->select_dst_port, cfg->n_select_dst_port,
3955                              &s.dsts, &s.n_dsts);
3956     }
3957
3958     /* Get VLAN selection. */
3959     s.src_vlans = vlan_bitmap_from_array(cfg->select_vlan, cfg->n_select_vlan);
3960
3961     /* Configure. */
3962     ofproto_mirror_register(m->bridge->ofproto, m, &s);
3963
3964     /* Clean up. */
3965     if (s.srcs != s.dsts) {
3966         free(s.dsts);
3967     }
3968     free(s.srcs);
3969     free(s.src_vlans);
3970
3971     return true;
3972 }
3973 \f
3974 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
3975  *
3976  * This is deprecated.  It is only for compatibility with broken device drivers
3977  * in old versions of Linux that do not properly support VLANs when VLAN
3978  * devices are not used.  When broken device drivers are no longer in
3979  * widespread use, we will delete these interfaces. */
3980
3981 static struct ovsrec_port **recs;
3982 static size_t n_recs, allocated_recs;
3983
3984 /* Adds 'rec' to a list of recs that have to be destroyed when the VLAN
3985  * splinters are reconfigured. */
3986 static void
3987 register_rec(struct ovsrec_port *rec)
3988 {
3989     if (n_recs >= allocated_recs) {
3990         recs = x2nrealloc(recs, &allocated_recs, sizeof *recs);
3991     }
3992     recs[n_recs++] = rec;
3993 }
3994
3995 /* Frees all of the ports registered with register_reg(). */
3996 static void
3997 free_registered_recs(void)
3998 {
3999     size_t i;
4000
4001     for (i = 0; i < n_recs; i++) {
4002         struct ovsrec_port *port = recs[i];
4003         size_t j;
4004
4005         for (j = 0; j < port->n_interfaces; j++) {
4006             struct ovsrec_interface *iface = port->interfaces[j];
4007             free(iface->name);
4008             free(iface);
4009         }
4010
4011         smap_destroy(&port->other_config);
4012         free(port->interfaces);
4013         free(port->name);
4014         free(port->tag);
4015         free(port);
4016     }
4017     n_recs = 0;
4018 }
4019
4020 /* Returns true if VLAN splinters are enabled on 'iface_cfg', false
4021  * otherwise. */
4022 static bool
4023 vlan_splinters_is_enabled(const struct ovsrec_interface *iface_cfg)
4024 {
4025     return smap_get_bool(&iface_cfg->other_config, "enable-vlan-splinters",
4026                          false);
4027 }
4028
4029 /* Figures out the set of VLANs that are in use for the purpose of VLAN
4030  * splinters.
4031  *
4032  * If VLAN splinters are enabled on at least one interface and any VLANs are in
4033  * use, returns a 4096-bit bitmap with a 1-bit for each in-use VLAN (bits 0 and
4034  * 4095 will not be set).  The caller is responsible for freeing the bitmap,
4035  * with free().
4036  *
4037  * If VLANs splinters are not enabled on any interface or if no VLANs are in
4038  * use, returns NULL.
4039  *
4040  * Updates 'vlan_splinters_enabled_anywhere'. */
4041 static unsigned long int *
4042 collect_splinter_vlans(const struct ovsrec_open_vswitch *ovs_cfg)
4043 {
4044     unsigned long int *splinter_vlans;
4045     struct sset splinter_ifaces;
4046     const char *real_dev_name;
4047     struct shash *real_devs;
4048     struct shash_node *node;
4049     struct bridge *br;
4050     size_t i;
4051
4052     /* Free space allocated for synthesized ports and interfaces, since we're
4053      * in the process of reconstructing all of them. */
4054     free_registered_recs();
4055
4056     splinter_vlans = bitmap_allocate(4096);
4057     sset_init(&splinter_ifaces);
4058     vlan_splinters_enabled_anywhere = false;
4059     for (i = 0; i < ovs_cfg->n_bridges; i++) {
4060         struct ovsrec_bridge *br_cfg = ovs_cfg->bridges[i];
4061         size_t j;
4062
4063         for (j = 0; j < br_cfg->n_ports; j++) {
4064             struct ovsrec_port *port_cfg = br_cfg->ports[j];
4065             int k;
4066
4067             for (k = 0; k < port_cfg->n_interfaces; k++) {
4068                 struct ovsrec_interface *iface_cfg = port_cfg->interfaces[k];
4069
4070                 if (vlan_splinters_is_enabled(iface_cfg)) {
4071                     vlan_splinters_enabled_anywhere = true;
4072                     sset_add(&splinter_ifaces, iface_cfg->name);
4073                     vlan_bitmap_from_array__(port_cfg->trunks,
4074                                              port_cfg->n_trunks,
4075                                              splinter_vlans);
4076                 }
4077             }
4078
4079             if (port_cfg->tag && *port_cfg->tag > 0 && *port_cfg->tag < 4095) {
4080                 bitmap_set1(splinter_vlans, *port_cfg->tag);
4081             }
4082         }
4083     }
4084
4085     if (!vlan_splinters_enabled_anywhere) {
4086         free(splinter_vlans);
4087         sset_destroy(&splinter_ifaces);
4088         return NULL;
4089     }
4090
4091     HMAP_FOR_EACH (br, node, &all_bridges) {
4092         if (br->ofproto) {
4093             ofproto_get_vlan_usage(br->ofproto, splinter_vlans);
4094         }
4095     }
4096
4097     /* Don't allow VLANs 0 or 4095 to be splintered.  VLAN 0 should appear on
4098      * the real device.  VLAN 4095 is reserved and Linux doesn't allow a VLAN
4099      * device to be created for it. */
4100     bitmap_set0(splinter_vlans, 0);
4101     bitmap_set0(splinter_vlans, 4095);
4102
4103     /* Delete all VLAN devices that we don't need. */
4104     vlandev_refresh();
4105     real_devs = vlandev_get_real_devs();
4106     SHASH_FOR_EACH (node, real_devs) {
4107         const struct vlan_real_dev *real_dev = node->data;
4108         const struct vlan_dev *vlan_dev;
4109         bool real_dev_has_splinters;
4110
4111         real_dev_has_splinters = sset_contains(&splinter_ifaces,
4112                                                real_dev->name);
4113         HMAP_FOR_EACH (vlan_dev, hmap_node, &real_dev->vlan_devs) {
4114             if (!real_dev_has_splinters
4115                 || !bitmap_is_set(splinter_vlans, vlan_dev->vid)) {
4116                 struct netdev *netdev;
4117
4118                 if (!netdev_open(vlan_dev->name, "system", &netdev)) {
4119                     if (!netdev_get_in4(netdev, NULL, NULL) ||
4120                         !netdev_get_in6(netdev, NULL)) {
4121                         /* It has an IP address configured, so we don't own
4122                          * it.  Don't delete it. */
4123                     } else {
4124                         vlandev_del(vlan_dev->name);
4125                     }
4126                     netdev_close(netdev);
4127                 }
4128             }
4129
4130         }
4131     }
4132
4133     /* Add all VLAN devices that we need. */
4134     SSET_FOR_EACH (real_dev_name, &splinter_ifaces) {
4135         int vid;
4136
4137         BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
4138             if (!vlandev_get_name(real_dev_name, vid)) {
4139                 vlandev_add(real_dev_name, vid);
4140             }
4141         }
4142     }
4143
4144     vlandev_refresh();
4145
4146     sset_destroy(&splinter_ifaces);
4147
4148     if (bitmap_scan(splinter_vlans, 1, 0, 4096) >= 4096) {
4149         free(splinter_vlans);
4150         return NULL;
4151     }
4152     return splinter_vlans;
4153 }
4154
4155 /* Pushes the configure of VLAN splinter port 'port' (e.g. eth0.9) down to
4156  * ofproto.  */
4157 static void
4158 configure_splinter_port(struct port *port)
4159 {
4160     struct ofproto *ofproto = port->bridge->ofproto;
4161     ofp_port_t realdev_ofp_port;
4162     const char *realdev_name;
4163     struct iface *vlandev, *realdev;
4164
4165     ofproto_bundle_unregister(port->bridge->ofproto, port);
4166
4167     vlandev = CONTAINER_OF(list_front(&port->ifaces), struct iface,
4168                            port_elem);
4169
4170     realdev_name = smap_get(&port->cfg->other_config, "realdev");
4171     realdev = iface_lookup(port->bridge, realdev_name);
4172     realdev_ofp_port = realdev ? realdev->ofp_port : 0;
4173
4174     ofproto_port_set_realdev(ofproto, vlandev->ofp_port, realdev_ofp_port,
4175                              *port->cfg->tag);
4176 }
4177
4178 static struct ovsrec_port *
4179 synthesize_splinter_port(const char *real_dev_name,
4180                          const char *vlan_dev_name, int vid)
4181 {
4182     struct ovsrec_interface *iface;
4183     struct ovsrec_port *port;
4184
4185     iface = xmalloc(sizeof *iface);
4186     ovsrec_interface_init(iface);
4187     iface->name = xstrdup(vlan_dev_name);
4188     iface->type = "system";
4189
4190     port = xmalloc(sizeof *port);
4191     ovsrec_port_init(port);
4192     port->interfaces = xmemdup(&iface, sizeof iface);
4193     port->n_interfaces = 1;
4194     port->name = xstrdup(vlan_dev_name);
4195     port->vlan_mode = "splinter";
4196     port->tag = xmalloc(sizeof *port->tag);
4197     *port->tag = vid;
4198
4199     smap_add(&port->other_config, "realdev", real_dev_name);
4200
4201     register_rec(port);
4202     return port;
4203 }
4204
4205 /* For each interface with 'br' that has VLAN splinters enabled, adds a
4206  * corresponding ovsrec_port to 'ports' for each splinter VLAN marked with a
4207  * 1-bit in the 'splinter_vlans' bitmap. */
4208 static void
4209 add_vlan_splinter_ports(struct bridge *br,
4210                         const unsigned long int *splinter_vlans,
4211                         struct shash *ports)
4212 {
4213     size_t i;
4214
4215     /* We iterate through 'br->cfg->ports' instead of 'ports' here because
4216      * we're modifying 'ports'. */
4217     for (i = 0; i < br->cfg->n_ports; i++) {
4218         const char *name = br->cfg->ports[i]->name;
4219         struct ovsrec_port *port_cfg = shash_find_data(ports, name);
4220         size_t j;
4221
4222         for (j = 0; j < port_cfg->n_interfaces; j++) {
4223             struct ovsrec_interface *iface_cfg = port_cfg->interfaces[j];
4224
4225             if (vlan_splinters_is_enabled(iface_cfg)) {
4226                 const char *real_dev_name;
4227                 uint16_t vid;
4228
4229                 real_dev_name = iface_cfg->name;
4230                 BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
4231                     const char *vlan_dev_name;
4232
4233                     vlan_dev_name = vlandev_get_name(real_dev_name, vid);
4234                     if (vlan_dev_name
4235                         && !shash_find(ports, vlan_dev_name)) {
4236                         shash_add(ports, vlan_dev_name,
4237                                   synthesize_splinter_port(
4238                                       real_dev_name, vlan_dev_name, vid));
4239                     }
4240                 }
4241             }
4242         }
4243     }
4244 }
4245
4246 static void
4247 mirror_refresh_stats(struct mirror *m)
4248 {
4249     struct ofproto *ofproto = m->bridge->ofproto;
4250     uint64_t tx_packets, tx_bytes;
4251     char *keys[2];
4252     int64_t values[2];
4253     size_t stat_cnt = 0;
4254
4255     if (ofproto_mirror_get_stats(ofproto, m, &tx_packets, &tx_bytes)) {
4256         ovsrec_mirror_set_statistics(m->cfg, NULL, NULL, 0);
4257         return;
4258     }
4259
4260     if (tx_packets != UINT64_MAX) {
4261         keys[stat_cnt] = "tx_packets";
4262         values[stat_cnt] = tx_packets;
4263         stat_cnt++;
4264     }
4265     if (tx_bytes != UINT64_MAX) {
4266         keys[stat_cnt] = "tx_bytes";
4267         values[stat_cnt] = tx_bytes;
4268         stat_cnt++;
4269     }
4270
4271     ovsrec_mirror_set_statistics(m->cfg, keys, values, stat_cnt);
4272 }