vswitchd/bridge.c

   1 /* Copyright (c) 2008, 2009, 2010, 2011, 2012, 2013, 2014 Nicira, Inc.
   2  *
   3  * Licensed under the Apache License, Version 2.0 (the "License");
   4  * you may not use this file except in compliance with the License.
   5  * You may obtain a copy of the License at:
   6  *
   7  *     http://www.apache.org/licenses/LICENSE-2.0
   8  *
   9  * Unless required by applicable law or agreed to in writing, software
  10  * distributed under the License is distributed on an "AS IS" BASIS,
  11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  12  * See the License for the specific language governing permissions and
  13  * limitations under the License.
  14  */
  15
  16 #include <config.h>
  17 #include "bridge.h"
  18 #include <errno.h>
  19 #include <inttypes.h>
  20 #include <stdlib.h>
  21 #include "async-append.h"
  22 #include "bfd.h"
  23 #include "bitmap.h"
  24 #include "cfm.h"
  25 #include "connectivity.h"
  26 #include "coverage.h"
  27 #include "daemon.h"
  28 #include "dirs.h"
  29 #include "dynamic-string.h"
  30 #include "hash.h"
  31 #include "hmap.h"
  32 #include "hmapx.h"
  33 #include "jsonrpc.h"
  34 #include "lacp.h"
  35 #include "list.h"
  36 #include "mac-learning.h"
  37 #include "meta-flow.h"
  38 #include "netdev.h"
  39 #include "ofp-print.h"
  40 #include "ofp-util.h"
  41 #include "ofpbuf.h"
  42 #include "ofproto/bond.h"
  43 #include "ofproto/ofproto.h"
  44 #include "poll-loop.h"
  45 #include "seq.h"
  46 #include "sha1.h"
  47 #include "shash.h"
  48 #include "smap.h"
  49 #include "socket-util.h"
  50 #include "stream.h"
  51 #include "stream-ssl.h"
  52 #include "sset.h"
  53 #include "system-stats.h"
  54 #include "timeval.h"
  55 #include "util.h"
  56 #include "unixctl.h"
  57 #include "vlandev.h"
  58 #include "lib/vswitch-idl.h"
  59 #include "xenserver.h"
  60 #include "vlog.h"
  61 #include "sflow_api.h"
  62 #include "vlan-bitmap.h"
  63
  64 VLOG_DEFINE_THIS_MODULE(bridge);
  65
  66 COVERAGE_DEFINE(bridge_reconfigure);
  67
  68 struct iface {
  69     /* These members are always valid.
  70      *
  71      * They are immutable: they never change between iface_create() and
  72      * iface_destroy(). */
  73     struct list port_elem;      /* Element in struct port's "ifaces" list. */
  74     struct hmap_node name_node; /* In struct bridge's "iface_by_name" hmap. */
  75     struct hmap_node ofp_port_node; /* In struct bridge's "ifaces" hmap. */
  76     struct port *port;          /* Containing port. */
  77     char *name;                 /* Host network device name. */
  78     struct netdev *netdev;      /* Network device. */
  79     ofp_port_t ofp_port;        /* OpenFlow port number. */
  80     uint64_t change_seq;
  81
  82     /* These members are valid only within bridge_reconfigure(). */
  83     const char *type;           /* Usually same as cfg->type. */
  84     const struct ovsrec_interface *cfg;
  85 };
  86
  87 struct mirror {
  88     struct uuid uuid;           /* UUID of this "mirror" record in database. */
  89     struct hmap_node hmap_node; /* In struct bridge's "mirrors" hmap. */
  90     struct bridge *bridge;
  91     char *name;
  92     const struct ovsrec_mirror *cfg;
  93 };
  94
  95 struct port {
  96     struct hmap_node hmap_node; /* Element in struct bridge's "ports" hmap. */
  97     struct bridge *bridge;
  98     char *name;
  99
 100     const struct ovsrec_port *cfg;
 101
 102     /* An ordinary bridge port has 1 interface.
 103      * A bridge port for bonding has at least 2 interfaces. */
 104     struct list ifaces;         /* List of "struct iface"s. */
 105 };
 106
 107 struct bridge {
 108     struct hmap_node node;      /* In 'all_bridges'. */
 109     char *name;                 /* User-specified arbitrary name. */
 110     char *type;                 /* Datapath type. */
 111     uint8_t ea[ETH_ADDR_LEN];   /* Bridge Ethernet Address. */
 112     uint8_t default_ea[ETH_ADDR_LEN]; /* Default MAC. */
 113     const struct ovsrec_bridge *cfg;
 114
 115     /* OpenFlow switch processing. */
 116     struct ofproto *ofproto;    /* OpenFlow switch. */
 117
 118     /* Bridge ports. */
 119     struct hmap ports;          /* "struct port"s indexed by name. */
 120     struct hmap ifaces;         /* "struct iface"s indexed by ofp_port. */
 121     struct hmap iface_by_name;  /* "struct iface"s indexed by name. */
 122
 123     /* Port mirroring. */
 124     struct hmap mirrors;        /* "struct mirror" indexed by UUID. */
 125
 126     /* Used during reconfiguration. */
 127     struct shash wanted_ports;
 128
 129     /* Synthetic local port if necessary. */
 130     struct ovsrec_port synth_local_port;
 131     struct ovsrec_interface synth_local_iface;
 132     struct ovsrec_interface *synth_local_ifacep;
 133 };
 134
 135 /* All bridges, indexed by name. */
 136 static struct hmap all_bridges = HMAP_INITIALIZER(&all_bridges);
 137
 138 /* OVSDB IDL used to obtain configuration. */
 139 static struct ovsdb_idl *idl;
 140
 141 /* We want to complete daemonization, fully detaching from our parent process,
 142  * only after we have completed our initial configuration, committed our state
 143  * to the database, and received confirmation back from the database server
 144  * that it applied the commit.  This allows our parent process to know that,
 145  * post-detach, ephemeral fields such as datapath-id and ofport are very likely
 146  * to have already been filled in.  (It is only "very likely" rather than
 147  * certain because there is always a slim possibility that the transaction will
 148  * fail or that some other client has added new bridges, ports, etc. while
 149  * ovs-vswitchd was configuring using an old configuration.)
 150  *
 151  * We only need to do this once for our initial configuration at startup, so
 152  * 'initial_config_done' tracks whether we've already done it.  While we are
 153  * waiting for a response to our commit, 'daemonize_txn' tracks the transaction
 154  * itself and is otherwise NULL. */
 155 static bool initial_config_done;
 156 static struct ovsdb_idl_txn *daemonize_txn;
 157
 158 /* Most recently processed IDL sequence number. */
 159 static unsigned int idl_seqno;
 160
 161 /* Track changes to port connectivity. */
 162 static uint64_t connectivity_seqno = LLONG_MIN;
 163
 164 /* Status update to database.
 165  *
 166  * Some information in the database must be kept as up-to-date as possible to
 167  * allow controllers to respond rapidly to network outages.  Those status are
 168  * updated via the 'status_txn'.
 169  *
 170  * We use the global connectivity sequence number to detect the status change.
 171  * Also, to prevent the status update from sending too much to the database,
 172  * we check the return status of each update transaction and do not start new
 173  * update if the previous transaction status is 'TXN_INCOMPLETE'.
 174  *
 175  * 'status_txn' is NULL if there is no ongoing status update.
 176  *
 177  * If the previous database transaction was incomplete or failed (is not
 178  * 'TXN_SUCCESS' or 'TXN_UNCHANGED'), 'force_status_commit' is set to true.
 179  * This means that 'status_txn' must be committed next iteration of bridge_run()
 180  * even if the connectivity or netdev sequence numbers do not change.
 181  */
 182 static struct ovsdb_idl_txn *status_txn;
 183 static bool force_status_commit = true;
 184
 185 /* When the status update transaction returns 'TXN_INCOMPLETE', should register a
 186  * timeout in 'STATUS_CHECK_AGAIN_MSEC' to check again. */
 187 #define STATUS_CHECK_AGAIN_MSEC 100
 188
 189 /* Each time this timer expires, the bridge fetches interface and mirror
 190  * statistics and pushes them into the database. */
 191 static int stats_timer_interval;
 192 static long long int stats_timer = LLONG_MIN;
 193
 194 /* Current stats database transaction, NULL if there is no ongoing
 195  * transaction. */
 196 static struct ovsdb_idl_txn *stats_txn;
 197
 198 /* In some datapaths, creating and destroying OpenFlow ports can be extremely
 199  * expensive.  This can cause bridge_reconfigure() to take a long time during
 200  * which no other work can be done.  To deal with this problem, we limit port
 201  * adds and deletions to a window of OFP_PORT_ACTION_WINDOW milliseconds per
 202  * call to bridge_reconfigure().  If there is more work to do after the limit
 203  * is reached, 'need_reconfigure', is flagged and it's done on the next loop.
 204  * This allows the rest of the code to catch up on important things like
 205  * forwarding packets. */
 206 #define OFP_PORT_ACTION_WINDOW 10
 207
 208 static void add_del_bridges(const struct ovsrec_open_vswitch *);
 209 static void bridge_run__(void);
 210 static void bridge_create(const struct ovsrec_bridge *);
 211 static void bridge_destroy(struct bridge *);
 212 static struct bridge *bridge_lookup(const char *name);
 213 static unixctl_cb_func bridge_unixctl_dump_flows;
 214 static unixctl_cb_func bridge_unixctl_reconnect;
 215 static size_t bridge_get_controllers(const struct bridge *br,
 216                                      struct ovsrec_controller ***controllersp);
 217 static void bridge_collect_wanted_ports(struct bridge *,
 218                                         const unsigned long *splinter_vlans,
 219                                         struct shash *wanted_ports);
 220 static void bridge_delete_ofprotos(void);
 221 static void bridge_delete_or_reconfigure_ports(struct bridge *);
 222 static void bridge_del_ports(struct bridge *,
 223                              const struct shash *wanted_ports);
 224 static void bridge_add_ports(struct bridge *,
 225                              const struct shash *wanted_ports);
 226
 227 static void bridge_configure_datapath_id(struct bridge *);
 228 static void bridge_configure_netflow(struct bridge *);
 229 static void bridge_configure_forward_bpdu(struct bridge *);
 230 static void bridge_configure_mac_table(struct bridge *);
 231 static void bridge_configure_sflow(struct bridge *, int *sflow_bridge_number);
 232 static void bridge_configure_ipfix(struct bridge *);
 233 static void bridge_configure_stp(struct bridge *);
 234 static void bridge_configure_tables(struct bridge *);
 235 static void bridge_configure_dp_desc(struct bridge *);
 236 static void bridge_configure_remotes(struct bridge *,
 237                                      const struct sockaddr_in *managers,
 238                                      size_t n_managers);
 239 static void bridge_pick_local_hw_addr(struct bridge *,
 240                                       uint8_t ea[ETH_ADDR_LEN],
 241                                       struct iface **hw_addr_iface);
 242 static uint64_t bridge_pick_datapath_id(struct bridge *,
 243                                         const uint8_t bridge_ea[ETH_ADDR_LEN],
 244                                         struct iface *hw_addr_iface);
 245 static uint64_t dpid_from_hash(const void *, size_t nbytes);
 246 static bool bridge_has_bond_fake_iface(const struct bridge *,
 247                                        const char *name);
 248 static bool port_is_bond_fake_iface(const struct port *);
 249
 250 static unixctl_cb_func qos_unixctl_show;
 251
 252 static struct port *port_create(struct bridge *, const struct ovsrec_port *);
 253 static void port_del_ifaces(struct port *);
 254 static void port_destroy(struct port *);
 255 static struct port *port_lookup(const struct bridge *, const char *name);
 256 static void port_configure(struct port *);
 257 static struct lacp_settings *port_configure_lacp(struct port *,
 258                                                  struct lacp_settings *);
 259 static void port_configure_bond(struct port *, struct bond_settings *);
 260 static bool port_is_synthetic(const struct port *);
 261
 262 static void reconfigure_system_stats(const struct ovsrec_open_vswitch *);
 263 static void run_system_stats(void);
 264
 265 static void bridge_configure_mirrors(struct bridge *);
 266 static struct mirror *mirror_create(struct bridge *,
 267                                     const struct ovsrec_mirror *);
 268 static void mirror_destroy(struct mirror *);
 269 static bool mirror_configure(struct mirror *);
 270 static void mirror_refresh_stats(struct mirror *);
 271
 272 static void iface_configure_lacp(struct iface *, struct lacp_slave_settings *);
 273 static bool iface_create(struct bridge *, const struct ovsrec_interface *,
 274                          const struct ovsrec_port *);
 275 static bool iface_is_internal(const struct ovsrec_interface *iface,
 276                               const struct ovsrec_bridge *br);
 277 static const char *iface_get_type(const struct ovsrec_interface *,
 278                                   const struct ovsrec_bridge *);
 279 static void iface_destroy(struct iface *);
 280 static void iface_destroy__(struct iface *);
 281 static struct iface *iface_lookup(const struct bridge *, const char *name);
 282 static struct iface *iface_find(const char *name);
 283 static struct iface *iface_from_ofp_port(const struct bridge *,
 284                                          ofp_port_t ofp_port);
 285 static void iface_set_mac(const struct bridge *, const struct port *, struct iface *);
 286 static void iface_set_ofport(const struct ovsrec_interface *, ofp_port_t ofport);
 287 static void iface_clear_db_record(const struct ovsrec_interface *if_cfg);
 288 static void iface_configure_qos(struct iface *, const struct ovsrec_qos *);
 289 static void iface_configure_cfm(struct iface *);
 290 static void iface_refresh_cfm_stats(struct iface *);
 291 static void iface_refresh_stats(struct iface *);
 292 static void iface_refresh_netdev_status(struct iface *);
 293 static void iface_refresh_ofproto_status(struct iface *);
 294 static bool iface_is_synthetic(const struct iface *);
 295 static ofp_port_t iface_get_requested_ofp_port(
 296     const struct ovsrec_interface *);
 297 static ofp_port_t iface_pick_ofport(const struct ovsrec_interface *);
 298
 299 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
 300  *
 301  * This is deprecated.  It is only for compatibility with broken device drivers
 302  * in old versions of Linux that do not properly support VLANs when VLAN
 303  * devices are not used.  When broken device drivers are no longer in
 304  * widespread use, we will delete these interfaces. */
 305
 306 /* True if VLAN splinters are enabled on any interface, false otherwise.*/
 307 static bool vlan_splinters_enabled_anywhere;
 308
 309 static bool vlan_splinters_is_enabled(const struct ovsrec_interface *);
 310 static unsigned long int *collect_splinter_vlans(
 311     const struct ovsrec_open_vswitch *);
 312 static void configure_splinter_port(struct port *);
 313 static void add_vlan_splinter_ports(struct bridge *,
 314                                     const unsigned long int *splinter_vlans,
 315                                     struct shash *ports);
 316
 317 static void
 318 bridge_init_ofproto(const struct ovsrec_open_vswitch *cfg)
 319 {
 320     struct shash iface_hints;
 321     static bool initialized = false;
 322     int i;
 323
 324     if (initialized) {
 325         return;
 326     }
 327
 328     shash_init(&iface_hints);
 329
 330     if (cfg) {
 331         for (i = 0; i < cfg->n_bridges; i++) {
 332             const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
 333             int j;
 334
 335             for (j = 0; j < br_cfg->n_ports; j++) {
 336                 struct ovsrec_port *port_cfg = br_cfg->ports[j];
 337                 int k;
 338
 339                 for (k = 0; k < port_cfg->n_interfaces; k++) {
 340                     struct ovsrec_interface *if_cfg = port_cfg->interfaces[k];
 341                     struct iface_hint *iface_hint;
 342
 343                     iface_hint = xmalloc(sizeof *iface_hint);
 344                     iface_hint->br_name = br_cfg->name;
 345                     iface_hint->br_type = br_cfg->datapath_type;
 346                     iface_hint->ofp_port = iface_pick_ofport(if_cfg);
 347
 348                     shash_add(&iface_hints, if_cfg->name, iface_hint);
 349                 }
 350             }
 351         }
 352     }
 353
 354     ofproto_init(&iface_hints);
 355
 356     shash_destroy_free_data(&iface_hints);
 357     initialized = true;
 358 }
 359 \f
 360 /* Public functions. */
 361
 362 /* Initializes the bridge module, configuring it to obtain its configuration
 363  * from an OVSDB server accessed over 'remote', which should be a string in a
 364  * form acceptable to ovsdb_idl_create(). */
 365 void
 366 bridge_init(const char *remote)
 367 {
 368     /* Create connection to database. */
 369     idl = ovsdb_idl_create(remote, &ovsrec_idl_class, true, true);
 370     idl_seqno = ovsdb_idl_get_seqno(idl);
 371     ovsdb_idl_set_lock(idl, "ovs_vswitchd");
 372     ovsdb_idl_verify_write_only(idl);
 373
 374     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_cur_cfg);
 375     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_statistics);
 376     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_external_ids);
 377     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_ovs_version);
 378     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_db_version);
 379     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_type);
 380     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_version);
 381
 382     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_datapath_id);
 383     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_status);
 384     ovsdb_idl_omit(idl, &ovsrec_bridge_col_external_ids);
 385
 386     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_status);
 387     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_statistics);
 388     ovsdb_idl_omit(idl, &ovsrec_port_col_external_ids);
 389
 390     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_admin_state);
 391     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_duplex);
 392     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_speed);
 393     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_state);
 394     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_resets);
 395     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_mac_in_use);
 396     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_ifindex);
 397     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_mtu);
 398     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_ofport);
 399     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_statistics);
 400     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_status);
 401     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault);
 402     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault_status);
 403     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_remote_mpids);
 404     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_flap_count);
 405     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_health);
 406     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_remote_opstate);
 407     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_bfd_status);
 408     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_lacp_current);
 409     ovsdb_idl_omit(idl, &ovsrec_interface_col_external_ids);
 410
 411     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_is_connected);
 412     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_role);
 413     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_status);
 414     ovsdb_idl_omit(idl, &ovsrec_controller_col_external_ids);
 415
 416     ovsdb_idl_omit(idl, &ovsrec_qos_col_external_ids);
 417
 418     ovsdb_idl_omit(idl, &ovsrec_queue_col_external_ids);
 419
 420     ovsdb_idl_omit(idl, &ovsrec_mirror_col_external_ids);
 421     ovsdb_idl_omit_alert(idl, &ovsrec_mirror_col_statistics);
 422
 423     ovsdb_idl_omit(idl, &ovsrec_netflow_col_external_ids);
 424     ovsdb_idl_omit(idl, &ovsrec_sflow_col_external_ids);
 425     ovsdb_idl_omit(idl, &ovsrec_ipfix_col_external_ids);
 426     ovsdb_idl_omit(idl, &ovsrec_flow_sample_collector_set_col_external_ids);
 427
 428     ovsdb_idl_omit(idl, &ovsrec_manager_col_external_ids);
 429     ovsdb_idl_omit(idl, &ovsrec_manager_col_inactivity_probe);
 430     ovsdb_idl_omit(idl, &ovsrec_manager_col_is_connected);
 431     ovsdb_idl_omit(idl, &ovsrec_manager_col_max_backoff);
 432     ovsdb_idl_omit(idl, &ovsrec_manager_col_status);
 433
 434     ovsdb_idl_omit(idl, &ovsrec_ssl_col_external_ids);
 435
 436     /* Register unixctl commands. */
 437     unixctl_command_register("qos/show", "interface", 1, 1,
 438                              qos_unixctl_show, NULL);
 439     unixctl_command_register("bridge/dump-flows", "bridge", 1, 1,
 440                              bridge_unixctl_dump_flows, NULL);
 441     unixctl_command_register("bridge/reconnect", "[bridge]", 0, 1,
 442                              bridge_unixctl_reconnect, NULL);
 443     lacp_init();
 444     bond_init();
 445     cfm_init();
 446     stp_init();
 447 }
 448
 449 void
 450 bridge_exit(void)
 451 {
 452     struct bridge *br, *next_br;
 453
 454     HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
 455         bridge_destroy(br);
 456     }
 457     ovsdb_idl_destroy(idl);
 458 }
 459
 460 /* Looks at the list of managers in 'ovs_cfg' and extracts their remote IP
 461  * addresses and ports into '*managersp' and '*n_managersp'.  The caller is
 462  * responsible for freeing '*managersp' (with free()).
 463  *
 464  * You may be asking yourself "why does ovs-vswitchd care?", because
 465  * ovsdb-server is responsible for connecting to the managers, and ovs-vswitchd
 466  * should not be and in fact is not directly involved in that.  But
 467  * ovs-vswitchd needs to make sure that ovsdb-server can reach the managers, so
 468  * it has to tell in-band control where the managers are to enable that.
 469  * (Thus, only managers connected in-band are collected.)
 470  */
 471 static void
 472 collect_in_band_managers(const struct ovsrec_open_vswitch *ovs_cfg,
 473                          struct sockaddr_in **managersp, size_t *n_managersp)
 474 {
 475     struct sockaddr_in *managers = NULL;
 476     size_t n_managers = 0;
 477     struct sset targets;
 478     size_t i;
 479
 480     /* Collect all of the potential targets from the "targets" columns of the
 481      * rows pointed to by "manager_options", excluding any that are
 482      * out-of-band. */
 483     sset_init(&targets);
 484     for (i = 0; i < ovs_cfg->n_manager_options; i++) {
 485         struct ovsrec_manager *m = ovs_cfg->manager_options[i];
 486
 487         if (m->connection_mode && !strcmp(m->connection_mode, "out-of-band")) {
 488             sset_find_and_delete(&targets, m->target);
 489         } else {
 490             sset_add(&targets, m->target);
 491         }
 492     }
 493
 494     /* Now extract the targets' IP addresses. */
 495     if (!sset_is_empty(&targets)) {
 496         const char *target;
 497
 498         managers = xmalloc(sset_count(&targets) * sizeof *managers);
 499         SSET_FOR_EACH (target, &targets) {
 500             struct sockaddr_storage ss;
 501
 502             if (stream_parse_target_with_default_port(target, OVSDB_OLD_PORT,
 503                                                       &ss)
 504                 && ss.ss_family == AF_INET) {
 505                 managers[n_managers++] = *(struct sockaddr_in *) &ss;
 506             }
 507         }
 508     }
 509     sset_destroy(&targets);
 510
 511     *managersp = managers;
 512     *n_managersp = n_managers;
 513 }
 514
 515 static void
 516 bridge_reconfigure(const struct ovsrec_open_vswitch *ovs_cfg)
 517 {
 518     unsigned long int *splinter_vlans;
 519     struct sockaddr_in *managers;
 520     struct bridge *br, *next;
 521     int sflow_bridge_number;
 522     size_t n_managers;
 523
 524     COVERAGE_INC(bridge_reconfigure);
 525
 526     ofproto_set_flow_limit(smap_get_int(&ovs_cfg->other_config, "flow-limit",
 527                                         OFPROTO_FLOW_LIMIT_DEFAULT));
 528     ofproto_set_max_idle(smap_get_int(&ovs_cfg->other_config, "max-idle",
 529                                       OFPROTO_MAX_IDLE_DEFAULT));
 530
 531     ofproto_set_threads(
 532         smap_get_int(&ovs_cfg->other_config, "n-handler-threads", 0),
 533         smap_get_int(&ovs_cfg->other_config, "n-revalidator-threads", 0));
 534
 535     /* Destroy "struct bridge"s, "struct port"s, and "struct iface"s according
 536      * to 'ovs_cfg', with only very minimal configuration otherwise.
 537      *
 538      * This is mostly an update to bridge data structures. Nothing is pushed
 539      * down to ofproto or lower layers. */
 540     add_del_bridges(ovs_cfg);
 541     splinter_vlans = collect_splinter_vlans(ovs_cfg);
 542     HMAP_FOR_EACH (br, node, &all_bridges) {
 543         bridge_collect_wanted_ports(br, splinter_vlans, &br->wanted_ports);
 544         bridge_del_ports(br, &br->wanted_ports);
 545     }
 546     free(splinter_vlans);
 547
 548     /* Start pushing configuration changes down to the ofproto layer:
 549      *
 550      *   - Delete ofprotos that are no longer configured.
 551      *
 552      *   - Delete ports that are no longer configured.
 553      *
 554      *   - Reconfigure existing ports to their desired configurations, or
 555      *     delete them if not possible.
 556      *
 557      * We have to do all the deletions before we can do any additions, because
 558      * the ports to be added might require resources that will be freed up by
 559      * deletions (they might especially overlap in name). */
 560     bridge_delete_ofprotos();
 561     HMAP_FOR_EACH (br, node, &all_bridges) {
 562         if (br->ofproto) {
 563             bridge_delete_or_reconfigure_ports(br);
 564         }
 565     }
 566
 567     /* Finish pushing configuration changes to the ofproto layer:
 568      *
 569      *     - Create ofprotos that are missing.
 570      *
 571      *     - Add ports that are missing. */
 572     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
 573         if (!br->ofproto) {
 574             int error;
 575
 576             error = ofproto_create(br->name, br->type, &br->ofproto);
 577             if (error) {
 578                 VLOG_ERR("failed to create bridge %s: %s", br->name,
 579                          ovs_strerror(error));
 580                 shash_destroy(&br->wanted_ports);
 581                 bridge_destroy(br);
 582             }
 583         }
 584     }
 585     HMAP_FOR_EACH (br, node, &all_bridges) {
 586         bridge_add_ports(br, &br->wanted_ports);
 587         shash_destroy(&br->wanted_ports);
 588     }
 589
 590     reconfigure_system_stats(ovs_cfg);
 591
 592     /* Complete the configuration. */
 593     sflow_bridge_number = 0;
 594     collect_in_band_managers(ovs_cfg, &managers, &n_managers);
 595     HMAP_FOR_EACH (br, node, &all_bridges) {
 596         struct port *port;
 597
 598         /* We need the datapath ID early to allow LACP ports to use it as the
 599          * default system ID. */
 600         bridge_configure_datapath_id(br);
 601
 602         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
 603             struct iface *iface;
 604
 605             port_configure(port);
 606
 607             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 608                 iface_set_ofport(iface->cfg, iface->ofp_port);
 609                 iface_configure_cfm(iface);
 610                 iface_configure_qos(iface, port->cfg->qos);
 611                 iface_set_mac(br, port, iface);
 612                 ofproto_port_set_bfd(br->ofproto, iface->ofp_port,
 613                                      &iface->cfg->bfd);
 614             }
 615         }
 616         bridge_configure_mirrors(br);
 617         bridge_configure_forward_bpdu(br);
 618         bridge_configure_mac_table(br);
 619         bridge_configure_remotes(br, managers, n_managers);
 620         bridge_configure_netflow(br);
 621         bridge_configure_sflow(br, &sflow_bridge_number);
 622         bridge_configure_ipfix(br);
 623         bridge_configure_stp(br);
 624         bridge_configure_tables(br);
 625         bridge_configure_dp_desc(br);
 626     }
 627     free(managers);
 628
 629     /* The ofproto-dpif provider does some final reconfiguration in its
 630      * ->type_run() function.  We have to call it before notifying the database
 631      * client that reconfiguration is complete, otherwise there is a very
 632      * narrow race window in which e.g. ofproto/trace will not recognize the
 633      * new configuration (sometimes this causes unit test failures). */
 634     bridge_run__();
 635 }
 636
 637 /* Delete ofprotos which aren't configured or have the wrong type.  Create
 638  * ofprotos which don't exist but need to. */
 639 static void
 640 bridge_delete_ofprotos(void)
 641 {
 642     struct bridge *br;
 643     struct sset names;
 644     struct sset types;
 645     const char *type;
 646
 647     /* Delete ofprotos with no bridge or with the wrong type. */
 648     sset_init(&names);
 649     sset_init(&types);
 650     ofproto_enumerate_types(&types);
 651     SSET_FOR_EACH (type, &types) {
 652         const char *name;
 653
 654         ofproto_enumerate_names(type, &names);
 655         SSET_FOR_EACH (name, &names) {
 656             br = bridge_lookup(name);
 657             if (!br || strcmp(type, br->type)) {
 658                 ofproto_delete(name, type);
 659             }
 660         }
 661     }
 662     sset_destroy(&names);
 663     sset_destroy(&types);
 664 }
 665
 666 static ofp_port_t *
 667 add_ofp_port(ofp_port_t port, ofp_port_t *ports, size_t *n, size_t *allocated)
 668 {
 669     if (*n >= *allocated) {
 670         ports = x2nrealloc(ports, allocated, sizeof *ports);
 671     }
 672     ports[(*n)++] = port;
 673     return ports;
 674 }
 675
 676 static void
 677 bridge_delete_or_reconfigure_ports(struct bridge *br)
 678 {
 679     struct ofproto_port ofproto_port;
 680     struct ofproto_port_dump dump;
 681
 682     struct sset ofproto_ports;
 683     struct port *port, *port_next;
 684
 685     /* List of "ofp_port"s to delete.  We make a list instead of deleting them
 686      * right away because ofproto implementations aren't necessarily able to
 687      * iterate through a changing list of ports in an entirely robust way. */
 688     ofp_port_t *del;
 689     size_t n, allocated;
 690     size_t i;
 691
 692     del = NULL;
 693     n = allocated = 0;
 694     sset_init(&ofproto_ports);
 695
 696     /* Main task: Iterate over the ports in 'br->ofproto' and remove the ports
 697      * that are not configured in the database.  (This commonly happens when
 698      * ports have been deleted, e.g. with "ovs-vsctl del-port".)
 699      *
 700      * Side tasks: Reconfigure the ports that are still in 'br'.  Delete ports
 701      * that have the wrong OpenFlow port number (and arrange to add them back
 702      * with the correct OpenFlow port number). */
 703     OFPROTO_PORT_FOR_EACH (&ofproto_port, &dump, br->ofproto) {
 704         ofp_port_t requested_ofp_port;
 705         struct iface *iface;
 706
 707         sset_add(&ofproto_ports, ofproto_port.name);
 708
 709         iface = iface_lookup(br, ofproto_port.name);
 710         if (!iface) {
 711             /* No such iface is configured, so we should delete this
 712              * ofproto_port.
 713              *
 714              * As a corner case exception, keep the port if it's a bond fake
 715              * interface. */
 716             if (bridge_has_bond_fake_iface(br, ofproto_port.name)
 717                 && !strcmp(ofproto_port.type, "internal")) {
 718                 continue;
 719             }
 720             goto delete;
 721         }
 722
 723         if (strcmp(ofproto_port.type, iface->type)
 724             || netdev_set_config(iface->netdev, &iface->cfg->options)) {
 725             /* The interface is the wrong type or can't be configured.
 726              * Delete it. */
 727             goto delete;
 728         }
 729
 730         /* If the requested OpenFlow port for 'iface' changed, and it's not
 731          * already the correct port, then we might want to temporarily delete
 732          * this interface, so we can add it back again with the new OpenFlow
 733          * port number. */
 734         requested_ofp_port = iface_get_requested_ofp_port(iface->cfg);
 735         if (iface->ofp_port != OFPP_LOCAL &&
 736             requested_ofp_port != OFPP_NONE &&
 737             requested_ofp_port != iface->ofp_port) {
 738             ofp_port_t victim_request;
 739             struct iface *victim;
 740
 741             /* Check for an existing OpenFlow port currently occupying
 742              * 'iface''s requested port number.  If there isn't one, then
 743              * delete this port.  Otherwise we need to consider further. */
 744             victim = iface_from_ofp_port(br, requested_ofp_port);
 745             if (!victim) {
 746                 goto delete;
 747             }
 748
 749             /* 'victim' is a port currently using 'iface''s requested port
 750              * number.  Unless 'victim' specifically requested that port
 751              * number, too, then we can delete both 'iface' and 'victim'
 752              * temporarily.  (We'll add both of them back again later with new
 753              * OpenFlow port numbers.)
 754              *
 755              * If 'victim' did request port number 'requested_ofp_port', just
 756              * like 'iface', then that's a configuration inconsistency that we
 757              * can't resolve.  We might as well let it keep its current port
 758              * number. */
 759             victim_request = iface_get_requested_ofp_port(victim->cfg);
 760             if (victim_request != requested_ofp_port) {
 761                 del = add_ofp_port(victim->ofp_port, del, &n, &allocated);
 762                 iface_destroy(victim);
 763                 goto delete;
 764             }
 765         }
 766
 767         /* Keep it. */
 768         continue;
 769
 770     delete:
 771         iface_destroy(iface);
 772         del = add_ofp_port(ofproto_port.ofp_port, del, &n, &allocated);
 773     }
 774     for (i = 0; i < n; i++) {
 775         ofproto_port_del(br->ofproto, del[i]);
 776     }
 777     free(del);
 778
 779     /* Iterate over this module's idea of interfaces in 'br'.  Remove any ports
 780      * that we didn't see when we iterated through the datapath, i.e. ports
 781      * that disappeared underneath use.  This is an unusual situation, but it
 782      * can happen in some cases:
 783      *
 784      *     - An admin runs a command like "ovs-dpctl del-port" (which is a bad
 785      *       idea but could happen).
 786      *
 787      *     - The port represented a device that disappeared, e.g. a tuntap
 788      *       device destroyed via "tunctl -d", a physical Ethernet device
 789      *       whose module was just unloaded via "rmmod", or a virtual NIC for a
 790      *       VM whose VM was just terminated. */
 791     HMAP_FOR_EACH_SAFE (port, port_next, hmap_node, &br->ports) {
 792         struct iface *iface, *iface_next;
 793
 794         LIST_FOR_EACH_SAFE (iface, iface_next, port_elem, &port->ifaces) {
 795             if (!sset_contains(&ofproto_ports, iface->name)) {
 796                 iface_destroy__(iface);
 797             }
 798         }
 799
 800         if (list_is_empty(&port->ifaces)) {
 801             port_destroy(port);
 802         }
 803     }
 804     sset_destroy(&ofproto_ports);
 805 }
 806
 807 static void
 808 bridge_add_ports__(struct bridge *br, const struct shash *wanted_ports,
 809                    bool with_requested_port)
 810 {
 811     struct shash_node *port_node;
 812
 813     SHASH_FOR_EACH (port_node, wanted_ports) {
 814         const struct ovsrec_port *port_cfg = port_node->data;
 815         size_t i;
 816
 817         for (i = 0; i < port_cfg->n_interfaces; i++) {
 818             const struct ovsrec_interface *iface_cfg = port_cfg->interfaces[i];
 819             ofp_port_t requested_ofp_port;
 820
 821             requested_ofp_port = iface_get_requested_ofp_port(iface_cfg);
 822             if ((requested_ofp_port != OFPP_NONE) == with_requested_port) {
 823                 struct iface *iface = iface_lookup(br, iface_cfg->name);
 824
 825                 if (!iface) {
 826                     iface_create(br, iface_cfg, port_cfg);
 827                 }
 828             }
 829         }
 830     }
 831 }
 832
 833 static void
 834 bridge_add_ports(struct bridge *br, const struct shash *wanted_ports)
 835 {
 836     /* First add interfaces that request a particular port number. */
 837     bridge_add_ports__(br, wanted_ports, true);
 838
 839     /* Then add interfaces that want automatic port number assignment.
 840      * We add these afterward to avoid accidentally taking a specifically
 841      * requested port number. */
 842     bridge_add_ports__(br, wanted_ports, false);
 843 }
 844
 845 static void
 846 port_configure(struct port *port)
 847 {
 848     const struct ovsrec_port *cfg = port->cfg;
 849     struct bond_settings bond_settings;
 850     struct lacp_settings lacp_settings;
 851     struct ofproto_bundle_settings s;
 852     struct iface *iface;
 853
 854     if (cfg->vlan_mode && !strcmp(cfg->vlan_mode, "splinter")) {
 855         configure_splinter_port(port);
 856         return;
 857     }
 858
 859     /* Get name. */
 860     s.name = port->name;
 861
 862     /* Get slaves. */
 863     s.n_slaves = 0;
 864     s.slaves = xmalloc(list_size(&port->ifaces) * sizeof *s.slaves);
 865     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 866         s.slaves[s.n_slaves++] = iface->ofp_port;
 867     }
 868
 869     /* Get VLAN tag. */
 870     s.vlan = -1;
 871     if (cfg->tag && *cfg->tag >= 0 && *cfg->tag <= 4095) {
 872         s.vlan = *cfg->tag;
 873     }
 874
 875     /* Get VLAN trunks. */
 876     s.trunks = NULL;
 877     if (cfg->n_trunks) {
 878         s.trunks = vlan_bitmap_from_array(cfg->trunks, cfg->n_trunks);
 879     }
 880
 881     /* Get VLAN mode. */
 882     if (cfg->vlan_mode) {
 883         if (!strcmp(cfg->vlan_mode, "access")) {
 884             s.vlan_mode = PORT_VLAN_ACCESS;
 885         } else if (!strcmp(cfg->vlan_mode, "trunk")) {
 886             s.vlan_mode = PORT_VLAN_TRUNK;
 887         } else if (!strcmp(cfg->vlan_mode, "native-tagged")) {
 888             s.vlan_mode = PORT_VLAN_NATIVE_TAGGED;
 889         } else if (!strcmp(cfg->vlan_mode, "native-untagged")) {
 890             s.vlan_mode = PORT_VLAN_NATIVE_UNTAGGED;
 891         } else {
 892             /* This "can't happen" because ovsdb-server should prevent it. */
 893             VLOG_WARN("port %s: unknown VLAN mode %s, falling "
 894                       "back to trunk mode", port->name, cfg->vlan_mode);
 895             s.vlan_mode = PORT_VLAN_TRUNK;
 896         }
 897     } else {
 898         if (s.vlan >= 0) {
 899             s.vlan_mode = PORT_VLAN_ACCESS;
 900             if (cfg->n_trunks) {
 901                 VLOG_WARN("port %s: ignoring trunks in favor of implicit vlan",
 902                           port->name);
 903             }
 904         } else {
 905             s.vlan_mode = PORT_VLAN_TRUNK;
 906         }
 907     }
 908     s.use_priority_tags = smap_get_bool(&cfg->other_config, "priority-tags",
 909                                         false);
 910
 911     /* Get LACP settings. */
 912     s.lacp = port_configure_lacp(port, &lacp_settings);
 913     if (s.lacp) {
 914         size_t i = 0;
 915
 916         s.lacp_slaves = xmalloc(s.n_slaves * sizeof *s.lacp_slaves);
 917         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 918             iface_configure_lacp(iface, &s.lacp_slaves[i++]);
 919         }
 920     } else {
 921         s.lacp_slaves = NULL;
 922     }
 923
 924     /* Get bond settings. */
 925     if (s.n_slaves > 1) {
 926         s.bond = &bond_settings;
 927         port_configure_bond(port, &bond_settings);
 928     } else {
 929         s.bond = NULL;
 930         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 931             netdev_set_miimon_interval(iface->netdev, 0);
 932         }
 933     }
 934
 935     /* Register. */
 936     ofproto_bundle_register(port->bridge->ofproto, port, &s);
 937
 938     /* Clean up. */
 939     free(s.slaves);
 940     free(s.trunks);
 941     free(s.lacp_slaves);
 942 }
 943
 944 /* Pick local port hardware address and datapath ID for 'br'. */
 945 static void
 946 bridge_configure_datapath_id(struct bridge *br)
 947 {
 948     uint8_t ea[ETH_ADDR_LEN];
 949     uint64_t dpid;
 950     struct iface *local_iface;
 951     struct iface *hw_addr_iface;
 952     char *dpid_string;
 953
 954     bridge_pick_local_hw_addr(br, ea, &hw_addr_iface);
 955     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
 956     if (local_iface) {
 957         int error = netdev_set_etheraddr(local_iface->netdev, ea);
 958         if (error) {
 959             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
 960             VLOG_ERR_RL(&rl, "bridge %s: failed to set bridge "
 961                         "Ethernet address: %s",
 962                         br->name, ovs_strerror(error));
 963         }
 964     }
 965     memcpy(br->ea, ea, ETH_ADDR_LEN);
 966
 967     dpid = bridge_pick_datapath_id(br, ea, hw_addr_iface);
 968     if (dpid != ofproto_get_datapath_id(br->ofproto)) {
 969         VLOG_INFO("bridge %s: using datapath ID %016"PRIx64, br->name, dpid);
 970         ofproto_set_datapath_id(br->ofproto, dpid);
 971     }
 972
 973     dpid_string = xasprintf("%016"PRIx64, dpid);
 974     ovsrec_bridge_set_datapath_id(br->cfg, dpid_string);
 975     free(dpid_string);
 976 }
 977
 978 /* Returns a bitmap of "enum ofputil_protocol"s that are allowed for use with
 979  * 'br'. */
 980 static uint32_t
 981 bridge_get_allowed_versions(struct bridge *br)
 982 {
 983     if (!br->cfg->n_protocols)
 984         return 0;
 985
 986     return ofputil_versions_from_strings(br->cfg->protocols,
 987                                          br->cfg->n_protocols);
 988 }
 989
 990 /* Set NetFlow configuration on 'br'. */
 991 static void
 992 bridge_configure_netflow(struct bridge *br)
 993 {
 994     struct ovsrec_netflow *cfg = br->cfg->netflow;
 995     struct netflow_options opts;
 996
 997     if (!cfg) {
 998         ofproto_set_netflow(br->ofproto, NULL);
 999         return;
1000     }
1001
1002     memset(&opts, 0, sizeof opts);
1003
1004     /* Get default NetFlow configuration from datapath.
1005      * Apply overrides from 'cfg'. */
1006     ofproto_get_netflow_ids(br->ofproto, &opts.engine_type, &opts.engine_id);
1007     if (cfg->engine_type) {
1008         opts.engine_type = *cfg->engine_type;
1009     }
1010     if (cfg->engine_id) {
1011         opts.engine_id = *cfg->engine_id;
1012     }
1013
1014     /* Configure active timeout interval. */
1015     opts.active_timeout = cfg->active_timeout;
1016     if (!opts.active_timeout) {
1017         opts.active_timeout = -1;
1018     } else if (opts.active_timeout < 0) {
1019         VLOG_WARN("bridge %s: active timeout interval set to negative "
1020                   "value, using default instead (%d seconds)", br->name,
1021                   NF_ACTIVE_TIMEOUT_DEFAULT);
1022         opts.active_timeout = -1;
1023     }
1024
1025     /* Add engine ID to interface number to disambiguate bridgs? */
1026     opts.add_id_to_iface = cfg->add_id_to_interface;
1027     if (opts.add_id_to_iface) {
1028         if (opts.engine_id > 0x7f) {
1029             VLOG_WARN("bridge %s: NetFlow port mangling may conflict with "
1030                       "another vswitch, choose an engine id less than 128",
1031                       br->name);
1032         }
1033         if (hmap_count(&br->ports) > 508) {
1034             VLOG_WARN("bridge %s: NetFlow port mangling will conflict with "
1035                       "another port when more than 508 ports are used",
1036                       br->name);
1037         }
1038     }
1039
1040     /* Collectors. */
1041     sset_init(&opts.collectors);
1042     sset_add_array(&opts.collectors, cfg->targets, cfg->n_targets);
1043
1044     /* Configure. */
1045     if (ofproto_set_netflow(br->ofproto, &opts)) {
1046         VLOG_ERR("bridge %s: problem setting netflow collectors", br->name);
1047     }
1048     sset_destroy(&opts.collectors);
1049 }
1050
1051 /* Set sFlow configuration on 'br'. */
1052 static void
1053 bridge_configure_sflow(struct bridge *br, int *sflow_bridge_number)
1054 {
1055     const struct ovsrec_sflow *cfg = br->cfg->sflow;
1056     struct ovsrec_controller **controllers;
1057     struct ofproto_sflow_options oso;
1058     size_t n_controllers;
1059     size_t i;
1060
1061     if (!cfg) {
1062         ofproto_set_sflow(br->ofproto, NULL);
1063         return;
1064     }
1065
1066     memset(&oso, 0, sizeof oso);
1067
1068     sset_init(&oso.targets);
1069     sset_add_array(&oso.targets, cfg->targets, cfg->n_targets);
1070
1071     oso.sampling_rate = SFL_DEFAULT_SAMPLING_RATE;
1072     if (cfg->sampling) {
1073         oso.sampling_rate = *cfg->sampling;
1074     }
1075
1076     oso.polling_interval = SFL_DEFAULT_POLLING_INTERVAL;
1077     if (cfg->polling) {
1078         oso.polling_interval = *cfg->polling;
1079     }
1080
1081     oso.header_len = SFL_DEFAULT_HEADER_SIZE;
1082     if (cfg->header) {
1083         oso.header_len = *cfg->header;
1084     }
1085
1086     oso.sub_id = (*sflow_bridge_number)++;
1087     oso.agent_device = cfg->agent;
1088
1089     oso.control_ip = NULL;
1090     n_controllers = bridge_get_controllers(br, &controllers);
1091     for (i = 0; i < n_controllers; i++) {
1092         if (controllers[i]->local_ip) {
1093             oso.control_ip = controllers[i]->local_ip;
1094             break;
1095         }
1096     }
1097     ofproto_set_sflow(br->ofproto, &oso);
1098
1099     sset_destroy(&oso.targets);
1100 }
1101
1102 /* Returns whether a IPFIX row is valid. */
1103 static bool
1104 ovsrec_ipfix_is_valid(const struct ovsrec_ipfix *ipfix)
1105 {
1106     return ipfix && ipfix->n_targets > 0;
1107 }
1108
1109 /* Returns whether a Flow_Sample_Collector_Set row is valid. */
1110 static bool
1111 ovsrec_fscs_is_valid(const struct ovsrec_flow_sample_collector_set *fscs,
1112                      const struct bridge *br)
1113 {
1114     return ovsrec_ipfix_is_valid(fscs->ipfix) && fscs->bridge == br->cfg;
1115 }
1116
1117 /* Set IPFIX configuration on 'br'. */
1118 static void
1119 bridge_configure_ipfix(struct bridge *br)
1120 {
1121     const struct ovsrec_ipfix *be_cfg = br->cfg->ipfix;
1122     bool valid_be_cfg = ovsrec_ipfix_is_valid(be_cfg);
1123     const struct ovsrec_flow_sample_collector_set *fe_cfg;
1124     struct ofproto_ipfix_bridge_exporter_options be_opts;
1125     struct ofproto_ipfix_flow_exporter_options *fe_opts = NULL;
1126     size_t n_fe_opts = 0;
1127
1128     OVSREC_FLOW_SAMPLE_COLLECTOR_SET_FOR_EACH(fe_cfg, idl) {
1129         if (ovsrec_fscs_is_valid(fe_cfg, br)) {
1130             n_fe_opts++;
1131         }
1132     }
1133
1134     if (!valid_be_cfg && n_fe_opts == 0) {
1135         ofproto_set_ipfix(br->ofproto, NULL, NULL, 0);
1136         return;
1137     }
1138
1139     if (valid_be_cfg) {
1140         memset(&be_opts, 0, sizeof be_opts);
1141
1142         sset_init(&be_opts.targets);
1143         sset_add_array(&be_opts.targets, be_cfg->targets, be_cfg->n_targets);
1144
1145         if (be_cfg->sampling) {
1146             be_opts.sampling_rate = *be_cfg->sampling;
1147         } else {
1148             be_opts.sampling_rate = SFL_DEFAULT_SAMPLING_RATE;
1149         }
1150         if (be_cfg->obs_domain_id) {
1151             be_opts.obs_domain_id = *be_cfg->obs_domain_id;
1152         }
1153         if (be_cfg->obs_point_id) {
1154             be_opts.obs_point_id = *be_cfg->obs_point_id;
1155         }
1156         if (be_cfg->cache_active_timeout) {
1157             be_opts.cache_active_timeout = *be_cfg->cache_active_timeout;
1158         }
1159         if (be_cfg->cache_max_flows) {
1160             be_opts.cache_max_flows = *be_cfg->cache_max_flows;
1161         }
1162     }
1163
1164     if (n_fe_opts > 0) {
1165         struct ofproto_ipfix_flow_exporter_options *opts;
1166         fe_opts = xcalloc(n_fe_opts, sizeof *fe_opts);
1167         opts = fe_opts;
1168         OVSREC_FLOW_SAMPLE_COLLECTOR_SET_FOR_EACH(fe_cfg, idl) {
1169             if (ovsrec_fscs_is_valid(fe_cfg, br)) {
1170                 opts->collector_set_id = fe_cfg->id;
1171                 sset_init(&opts->targets);
1172                 sset_add_array(&opts->targets, fe_cfg->ipfix->targets,
1173                                fe_cfg->ipfix->n_targets);
1174                 opts->cache_active_timeout = fe_cfg->ipfix->cache_active_timeout
1175                     ? *fe_cfg->ipfix->cache_active_timeout : 0;
1176                 opts->cache_max_flows = fe_cfg->ipfix->cache_max_flows
1177                     ? *fe_cfg->ipfix->cache_max_flows : 0;
1178                 opts++;
1179             }
1180         }
1181     }
1182
1183     ofproto_set_ipfix(br->ofproto, valid_be_cfg ? &be_opts : NULL, fe_opts,
1184                       n_fe_opts);
1185
1186     if (valid_be_cfg) {
1187         sset_destroy(&be_opts.targets);
1188     }
1189
1190     if (n_fe_opts > 0) {
1191         struct ofproto_ipfix_flow_exporter_options *opts = fe_opts;
1192         size_t i;
1193         for (i = 0; i < n_fe_opts; i++) {
1194             sset_destroy(&opts->targets);
1195             opts++;
1196         }
1197         free(fe_opts);
1198     }
1199 }
1200
1201 static void
1202 port_configure_stp(const struct ofproto *ofproto, struct port *port,
1203                    struct ofproto_port_stp_settings *port_s,
1204                    int *port_num_counter, unsigned long *port_num_bitmap)
1205 {
1206     const char *config_str;
1207     struct iface *iface;
1208
1209     if (!smap_get_bool(&port->cfg->other_config, "stp-enable", true)) {
1210         port_s->enable = false;
1211         return;
1212     } else {
1213         port_s->enable = true;
1214     }
1215
1216     /* STP over bonds is not supported. */
1217     if (!list_is_singleton(&port->ifaces)) {
1218         VLOG_ERR("port %s: cannot enable STP on bonds, disabling",
1219                  port->name);
1220         port_s->enable = false;
1221         return;
1222     }
1223
1224     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
1225
1226     /* Internal ports shouldn't participate in spanning tree, so
1227      * skip them. */
1228     if (!strcmp(iface->type, "internal")) {
1229         VLOG_DBG("port %s: disable STP on internal ports", port->name);
1230         port_s->enable = false;
1231         return;
1232     }
1233
1234     /* STP on mirror output ports is not supported. */
1235     if (ofproto_is_mirror_output_bundle(ofproto, port)) {
1236         VLOG_DBG("port %s: disable STP on mirror ports", port->name);
1237         port_s->enable = false;
1238         return;
1239     }
1240
1241     config_str = smap_get(&port->cfg->other_config, "stp-port-num");
1242     if (config_str) {
1243         unsigned long int port_num = strtoul(config_str, NULL, 0);
1244         int port_idx = port_num - 1;
1245
1246         if (port_num < 1 || port_num > STP_MAX_PORTS) {
1247             VLOG_ERR("port %s: invalid stp-port-num", port->name);
1248             port_s->enable = false;
1249             return;
1250         }
1251
1252         if (bitmap_is_set(port_num_bitmap, port_idx)) {
1253             VLOG_ERR("port %s: duplicate stp-port-num %lu, disabling",
1254                     port->name, port_num);
1255             port_s->enable = false;
1256             return;
1257         }
1258         bitmap_set1(port_num_bitmap, port_idx);
1259         port_s->port_num = port_idx;
1260     } else {
1261         if (*port_num_counter >= STP_MAX_PORTS) {
1262             VLOG_ERR("port %s: too many STP ports, disabling", port->name);
1263             port_s->enable = false;
1264             return;
1265         }
1266
1267         port_s->port_num = (*port_num_counter)++;
1268     }
1269
1270     config_str = smap_get(&port->cfg->other_config, "stp-path-cost");
1271     if (config_str) {
1272         port_s->path_cost = strtoul(config_str, NULL, 10);
1273     } else {
1274         enum netdev_features current;
1275         unsigned int mbps;
1276
1277         netdev_get_features(iface->netdev, &current, NULL, NULL, NULL);
1278         mbps = netdev_features_to_bps(current, 100 * 1000 * 1000) / 1000000;
1279         port_s->path_cost = stp_convert_speed_to_cost(mbps);
1280     }
1281
1282     config_str = smap_get(&port->cfg->other_config, "stp-port-priority");
1283     if (config_str) {
1284         port_s->priority = strtoul(config_str, NULL, 0);
1285     } else {
1286         port_s->priority = STP_DEFAULT_PORT_PRIORITY;
1287     }
1288 }
1289
1290 /* Set spanning tree configuration on 'br'. */
1291 static void
1292 bridge_configure_stp(struct bridge *br)
1293 {
1294     if (!br->cfg->stp_enable) {
1295         ofproto_set_stp(br->ofproto, NULL);
1296     } else {
1297         struct ofproto_stp_settings br_s;
1298         const char *config_str;
1299         struct port *port;
1300         int port_num_counter;
1301         unsigned long *port_num_bitmap;
1302
1303         config_str = smap_get(&br->cfg->other_config, "stp-system-id");
1304         if (config_str) {
1305             uint8_t ea[ETH_ADDR_LEN];
1306
1307             if (eth_addr_from_string(config_str, ea)) {
1308                 br_s.system_id = eth_addr_to_uint64(ea);
1309             } else {
1310                 br_s.system_id = eth_addr_to_uint64(br->ea);
1311                 VLOG_ERR("bridge %s: invalid stp-system-id, defaulting "
1312                          "to "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(br->ea));
1313             }
1314         } else {
1315             br_s.system_id = eth_addr_to_uint64(br->ea);
1316         }
1317
1318         config_str = smap_get(&br->cfg->other_config, "stp-priority");
1319         if (config_str) {
1320             br_s.priority = strtoul(config_str, NULL, 0);
1321         } else {
1322             br_s.priority = STP_DEFAULT_BRIDGE_PRIORITY;
1323         }
1324
1325         config_str = smap_get(&br->cfg->other_config, "stp-hello-time");
1326         if (config_str) {
1327             br_s.hello_time = strtoul(config_str, NULL, 10) * 1000;
1328         } else {
1329             br_s.hello_time = STP_DEFAULT_HELLO_TIME;
1330         }
1331
1332         config_str = smap_get(&br->cfg->other_config, "stp-max-age");
1333         if (config_str) {
1334             br_s.max_age = strtoul(config_str, NULL, 10) * 1000;
1335         } else {
1336             br_s.max_age = STP_DEFAULT_MAX_AGE;
1337         }
1338
1339         config_str = smap_get(&br->cfg->other_config, "stp-forward-delay");
1340         if (config_str) {
1341             br_s.fwd_delay = strtoul(config_str, NULL, 10) * 1000;
1342         } else {
1343             br_s.fwd_delay = STP_DEFAULT_FWD_DELAY;
1344         }
1345
1346         /* Configure STP on the bridge. */
1347         if (ofproto_set_stp(br->ofproto, &br_s)) {
1348             VLOG_ERR("bridge %s: could not enable STP", br->name);
1349             return;
1350         }
1351
1352         /* Users must either set the port number with the "stp-port-num"
1353          * configuration on all ports or none.  If manual configuration
1354          * is not done, then we allocate them sequentially. */
1355         port_num_counter = 0;
1356         port_num_bitmap = bitmap_allocate(STP_MAX_PORTS);
1357         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1358             struct ofproto_port_stp_settings port_s;
1359             struct iface *iface;
1360
1361             port_configure_stp(br->ofproto, port, &port_s,
1362                                &port_num_counter, port_num_bitmap);
1363
1364             /* As bonds are not supported, just apply configuration to
1365              * all interfaces. */
1366             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1367                 if (ofproto_port_set_stp(br->ofproto, iface->ofp_port,
1368                                          &port_s)) {
1369                     VLOG_ERR("port %s: could not enable STP", port->name);
1370                     continue;
1371                 }
1372             }
1373         }
1374
1375         if (bitmap_scan(port_num_bitmap, 1, 0, STP_MAX_PORTS) != STP_MAX_PORTS
1376                     && port_num_counter) {
1377             VLOG_ERR("bridge %s: must manually configure all STP port "
1378                      "IDs or none, disabling", br->name);
1379             ofproto_set_stp(br->ofproto, NULL);
1380         }
1381         bitmap_free(port_num_bitmap);
1382     }
1383 }
1384
1385 static bool
1386 bridge_has_bond_fake_iface(const struct bridge *br, const char *name)
1387 {
1388     const struct port *port = port_lookup(br, name);
1389     return port && port_is_bond_fake_iface(port);
1390 }
1391
1392 static bool
1393 port_is_bond_fake_iface(const struct port *port)
1394 {
1395     return port->cfg->bond_fake_iface && !list_is_short(&port->ifaces);
1396 }
1397
1398 static void
1399 add_del_bridges(const struct ovsrec_open_vswitch *cfg)
1400 {
1401     struct bridge *br, *next;
1402     struct shash new_br;
1403     size_t i;
1404
1405     /* Collect new bridges' names and types. */
1406     shash_init(&new_br);
1407     for (i = 0; i < cfg->n_bridges; i++) {
1408         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
1409         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1410
1411         if (strchr(br_cfg->name, '/')) {
1412             /* Prevent remote ovsdb-server users from accessing arbitrary
1413              * directories, e.g. consider a bridge named "../../../etc/". */
1414             VLOG_WARN_RL(&rl, "ignoring bridge with invalid name \"%s\"",
1415                          br_cfg->name);
1416         } else if (!shash_add_once(&new_br, br_cfg->name, br_cfg)) {
1417             VLOG_WARN_RL(&rl, "bridge %s specified twice", br_cfg->name);
1418         }
1419     }
1420
1421     /* Get rid of deleted bridges or those whose types have changed.
1422      * Update 'cfg' of bridges that still exist. */
1423     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
1424         br->cfg = shash_find_data(&new_br, br->name);
1425         if (!br->cfg || strcmp(br->type, ofproto_normalize_type(
1426                                    br->cfg->datapath_type))) {
1427             bridge_destroy(br);
1428         }
1429     }
1430
1431     /* Add new bridges. */
1432     for (i = 0; i < cfg->n_bridges; i++) {
1433         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1434         struct bridge *br = bridge_lookup(br_cfg->name);
1435         if (!br) {
1436             bridge_create(br_cfg);
1437         }
1438     }
1439
1440     shash_destroy(&new_br);
1441 }
1442
1443 /* Configures 'netdev' based on the "options" column in 'iface_cfg'.
1444  * Returns 0 if successful, otherwise a positive errno value. */
1445 static int
1446 iface_set_netdev_config(const struct ovsrec_interface *iface_cfg,
1447                         struct netdev *netdev)
1448 {
1449     return netdev_set_config(netdev, &iface_cfg->options);
1450 }
1451
1452 /* Opens a network device for 'if_cfg' and configures it.  Adds the network
1453  * device to br->ofproto and stores the OpenFlow port number in '*ofp_portp'.
1454  *
1455  * If successful, returns 0 and stores the network device in '*netdevp'.  On
1456  * failure, returns a positive errno value and stores NULL in '*netdevp'. */
1457 static int
1458 iface_do_create(const struct bridge *br,
1459                 const struct ovsrec_interface *iface_cfg,
1460                 const struct ovsrec_port *port_cfg,
1461                 ofp_port_t *ofp_portp, struct netdev **netdevp)
1462 {
1463     struct netdev *netdev = NULL;
1464     int error;
1465
1466     if (netdev_is_reserved_name(iface_cfg->name)) {
1467         VLOG_WARN("could not create interface %s, name is reserved",
1468                   iface_cfg->name);
1469         error = EINVAL;
1470         goto error;
1471     }
1472
1473     error = netdev_open(iface_cfg->name,
1474                         iface_get_type(iface_cfg, br->cfg), &netdev);
1475     if (error) {
1476         VLOG_WARN("could not open network device %s (%s)",
1477                   iface_cfg->name, ovs_strerror(error));
1478         goto error;
1479     }
1480
1481     error = iface_set_netdev_config(iface_cfg, netdev);
1482     if (error) {
1483         goto error;
1484     }
1485
1486     *ofp_portp = iface_pick_ofport(iface_cfg);
1487     error = ofproto_port_add(br->ofproto, netdev, ofp_portp);
1488     if (error) {
1489         goto error;
1490     }
1491
1492     VLOG_INFO("bridge %s: added interface %s on port %d",
1493               br->name, iface_cfg->name, *ofp_portp);
1494
1495     if (port_cfg->vlan_mode && !strcmp(port_cfg->vlan_mode, "splinter")) {
1496         netdev_turn_flags_on(netdev, NETDEV_UP, NULL);
1497     }
1498
1499     *netdevp = netdev;
1500     return 0;
1501
1502 error:
1503     *netdevp = NULL;
1504     netdev_close(netdev);
1505     return error;
1506 }
1507
1508 /* Creates a new iface on 'br' based on 'if_cfg'.  The new iface has OpenFlow
1509  * port number 'ofp_port'.  If ofp_port is OFPP_NONE, an OpenFlow port is
1510  * automatically allocated for the iface.  Takes ownership of and
1511  * deallocates 'if_cfg'.
1512  *
1513  * Return true if an iface is successfully created, false otherwise. */
1514 static bool
1515 iface_create(struct bridge *br, const struct ovsrec_interface *iface_cfg,
1516              const struct ovsrec_port *port_cfg)
1517 {
1518     struct netdev *netdev;
1519     struct iface *iface;
1520     ofp_port_t ofp_port;
1521     struct port *port;
1522     int error;
1523
1524     /* Do the bits that can fail up front. */
1525     ovs_assert(!iface_lookup(br, iface_cfg->name));
1526     error = iface_do_create(br, iface_cfg, port_cfg, &ofp_port, &netdev);
1527     if (error) {
1528         iface_clear_db_record(iface_cfg);
1529         return false;
1530     }
1531
1532     /* Get or create the port structure. */
1533     port = port_lookup(br, port_cfg->name);
1534     if (!port) {
1535         port = port_create(br, port_cfg);
1536     }
1537
1538     /* Create the iface structure. */
1539     iface = xzalloc(sizeof *iface);
1540     list_push_back(&port->ifaces, &iface->port_elem);
1541     hmap_insert(&br->iface_by_name, &iface->name_node,
1542                 hash_string(iface_cfg->name, 0));
1543     iface->port = port;
1544     iface->name = xstrdup(iface_cfg->name);
1545     iface->ofp_port = ofp_port;
1546     iface->netdev = netdev;
1547     iface->type = iface_get_type(iface_cfg, br->cfg);
1548     iface->cfg = iface_cfg;
1549     hmap_insert(&br->ifaces, &iface->ofp_port_node,
1550                 hash_ofp_port(ofp_port));
1551
1552     /* Populate initial status in database. */
1553     iface_refresh_stats(iface);
1554
1555     /* Add bond fake iface if necessary. */
1556     if (port_is_bond_fake_iface(port)) {
1557         struct ofproto_port ofproto_port;
1558
1559         if (ofproto_port_query_by_name(br->ofproto, port->name,
1560                                        &ofproto_port)) {
1561             struct netdev *netdev;
1562             int error;
1563
1564             error = netdev_open(port->name, "internal", &netdev);
1565             if (!error) {
1566                 ofp_port_t fake_ofp_port = OFPP_NONE;
1567                 ofproto_port_add(br->ofproto, netdev, &fake_ofp_port);
1568                 netdev_close(netdev);
1569             } else {
1570                 VLOG_WARN("could not open network device %s (%s)",
1571                           port->name, ovs_strerror(error));
1572             }
1573         } else {
1574             /* Already exists, nothing to do. */
1575             ofproto_port_destroy(&ofproto_port);
1576         }
1577     }
1578
1579     return true;
1580 }
1581
1582 /* Set forward BPDU option. */
1583 static void
1584 bridge_configure_forward_bpdu(struct bridge *br)
1585 {
1586     ofproto_set_forward_bpdu(br->ofproto,
1587                              smap_get_bool(&br->cfg->other_config,
1588                                            "forward-bpdu",
1589                                            false));
1590 }
1591
1592 /* Set MAC learning table configuration for 'br'. */
1593 static void
1594 bridge_configure_mac_table(struct bridge *br)
1595 {
1596     const char *idle_time_str;
1597     int idle_time;
1598
1599     const char *mac_table_size_str;
1600     int mac_table_size;
1601
1602     idle_time_str = smap_get(&br->cfg->other_config, "mac-aging-time");
1603     idle_time = (idle_time_str && atoi(idle_time_str)
1604                  ? atoi(idle_time_str)
1605                  : MAC_ENTRY_DEFAULT_IDLE_TIME);
1606
1607     mac_table_size_str = smap_get(&br->cfg->other_config, "mac-table-size");
1608     mac_table_size = (mac_table_size_str && atoi(mac_table_size_str)
1609                       ? atoi(mac_table_size_str)
1610                       : MAC_DEFAULT_MAX);
1611
1612     ofproto_set_mac_table_config(br->ofproto, idle_time, mac_table_size);
1613 }
1614
1615 static void
1616 find_local_hw_addr(const struct bridge *br, uint8_t ea[ETH_ADDR_LEN],
1617                    const struct port *fake_br, struct iface **hw_addr_iface)
1618 {
1619     struct hmapx mirror_output_ports;
1620     struct port *port;
1621     bool found_addr = false;
1622     int error;
1623     int i;
1624
1625     /* Mirror output ports don't participate in picking the local hardware
1626      * address.  ofproto can't help us find out whether a given port is a
1627      * mirror output because we haven't configured mirrors yet, so we need to
1628      * accumulate them ourselves. */
1629     hmapx_init(&mirror_output_ports);
1630     for (i = 0; i < br->cfg->n_mirrors; i++) {
1631         struct ovsrec_mirror *m = br->cfg->mirrors[i];
1632         if (m->output_port) {
1633             hmapx_add(&mirror_output_ports, m->output_port);
1634         }
1635     }
1636
1637     /* Otherwise choose the minimum non-local MAC address among all of the
1638      * interfaces. */
1639     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1640         uint8_t iface_ea[ETH_ADDR_LEN];
1641         struct iface *candidate;
1642         struct iface *iface;
1643
1644         /* Mirror output ports don't participate. */
1645         if (hmapx_contains(&mirror_output_ports, port->cfg)) {
1646             continue;
1647         }
1648
1649         /* Choose the MAC address to represent the port. */
1650         iface = NULL;
1651         if (port->cfg->mac && eth_addr_from_string(port->cfg->mac, iface_ea)) {
1652             /* Find the interface with this Ethernet address (if any) so that
1653              * we can provide the correct devname to the caller. */
1654             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1655                 uint8_t candidate_ea[ETH_ADDR_LEN];
1656                 if (!netdev_get_etheraddr(candidate->netdev, candidate_ea)
1657                     && eth_addr_equals(iface_ea, candidate_ea)) {
1658                     iface = candidate;
1659                 }
1660             }
1661         } else {
1662             /* Choose the interface whose MAC address will represent the port.
1663              * The Linux kernel bonding code always chooses the MAC address of
1664              * the first slave added to a bond, and the Fedora networking
1665              * scripts always add slaves to a bond in alphabetical order, so
1666              * for compatibility we choose the interface with the name that is
1667              * first in alphabetical order. */
1668             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1669                 if (!iface || strcmp(candidate->name, iface->name) < 0) {
1670                     iface = candidate;
1671                 }
1672             }
1673
1674             /* The local port doesn't count (since we're trying to choose its
1675              * MAC address anyway). */
1676             if (iface->ofp_port == OFPP_LOCAL) {
1677                 continue;
1678             }
1679
1680             /* For fake bridges we only choose from ports with the same tag */
1681             if (fake_br && fake_br->cfg && fake_br->cfg->tag) {
1682                 if (!port->cfg->tag) {
1683                     continue;
1684                 }
1685                 if (*port->cfg->tag != *fake_br->cfg->tag) {
1686                     continue;
1687                 }
1688             }
1689
1690             /* Grab MAC. */
1691             error = netdev_get_etheraddr(iface->netdev, iface_ea);
1692             if (error) {
1693                 continue;
1694             }
1695         }
1696
1697         /* Compare against our current choice. */
1698         if (!eth_addr_is_multicast(iface_ea) &&
1699             !eth_addr_is_local(iface_ea) &&
1700             !eth_addr_is_reserved(iface_ea) &&
1701             !eth_addr_is_zero(iface_ea) &&
1702             (!found_addr || eth_addr_compare_3way(iface_ea, ea) < 0))
1703         {
1704             memcpy(ea, iface_ea, ETH_ADDR_LEN);
1705             *hw_addr_iface = iface;
1706             found_addr = true;
1707         }
1708     }
1709
1710     if (!found_addr) {
1711         memcpy(ea, br->default_ea, ETH_ADDR_LEN);
1712         *hw_addr_iface = NULL;
1713     }
1714
1715     hmapx_destroy(&mirror_output_ports);
1716 }
1717
1718 static void
1719 bridge_pick_local_hw_addr(struct bridge *br, uint8_t ea[ETH_ADDR_LEN],
1720                           struct iface **hw_addr_iface)
1721 {
1722     const char *hwaddr;
1723     *hw_addr_iface = NULL;
1724
1725     /* Did the user request a particular MAC? */
1726     hwaddr = smap_get(&br->cfg->other_config, "hwaddr");
1727     if (hwaddr && eth_addr_from_string(hwaddr, ea)) {
1728         if (eth_addr_is_multicast(ea)) {
1729             VLOG_ERR("bridge %s: cannot set MAC address to multicast "
1730                      "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1731         } else if (eth_addr_is_zero(ea)) {
1732             VLOG_ERR("bridge %s: cannot set MAC address to zero", br->name);
1733         } else {
1734             return;
1735         }
1736     }
1737
1738     /* Find a local hw address */
1739     find_local_hw_addr(br, ea, NULL, hw_addr_iface);
1740 }
1741
1742 /* Choose and returns the datapath ID for bridge 'br' given that the bridge
1743  * Ethernet address is 'bridge_ea'.  If 'bridge_ea' is the Ethernet address of
1744  * an interface on 'br', then that interface must be passed in as
1745  * 'hw_addr_iface'; if 'bridge_ea' was derived some other way, then
1746  * 'hw_addr_iface' must be passed in as a null pointer. */
1747 static uint64_t
1748 bridge_pick_datapath_id(struct bridge *br,
1749                         const uint8_t bridge_ea[ETH_ADDR_LEN],
1750                         struct iface *hw_addr_iface)
1751 {
1752     /*
1753      * The procedure for choosing a bridge MAC address will, in the most
1754      * ordinary case, also choose a unique MAC that we can use as a datapath
1755      * ID.  In some special cases, though, multiple bridges will end up with
1756      * the same MAC address.  This is OK for the bridges, but it will confuse
1757      * the OpenFlow controller, because each datapath needs a unique datapath
1758      * ID.
1759      *
1760      * Datapath IDs must be unique.  It is also very desirable that they be
1761      * stable from one run to the next, so that policy set on a datapath
1762      * "sticks".
1763      */
1764     const char *datapath_id;
1765     uint64_t dpid;
1766
1767     datapath_id = smap_get(&br->cfg->other_config, "datapath-id");
1768     if (datapath_id && dpid_from_string(datapath_id, &dpid)) {
1769         return dpid;
1770     }
1771
1772     if (!hw_addr_iface) {
1773         /*
1774          * A purely internal bridge, that is, one that has no non-virtual
1775          * network devices on it at all, is difficult because it has no
1776          * natural unique identifier at all.
1777          *
1778          * When the host is a XenServer, we handle this case by hashing the
1779          * host's UUID with the name of the bridge.  Names of bridges are
1780          * persistent across XenServer reboots, although they can be reused if
1781          * an internal network is destroyed and then a new one is later
1782          * created, so this is fairly effective.
1783          *
1784          * When the host is not a XenServer, we punt by using a random MAC
1785          * address on each run.
1786          */
1787         const char *host_uuid = xenserver_get_host_uuid();
1788         if (host_uuid) {
1789             char *combined = xasprintf("%s,%s", host_uuid, br->name);
1790             dpid = dpid_from_hash(combined, strlen(combined));
1791             free(combined);
1792             return dpid;
1793         }
1794     }
1795
1796     return eth_addr_to_uint64(bridge_ea);
1797 }
1798
1799 static uint64_t
1800 dpid_from_hash(const void *data, size_t n)
1801 {
1802     uint8_t hash[SHA1_DIGEST_SIZE];
1803
1804     BUILD_ASSERT_DECL(sizeof hash >= ETH_ADDR_LEN);
1805     sha1_bytes(data, n, hash);
1806     eth_addr_mark_random(hash);
1807     return eth_addr_to_uint64(hash);
1808 }
1809
1810 static void
1811 iface_refresh_netdev_status(struct iface *iface)
1812 {
1813     struct smap smap;
1814
1815     enum netdev_features current;
1816     enum netdev_flags flags;
1817     const char *link_state;
1818     uint8_t mac[ETH_ADDR_LEN];
1819     int64_t bps, mtu_64, ifindex64, link_resets;
1820     int mtu, error;
1821
1822     if (iface_is_synthetic(iface)) {
1823         return;
1824     }
1825
1826     if (iface->change_seq == netdev_get_change_seq(iface->netdev)
1827         && !force_status_commit) {
1828         return;
1829     }
1830
1831     iface->change_seq = netdev_get_change_seq(iface->netdev);
1832
1833     smap_init(&smap);
1834
1835     if (!netdev_get_status(iface->netdev, &smap)) {
1836         ovsrec_interface_set_status(iface->cfg, &smap);
1837     } else {
1838         ovsrec_interface_set_status(iface->cfg, NULL);
1839     }
1840
1841     smap_destroy(&smap);
1842
1843     error = netdev_get_flags(iface->netdev, &flags);
1844     if (!error) {
1845         const char *state = flags & NETDEV_UP ? "up" : "down";
1846
1847         ovsrec_interface_set_admin_state(iface->cfg, state);
1848     } else {
1849         ovsrec_interface_set_admin_state(iface->cfg, NULL);
1850     }
1851
1852     link_state = netdev_get_carrier(iface->netdev) ? "up" : "down";
1853     ovsrec_interface_set_link_state(iface->cfg, link_state);
1854
1855     link_resets = netdev_get_carrier_resets(iface->netdev);
1856     ovsrec_interface_set_link_resets(iface->cfg, &link_resets, 1);
1857
1858     error = netdev_get_features(iface->netdev, &current, NULL, NULL, NULL);
1859     bps = !error ? netdev_features_to_bps(current, 0) : 0;
1860     if (bps) {
1861         ovsrec_interface_set_duplex(iface->cfg,
1862                                     netdev_features_is_full_duplex(current)
1863                                     ? "full" : "half");
1864         ovsrec_interface_set_link_speed(iface->cfg, &bps, 1);
1865     } else {
1866         ovsrec_interface_set_duplex(iface->cfg, NULL);
1867         ovsrec_interface_set_link_speed(iface->cfg, NULL, 0);
1868     }
1869
1870     error = netdev_get_mtu(iface->netdev, &mtu);
1871     if (!error) {
1872         mtu_64 = mtu;
1873         ovsrec_interface_set_mtu(iface->cfg, &mtu_64, 1);
1874     } else {
1875         ovsrec_interface_set_mtu(iface->cfg, NULL, 0);
1876     }
1877
1878     error = netdev_get_etheraddr(iface->netdev, mac);
1879     if (!error) {
1880         char mac_string[32];
1881
1882         sprintf(mac_string, ETH_ADDR_FMT, ETH_ADDR_ARGS(mac));
1883         ovsrec_interface_set_mac_in_use(iface->cfg, mac_string);
1884     } else {
1885         ovsrec_interface_set_mac_in_use(iface->cfg, NULL);
1886     }
1887
1888     /* The netdev may return a negative number (such as -EOPNOTSUPP)
1889      * if there is no valid ifindex number. */
1890     ifindex64 = netdev_get_ifindex(iface->netdev);
1891     if (ifindex64 < 0) {
1892         ifindex64 = 0;
1893     }
1894     ovsrec_interface_set_ifindex(iface->cfg, &ifindex64, 1);
1895 }
1896
1897 static void
1898 iface_refresh_ofproto_status(struct iface *iface)
1899 {
1900     struct smap smap;
1901     int current, error;
1902
1903     if (iface_is_synthetic(iface)) {
1904         return;
1905     }
1906
1907     current = ofproto_port_is_lacp_current(iface->port->bridge->ofproto,
1908                                            iface->ofp_port);
1909     if (current >= 0) {
1910         bool bl = current;
1911         ovsrec_interface_set_lacp_current(iface->cfg, &bl, 1);
1912     } else {
1913         ovsrec_interface_set_lacp_current(iface->cfg, NULL, 0);
1914     }
1915
1916     iface_refresh_cfm_stats(iface);
1917
1918     smap_init(&smap);
1919     error = ofproto_port_get_bfd_status(iface->port->bridge->ofproto,
1920                                         iface->ofp_port, force_status_commit,
1921                                         &smap);
1922     if (error >= 0) {
1923         ovsrec_interface_set_bfd_status(iface->cfg, &smap);
1924     }
1925     smap_destroy(&smap);
1926 }
1927
1928 /* Writes 'iface''s CFM statistics to the database. 'iface' must not be
1929  * synthetic. */
1930 static void
1931 iface_refresh_cfm_stats(struct iface *iface)
1932 {
1933     const struct ovsrec_interface *cfg = iface->cfg;
1934     struct ofproto_cfm_status status;
1935     int error;
1936
1937     error = ofproto_port_get_cfm_status(iface->port->bridge->ofproto,
1938                                         iface->ofp_port, force_status_commit,
1939                                         &status);
1940     if (error < 0) {
1941         /* Do nothing if there is no status change since last update. */
1942     } else if (error > 0) {
1943         ovsrec_interface_set_cfm_fault(cfg, NULL, 0);
1944         ovsrec_interface_set_cfm_fault_status(cfg, NULL, 0);
1945         ovsrec_interface_set_cfm_remote_opstate(cfg, NULL);
1946         ovsrec_interface_set_cfm_flap_count(cfg, NULL, 0);
1947         ovsrec_interface_set_cfm_health(cfg, NULL, 0);
1948         ovsrec_interface_set_cfm_remote_mpids(cfg, NULL, 0);
1949     } else {
1950         const char *reasons[CFM_FAULT_N_REASONS];
1951         int64_t cfm_health = status.health;
1952         int64_t cfm_flap_count = status.flap_count;
1953         bool faulted = status.faults != 0;
1954         size_t i, j;
1955
1956         ovsrec_interface_set_cfm_fault(cfg, &faulted, 1);
1957
1958         j = 0;
1959         for (i = 0; i < CFM_FAULT_N_REASONS; i++) {
1960             int reason = 1 << i;
1961             if (status.faults & reason) {
1962                 reasons[j++] = cfm_fault_reason_to_str(reason);
1963             }
1964         }
1965         ovsrec_interface_set_cfm_fault_status(cfg, (char **) reasons, j);
1966
1967         ovsrec_interface_set_cfm_flap_count(cfg, &cfm_flap_count, 1);
1968
1969         if (status.remote_opstate >= 0) {
1970             const char *remote_opstate = status.remote_opstate ? "up" : "down";
1971             ovsrec_interface_set_cfm_remote_opstate(cfg, remote_opstate);
1972         } else {
1973             ovsrec_interface_set_cfm_remote_opstate(cfg, NULL);
1974         }
1975
1976         ovsrec_interface_set_cfm_remote_mpids(cfg,
1977                                               (const int64_t *)status.rmps,
1978                                               status.n_rmps);
1979         if (cfm_health >= 0) {
1980             ovsrec_interface_set_cfm_health(cfg, &cfm_health, 1);
1981         } else {
1982             ovsrec_interface_set_cfm_health(cfg, NULL, 0);
1983         }
1984
1985         free(status.rmps);
1986     }
1987 }
1988
1989 static void
1990 iface_refresh_stats(struct iface *iface)
1991 {
1992 #define IFACE_STATS                             \
1993     IFACE_STAT(rx_packets,      "rx_packets")   \
1994     IFACE_STAT(tx_packets,      "tx_packets")   \
1995     IFACE_STAT(rx_bytes,        "rx_bytes")     \
1996     IFACE_STAT(tx_bytes,        "tx_bytes")     \
1997     IFACE_STAT(rx_dropped,      "rx_dropped")   \
1998     IFACE_STAT(tx_dropped,      "tx_dropped")   \
1999     IFACE_STAT(rx_errors,       "rx_errors")    \
2000     IFACE_STAT(tx_errors,       "tx_errors")    \
2001     IFACE_STAT(rx_frame_errors, "rx_frame_err") \
2002     IFACE_STAT(rx_over_errors,  "rx_over_err")  \
2003     IFACE_STAT(rx_crc_errors,   "rx_crc_err")   \
2004     IFACE_STAT(collisions,      "collisions")
2005
2006 #define IFACE_STAT(MEMBER, NAME) + 1
2007     enum { N_IFACE_STATS = IFACE_STATS };
2008 #undef IFACE_STAT
2009     int64_t values[N_IFACE_STATS];
2010     char *keys[N_IFACE_STATS];
2011     int n;
2012
2013     struct netdev_stats stats;
2014
2015     if (iface_is_synthetic(iface)) {
2016         return;
2017     }
2018
2019     /* Intentionally ignore return value, since errors will set 'stats' to
2020      * all-1s, and we will deal with that correctly below. */
2021     netdev_get_stats(iface->netdev, &stats);
2022
2023     /* Copy statistics into keys[] and values[]. */
2024     n = 0;
2025 #define IFACE_STAT(MEMBER, NAME)                \
2026     if (stats.MEMBER != UINT64_MAX) {           \
2027         keys[n] = NAME;                         \
2028         values[n] = stats.MEMBER;               \
2029         n++;                                    \
2030     }
2031     IFACE_STATS;
2032 #undef IFACE_STAT
2033     ovs_assert(n <= N_IFACE_STATS);
2034
2035     ovsrec_interface_set_statistics(iface->cfg, keys, values, n);
2036 #undef IFACE_STATS
2037 }
2038
2039 static void
2040 br_refresh_stp_status(struct bridge *br)
2041 {
2042     struct smap smap = SMAP_INITIALIZER(&smap);
2043     struct ofproto *ofproto = br->ofproto;
2044     struct ofproto_stp_status status;
2045
2046     if (ofproto_get_stp_status(ofproto, &status)) {
2047         return;
2048     }
2049
2050     if (!status.enabled) {
2051         ovsrec_bridge_set_status(br->cfg, NULL);
2052         return;
2053     }
2054
2055     smap_add_format(&smap, "stp_bridge_id", STP_ID_FMT,
2056                     STP_ID_ARGS(status.bridge_id));
2057     smap_add_format(&smap, "stp_designated_root", STP_ID_FMT,
2058                     STP_ID_ARGS(status.designated_root));
2059     smap_add_format(&smap, "stp_root_path_cost", "%d", status.root_path_cost);
2060
2061     ovsrec_bridge_set_status(br->cfg, &smap);
2062     smap_destroy(&smap);
2063 }
2064
2065 static void
2066 port_refresh_stp_status(struct port *port)
2067 {
2068     struct ofproto *ofproto = port->bridge->ofproto;
2069     struct iface *iface;
2070     struct ofproto_port_stp_status status;
2071     struct smap smap;
2072
2073     if (port_is_synthetic(port)) {
2074         return;
2075     }
2076
2077     /* STP doesn't currently support bonds. */
2078     if (!list_is_singleton(&port->ifaces)) {
2079         ovsrec_port_set_status(port->cfg, NULL);
2080         return;
2081     }
2082
2083     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
2084     if (ofproto_port_get_stp_status(ofproto, iface->ofp_port, &status)) {
2085         return;
2086     }
2087
2088     if (!status.enabled) {
2089         ovsrec_port_set_status(port->cfg, NULL);
2090         return;
2091     }
2092
2093     /* Set Status column. */
2094     smap_init(&smap);
2095     smap_add_format(&smap, "stp_port_id", STP_PORT_ID_FMT, status.port_id);
2096     smap_add(&smap, "stp_state", stp_state_name(status.state));
2097     smap_add_format(&smap, "stp_sec_in_state", "%u", status.sec_in_state);
2098     smap_add(&smap, "stp_role", stp_role_name(status.role));
2099     ovsrec_port_set_status(port->cfg, &smap);
2100     smap_destroy(&smap);
2101 }
2102
2103 static void
2104 port_refresh_stp_stats(struct port *port)
2105 {
2106     struct ofproto *ofproto = port->bridge->ofproto;
2107     struct iface *iface;
2108     struct ofproto_port_stp_stats stats;
2109     char *keys[3];
2110     int64_t int_values[3];
2111
2112     if (port_is_synthetic(port)) {
2113         return;
2114     }
2115
2116     /* STP doesn't currently support bonds. */
2117     if (!list_is_singleton(&port->ifaces)) {
2118         return;
2119     }
2120
2121     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
2122     if (ofproto_port_get_stp_stats(ofproto, iface->ofp_port, &stats)) {
2123         return;
2124     }
2125
2126     if (!stats.enabled) {
2127         ovsrec_port_set_statistics(port->cfg, NULL, NULL, 0);
2128         return;
2129     }
2130
2131     /* Set Statistics column. */
2132     keys[0] = "stp_tx_count";
2133     int_values[0] = stats.tx_count;
2134     keys[1] = "stp_rx_count";
2135     int_values[1] = stats.rx_count;
2136     keys[2] = "stp_error_count";
2137     int_values[2] = stats.error_count;
2138
2139     ovsrec_port_set_statistics(port->cfg, keys, int_values,
2140                                ARRAY_SIZE(int_values));
2141 }
2142
2143 static bool
2144 enable_system_stats(const struct ovsrec_open_vswitch *cfg)
2145 {
2146     return smap_get_bool(&cfg->other_config, "enable-statistics", false);
2147 }
2148
2149 static void
2150 reconfigure_system_stats(const struct ovsrec_open_vswitch *cfg)
2151 {
2152     bool enable = enable_system_stats(cfg);
2153
2154     system_stats_enable(enable);
2155     if (!enable) {
2156         ovsrec_open_vswitch_set_statistics(cfg, NULL);
2157     }
2158 }
2159
2160 static void
2161 run_system_stats(void)
2162 {
2163     const struct ovsrec_open_vswitch *cfg = ovsrec_open_vswitch_first(idl);
2164     struct smap *stats;
2165
2166     stats = system_stats_run();
2167     if (stats && cfg) {
2168         struct ovsdb_idl_txn *txn;
2169         struct ovsdb_datum datum;
2170
2171         txn = ovsdb_idl_txn_create(idl);
2172         ovsdb_datum_from_smap(&datum, stats);
2173         ovsdb_idl_txn_write(&cfg->header_, &ovsrec_open_vswitch_col_statistics,
2174                             &datum);
2175         ovsdb_idl_txn_commit(txn);
2176         ovsdb_idl_txn_destroy(txn);
2177
2178         free(stats);
2179     }
2180 }
2181
2182 static const char *
2183 ofp12_controller_role_to_str(enum ofp12_controller_role role)
2184 {
2185     switch (role) {
2186     case OFPCR12_ROLE_EQUAL:
2187         return "other";
2188     case OFPCR12_ROLE_MASTER:
2189         return "master";
2190     case OFPCR12_ROLE_SLAVE:
2191         return "slave";
2192     case OFPCR12_ROLE_NOCHANGE:
2193     default:
2194         return "*** INVALID ROLE ***";
2195     }
2196 }
2197
2198 static void
2199 refresh_controller_status(void)
2200 {
2201     struct bridge *br;
2202     struct shash info;
2203     const struct ovsrec_controller *cfg;
2204
2205     shash_init(&info);
2206
2207     /* Accumulate status for controllers on all bridges. */
2208     HMAP_FOR_EACH (br, node, &all_bridges) {
2209         ofproto_get_ofproto_controller_info(br->ofproto, &info);
2210     }
2211
2212     /* Update each controller in the database with current status. */
2213     OVSREC_CONTROLLER_FOR_EACH(cfg, idl) {
2214         struct ofproto_controller_info *cinfo =
2215             shash_find_data(&info, cfg->target);
2216
2217         if (cinfo) {
2218             struct smap smap = SMAP_INITIALIZER(&smap);
2219             const char **values = cinfo->pairs.values;
2220             const char **keys = cinfo->pairs.keys;
2221             size_t i;
2222
2223             for (i = 0; i < cinfo->pairs.n; i++) {
2224                 smap_add(&smap, keys[i], values[i]);
2225             }
2226
2227             ovsrec_controller_set_is_connected(cfg, cinfo->is_connected);
2228             ovsrec_controller_set_role(cfg, ofp12_controller_role_to_str(
2229                                            cinfo->role));
2230             ovsrec_controller_set_status(cfg, &smap);
2231             smap_destroy(&smap);
2232         } else {
2233             ovsrec_controller_set_is_connected(cfg, false);
2234             ovsrec_controller_set_role(cfg, NULL);
2235             ovsrec_controller_set_status(cfg, NULL);
2236         }
2237     }
2238
2239     ofproto_free_ofproto_controller_info(&info);
2240 }
2241 \f
2242 static void
2243 bridge_run__(void)
2244 {
2245     struct bridge *br;
2246     struct sset types;
2247     const char *type;
2248
2249     /* Let each datapath type do the work that it needs to do. */
2250     sset_init(&types);
2251     ofproto_enumerate_types(&types);
2252     SSET_FOR_EACH (type, &types) {
2253         ofproto_type_run(type);
2254     }
2255     sset_destroy(&types);
2256
2257     /* Let each bridge do the work that it needs to do. */
2258     HMAP_FOR_EACH (br, node, &all_bridges) {
2259         ofproto_run(br->ofproto);
2260     }
2261 }
2262
2263 void
2264 bridge_run(void)
2265 {
2266     static struct ovsrec_open_vswitch null_cfg;
2267     const struct ovsrec_open_vswitch *cfg;
2268
2269     bool vlan_splinters_changed;
2270     struct bridge *br;
2271     int stats_interval;
2272
2273     ovsrec_open_vswitch_init(&null_cfg);
2274
2275     ovsdb_idl_run(idl);
2276
2277     if (ovsdb_idl_is_lock_contended(idl)) {
2278         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
2279         struct bridge *br, *next_br;
2280
2281         VLOG_ERR_RL(&rl, "another ovs-vswitchd process is running, "
2282                     "disabling this process (pid %ld) until it goes away",
2283                     (long int) getpid());
2284
2285         HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
2286             bridge_destroy(br);
2287         }
2288         /* Since we will not be running system_stats_run() in this process
2289          * with the current situation of multiple ovs-vswitchd daemons,
2290          * disable system stats collection. */
2291         system_stats_enable(false);
2292         return;
2293     } else if (!ovsdb_idl_has_lock(idl)) {
2294         return;
2295     }
2296     cfg = ovsrec_open_vswitch_first(idl);
2297
2298     /* Initialize the ofproto library.  This only needs to run once, but
2299      * it must be done after the configuration is set.  If the
2300      * initialization has already occurred, bridge_init_ofproto()
2301      * returns immediately. */
2302     bridge_init_ofproto(cfg);
2303
2304     /* Once the value of flow-restore-wait is false, we no longer should
2305      * check its value from the database. */
2306     if (cfg && ofproto_get_flow_restore_wait()) {
2307         ofproto_set_flow_restore_wait(smap_get_bool(&cfg->other_config,
2308                                         "flow-restore-wait", false));
2309     }
2310
2311     bridge_run__();
2312
2313     /* Re-configure SSL.  We do this on every trip through the main loop,
2314      * instead of just when the database changes, because the contents of the
2315      * key and certificate files can change without the database changing.
2316      *
2317      * We do this before bridge_reconfigure() because that function might
2318      * initiate SSL connections and thus requires SSL to be configured. */
2319     if (cfg && cfg->ssl) {
2320         const struct ovsrec_ssl *ssl = cfg->ssl;
2321
2322         stream_ssl_set_key_and_cert(ssl->private_key, ssl->certificate);
2323         stream_ssl_set_ca_cert_file(ssl->ca_cert, ssl->bootstrap_ca_cert);
2324     }
2325
2326     /* If VLAN splinters are in use, then we need to reconfigure if VLAN
2327      * usage has changed. */
2328     vlan_splinters_changed = false;
2329     if (vlan_splinters_enabled_anywhere) {
2330         HMAP_FOR_EACH (br, node, &all_bridges) {
2331             if (ofproto_has_vlan_usage_changed(br->ofproto)) {
2332                 vlan_splinters_changed = true;
2333                 break;
2334             }
2335         }
2336     }
2337
2338     if (ovsdb_idl_get_seqno(idl) != idl_seqno || vlan_splinters_changed) {
2339         struct ovsdb_idl_txn *txn;
2340
2341         idl_seqno = ovsdb_idl_get_seqno(idl);
2342         txn = ovsdb_idl_txn_create(idl);
2343         bridge_reconfigure(cfg ? cfg : &null_cfg);
2344
2345         if (cfg) {
2346             ovsrec_open_vswitch_set_cur_cfg(cfg, cfg->next_cfg);
2347         }
2348
2349         /* If we are completing our initial configuration for this run
2350          * of ovs-vswitchd, then keep the transaction around to monitor
2351          * it for completion. */
2352         if (initial_config_done) {
2353             ovsdb_idl_txn_commit(txn);
2354             ovsdb_idl_txn_destroy(txn);
2355         } else {
2356             initial_config_done = true;
2357             daemonize_txn = txn;
2358         }
2359     }
2360
2361     if (daemonize_txn) {
2362         enum ovsdb_idl_txn_status status = ovsdb_idl_txn_commit(daemonize_txn);
2363         if (status != TXN_INCOMPLETE) {
2364             ovsdb_idl_txn_destroy(daemonize_txn);
2365             daemonize_txn = NULL;
2366
2367             /* ovs-vswitchd has completed initialization, so allow the
2368              * process that forked us to exit successfully. */
2369             daemonize_complete();
2370
2371             vlog_enable_async();
2372
2373             VLOG_INFO_ONCE("%s (Open vSwitch) %s", program_name, VERSION);
2374         }
2375     }
2376
2377     /* Statistics update interval should always be greater than or equal to
2378      * 5000 ms. */
2379     if (cfg) {
2380         stats_interval = MAX(smap_get_int(&cfg->other_config,
2381                                           "stats-update-interval",
2382                                           5000), 5000);
2383     } else {
2384         stats_interval = 5000;
2385     }
2386     if (stats_timer_interval != stats_interval) {
2387         stats_timer_interval = stats_interval;
2388         stats_timer = LLONG_MIN;
2389     }
2390
2391     /* Refresh interface and mirror stats if necessary. */
2392     if (time_msec() >= stats_timer) {
2393         enum ovsdb_idl_txn_status status;
2394
2395         /* Rate limit the update.  Do not start a new update if the
2396          * previous one is not done. */
2397         if (!stats_txn) {
2398             if (cfg) {
2399                 stats_txn = ovsdb_idl_txn_create(idl);
2400                 HMAP_FOR_EACH (br, node, &all_bridges) {
2401                     struct port *port;
2402                     struct mirror *m;
2403
2404                     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
2405                         struct iface *iface;
2406
2407                         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
2408                             iface_refresh_stats(iface);
2409                         }
2410                         port_refresh_stp_stats(port);
2411                     }
2412                     HMAP_FOR_EACH (m, hmap_node, &br->mirrors) {
2413                         mirror_refresh_stats(m);
2414                     }
2415                 }
2416                 refresh_controller_status();
2417             }
2418         }
2419
2420         status = ovsdb_idl_txn_commit(stats_txn);
2421         if (status != TXN_INCOMPLETE) {
2422             stats_timer = time_msec() + stats_timer_interval;
2423             ovsdb_idl_txn_destroy(stats_txn);
2424             stats_txn = NULL;
2425         }
2426     }
2427
2428     if (!status_txn) {
2429         uint64_t seq;
2430
2431         /* Check the need to update status. */
2432         seq = seq_read(connectivity_seq_get());
2433         if (seq != connectivity_seqno || force_status_commit) {
2434             connectivity_seqno = seq;
2435             status_txn = ovsdb_idl_txn_create(idl);
2436             HMAP_FOR_EACH (br, node, &all_bridges) {
2437                 struct port *port;
2438
2439                 br_refresh_stp_status(br);
2440                 HMAP_FOR_EACH (port, hmap_node, &br->ports) {
2441                     struct iface *iface;
2442
2443                     port_refresh_stp_status(port);
2444                     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
2445                         iface_refresh_netdev_status(iface);
2446                         iface_refresh_ofproto_status(iface);
2447                     }
2448                 }
2449             }
2450         }
2451     }
2452
2453     if (status_txn) {
2454         enum ovsdb_idl_txn_status status;
2455
2456         status = ovsdb_idl_txn_commit(status_txn);
2457
2458         /* If the transaction is incomplete or fails, 'status_txn'
2459          * needs to be committed next iteration of bridge_run() even if
2460          * connectivity or netdev sequence numbers do not change. */
2461         if (status == TXN_SUCCESS || status == TXN_UNCHANGED)
2462         {
2463             force_status_commit = false;
2464         } else {
2465             force_status_commit = true;
2466         }
2467
2468         /* Do not destroy "status_txn" if the transaction is
2469          * "TXN_INCOMPLETE". */
2470         if (status != TXN_INCOMPLETE) {
2471             ovsdb_idl_txn_destroy(status_txn);
2472             status_txn = NULL;
2473         }
2474     }
2475
2476     run_system_stats();
2477 }
2478
2479 void
2480 bridge_wait(void)
2481 {
2482     struct sset types;
2483     const char *type;
2484
2485     ovsdb_idl_wait(idl);
2486     if (daemonize_txn) {
2487         ovsdb_idl_txn_wait(daemonize_txn);
2488     }
2489
2490     sset_init(&types);
2491     ofproto_enumerate_types(&types);
2492     SSET_FOR_EACH (type, &types) {
2493         ofproto_type_wait(type);
2494     }
2495     sset_destroy(&types);
2496
2497     if (!hmap_is_empty(&all_bridges)) {
2498         struct bridge *br;
2499
2500         HMAP_FOR_EACH (br, node, &all_bridges) {
2501             ofproto_wait(br->ofproto);
2502         }
2503
2504         poll_timer_wait_until(stats_timer);
2505     }
2506
2507     /* If the status database transaction is 'TXN_INCOMPLETE' or is
2508      * unsuccessful, register a timeout in 'STATUS_CHECK_AGAIN_MSEC'.  Else,
2509      * wait on the global connectivity sequence number.  Note, this also helps
2510      * batch multiple status changes into one transaction. */
2511     if (force_status_commit) {
2512         poll_timer_wait_until(time_msec() + STATUS_CHECK_AGAIN_MSEC);
2513     } else {
2514         seq_wait(connectivity_seq_get(), connectivity_seqno);
2515     }
2516
2517     system_stats_wait();
2518 }
2519
2520 /* Adds some memory usage statistics for bridges into 'usage', for use with
2521  * memory_report(). */
2522 void
2523 bridge_get_memory_usage(struct simap *usage)
2524 {
2525     struct bridge *br;
2526     struct sset types;
2527     const char *type;
2528
2529     sset_init(&types);
2530     ofproto_enumerate_types(&types);
2531     SSET_FOR_EACH (type, &types) {
2532         ofproto_type_get_memory_usage(type, usage);
2533     }
2534     sset_destroy(&types);
2535
2536     HMAP_FOR_EACH (br, node, &all_bridges) {
2537         ofproto_get_memory_usage(br->ofproto, usage);
2538     }
2539 }
2540 \f
2541 /* QoS unixctl user interface functions. */
2542
2543 struct qos_unixctl_show_cbdata {
2544     struct ds *ds;
2545     struct iface *iface;
2546 };
2547
2548 static void
2549 qos_unixctl_show_queue(unsigned int queue_id,
2550                        const struct smap *details,
2551                        struct iface *iface,
2552                        struct ds *ds)
2553 {
2554     struct netdev_queue_stats stats;
2555     struct smap_node *node;
2556     int error;
2557
2558     ds_put_cstr(ds, "\n");
2559     if (queue_id) {
2560         ds_put_format(ds, "Queue %u:\n", queue_id);
2561     } else {
2562         ds_put_cstr(ds, "Default:\n");
2563     }
2564
2565     SMAP_FOR_EACH (node, details) {
2566         ds_put_format(ds, "\t%s: %s\n", node->key, node->value);
2567     }
2568
2569     error = netdev_get_queue_stats(iface->netdev, queue_id, &stats);
2570     if (!error) {
2571         if (stats.tx_packets != UINT64_MAX) {
2572             ds_put_format(ds, "\ttx_packets: %"PRIu64"\n", stats.tx_packets);
2573         }
2574
2575         if (stats.tx_bytes != UINT64_MAX) {
2576             ds_put_format(ds, "\ttx_bytes: %"PRIu64"\n", stats.tx_bytes);
2577         }
2578
2579         if (stats.tx_errors != UINT64_MAX) {
2580             ds_put_format(ds, "\ttx_errors: %"PRIu64"\n", stats.tx_errors);
2581         }
2582     } else {
2583         ds_put_format(ds, "\tFailed to get statistics for queue %u: %s",
2584                       queue_id, ovs_strerror(error));
2585     }
2586 }
2587
2588 static void
2589 qos_unixctl_show(struct unixctl_conn *conn, int argc OVS_UNUSED,
2590                  const char *argv[], void *aux OVS_UNUSED)
2591 {
2592     struct ds ds = DS_EMPTY_INITIALIZER;
2593     struct smap smap = SMAP_INITIALIZER(&smap);
2594     struct iface *iface;
2595     const char *type;
2596     struct smap_node *node;
2597
2598     iface = iface_find(argv[1]);
2599     if (!iface) {
2600         unixctl_command_reply_error(conn, "no such interface");
2601         return;
2602     }
2603
2604     netdev_get_qos(iface->netdev, &type, &smap);
2605
2606     if (*type != '\0') {
2607         struct netdev_queue_dump dump;
2608         struct smap details;
2609         unsigned int queue_id;
2610
2611         ds_put_format(&ds, "QoS: %s %s\n", iface->name, type);
2612
2613         SMAP_FOR_EACH (node, &smap) {
2614             ds_put_format(&ds, "%s: %s\n", node->key, node->value);
2615         }
2616
2617         smap_init(&details);
2618         NETDEV_QUEUE_FOR_EACH (&queue_id, &details, &dump, iface->netdev) {
2619             qos_unixctl_show_queue(queue_id, &details, iface, &ds);
2620         }
2621         smap_destroy(&details);
2622
2623         unixctl_command_reply(conn, ds_cstr(&ds));
2624     } else {
2625         ds_put_format(&ds, "QoS not configured on %s\n", iface->name);
2626         unixctl_command_reply_error(conn, ds_cstr(&ds));
2627     }
2628
2629     smap_destroy(&smap);
2630     ds_destroy(&ds);
2631 }
2632 \f
2633 /* Bridge reconfiguration functions. */
2634 static void
2635 bridge_create(const struct ovsrec_bridge *br_cfg)
2636 {
2637     struct bridge *br;
2638
2639     ovs_assert(!bridge_lookup(br_cfg->name));
2640     br = xzalloc(sizeof *br);
2641
2642     br->name = xstrdup(br_cfg->name);
2643     br->type = xstrdup(ofproto_normalize_type(br_cfg->datapath_type));
2644     br->cfg = br_cfg;
2645
2646     /* Derive the default Ethernet address from the bridge's UUID.  This should
2647      * be unique and it will be stable between ovs-vswitchd runs.  */
2648     memcpy(br->default_ea, &br_cfg->header_.uuid, ETH_ADDR_LEN);
2649     eth_addr_mark_random(br->default_ea);
2650
2651     hmap_init(&br->ports);
2652     hmap_init(&br->ifaces);
2653     hmap_init(&br->iface_by_name);
2654     hmap_init(&br->mirrors);
2655
2656     hmap_insert(&all_bridges, &br->node, hash_string(br->name, 0));
2657 }
2658
2659 static void
2660 bridge_destroy(struct bridge *br)
2661 {
2662     if (br) {
2663         struct mirror *mirror, *next_mirror;
2664         struct port *port, *next_port;
2665
2666         HMAP_FOR_EACH_SAFE (port, next_port, hmap_node, &br->ports) {
2667             port_destroy(port);
2668         }
2669         HMAP_FOR_EACH_SAFE (mirror, next_mirror, hmap_node, &br->mirrors) {
2670             mirror_destroy(mirror);
2671         }
2672
2673         hmap_remove(&all_bridges, &br->node);
2674         ofproto_destroy(br->ofproto);
2675         hmap_destroy(&br->ifaces);
2676         hmap_destroy(&br->ports);
2677         hmap_destroy(&br->iface_by_name);
2678         hmap_destroy(&br->mirrors);
2679         free(br->name);
2680         free(br->type);
2681         free(br);
2682     }
2683 }
2684
2685 static struct bridge *
2686 bridge_lookup(const char *name)
2687 {
2688     struct bridge *br;
2689
2690     HMAP_FOR_EACH_WITH_HASH (br, node, hash_string(name, 0), &all_bridges) {
2691         if (!strcmp(br->name, name)) {
2692             return br;
2693         }
2694     }
2695     return NULL;
2696 }
2697
2698 /* Handle requests for a listing of all flows known by the OpenFlow
2699  * stack, including those normally hidden. */
2700 static void
2701 bridge_unixctl_dump_flows(struct unixctl_conn *conn, int argc OVS_UNUSED,
2702                           const char *argv[], void *aux OVS_UNUSED)
2703 {
2704     struct bridge *br;
2705     struct ds results;
2706
2707     br = bridge_lookup(argv[1]);
2708     if (!br) {
2709         unixctl_command_reply_error(conn, "Unknown bridge");
2710         return;
2711     }
2712
2713     ds_init(&results);
2714     ofproto_get_all_flows(br->ofproto, &results);
2715
2716     unixctl_command_reply(conn, ds_cstr(&results));
2717     ds_destroy(&results);
2718 }
2719
2720 /* "bridge/reconnect [BRIDGE]": makes BRIDGE drop all of its controller
2721  * connections and reconnect.  If BRIDGE is not specified, then all bridges
2722  * drop their controller connections and reconnect. */
2723 static void
2724 bridge_unixctl_reconnect(struct unixctl_conn *conn, int argc,
2725                          const char *argv[], void *aux OVS_UNUSED)
2726 {
2727     struct bridge *br;
2728     if (argc > 1) {
2729         br = bridge_lookup(argv[1]);
2730         if (!br) {
2731             unixctl_command_reply_error(conn,  "Unknown bridge");
2732             return;
2733         }
2734         ofproto_reconnect_controllers(br->ofproto);
2735     } else {
2736         HMAP_FOR_EACH (br, node, &all_bridges) {
2737             ofproto_reconnect_controllers(br->ofproto);
2738         }
2739     }
2740     unixctl_command_reply(conn, NULL);
2741 }
2742
2743 static size_t
2744 bridge_get_controllers(const struct bridge *br,
2745                        struct ovsrec_controller ***controllersp)
2746 {
2747     struct ovsrec_controller **controllers;
2748     size_t n_controllers;
2749
2750     controllers = br->cfg->controller;
2751     n_controllers = br->cfg->n_controller;
2752
2753     if (n_controllers == 1 && !strcmp(controllers[0]->target, "none")) {
2754         controllers = NULL;
2755         n_controllers = 0;
2756     }
2757
2758     if (controllersp) {
2759         *controllersp = controllers;
2760     }
2761     return n_controllers;
2762 }
2763
2764 static void
2765 bridge_collect_wanted_ports(struct bridge *br,
2766                             const unsigned long int *splinter_vlans,
2767                             struct shash *wanted_ports)
2768 {
2769     size_t i;
2770
2771     shash_init(wanted_ports);
2772
2773     for (i = 0; i < br->cfg->n_ports; i++) {
2774         const char *name = br->cfg->ports[i]->name;
2775         if (!shash_add_once(wanted_ports, name, br->cfg->ports[i])) {
2776             VLOG_WARN("bridge %s: %s specified twice as bridge port",
2777                       br->name, name);
2778         }
2779     }
2780     if (bridge_get_controllers(br, NULL)
2781         && !shash_find(wanted_ports, br->name)) {
2782         VLOG_WARN("bridge %s: no port named %s, synthesizing one",
2783                   br->name, br->name);
2784
2785         ovsrec_interface_init(&br->synth_local_iface);
2786         ovsrec_port_init(&br->synth_local_port);
2787
2788         br->synth_local_port.interfaces = &br->synth_local_ifacep;
2789         br->synth_local_port.n_interfaces = 1;
2790         br->synth_local_port.name = br->name;
2791
2792         br->synth_local_iface.name = br->name;
2793         br->synth_local_iface.type = "internal";
2794
2795         br->synth_local_ifacep = &br->synth_local_iface;
2796
2797         shash_add(wanted_ports, br->name, &br->synth_local_port);
2798     }
2799
2800     if (splinter_vlans) {
2801         add_vlan_splinter_ports(br, splinter_vlans, wanted_ports);
2802     }
2803 }
2804
2805 /* Deletes "struct port"s and "struct iface"s under 'br' which aren't
2806  * consistent with 'br->cfg'.  Updates 'br->if_cfg_queue' with interfaces which
2807  * 'br' needs to complete its configuration. */
2808 static void
2809 bridge_del_ports(struct bridge *br, const struct shash *wanted_ports)
2810 {
2811     struct shash_node *port_node;
2812     struct port *port, *next;
2813
2814     /* Get rid of deleted ports.
2815      * Get rid of deleted interfaces on ports that still exist. */
2816     HMAP_FOR_EACH_SAFE (port, next, hmap_node, &br->ports) {
2817         port->cfg = shash_find_data(wanted_ports, port->name);
2818         if (!port->cfg) {
2819             port_destroy(port);
2820         } else {
2821             port_del_ifaces(port);
2822         }
2823     }
2824
2825     /* Update iface->cfg and iface->type in interfaces that still exist. */
2826     SHASH_FOR_EACH (port_node, wanted_ports) {
2827         const struct ovsrec_port *port = port_node->data;
2828         size_t i;
2829
2830         for (i = 0; i < port->n_interfaces; i++) {
2831             const struct ovsrec_interface *cfg = port->interfaces[i];
2832             struct iface *iface = iface_lookup(br, cfg->name);
2833             const char *type = iface_get_type(cfg, br->cfg);
2834
2835             if (iface) {
2836                 iface->cfg = cfg;
2837                 iface->type = type;
2838             } else if (!strcmp(type, "null")) {
2839                 VLOG_WARN_ONCE("%s: The null interface type is deprecated and"
2840                                " may be removed in February 2013. Please email"
2841                                " dev@openvswitch.org with concerns.",
2842                                cfg->name);
2843             } else {
2844                 /* We will add new interfaces later. */
2845             }
2846         }
2847     }
2848 }
2849
2850 /* Initializes 'oc' appropriately as a management service controller for
2851  * 'br'.
2852  *
2853  * The caller must free oc->target when it is no longer needed. */
2854 static void
2855 bridge_ofproto_controller_for_mgmt(const struct bridge *br,
2856                                    struct ofproto_controller *oc)
2857 {
2858     oc->target = xasprintf("punix:%s/%s.mgmt", ovs_rundir(), br->name);
2859     oc->max_backoff = 0;
2860     oc->probe_interval = 60;
2861     oc->band = OFPROTO_OUT_OF_BAND;
2862     oc->rate_limit = 0;
2863     oc->burst_limit = 0;
2864     oc->enable_async_msgs = true;
2865     oc->dscp = 0;
2866 }
2867
2868 /* Converts ovsrec_controller 'c' into an ofproto_controller in 'oc'.  */
2869 static void
2870 bridge_ofproto_controller_from_ovsrec(const struct ovsrec_controller *c,
2871                                       struct ofproto_controller *oc)
2872 {
2873     int dscp;
2874
2875     oc->target = c->target;
2876     oc->max_backoff = c->max_backoff ? *c->max_backoff / 1000 : 8;
2877     oc->probe_interval = c->inactivity_probe ? *c->inactivity_probe / 1000 : 5;
2878     oc->band = (!c->connection_mode || !strcmp(c->connection_mode, "in-band")
2879                 ? OFPROTO_IN_BAND : OFPROTO_OUT_OF_BAND);
2880     oc->rate_limit = c->controller_rate_limit ? *c->controller_rate_limit : 0;
2881     oc->burst_limit = (c->controller_burst_limit
2882                        ? *c->controller_burst_limit : 0);
2883     oc->enable_async_msgs = (!c->enable_async_messages
2884                              || *c->enable_async_messages);
2885     dscp = smap_get_int(&c->other_config, "dscp", DSCP_DEFAULT);
2886     if (dscp < 0 || dscp > 63) {
2887         dscp = DSCP_DEFAULT;
2888     }
2889     oc->dscp = dscp;
2890 }
2891
2892 /* Configures the IP stack for 'br''s local interface properly according to the
2893  * configuration in 'c'.  */
2894 static void
2895 bridge_configure_local_iface_netdev(struct bridge *br,
2896                                     struct ovsrec_controller *c)
2897 {
2898     struct netdev *netdev;
2899     struct in_addr mask, gateway;
2900
2901     struct iface *local_iface;
2902     struct in_addr ip;
2903
2904     /* If there's no local interface or no IP address, give up. */
2905     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
2906     if (!local_iface || !c->local_ip
2907         || !inet_pton(AF_INET, c->local_ip, &ip)) {
2908         return;
2909     }
2910
2911     /* Bring up the local interface. */
2912     netdev = local_iface->netdev;
2913     netdev_turn_flags_on(netdev, NETDEV_UP, NULL);
2914
2915     /* Configure the IP address and netmask. */
2916     if (!c->local_netmask
2917         || !inet_pton(AF_INET, c->local_netmask, &mask)
2918         || !mask.s_addr) {
2919         mask.s_addr = guess_netmask(ip.s_addr);
2920     }
2921     if (!netdev_set_in4(netdev, ip, mask)) {
2922         VLOG_INFO("bridge %s: configured IP address "IP_FMT", netmask "IP_FMT,
2923                   br->name, IP_ARGS(ip.s_addr), IP_ARGS(mask.s_addr));
2924     }
2925
2926     /* Configure the default gateway. */
2927     if (c->local_gateway
2928         && inet_pton(AF_INET, c->local_gateway, &gateway)
2929         && gateway.s_addr) {
2930         if (!netdev_add_router(netdev, gateway)) {
2931             VLOG_INFO("bridge %s: configured gateway "IP_FMT,
2932                       br->name, IP_ARGS(gateway.s_addr));
2933         }
2934     }
2935 }
2936
2937 /* Returns true if 'a' and 'b' are the same except that any number of slashes
2938  * in either string are treated as equal to any number of slashes in the other,
2939  * e.g. "x///y" is equal to "x/y".
2940  *
2941  * Also, if 'b_stoplen' bytes from 'b' are found to be equal to corresponding
2942  * bytes from 'a', the function considers this success.  Specify 'b_stoplen' as
2943  * SIZE_MAX to compare all of 'a' to all of 'b' rather than just a prefix of
2944  * 'b' against a prefix of 'a'.
2945  */
2946 static bool
2947 equal_pathnames(const char *a, const char *b, size_t b_stoplen)
2948 {
2949     const char *b_start = b;
2950     for (;;) {
2951         if (b - b_start >= b_stoplen) {
2952             return true;
2953         } else if (*a != *b) {
2954             return false;
2955         } else if (*a == '/') {
2956             a += strspn(a, "/");
2957             b += strspn(b, "/");
2958         } else if (*a == '\0') {
2959             return true;
2960         } else {
2961             a++;
2962             b++;
2963         }
2964     }
2965 }
2966
2967 static void
2968 bridge_configure_remotes(struct bridge *br,
2969                          const struct sockaddr_in *managers, size_t n_managers)
2970 {
2971     bool disable_in_band;
2972
2973     struct ovsrec_controller **controllers;
2974     size_t n_controllers;
2975
2976     enum ofproto_fail_mode fail_mode;
2977
2978     struct ofproto_controller *ocs;
2979     size_t n_ocs;
2980     size_t i;
2981
2982     /* Check if we should disable in-band control on this bridge. */
2983     disable_in_band = smap_get_bool(&br->cfg->other_config, "disable-in-band",
2984                                     false);
2985
2986     /* Set OpenFlow queue ID for in-band control. */
2987     ofproto_set_in_band_queue(br->ofproto,
2988                               smap_get_int(&br->cfg->other_config,
2989                                            "in-band-queue", -1));
2990
2991     if (disable_in_band) {
2992         ofproto_set_extra_in_band_remotes(br->ofproto, NULL, 0);
2993     } else {
2994         ofproto_set_extra_in_band_remotes(br->ofproto, managers, n_managers);
2995     }
2996
2997     n_controllers = bridge_get_controllers(br, &controllers);
2998
2999     ocs = xmalloc((n_controllers + 1) * sizeof *ocs);
3000     n_ocs = 0;
3001
3002     bridge_ofproto_controller_for_mgmt(br, &ocs[n_ocs++]);
3003     for (i = 0; i < n_controllers; i++) {
3004         struct ovsrec_controller *c = controllers[i];
3005
3006         if (!strncmp(c->target, "punix:", 6)
3007             || !strncmp(c->target, "unix:", 5)) {
3008             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
3009             char *whitelist;
3010
3011             if (!strncmp(c->target, "unix:", 5)) {
3012                 /* Connect to a listening socket */
3013                 whitelist = xasprintf("unix:%s/", ovs_rundir());
3014                 if (strchr(c->target, '/') &&
3015                    !equal_pathnames(c->target, whitelist,
3016                      strlen(whitelist))) {
3017                     /* Absolute path specified, but not in ovs_rundir */
3018                     VLOG_ERR_RL(&rl, "bridge %s: Not connecting to socket "
3019                                   "controller \"%s\" due to possibility for "
3020                                   "remote exploit.  Instead, specify socket "
3021                                   "in whitelisted \"%s\" or connect to "
3022                                   "\"unix:%s/%s.mgmt\" (which is always "
3023                                   "available without special configuration).",
3024                                   br->name, c->target, whitelist,
3025                                   ovs_rundir(), br->name);
3026                     free(whitelist);
3027                     continue;
3028                 }
3029             } else {
3030                whitelist = xasprintf("punix:%s/%s.controller",
3031                                      ovs_rundir(), br->name);
3032                if (!equal_pathnames(c->target, whitelist, SIZE_MAX)) {
3033                    /* Prevent remote ovsdb-server users from accessing
3034                     * arbitrary Unix domain sockets and overwriting arbitrary
3035                     * local files. */
3036                    VLOG_ERR_RL(&rl, "bridge %s: Not adding Unix domain socket "
3037                                   "controller \"%s\" due to possibility of "
3038                                   "overwriting local files. Instead, specify "
3039                                   "whitelisted \"%s\" or connect to "
3040                                   "\"unix:%s/%s.mgmt\" (which is always "
3041                                   "available without special configuration).",
3042                                   br->name, c->target, whitelist,
3043                                   ovs_rundir(), br->name);
3044                    free(whitelist);
3045                    continue;
3046                }
3047             }
3048
3049             free(whitelist);
3050         }
3051
3052         bridge_configure_local_iface_netdev(br, c);
3053         bridge_ofproto_controller_from_ovsrec(c, &ocs[n_ocs]);
3054         if (disable_in_band) {
3055             ocs[n_ocs].band = OFPROTO_OUT_OF_BAND;
3056         }
3057         n_ocs++;
3058     }
3059
3060     ofproto_set_controllers(br->ofproto, ocs, n_ocs,
3061                             bridge_get_allowed_versions(br));
3062     free(ocs[0].target); /* From bridge_ofproto_controller_for_mgmt(). */
3063     free(ocs);
3064
3065     /* Set the fail-mode. */
3066     fail_mode = !br->cfg->fail_mode
3067                 || !strcmp(br->cfg->fail_mode, "standalone")
3068                     ? OFPROTO_FAIL_STANDALONE
3069                     : OFPROTO_FAIL_SECURE;
3070     ofproto_set_fail_mode(br->ofproto, fail_mode);
3071
3072     /* Configure OpenFlow controller connection snooping. */
3073     if (!ofproto_has_snoops(br->ofproto)) {
3074         struct sset snoops;
3075
3076         sset_init(&snoops);
3077         sset_add_and_free(&snoops, xasprintf("punix:%s/%s.snoop",
3078                                              ovs_rundir(), br->name));
3079         ofproto_set_snoops(br->ofproto, &snoops);
3080         sset_destroy(&snoops);
3081     }
3082 }
3083
3084 static void
3085 bridge_configure_tables(struct bridge *br)
3086 {
3087     static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
3088     int n_tables;
3089     int i, j, k;
3090
3091     n_tables = ofproto_get_n_tables(br->ofproto);
3092     j = 0;
3093     for (i = 0; i < n_tables; i++) {
3094         struct ofproto_table_settings s;
3095
3096         s.name = NULL;
3097         s.max_flows = UINT_MAX;
3098         s.groups = NULL;
3099         s.n_groups = 0;
3100         s.n_prefix_fields = 0;
3101         memset(s.prefix_fields, ~0, sizeof(s.prefix_fields));
3102
3103         if (j < br->cfg->n_flow_tables && i == br->cfg->key_flow_tables[j]) {
3104             struct ovsrec_flow_table *cfg = br->cfg->value_flow_tables[j++];
3105
3106             s.name = cfg->name;
3107             if (cfg->n_flow_limit && *cfg->flow_limit < UINT_MAX) {
3108                 s.max_flows = *cfg->flow_limit;
3109             }
3110             if (cfg->overflow_policy
3111                 && !strcmp(cfg->overflow_policy, "evict")) {
3112
3113                 s.groups = xmalloc(cfg->n_groups * sizeof *s.groups);
3114                 for (k = 0; k < cfg->n_groups; k++) {
3115                     const char *string = cfg->groups[k];
3116                     char *msg;
3117
3118                     msg = mf_parse_subfield__(&s.groups[k], &string);
3119                     if (msg) {
3120                         VLOG_WARN_RL(&rl, "bridge %s table %d: error parsing "
3121                                      "'groups' (%s)", br->name, i, msg);
3122                         free(msg);
3123                     } else if (*string) {
3124                         VLOG_WARN_RL(&rl, "bridge %s table %d: 'groups' "
3125                                      "element '%s' contains trailing garbage",
3126                                      br->name, i, cfg->groups[k]);
3127                     } else {
3128                         s.n_groups++;
3129                     }
3130                 }
3131             }
3132             /* Prefix lookup fields. */
3133             s.n_prefix_fields = 0;
3134             for (k = 0; k < cfg->n_prefixes; k++) {
3135                 const char *name = cfg->prefixes[k];
3136                 const struct mf_field *mf = mf_from_name(name);
3137                 if (!mf) {
3138                     VLOG_WARN("bridge %s: 'prefixes' with unknown field: %s",
3139                               br->name, name);
3140                     continue;
3141                 }
3142                 if (mf->flow_be32ofs < 0 || mf->n_bits % 32) {
3143                     VLOG_WARN("bridge %s: 'prefixes' with incompatible field: "
3144                               "%s", br->name, name);
3145                     continue;
3146                 }
3147                 if (s.n_prefix_fields >= ARRAY_SIZE(s.prefix_fields)) {
3148                     VLOG_WARN("bridge %s: 'prefixes' with too many fields, "
3149                               "field not used: %s", br->name, name);
3150                     continue;
3151                 }
3152                 s.prefix_fields[s.n_prefix_fields++] = mf->id;
3153             }
3154             if (s.n_prefix_fields > 0) {
3155                 int k;
3156                 struct ds ds = DS_EMPTY_INITIALIZER;
3157                 for (k = 0; k < s.n_prefix_fields; k++) {
3158                     if (k) {
3159                         ds_put_char(&ds, ',');
3160                     }
3161                     ds_put_cstr(&ds, mf_from_id(s.prefix_fields[k])->name);
3162                 }
3163                 VLOG_INFO("bridge %s table %d: Prefix lookup with: %s.",
3164                           br->name, i, ds_cstr(&ds));
3165                 ds_destroy(&ds);
3166             }
3167         }
3168
3169         ofproto_configure_table(br->ofproto, i, &s);
3170
3171         free(s.groups);
3172     }
3173     for (; j < br->cfg->n_flow_tables; j++) {
3174         VLOG_WARN_RL(&rl, "bridge %s: ignoring configuration for flow table "
3175                      "%"PRId64" not supported by this datapath", br->name,
3176                      br->cfg->key_flow_tables[j]);
3177     }
3178 }
3179
3180 static void
3181 bridge_configure_dp_desc(struct bridge *br)
3182 {
3183     ofproto_set_dp_desc(br->ofproto,
3184                         smap_get(&br->cfg->other_config, "dp-desc"));
3185 }
3186 \f
3187 /* Port functions. */
3188
3189 static struct port *
3190 port_create(struct bridge *br, const struct ovsrec_port *cfg)
3191 {
3192     struct port *port;
3193
3194     port = xzalloc(sizeof *port);
3195     port->bridge = br;
3196     port->name = xstrdup(cfg->name);
3197     port->cfg = cfg;
3198     list_init(&port->ifaces);
3199
3200     hmap_insert(&br->ports, &port->hmap_node, hash_string(port->name, 0));
3201     return port;
3202 }
3203
3204 /* Deletes interfaces from 'port' that are no longer configured for it. */
3205 static void
3206 port_del_ifaces(struct port *port)
3207 {
3208     struct iface *iface, *next;
3209     struct sset new_ifaces;
3210     size_t i;
3211
3212     /* Collect list of new interfaces. */
3213     sset_init(&new_ifaces);
3214     for (i = 0; i < port->cfg->n_interfaces; i++) {
3215         const char *name = port->cfg->interfaces[i]->name;
3216         const char *type = port->cfg->interfaces[i]->type;
3217         if (strcmp(type, "null")) {
3218             sset_add(&new_ifaces, name);
3219         }
3220     }
3221
3222     /* Get rid of deleted interfaces. */
3223     LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
3224         if (!sset_contains(&new_ifaces, iface->name)) {
3225             iface_destroy(iface);
3226         }
3227     }
3228
3229     sset_destroy(&new_ifaces);
3230 }
3231
3232 static void
3233 port_destroy(struct port *port)
3234 {
3235     if (port) {
3236         struct bridge *br = port->bridge;
3237         struct iface *iface, *next;
3238
3239         if (br->ofproto) {
3240             ofproto_bundle_unregister(br->ofproto, port);
3241         }
3242
3243         LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
3244             iface_destroy__(iface);
3245         }
3246
3247         hmap_remove(&br->ports, &port->hmap_node);
3248         free(port->name);
3249         free(port);
3250     }
3251 }
3252
3253 static struct port *
3254 port_lookup(const struct bridge *br, const char *name)
3255 {
3256     struct port *port;
3257
3258     HMAP_FOR_EACH_WITH_HASH (port, hmap_node, hash_string(name, 0),
3259                              &br->ports) {
3260         if (!strcmp(port->name, name)) {
3261             return port;
3262         }
3263     }
3264     return NULL;
3265 }
3266
3267 static bool
3268 enable_lacp(struct port *port, bool *activep)
3269 {
3270     if (!port->cfg->lacp) {
3271         /* XXX when LACP implementation has been sufficiently tested, enable by
3272          * default and make active on bonded ports. */
3273         return false;
3274     } else if (!strcmp(port->cfg->lacp, "off")) {
3275         return false;
3276     } else if (!strcmp(port->cfg->lacp, "active")) {
3277         *activep = true;
3278         return true;
3279     } else if (!strcmp(port->cfg->lacp, "passive")) {
3280         *activep = false;
3281         return true;
3282     } else {
3283         VLOG_WARN("port %s: unknown LACP mode %s",
3284                   port->name, port->cfg->lacp);
3285         return false;
3286     }
3287 }
3288
3289 static struct lacp_settings *
3290 port_configure_lacp(struct port *port, struct lacp_settings *s)
3291 {
3292     const char *lacp_time, *system_id;
3293     int priority;
3294
3295     if (!enable_lacp(port, &s->active)) {
3296         return NULL;
3297     }
3298
3299     s->name = port->name;
3300
3301     system_id = smap_get(&port->cfg->other_config, "lacp-system-id");
3302     if (system_id) {
3303         if (!ovs_scan(system_id, ETH_ADDR_SCAN_FMT,
3304                       ETH_ADDR_SCAN_ARGS(s->id))) {
3305             VLOG_WARN("port %s: LACP system ID (%s) must be an Ethernet"
3306                       " address.", port->name, system_id);
3307             return NULL;
3308         }
3309     } else {
3310         memcpy(s->id, port->bridge->ea, ETH_ADDR_LEN);
3311     }
3312
3313     if (eth_addr_is_zero(s->id)) {
3314         VLOG_WARN("port %s: Invalid zero LACP system ID.", port->name);
3315         return NULL;
3316     }
3317
3318     /* Prefer bondable links if unspecified. */
3319     priority = smap_get_int(&port->cfg->other_config, "lacp-system-priority",
3320                             0);
3321     s->priority = (priority > 0 && priority <= UINT16_MAX
3322                    ? priority
3323                    : UINT16_MAX - !list_is_short(&port->ifaces));
3324
3325     lacp_time = smap_get(&port->cfg->other_config, "lacp-time");
3326     s->fast = lacp_time && !strcasecmp(lacp_time, "fast");
3327
3328     s->fallback_ab_cfg = smap_get_bool(&port->cfg->other_config,
3329                                        "lacp-fallback-ab", false);
3330
3331     return s;
3332 }
3333
3334 static void
3335 iface_configure_lacp(struct iface *iface, struct lacp_slave_settings *s)
3336 {
3337     int priority, portid, key;
3338
3339     portid = smap_get_int(&iface->cfg->other_config, "lacp-port-id", 0);
3340     priority = smap_get_int(&iface->cfg->other_config, "lacp-port-priority",
3341                             0);
3342     key = smap_get_int(&iface->cfg->other_config, "lacp-aggregation-key", 0);
3343
3344     if (portid <= 0 || portid > UINT16_MAX) {
3345         portid = ofp_to_u16(iface->ofp_port);
3346     }
3347
3348     if (priority <= 0 || priority > UINT16_MAX) {
3349         priority = UINT16_MAX;
3350     }
3351
3352     if (key < 0 || key > UINT16_MAX) {
3353         key = 0;
3354     }
3355
3356     s->name = iface->name;
3357     s->id = portid;
3358     s->priority = priority;
3359     s->key = key;
3360 }
3361
3362 static void
3363 port_configure_bond(struct port *port, struct bond_settings *s)
3364 {
3365     const char *detect_s;
3366     struct iface *iface;
3367     int miimon_interval;
3368
3369     s->name = port->name;
3370     s->balance = BM_AB;
3371     if (port->cfg->bond_mode) {
3372         if (!bond_mode_from_string(&s->balance, port->cfg->bond_mode)) {
3373             VLOG_WARN("port %s: unknown bond_mode %s, defaulting to %s",
3374                       port->name, port->cfg->bond_mode,
3375                       bond_mode_to_string(s->balance));
3376         }
3377     } else {
3378         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
3379
3380         /* XXX: Post version 1.5.*, the default bond_mode changed from SLB to
3381          * active-backup. At some point we should remove this warning. */
3382         VLOG_WARN_RL(&rl, "port %s: Using the default bond_mode %s. Note that"
3383                      " in previous versions, the default bond_mode was"
3384                      " balance-slb", port->name,
3385                      bond_mode_to_string(s->balance));
3386     }
3387     if (s->balance == BM_SLB && port->bridge->cfg->n_flood_vlans) {
3388         VLOG_WARN("port %s: SLB bonds are incompatible with flood_vlans, "
3389                   "please use another bond type or disable flood_vlans",
3390                   port->name);
3391     }
3392
3393     miimon_interval = smap_get_int(&port->cfg->other_config,
3394                                    "bond-miimon-interval", 0);
3395     if (miimon_interval <= 0) {
3396         miimon_interval = 200;
3397     }
3398
3399     detect_s = smap_get(&port->cfg->other_config, "bond-detect-mode");
3400     if (!detect_s || !strcmp(detect_s, "carrier")) {
3401         miimon_interval = 0;
3402     } else if (strcmp(detect_s, "miimon")) {
3403         VLOG_WARN("port %s: unsupported bond-detect-mode %s, "
3404                   "defaulting to carrier", port->name, detect_s);
3405         miimon_interval = 0;
3406     }
3407
3408     s->up_delay = MAX(0, port->cfg->bond_updelay);
3409     s->down_delay = MAX(0, port->cfg->bond_downdelay);
3410     s->basis = smap_get_int(&port->cfg->other_config, "bond-hash-basis", 0);
3411     s->rebalance_interval = smap_get_int(&port->cfg->other_config,
3412                                            "bond-rebalance-interval", 10000);
3413     if (s->rebalance_interval && s->rebalance_interval < 1000) {
3414         s->rebalance_interval = 1000;
3415     }
3416
3417     s->fake_iface = port->cfg->bond_fake_iface;
3418
3419     s->lacp_fallback_ab_cfg = smap_get_bool(&port->cfg->other_config,
3420                                        "lacp-fallback-ab", false);
3421
3422     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
3423         netdev_set_miimon_interval(iface->netdev, miimon_interval);
3424     }
3425 }
3426
3427 /* Returns true if 'port' is synthetic, that is, if we constructed it locally
3428  * instead of obtaining it from the database. */
3429 static bool
3430 port_is_synthetic(const struct port *port)
3431 {
3432     return ovsdb_idl_row_is_synthetic(&port->cfg->header_);
3433 }
3434 \f
3435 /* Interface functions. */
3436
3437 static bool
3438 iface_is_internal(const struct ovsrec_interface *iface,
3439                   const struct ovsrec_bridge *br)
3440 {
3441     /* The local port and "internal" ports are always "internal". */
3442     return !strcmp(iface->type, "internal") || !strcmp(iface->name, br->name);
3443 }
3444
3445 /* Returns the correct network device type for interface 'iface' in bridge
3446  * 'br'. */
3447 static const char *
3448 iface_get_type(const struct ovsrec_interface *iface,
3449                const struct ovsrec_bridge *br)
3450 {
3451     const char *type;
3452
3453     /* The local port always has type "internal".  Other ports take
3454      * their type from the database and default to "system" if none is
3455      * specified. */
3456     if (iface_is_internal(iface, br)) {
3457         type = "internal";
3458     } else {
3459         type = iface->type[0] ? iface->type : "system";
3460     }
3461
3462     return ofproto_port_open_type(br->datapath_type, type);
3463 }
3464
3465 static void
3466 iface_destroy__(struct iface *iface)
3467 {
3468     if (iface) {
3469         struct port *port = iface->port;
3470         struct bridge *br = port->bridge;
3471
3472         if (br->ofproto && iface->ofp_port != OFPP_NONE) {
3473             ofproto_port_unregister(br->ofproto, iface->ofp_port);
3474         }
3475
3476         if (iface->ofp_port != OFPP_NONE) {
3477             hmap_remove(&br->ifaces, &iface->ofp_port_node);
3478         }
3479
3480         list_remove(&iface->port_elem);
3481         hmap_remove(&br->iface_by_name, &iface->name_node);
3482
3483         netdev_close(iface->netdev);
3484
3485         free(iface->name);
3486         free(iface);
3487     }
3488 }
3489
3490 static void
3491 iface_destroy(struct iface *iface)
3492 {
3493     if (iface) {
3494         struct port *port = iface->port;
3495
3496         iface_destroy__(iface);
3497         if (list_is_empty(&port->ifaces)) {
3498             port_destroy(port);
3499         }
3500     }
3501 }
3502
3503 static struct iface *
3504 iface_lookup(const struct bridge *br, const char *name)
3505 {
3506     struct iface *iface;
3507
3508     HMAP_FOR_EACH_WITH_HASH (iface, name_node, hash_string(name, 0),
3509                              &br->iface_by_name) {
3510         if (!strcmp(iface->name, name)) {
3511             return iface;
3512         }
3513     }
3514
3515     return NULL;
3516 }
3517
3518 static struct iface *
3519 iface_find(const char *name)
3520 {
3521     const struct bridge *br;
3522
3523     HMAP_FOR_EACH (br, node, &all_bridges) {
3524         struct iface *iface = iface_lookup(br, name);
3525
3526         if (iface) {
3527             return iface;
3528         }
3529     }
3530     return NULL;
3531 }
3532
3533 static struct iface *
3534 iface_from_ofp_port(const struct bridge *br, ofp_port_t ofp_port)
3535 {
3536     struct iface *iface;
3537
3538     HMAP_FOR_EACH_IN_BUCKET (iface, ofp_port_node, hash_ofp_port(ofp_port),
3539                              &br->ifaces) {
3540         if (iface->ofp_port == ofp_port) {
3541             return iface;
3542         }
3543     }
3544     return NULL;
3545 }
3546
3547 /* Set Ethernet address of 'iface', if one is specified in the configuration
3548  * file. */
3549 static void
3550 iface_set_mac(const struct bridge *br, const struct port *port, struct iface *iface)
3551 {
3552     uint8_t ea[ETH_ADDR_LEN], *mac = NULL;
3553     struct iface *hw_addr_iface;
3554
3555     if (strcmp(iface->type, "internal")) {
3556         return;
3557     }
3558
3559     if (iface->cfg->mac && eth_addr_from_string(iface->cfg->mac, ea)) {
3560         mac = ea;
3561     } else if (port->cfg->fake_bridge) {
3562         /* Fake bridge and no MAC set in the configuration. Pick a local one. */
3563         find_local_hw_addr(br, ea, port, &hw_addr_iface);
3564         mac = ea;
3565     }
3566
3567     if (mac) {
3568         if (iface->ofp_port == OFPP_LOCAL) {
3569             VLOG_ERR("interface %s: ignoring mac in Interface record "
3570                      "(use Bridge record to set local port's mac)",
3571                      iface->name);
3572         } else if (eth_addr_is_multicast(mac)) {
3573             VLOG_ERR("interface %s: cannot set MAC to multicast address",
3574                      iface->name);
3575         } else {
3576             int error = netdev_set_etheraddr(iface->netdev, mac);
3577             if (error) {
3578                 VLOG_ERR("interface %s: setting MAC failed (%s)",
3579                          iface->name, ovs_strerror(error));
3580             }
3581         }
3582     }
3583 }
3584
3585 /* Sets the ofport column of 'if_cfg' to 'ofport'. */
3586 static void
3587 iface_set_ofport(const struct ovsrec_interface *if_cfg, ofp_port_t ofport)
3588 {
3589     if (if_cfg && !ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
3590         int64_t port = ofport == OFPP_NONE ? -1 : ofp_to_u16(ofport);
3591         ovsrec_interface_set_ofport(if_cfg, &port, 1);
3592     }
3593 }
3594
3595 /* Clears all of the fields in 'if_cfg' that indicate interface status, and
3596  * sets the "ofport" field to -1.
3597  *
3598  * This is appropriate when 'if_cfg''s interface cannot be created or is
3599  * otherwise invalid. */
3600 static void
3601 iface_clear_db_record(const struct ovsrec_interface *if_cfg)
3602 {
3603     if (!ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
3604         iface_set_ofport(if_cfg, OFPP_NONE);
3605         ovsrec_interface_set_status(if_cfg, NULL);
3606         ovsrec_interface_set_admin_state(if_cfg, NULL);
3607         ovsrec_interface_set_duplex(if_cfg, NULL);
3608         ovsrec_interface_set_link_speed(if_cfg, NULL, 0);
3609         ovsrec_interface_set_link_state(if_cfg, NULL);
3610         ovsrec_interface_set_mac_in_use(if_cfg, NULL);
3611         ovsrec_interface_set_mtu(if_cfg, NULL, 0);
3612         ovsrec_interface_set_cfm_fault(if_cfg, NULL, 0);
3613         ovsrec_interface_set_cfm_fault_status(if_cfg, NULL, 0);
3614         ovsrec_interface_set_cfm_remote_mpids(if_cfg, NULL, 0);
3615         ovsrec_interface_set_lacp_current(if_cfg, NULL, 0);
3616         ovsrec_interface_set_statistics(if_cfg, NULL, NULL, 0);
3617         ovsrec_interface_set_ifindex(if_cfg, NULL, 0);
3618     }
3619 }
3620
3621 static bool
3622 queue_ids_include(const struct ovsdb_datum *queues, int64_t target)
3623 {
3624     union ovsdb_atom atom;
3625
3626     atom.integer = target;
3627     return ovsdb_datum_find_key(queues, &atom, OVSDB_TYPE_INTEGER) != UINT_MAX;
3628 }
3629
3630 static void
3631 iface_configure_qos(struct iface *iface, const struct ovsrec_qos *qos)
3632 {
3633     struct ofpbuf queues_buf;
3634
3635     ofpbuf_init(&queues_buf, 0);
3636
3637     if (!qos || qos->type[0] == '\0' || qos->n_queues < 1) {
3638         netdev_set_qos(iface->netdev, NULL, NULL);
3639     } else {
3640         const struct ovsdb_datum *queues;
3641         struct netdev_queue_dump dump;
3642         unsigned int queue_id;
3643         struct smap details;
3644         bool queue_zero;
3645         size_t i;
3646
3647         /* Configure top-level Qos for 'iface'. */
3648         netdev_set_qos(iface->netdev, qos->type, &qos->other_config);
3649
3650         /* Deconfigure queues that were deleted. */
3651         queues = ovsrec_qos_get_queues(qos, OVSDB_TYPE_INTEGER,
3652                                        OVSDB_TYPE_UUID);
3653         smap_init(&details);
3654         NETDEV_QUEUE_FOR_EACH (&queue_id, &details, &dump, iface->netdev) {
3655             if (!queue_ids_include(queues, queue_id)) {
3656                 netdev_delete_queue(iface->netdev, queue_id);
3657             }
3658         }
3659         smap_destroy(&details);
3660
3661         /* Configure queues for 'iface'. */
3662         queue_zero = false;
3663         for (i = 0; i < qos->n_queues; i++) {
3664             const struct ovsrec_queue *queue = qos->value_queues[i];
3665             unsigned int queue_id = qos->key_queues[i];
3666
3667             if (queue_id == 0) {
3668                 queue_zero = true;
3669             }
3670
3671             if (queue->n_dscp == 1) {
3672                 struct ofproto_port_queue *port_queue;
3673
3674                 port_queue = ofpbuf_put_uninit(&queues_buf,
3675                                                sizeof *port_queue);
3676                 port_queue->queue = queue_id;
3677                 port_queue->dscp = queue->dscp[0];
3678             }
3679
3680             netdev_set_queue(iface->netdev, queue_id, &queue->other_config);
3681         }
3682         if (!queue_zero) {
3683             struct smap details;
3684
3685             smap_init(&details);
3686             netdev_set_queue(iface->netdev, 0, &details);
3687             smap_destroy(&details);
3688         }
3689     }
3690
3691     if (iface->ofp_port != OFPP_NONE) {
3692         const struct ofproto_port_queue *port_queues = ofpbuf_data(&queues_buf);
3693         size_t n_queues = ofpbuf_size(&queues_buf) / sizeof *port_queues;
3694
3695         ofproto_port_set_queues(iface->port->bridge->ofproto, iface->ofp_port,
3696                                 port_queues, n_queues);
3697     }
3698
3699     netdev_set_policing(iface->netdev,
3700                         iface->cfg->ingress_policing_rate,
3701                         iface->cfg->ingress_policing_burst);
3702
3703     ofpbuf_uninit(&queues_buf);
3704 }
3705
3706 static void
3707 iface_configure_cfm(struct iface *iface)
3708 {
3709     const struct ovsrec_interface *cfg = iface->cfg;
3710     const char *opstate_str;
3711     const char *cfm_ccm_vlan;
3712     struct cfm_settings s;
3713     struct smap netdev_args;
3714
3715     if (!cfg->n_cfm_mpid) {
3716         ofproto_port_clear_cfm(iface->port->bridge->ofproto, iface->ofp_port);
3717         return;
3718     }
3719
3720     s.check_tnl_key = false;
3721     smap_init(&netdev_args);
3722     if (!netdev_get_config(iface->netdev, &netdev_args)) {
3723         const char *key = smap_get(&netdev_args, "key");
3724         const char *in_key = smap_get(&netdev_args, "in_key");
3725
3726         s.check_tnl_key = (key && !strcmp(key, "flow"))
3727                            || (in_key && !strcmp(in_key, "flow"));
3728     }
3729     smap_destroy(&netdev_args);
3730
3731     s.mpid = *cfg->cfm_mpid;
3732     s.interval = smap_get_int(&iface->cfg->other_config, "cfm_interval", 0);
3733     cfm_ccm_vlan = smap_get(&iface->cfg->other_config, "cfm_ccm_vlan");
3734     s.ccm_pcp = smap_get_int(&iface->cfg->other_config, "cfm_ccm_pcp", 0);
3735
3736     if (s.interval <= 0) {
3737         s.interval = 1000;
3738     }
3739
3740     if (!cfm_ccm_vlan) {
3741         s.ccm_vlan = 0;
3742     } else if (!strcasecmp("random", cfm_ccm_vlan)) {
3743         s.ccm_vlan = CFM_RANDOM_VLAN;
3744     } else {
3745         s.ccm_vlan = atoi(cfm_ccm_vlan);
3746         if (s.ccm_vlan == CFM_RANDOM_VLAN) {
3747             s.ccm_vlan = 0;
3748         }
3749     }
3750
3751     s.extended = smap_get_bool(&iface->cfg->other_config, "cfm_extended",
3752                                false);
3753     s.demand = smap_get_bool(&iface->cfg->other_config, "cfm_demand", false);
3754
3755     opstate_str = smap_get(&iface->cfg->other_config, "cfm_opstate");
3756     s.opup = !opstate_str || !strcasecmp("up", opstate_str);
3757
3758     ofproto_port_set_cfm(iface->port->bridge->ofproto, iface->ofp_port, &s);
3759 }
3760
3761 /* Returns true if 'iface' is synthetic, that is, if we constructed it locally
3762  * instead of obtaining it from the database. */
3763 static bool
3764 iface_is_synthetic(const struct iface *iface)
3765 {
3766     return ovsdb_idl_row_is_synthetic(&iface->cfg->header_);
3767 }
3768
3769 static ofp_port_t
3770 iface_validate_ofport__(size_t n, int64_t *ofport)
3771 {
3772     return (n && *ofport >= 1 && *ofport < ofp_to_u16(OFPP_MAX)
3773             ? u16_to_ofp(*ofport)
3774             : OFPP_NONE);
3775 }
3776
3777 static ofp_port_t
3778 iface_get_requested_ofp_port(const struct ovsrec_interface *cfg)
3779 {
3780     return iface_validate_ofport__(cfg->n_ofport_request, cfg->ofport_request);
3781 }
3782
3783 static ofp_port_t
3784 iface_pick_ofport(const struct ovsrec_interface *cfg)
3785 {
3786     ofp_port_t requested_ofport = iface_get_requested_ofp_port(cfg);
3787     return (requested_ofport != OFPP_NONE
3788             ? requested_ofport
3789             : iface_validate_ofport__(cfg->n_ofport, cfg->ofport));
3790 }
3791 \f
3792 /* Port mirroring. */
3793
3794 static struct mirror *
3795 mirror_find_by_uuid(struct bridge *br, const struct uuid *uuid)
3796 {
3797     struct mirror *m;
3798
3799     HMAP_FOR_EACH_IN_BUCKET (m, hmap_node, uuid_hash(uuid), &br->mirrors) {
3800         if (uuid_equals(uuid, &m->uuid)) {
3801             return m;
3802         }
3803     }
3804     return NULL;
3805 }
3806
3807 static void
3808 bridge_configure_mirrors(struct bridge *br)
3809 {
3810     const struct ovsdb_datum *mc;
3811     unsigned long *flood_vlans;
3812     struct mirror *m, *next;
3813     size_t i;
3814
3815     /* Get rid of deleted mirrors. */
3816     mc = ovsrec_bridge_get_mirrors(br->cfg, OVSDB_TYPE_UUID);
3817     HMAP_FOR_EACH_SAFE (m, next, hmap_node, &br->mirrors) {
3818         union ovsdb_atom atom;
3819
3820         atom.uuid = m->uuid;
3821         if (ovsdb_datum_find_key(mc, &atom, OVSDB_TYPE_UUID) == UINT_MAX) {
3822             mirror_destroy(m);
3823         }
3824     }
3825
3826     /* Add new mirrors and reconfigure existing ones. */
3827     for (i = 0; i < br->cfg->n_mirrors; i++) {
3828         const struct ovsrec_mirror *cfg = br->cfg->mirrors[i];
3829         struct mirror *m = mirror_find_by_uuid(br, &cfg->header_.uuid);
3830         if (!m) {
3831             m = mirror_create(br, cfg);
3832         }
3833         m->cfg = cfg;
3834         if (!mirror_configure(m)) {
3835             mirror_destroy(m);
3836         }
3837     }
3838
3839     /* Update flooded vlans (for RSPAN). */
3840     flood_vlans = vlan_bitmap_from_array(br->cfg->flood_vlans,
3841                                          br->cfg->n_flood_vlans);
3842     ofproto_set_flood_vlans(br->ofproto, flood_vlans);
3843     bitmap_free(flood_vlans);
3844 }
3845
3846 static struct mirror *
3847 mirror_create(struct bridge *br, const struct ovsrec_mirror *cfg)
3848 {
3849     struct mirror *m;
3850
3851     m = xzalloc(sizeof *m);
3852     m->uuid = cfg->header_.uuid;
3853     hmap_insert(&br->mirrors, &m->hmap_node, uuid_hash(&m->uuid));
3854     m->bridge = br;
3855     m->name = xstrdup(cfg->name);
3856
3857     return m;
3858 }
3859
3860 static void
3861 mirror_destroy(struct mirror *m)
3862 {
3863     if (m) {
3864         struct bridge *br = m->bridge;
3865
3866         if (br->ofproto) {
3867             ofproto_mirror_unregister(br->ofproto, m);
3868         }
3869
3870         hmap_remove(&br->mirrors, &m->hmap_node);
3871         free(m->name);
3872         free(m);
3873     }
3874 }
3875
3876 static void
3877 mirror_collect_ports(struct mirror *m,
3878                      struct ovsrec_port **in_ports, int n_in_ports,
3879                      void ***out_portsp, size_t *n_out_portsp)
3880 {
3881     void **out_ports = xmalloc(n_in_ports * sizeof *out_ports);
3882     size_t n_out_ports = 0;
3883     size_t i;
3884
3885     for (i = 0; i < n_in_ports; i++) {
3886         const char *name = in_ports[i]->name;
3887         struct port *port = port_lookup(m->bridge, name);
3888         if (port) {
3889             out_ports[n_out_ports++] = port;
3890         } else {
3891             VLOG_WARN("bridge %s: mirror %s cannot match on nonexistent "
3892                       "port %s", m->bridge->name, m->name, name);
3893         }
3894     }
3895     *out_portsp = out_ports;
3896     *n_out_portsp = n_out_ports;
3897 }
3898
3899 static bool
3900 mirror_configure(struct mirror *m)
3901 {
3902     const struct ovsrec_mirror *cfg = m->cfg;
3903     struct ofproto_mirror_settings s;
3904
3905     /* Set name. */
3906     if (strcmp(cfg->name, m->name)) {
3907         free(m->name);
3908         m->name = xstrdup(cfg->name);
3909     }
3910     s.name = m->name;
3911
3912     /* Get output port or VLAN. */
3913     if (cfg->output_port) {
3914         s.out_bundle = port_lookup(m->bridge, cfg->output_port->name);
3915         if (!s.out_bundle) {
3916             VLOG_ERR("bridge %s: mirror %s outputs to port not on bridge",
3917                      m->bridge->name, m->name);
3918             return false;
3919         }
3920         s.out_vlan = UINT16_MAX;
3921
3922         if (cfg->output_vlan) {
3923             VLOG_ERR("bridge %s: mirror %s specifies both output port and "
3924                      "output vlan; ignoring output vlan",
3925                      m->bridge->name, m->name);
3926         }
3927     } else if (cfg->output_vlan) {
3928         /* The database should prevent invalid VLAN values. */
3929         s.out_bundle = NULL;
3930         s.out_vlan = *cfg->output_vlan;
3931     } else {
3932         VLOG_ERR("bridge %s: mirror %s does not specify output; ignoring",
3933                  m->bridge->name, m->name);
3934         return false;
3935     }
3936
3937     /* Get port selection. */
3938     if (cfg->select_all) {
3939         size_t n_ports = hmap_count(&m->bridge->ports);
3940         void **ports = xmalloc(n_ports * sizeof *ports);
3941         struct port *port;
3942         size_t i;
3943
3944         i = 0;
3945         HMAP_FOR_EACH (port, hmap_node, &m->bridge->ports) {
3946             ports[i++] = port;
3947         }
3948
3949         s.srcs = ports;
3950         s.n_srcs = n_ports;
3951
3952         s.dsts = ports;
3953         s.n_dsts = n_ports;
3954     } else {
3955         /* Get ports, dropping ports that don't exist.
3956          * The IDL ensures that there are no duplicates. */
3957         mirror_collect_ports(m, cfg->select_src_port, cfg->n_select_src_port,
3958                              &s.srcs, &s.n_srcs);
3959         mirror_collect_ports(m, cfg->select_dst_port, cfg->n_select_dst_port,
3960                              &s.dsts, &s.n_dsts);
3961     }
3962
3963     /* Get VLAN selection. */
3964     s.src_vlans = vlan_bitmap_from_array(cfg->select_vlan, cfg->n_select_vlan);
3965
3966     /* Configure. */
3967     ofproto_mirror_register(m->bridge->ofproto, m, &s);
3968
3969     /* Clean up. */
3970     if (s.srcs != s.dsts) {
3971         free(s.dsts);
3972     }
3973     free(s.srcs);
3974     free(s.src_vlans);
3975
3976     return true;
3977 }
3978 \f
3979 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
3980  *
3981  * This is deprecated.  It is only for compatibility with broken device drivers
3982  * in old versions of Linux that do not properly support VLANs when VLAN
3983  * devices are not used.  When broken device drivers are no longer in
3984  * widespread use, we will delete these interfaces. */
3985
3986 static struct ovsrec_port **recs;
3987 static size_t n_recs, allocated_recs;
3988
3989 /* Adds 'rec' to a list of recs that have to be destroyed when the VLAN
3990  * splinters are reconfigured. */
3991 static void
3992 register_rec(struct ovsrec_port *rec)
3993 {
3994     if (n_recs >= allocated_recs) {
3995         recs = x2nrealloc(recs, &allocated_recs, sizeof *recs);
3996     }
3997     recs[n_recs++] = rec;
3998 }
3999
4000 /* Frees all of the ports registered with register_reg(). */
4001 static void
4002 free_registered_recs(void)
4003 {
4004     size_t i;
4005
4006     for (i = 0; i < n_recs; i++) {
4007         struct ovsrec_port *port = recs[i];
4008         size_t j;
4009
4010         for (j = 0; j < port->n_interfaces; j++) {
4011             struct ovsrec_interface *iface = port->interfaces[j];
4012             free(iface->name);
4013             free(iface);
4014         }
4015
4016         smap_destroy(&port->other_config);
4017         free(port->interfaces);
4018         free(port->name);
4019         free(port->tag);
4020         free(port);
4021     }
4022     n_recs = 0;
4023 }
4024
4025 /* Returns true if VLAN splinters are enabled on 'iface_cfg', false
4026  * otherwise. */
4027 static bool
4028 vlan_splinters_is_enabled(const struct ovsrec_interface *iface_cfg)
4029 {
4030     return smap_get_bool(&iface_cfg->other_config, "enable-vlan-splinters",
4031                          false);
4032 }
4033
4034 /* Figures out the set of VLANs that are in use for the purpose of VLAN
4035  * splinters.
4036  *
4037  * If VLAN splinters are enabled on at least one interface and any VLANs are in
4038  * use, returns a 4096-bit bitmap with a 1-bit for each in-use VLAN (bits 0 and
4039  * 4095 will not be set).  The caller is responsible for freeing the bitmap,
4040  * with free().
4041  *
4042  * If VLANs splinters are not enabled on any interface or if no VLANs are in
4043  * use, returns NULL.
4044  *
4045  * Updates 'vlan_splinters_enabled_anywhere'. */
4046 static unsigned long int *
4047 collect_splinter_vlans(const struct ovsrec_open_vswitch *ovs_cfg)
4048 {
4049     unsigned long int *splinter_vlans;
4050     struct sset splinter_ifaces;
4051     const char *real_dev_name;
4052     struct shash *real_devs;
4053     struct shash_node *node;
4054     struct bridge *br;
4055     size_t i;
4056
4057     /* Free space allocated for synthesized ports and interfaces, since we're
4058      * in the process of reconstructing all of them. */
4059     free_registered_recs();
4060
4061     splinter_vlans = bitmap_allocate(4096);
4062     sset_init(&splinter_ifaces);
4063     vlan_splinters_enabled_anywhere = false;
4064     for (i = 0; i < ovs_cfg->n_bridges; i++) {
4065         struct ovsrec_bridge *br_cfg = ovs_cfg->bridges[i];
4066         size_t j;
4067
4068         for (j = 0; j < br_cfg->n_ports; j++) {
4069             struct ovsrec_port *port_cfg = br_cfg->ports[j];
4070             int k;
4071
4072             for (k = 0; k < port_cfg->n_interfaces; k++) {
4073                 struct ovsrec_interface *iface_cfg = port_cfg->interfaces[k];
4074
4075                 if (vlan_splinters_is_enabled(iface_cfg)) {
4076                     vlan_splinters_enabled_anywhere = true;
4077                     sset_add(&splinter_ifaces, iface_cfg->name);
4078                     vlan_bitmap_from_array__(port_cfg->trunks,
4079                                              port_cfg->n_trunks,
4080                                              splinter_vlans);
4081                 }
4082             }
4083
4084             if (port_cfg->tag && *port_cfg->tag > 0 && *port_cfg->tag < 4095) {
4085                 bitmap_set1(splinter_vlans, *port_cfg->tag);
4086             }
4087         }
4088     }
4089
4090     if (!vlan_splinters_enabled_anywhere) {
4091         free(splinter_vlans);
4092         sset_destroy(&splinter_ifaces);
4093         return NULL;
4094     }
4095
4096     HMAP_FOR_EACH (br, node, &all_bridges) {
4097         if (br->ofproto) {
4098             ofproto_get_vlan_usage(br->ofproto, splinter_vlans);
4099         }
4100     }
4101
4102     /* Don't allow VLANs 0 or 4095 to be splintered.  VLAN 0 should appear on
4103      * the real device.  VLAN 4095 is reserved and Linux doesn't allow a VLAN
4104      * device to be created for it. */
4105     bitmap_set0(splinter_vlans, 0);
4106     bitmap_set0(splinter_vlans, 4095);
4107
4108     /* Delete all VLAN devices that we don't need. */
4109     vlandev_refresh();
4110     real_devs = vlandev_get_real_devs();
4111     SHASH_FOR_EACH (node, real_devs) {
4112         const struct vlan_real_dev *real_dev = node->data;
4113         const struct vlan_dev *vlan_dev;
4114         bool real_dev_has_splinters;
4115
4116         real_dev_has_splinters = sset_contains(&splinter_ifaces,
4117                                                real_dev->name);
4118         HMAP_FOR_EACH (vlan_dev, hmap_node, &real_dev->vlan_devs) {
4119             if (!real_dev_has_splinters
4120                 || !bitmap_is_set(splinter_vlans, vlan_dev->vid)) {
4121                 struct netdev *netdev;
4122
4123                 if (!netdev_open(vlan_dev->name, "system", &netdev)) {
4124                     if (!netdev_get_in4(netdev, NULL, NULL) ||
4125                         !netdev_get_in6(netdev, NULL)) {
4126                         /* It has an IP address configured, so we don't own
4127                          * it.  Don't delete it. */
4128                     } else {
4129                         vlandev_del(vlan_dev->name);
4130                     }
4131                     netdev_close(netdev);
4132                 }
4133             }
4134
4135         }
4136     }
4137
4138     /* Add all VLAN devices that we need. */
4139     SSET_FOR_EACH (real_dev_name, &splinter_ifaces) {
4140         int vid;
4141
4142         BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
4143             if (!vlandev_get_name(real_dev_name, vid)) {
4144                 vlandev_add(real_dev_name, vid);
4145             }
4146         }
4147     }
4148
4149     vlandev_refresh();
4150
4151     sset_destroy(&splinter_ifaces);
4152
4153     if (bitmap_scan(splinter_vlans, 1, 0, 4096) >= 4096) {
4154         free(splinter_vlans);
4155         return NULL;
4156     }
4157     return splinter_vlans;
4158 }
4159
4160 /* Pushes the configure of VLAN splinter port 'port' (e.g. eth0.9) down to
4161  * ofproto.  */
4162 static void
4163 configure_splinter_port(struct port *port)
4164 {
4165     struct ofproto *ofproto = port->bridge->ofproto;
4166     ofp_port_t realdev_ofp_port;
4167     const char *realdev_name;
4168     struct iface *vlandev, *realdev;
4169
4170     ofproto_bundle_unregister(port->bridge->ofproto, port);
4171
4172     vlandev = CONTAINER_OF(list_front(&port->ifaces), struct iface,
4173                            port_elem);
4174
4175     realdev_name = smap_get(&port->cfg->other_config, "realdev");
4176     realdev = iface_lookup(port->bridge, realdev_name);
4177     realdev_ofp_port = realdev ? realdev->ofp_port : 0;
4178
4179     ofproto_port_set_realdev(ofproto, vlandev->ofp_port, realdev_ofp_port,
4180                              *port->cfg->tag);
4181 }
4182
4183 static struct ovsrec_port *
4184 synthesize_splinter_port(const char *real_dev_name,
4185                          const char *vlan_dev_name, int vid)
4186 {
4187     struct ovsrec_interface *iface;
4188     struct ovsrec_port *port;
4189
4190     iface = xmalloc(sizeof *iface);
4191     ovsrec_interface_init(iface);
4192     iface->name = xstrdup(vlan_dev_name);
4193     iface->type = "system";
4194
4195     port = xmalloc(sizeof *port);
4196     ovsrec_port_init(port);
4197     port->interfaces = xmemdup(&iface, sizeof iface);
4198     port->n_interfaces = 1;
4199     port->name = xstrdup(vlan_dev_name);
4200     port->vlan_mode = "splinter";
4201     port->tag = xmalloc(sizeof *port->tag);
4202     *port->tag = vid;
4203
4204     smap_add(&port->other_config, "realdev", real_dev_name);
4205
4206     register_rec(port);
4207     return port;
4208 }
4209
4210 /* For each interface with 'br' that has VLAN splinters enabled, adds a
4211  * corresponding ovsrec_port to 'ports' for each splinter VLAN marked with a
4212  * 1-bit in the 'splinter_vlans' bitmap. */
4213 static void
4214 add_vlan_splinter_ports(struct bridge *br,
4215                         const unsigned long int *splinter_vlans,
4216                         struct shash *ports)
4217 {
4218     size_t i;
4219
4220     /* We iterate through 'br->cfg->ports' instead of 'ports' here because
4221      * we're modifying 'ports'. */
4222     for (i = 0; i < br->cfg->n_ports; i++) {
4223         const char *name = br->cfg->ports[i]->name;
4224         struct ovsrec_port *port_cfg = shash_find_data(ports, name);
4225         size_t j;
4226
4227         for (j = 0; j < port_cfg->n_interfaces; j++) {
4228             struct ovsrec_interface *iface_cfg = port_cfg->interfaces[j];
4229
4230             if (vlan_splinters_is_enabled(iface_cfg)) {
4231                 const char *real_dev_name;
4232                 uint16_t vid;
4233
4234                 real_dev_name = iface_cfg->name;
4235                 BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
4236                     const char *vlan_dev_name;
4237
4238                     vlan_dev_name = vlandev_get_name(real_dev_name, vid);
4239                     if (vlan_dev_name
4240                         && !shash_find(ports, vlan_dev_name)) {
4241                         shash_add(ports, vlan_dev_name,
4242                                   synthesize_splinter_port(
4243                                       real_dev_name, vlan_dev_name, vid));
4244                     }
4245                 }
4246             }
4247         }
4248     }
4249 }
4250
4251 static void
4252 mirror_refresh_stats(struct mirror *m)
4253 {
4254     struct ofproto *ofproto = m->bridge->ofproto;
4255     uint64_t tx_packets, tx_bytes;
4256     char *keys[2];
4257     int64_t values[2];
4258     size_t stat_cnt = 0;
4259
4260     if (ofproto_mirror_get_stats(ofproto, m, &tx_packets, &tx_bytes)) {
4261         ovsrec_mirror_set_statistics(m->cfg, NULL, NULL, 0);
4262         return;
4263     }
4264
4265     if (tx_packets != UINT64_MAX) {
4266         keys[stat_cnt] = "tx_packets";
4267         values[stat_cnt] = tx_packets;
4268         stat_cnt++;
4269     }
4270     if (tx_bytes != UINT64_MAX) {
4271         keys[stat_cnt] = "tx_bytes";
4272         values[stat_cnt] = tx_bytes;
4273         stat_cnt++;
4274     }
4275
4276     ovsrec_mirror_set_statistics(m->cfg, keys, values, stat_cnt);
4277 }