ugw/ugw.c

   1 /**************************************************************************/
   2 /* CAN user space gateway for performance benchmarks                      */
   3 /* Copyright (C) 2013, 2014 Michal Sojka, DCE, FEE, CTU Prague            */
   4 /* License: GPLv2                                                         */
   5 /**************************************************************************/
   6
   7 #define _GNU_SOURCE
   8 #include <sys/socket.h>
   9 #include <linux/can.h>
  10 #include <sys/ioctl.h>
  11 #include <net/if.h>
  12 #include <string.h>
  13 #include <unistd.h>
  14 #include <stdlib.h>
  15 #include <stdio.h>
  16 #include <time.h>
  17 #include <stdbool.h>
  18 #include <linux/if_ether.h>
  19 #include <linux/if_packet.h>
  20 #include <poll.h>
  21 #include <sys/mman.h>
  22 #include <arpa/inet.h>
  23 #include <fcntl.h>
  24 #include <errno.h>
  25 #include <signal.h>
  26
  27 #ifndef SO_BUSY_POLL
  28 #define SO_BUSY_POLL 46
  29 #endif
  30
  31 #define FRAME_SIZE 256
  32 #define BLOCK_SIZE 4096
  33 #define BLOCK_NR 2
  34 #define FRAME_NR (BLOCK_NR*(BLOCK_SIZE/FRAME_SIZE))
  35
  36 #define STRINGIFY(val) #val
  37 #define TOSTRING(val) STRINGIFY(val)
  38 #define CHECK(cmd) ({ int ret = (cmd); if (ret == -1) { perror(#cmd " line " TOSTRING(__LINE__)); exit(1); }; ret; })
  39 #define CHECKPTR(cmd) ({ void *ptr = (cmd); if (ptr == (void*)-1) { perror(#cmd " line " TOSTRING(__LINE__)); exit(1); }; ptr; })
  40
  41 char *devin = "can0";
  42 char *devout = "can1";
  43 enum { IN_READ, IN_RECVMMSG, IN_MMAP, IN_MMAPBUSY } in_method = IN_READ;
  44 enum { WRITE, OUT_MMAP } out_method = WRITE;
  45 bool quiet = false;
  46 int busy_poll_us = 0;
  47 bool nonblocking = false;
  48
  49 enum in2out {
  50         STORE_ONLY,
  51         SEND,
  52         NOP,
  53 };
  54
  55
  56 #define VERBOSE(format, ...) do { if (!quiet) fprintf(stderr, format, ##__VA_ARGS__); } while (0)
  57
  58 struct in_ctx {
  59         int s;
  60         void *ptr;
  61         int hdrlen;
  62         int current;
  63         enum in2out (*in_fn)(struct in_ctx *ctx, struct can_frame *cf);
  64 };
  65
  66 struct out_ctx {
  67         int s;
  68         enum in2out from_in;
  69         void *ptr;
  70         int hdrlen;
  71         int current;
  72         int (*out_fn)(struct out_ctx *ctx, struct can_frame *cf);
  73 };
  74
  75 struct stats {
  76         int store;
  77         int send;
  78 } stats;
  79
  80 void sigint(int v)
  81 {
  82         printf("store:%d\nsend:%d\ntotal:%d\n",
  83                stats.store, stats.send, stats.store + stats.send);
  84         exit(0);
  85 }
  86
  87 enum in2out in_read(struct in_ctx *ctx, struct can_frame *cf)
  88 {
  89         int ret = read(ctx->s, cf, sizeof(*cf));
  90         if (nonblocking && ret == -1 && errno == EAGAIN)
  91                 return NOP;
  92         if (ret != sizeof(*cf)) {
  93                 perror("read");
  94                 exit(1);
  95         }
  96         return SEND;
  97 }
  98
  99 void init_read(struct in_ctx *ctx)
 100 {
 101         int s;
 102         struct sockaddr_can addr;
 103         struct ifreq ifr;
 104
 105         s = CHECK(socket(PF_CAN, SOCK_RAW, CAN_RAW));
 106
 107         if (nonblocking) {
 108                 int flags = CHECK(fcntl(s, F_GETFL, 0));
 109                 CHECK(fcntl(s, F_SETFL, flags | O_NONBLOCK));
 110         }
 111
 112         if (busy_poll_us) {
 113                 CHECK(setsockopt(s, SOL_SOCKET, SO_BUSY_POLL,
 114                                  &busy_poll_us, sizeof(busy_poll_us)));
 115         }
 116
 117         strncpy(ifr.ifr_name, devin, sizeof(ifr.ifr_name));
 118         if (-1 == ioctl(s, SIOCGIFINDEX, &ifr)) {
 119                 perror(devin);
 120                 exit(1);
 121         }
 122
 123         addr.can_family = AF_CAN;
 124         addr.can_ifindex = ifr.ifr_ifindex;
 125
 126         CHECK(bind(s, (struct sockaddr *)&addr, sizeof(addr)));
 127
 128         ctx->s = s;
 129         ctx->in_fn = in_read;
 130 }
 131
 132 enum in2out in_packet_rx(struct in_ctx *ctx, struct can_frame *cf)
 133 {
 134         volatile struct tpacket2_hdr *hdr = ctx->ptr + ctx->current*FRAME_SIZE;
 135         int ret = -1;
 136
 137         while (hdr->tp_status == TP_STATUS_KERNEL) {
 138                 if (in_method != IN_MMAPBUSY) {
 139                         struct pollfd pfd = {.fd = ctx->s, .revents = 0,
 140                                              .events = POLLIN|POLLRDNORM|POLLERR };
 141                         ret = CHECK(poll(&pfd, 1, -1));
 142                 }
 143         }
 144         //struct sockaddr_ll *addr = (void*)hdr + TPACKET_ALIGN(ctx->hdrlen);
 145         (void)ret;
 146         struct can_frame *cf_mmap = (void*)hdr + hdr->tp_mac;
 147         *cf = *cf_mmap;
 148         hdr->tp_status = 0;
 149         ctx->current = (ctx->current + 1) % FRAME_NR;
 150         hdr = ctx->ptr + ctx->current*FRAME_SIZE;
 151         return (hdr->tp_status == TP_STATUS_KERNEL) ? SEND : STORE_ONLY;
 152 }
 153
 154
 155 void init_packet_rx(struct in_ctx *ctx)
 156 {
 157         int s;
 158         struct sockaddr_ll my_addr;
 159         struct ifreq ifr;
 160
 161         s = CHECK(socket(PF_PACKET, SOCK_RAW, htons(ETH_P_ALL)));
 162
 163         if (busy_poll_us) {
 164                 CHECK(setsockopt(s, SOL_SOCKET, SO_BUSY_POLL,
 165                                  &busy_poll_us, sizeof(busy_poll_us)));
 166         }
 167
 168         int val = TPACKET_V2;
 169         CHECK(setsockopt(s, SOL_PACKET, PACKET_VERSION, &val, sizeof(val)));
 170         socklen_t len = sizeof(ctx->hdrlen);
 171         CHECK(getsockopt(s, SOL_PACKET, PACKET_HDRLEN, &ctx->hdrlen, &len));
 172
 173         strncpy (ifr.ifr_name, devin, sizeof(ifr.ifr_name));
 174         CHECK(ioctl(s, SIOCGIFINDEX, &ifr));
 175
 176         my_addr.sll_family = AF_PACKET;
 177         my_addr.sll_protocol = htons(ETH_P_ALL);
 178         my_addr.sll_ifindex =  ifr.ifr_ifindex;
 179
 180         CHECK(bind(s, (struct sockaddr *)&my_addr, sizeof(struct sockaddr_ll)));
 181
 182         struct tpacket_req req = {
 183                 .tp_block_size = BLOCK_SIZE,
 184                 .tp_frame_size = FRAME_SIZE,
 185                 .tp_block_nr   = BLOCK_NR,
 186                 .tp_frame_nr   = FRAME_NR,
 187         };
 188         CHECK(setsockopt(s, SOL_PACKET, PACKET_RX_RING, (char *)&req, sizeof(req)));
 189
 190         ctx->ptr = (char*)CHECKPTR(mmap(0, BLOCK_SIZE*BLOCK_NR, PROT_READ|PROT_WRITE, MAP_SHARED, s, 0));
 191
 192         ctx->s = s;
 193         ctx->in_fn = in_packet_rx;
 194         ctx->current = 0;
 195 }
 196
 197 int out_write(struct out_ctx *ctx, struct can_frame *cf)
 198 {
 199         if (ctx->from_in == NOP)
 200                 return 0;
 201
 202         int ret = write(ctx->s, cf, sizeof(*cf));
 203         if (ret != sizeof(*cf)) {
 204                 perror("write");
 205                 exit(1);
 206         }
 207         return 0;
 208 }
 209
 210 void init_write(struct out_ctx *ctx)
 211 {
 212         int s;
 213         struct sockaddr_can addr;
 214         struct ifreq ifr;
 215
 216         s = CHECK(socket(PF_CAN, SOCK_RAW, CAN_RAW));
 217
 218         strncpy(ifr.ifr_name, devout, sizeof(ifr.ifr_name));
 219         if (-1 == ioctl(s, SIOCGIFINDEX, &ifr)) {
 220                 perror(devout);
 221                 exit(1);
 222         }
 223
 224         addr.can_family = AF_CAN;
 225         addr.can_ifindex = ifr.ifr_ifindex;
 226
 227         CHECK(bind(s, (struct sockaddr *)&addr, sizeof(addr)));
 228
 229         ctx->s = s;
 230         ctx->out_fn = out_write;
 231 }
 232
 233 int out_packet_tx(struct out_ctx *ctx, struct can_frame *cf)
 234 {
 235         volatile struct tpacket2_hdr *hdr = ctx->ptr + ctx->current*FRAME_SIZE;
 236         int ret = -1;
 237
 238         if (ctx->from_in == NOP)
 239                 return 0;
 240
 241
 242         while (hdr->tp_status != TP_STATUS_AVAILABLE) {
 243                 struct pollfd pfd = {.fd = ctx->s, .revents = 0,
 244                                      .events = POLLIN|POLLRDNORM|POLLERR };
 245                 ret = CHECK(poll(&pfd, 1, -1));
 246         }
 247         (void)ret;
 248         //struct sockaddr_ll *addr = (void*)hdr + TPACKET_HDRLEN - sizeof(struct sockaddr_ll);
 249         struct can_frame *cf_mmap = (void*)hdr + TPACKET_HDRLEN  - sizeof(struct sockaddr_ll);
 250         *cf_mmap = *cf;
 251         hdr->tp_len = sizeof(*cf);
 252         hdr->tp_status = TP_STATUS_SEND_REQUEST;
 253         ctx->current = (ctx->current + 1) % FRAME_NR;
 254
 255         if (ctx->from_in == SEND){
 256                 ret = CHECK(send(ctx->s, NULL, 0, 0));
 257                 return 0;
 258         }
 259         return 0;
 260 }
 261
 262
 263 void init_packet_tx(struct out_ctx *ctx)
 264 {
 265         int s;
 266         struct sockaddr_ll my_addr;
 267         struct ifreq ifr;
 268
 269         s = CHECK(socket(PF_PACKET, SOCK_RAW, htons(ETH_P_ALL)));
 270
 271         int val = TPACKET_V2;
 272         CHECK(setsockopt(s, SOL_PACKET, PACKET_VERSION, &val, sizeof(val)));
 273         socklen_t len = sizeof(ctx->hdrlen);
 274         CHECK(getsockopt(s, SOL_PACKET, PACKET_HDRLEN, &ctx->hdrlen, &len));
 275
 276         strncpy (ifr.ifr_name, devout, sizeof(ifr.ifr_name));
 277         CHECK(ioctl(s, SIOCGIFINDEX, &ifr));
 278
 279         my_addr.sll_family = AF_PACKET;
 280         my_addr.sll_protocol = htons(ETH_P_CAN);
 281         my_addr.sll_ifindex =  ifr.ifr_ifindex;
 282
 283         CHECK(bind(s, (struct sockaddr *)&my_addr, sizeof(struct sockaddr_ll)));
 284
 285         struct tpacket_req req = {
 286                 .tp_block_size = BLOCK_SIZE,
 287                 .tp_frame_size = FRAME_SIZE,
 288                 .tp_block_nr   = BLOCK_NR,
 289                 .tp_frame_nr   = FRAME_NR,
 290         };
 291         CHECK(setsockopt(s, SOL_PACKET, PACKET_TX_RING, (char *)&req, sizeof(req)));
 292
 293         ctx->ptr = (char*)CHECKPTR(mmap(0, BLOCK_SIZE*BLOCK_NR, PROT_READ|PROT_WRITE, MAP_SHARED, s, 0));
 294
 295         ctx->s = s;
 296         ctx->out_fn = out_packet_tx;
 297         ctx->current = 0;
 298 }
 299
 300 void init_in(struct in_ctx *in)
 301 {
 302         memset(in, 0, sizeof(*in));
 303         switch (in_method) {
 304         case IN_READ:
 305                 init_read(in);
 306                 break;
 307         case IN_MMAP:
 308         case IN_MMAPBUSY:
 309                 init_packet_rx(in);
 310                 break;
 311         default:
 312                 fprintf(stderr, "Unknown \"in method\" %d\n", in_method);
 313                 exit(1);
 314         }
 315 }
 316
 317 int in(struct in_ctx *ctx, struct can_frame *cf)
 318 {
 319         return ctx->in_fn(ctx, cf);
 320 }
 321
 322 void init_out(struct out_ctx *out)
 323 {
 324         memset(out, 0, sizeof(*out));
 325         switch (out_method) {
 326         case WRITE: init_write(out); break;
 327         case OUT_MMAP: init_packet_tx(out); break;
 328         default:
 329                 fprintf(stderr, "Unknown \"out method\" %d\n", out_method);
 330                 exit(1);
 331         }
 332 }
 333
 334 int out(struct out_ctx *ctx, struct can_frame *cf)
 335 {
 336         return ctx->out_fn(ctx, cf);
 337 }
 338
 339 void gw()
 340 {
 341         struct in_ctx    ic;
 342         struct out_ctx   oc;
 343         struct can_frame cf;
 344
 345         init_in(&ic);
 346         init_out(&oc);
 347
 348         VERBOSE("UGW started\n");
 349
 350         while (1) {
 351                 oc.from_in = in(&ic, &cf);
 352                 switch (oc.from_in) {
 353                 case SEND:       stats.send++;  break;
 354                 case STORE_ONLY: stats.store++; break;
 355                 case NOP:                       break;
 356                 }
 357                 out(&oc, &cf);
 358         }
 359 }
 360
 361
 362 int main(int argc, char *argv[])
 363 {
 364         int opt;
 365
 366         while ((opt = getopt(argc, argv, "b:nqr:t:")) != -1) {
 367                 switch (opt) {
 368                 case 'b':
 369                         busy_poll_us = atoi(optarg);
 370                         break;
 371                 case 'n':
 372                         nonblocking = true;
 373                         break;
 374                 case 'q':
 375                         quiet = true;
 376                         break;
 377                 case 'r':
 378                         if (strcmp(optarg, "read") == 0)
 379                                 in_method = IN_READ;
 380                         else if (strcmp(optarg, "mmap") == 0)
 381                                 in_method = IN_MMAP;
 382                         else if (strcmp(optarg, "mmapbusy") == 0)
 383                                 in_method = IN_MMAPBUSY;
 384                         else {
 385                                 fprintf(stderr, "Unsuported RX method: %s\n", optarg);
 386                                 exit(1);
 387                         }
 388                         break;
 389                 case 't':
 390                         if (strcmp(optarg, "write") == 0)
 391                                 out_method = WRITE;
 392                         else if (strcmp(optarg, "mmap") == 0)
 393                                 out_method = OUT_MMAP;
 394                         else {
 395                                 fprintf(stderr, "Unsuported TX method: %s\n", optarg);
 396                                 exit(1);
 397                         }
 398                         break;
 399                 default: /* '?' */
 400                         fprintf(stderr, "Usage: %s [in_interface out_interface]\n",
 401                                 argv[0]);
 402                         exit(EXIT_FAILURE);
 403                 }
 404         }
 405
 406         if (optind < argc)
 407                 devin  = argv[optind];
 408         if (optind+1 < argc)
 409                 devout = argv[optind+1];
 410
 411         signal(SIGINT, sigint);
 412         gw();
 413
 414         return 0;
 415 }