ugw/ugw.c

   1 /**************************************************************************/
   2 /* CAN user space gateway for performance benchmarks                      */
   3 /* Copyright (C) 2013, 2014 Michal Sojka, DCE, FEE, CTU Prague            */
   4 /* License: GPLv2                                                         */
   5 /**************************************************************************/
   6
   7 #define _GNU_SOURCE
   8 #include <sys/socket.h>
   9 #include <linux/can.h>
  10 #include <sys/ioctl.h>
  11 #include <net/if.h>
  12 #include <string.h>
  13 #include <unistd.h>
  14 #include <stdlib.h>
  15 #include <stdio.h>
  16 #include <time.h>
  17 #include <stdbool.h>
  18 #include <linux/if_ether.h>
  19 #include <linux/if_packet.h>
  20 #include <poll.h>
  21 #include <sys/mman.h>
  22 #include <arpa/inet.h>
  23 #include <fcntl.h>
  24 #include <errno.h>
  25 #include <signal.h>
  26
  27 #ifndef SO_BUSY_POLL
  28 #define SO_BUSY_POLL 46
  29 #endif
  30
  31 #define FRAME_SIZE 128
  32 #define BLOCK_SIZE 4096
  33 #define BLOCK_NR 2
  34 #define FRAME_NR (BLOCK_NR*(BLOCK_SIZE/FRAME_SIZE))
  35
  36 #define STRINGIFY(val) #val
  37 #define TOSTRING(val) STRINGIFY(val)
  38 #define CHECK(cmd) ({ int ret = (cmd); if (ret == -1) { perror(#cmd " line " TOSTRING(__LINE__)); exit(1); }; ret; })
  39 #define CHECKPTR(cmd) ({ void *ptr = (cmd); if (ptr == (void*)-1) { perror(#cmd " line " TOSTRING(__LINE__)); exit(1); }; ptr; })
  40
  41 char *devin = "can0";
  42 char *devout = "can1";
  43 enum { IN_READ, IN_RECVMMSG, IN_MMAP, IN_MMAPBUSY } in_method = IN_READ;
  44 enum { WRITE, OUT_MMAP } out_method = WRITE;
  45 bool quiet = false;
  46 int busy_poll_us = 0;
  47 bool nonblocking = false;
  48
  49 enum in2out {
  50         STORE_ONLY,
  51         SEND,
  52         NOP,
  53 };
  54
  55
  56 #define VERBOSE(format, ...) do { if (!quiet) fprintf(stderr, format, ##__VA_ARGS__); } while (0)
  57
  58 struct in_ctx {
  59         int s;
  60         void *ptr;
  61         int hdrlen;
  62         int current;
  63         enum in2out (*in_fn)(struct in_ctx *ctx, struct can_frame *cf);
  64 };
  65
  66 struct out_ctx {
  67         int s;
  68         enum in2out from_in;
  69         void *ptr;
  70         int hdrlen;
  71         int current;
  72         int (*out_fn)(struct out_ctx *ctx, struct can_frame *cf);
  73 };
  74
  75 struct stats {
  76         int store;
  77         int send;
  78 } stats;
  79
  80 void sigint(int v)
  81 {
  82         printf("store:%d\nsend:%d\ntotal:%d\n",
  83                stats.store, stats.send, stats.store + stats.send);
  84         exit(0);
  85 }
  86
  87 enum in2out in_read(struct in_ctx *ctx, struct can_frame *cf)
  88 {
  89         int ret = read(ctx->s, cf, sizeof(*cf));
  90         if (nonblocking && ret == -1 && errno == EAGAIN)
  91                 return NOP;
  92         if (ret != sizeof(*cf)) {
  93                 perror("read");
  94                 exit(1);
  95         }
  96         return STORE_ONLY;
  97 }
  98
  99 void init_read(struct in_ctx *ctx)
 100 {
 101         int s;
 102         struct sockaddr_can addr;
 103         struct ifreq ifr;
 104
 105         s = CHECK(socket(PF_CAN, SOCK_RAW, CAN_RAW));
 106
 107         if (nonblocking) {
 108                 int flags = CHECK(fcntl(s, F_GETFL, 0));
 109                 CHECK(fcntl(s, F_SETFL, flags | O_NONBLOCK));
 110         }
 111
 112         if (busy_poll_us) {
 113                 CHECK(setsockopt(s, SOL_SOCKET, SO_BUSY_POLL,
 114                                  &busy_poll_us, sizeof(busy_poll_us)));
 115         }
 116
 117         strncpy(ifr.ifr_name, devin, sizeof(ifr.ifr_name));
 118         if (-1 == ioctl(s, SIOCGIFINDEX, &ifr)) {
 119                 perror(devin);
 120                 exit(1);
 121         }
 122
 123         addr.can_family = AF_CAN;
 124         addr.can_ifindex = ifr.ifr_ifindex;
 125
 126         CHECK(bind(s, (struct sockaddr *)&addr, sizeof(addr)));
 127
 128         ctx->s = s;
 129         ctx->in_fn = in_read;
 130 }
 131
 132 enum in2out in_packet_rx(struct in_ctx *ctx, struct can_frame *cf)
 133 {
 134         volatile struct tpacket2_hdr *hdr = ctx->ptr + ctx->current*FRAME_SIZE;
 135         int ret = -1;
 136
 137         while (hdr->tp_status == TP_STATUS_KERNEL) {
 138                 if (in_method != IN_MMAPBUSY) {
 139                         struct pollfd pfd = {.fd = ctx->s, .revents = 0,
 140                                              .events = POLLIN|POLLRDNORM|POLLERR };
 141                         ret = CHECK(poll(&pfd, 1, -1));
 142                 }
 143         }
 144         //struct sockaddr_ll *addr = (void*)hdr + TPACKET_ALIGN(ctx->hdrlen);
 145         (void)ret;
 146         struct can_frame *cf_mmap = (void*)hdr + hdr->tp_mac;
 147         *cf = *cf_mmap;
 148         hdr->tp_status = 0;
 149         ctx->current = (ctx->current + 1) % FRAME_NR;
 150         hdr = ctx->ptr + ctx->current*FRAME_SIZE;
 151         return (hdr->tp_status == TP_STATUS_KERNEL) ? SEND : STORE_ONLY;
 152 }
 153
 154
 155 void init_packet_rx(struct in_ctx *ctx)
 156 {
 157         int s;
 158         struct sockaddr_ll my_addr;
 159         struct ifreq ifr;
 160
 161         s = CHECK(socket(PF_PACKET, SOCK_RAW, htons(ETH_P_ALL)));
 162
 163         if (busy_poll_us) {
 164                 CHECK(setsockopt(s, SOL_SOCKET, SO_BUSY_POLL,
 165                                  &busy_poll_us, sizeof(busy_poll_us)));
 166         }
 167
 168         int val = TPACKET_V2;
 169         CHECK(setsockopt(s, SOL_PACKET, PACKET_VERSION, &val, sizeof(val)));
 170         socklen_t len = sizeof(ctx->hdrlen);
 171         CHECK(getsockopt(s, SOL_PACKET, PACKET_HDRLEN, &ctx->hdrlen, &len));
 172
 173         strncpy (ifr.ifr_name, devin, sizeof(ifr.ifr_name));
 174         CHECK(ioctl(s, SIOCGIFINDEX, &ifr));
 175
 176         my_addr.sll_family = AF_PACKET;
 177         my_addr.sll_protocol = htons(ETH_P_ALL);
 178         my_addr.sll_ifindex =  ifr.ifr_ifindex;
 179
 180         CHECK(bind(s, (struct sockaddr *)&my_addr, sizeof(struct sockaddr_ll)));
 181
 182         struct tpacket_req req = {
 183                 .tp_block_size = BLOCK_SIZE,
 184                 .tp_frame_size = FRAME_SIZE,
 185                 .tp_block_nr   = BLOCK_NR,
 186                 .tp_frame_nr   = FRAME_NR,
 187         };
 188         CHECK(setsockopt(s, SOL_PACKET, PACKET_RX_RING, (char *)&req, sizeof(req)));
 189
 190         ctx->ptr = (char*)CHECKPTR(mmap(0, BLOCK_SIZE*BLOCK_NR, PROT_READ|PROT_WRITE, MAP_SHARED, s, 0));
 191
 192         ctx->s = s;
 193         ctx->in_fn = in_packet_rx;
 194         ctx->current = 0;
 195 }
 196
 197 int out_write(struct out_ctx *ctx, struct can_frame *cf)
 198 {
 199         if (ctx->from_in == NOP)
 200                 return 0;
 201
 202         int ret = write(ctx->s, cf, sizeof(*cf));
 203         if (ret != sizeof(*cf)) {
 204                 perror("write");
 205                 exit(1);
 206         }
 207         return 0;
 208 }
 209
 210 void init_write(struct out_ctx *ctx)
 211 {
 212         int s;
 213         struct sockaddr_can addr;
 214         struct ifreq ifr;
 215
 216         s = CHECK(socket(PF_CAN, SOCK_RAW, CAN_RAW));
 217
 218         strncpy(ifr.ifr_name, devout, sizeof(ifr.ifr_name));
 219         if (-1 == ioctl(s, SIOCGIFINDEX, &ifr)) {
 220                 perror(devout);
 221                 exit(1);
 222         }
 223
 224         addr.can_family = AF_CAN;
 225         addr.can_ifindex = ifr.ifr_ifindex;
 226
 227         CHECK(bind(s, (struct sockaddr *)&addr, sizeof(addr)));
 228
 229         ctx->s = s;
 230         ctx->out_fn = out_write;
 231 }
 232
 233 int out_packet_tx(struct out_ctx *ctx, struct can_frame *cf)
 234 {
 235         volatile struct tpacket2_hdr *hdr = ctx->ptr + ctx->current*FRAME_SIZE;
 236
 237         if (ctx->from_in == NOP) {
 238                 CHECK(send(ctx->s, NULL, 0, 0));
 239                 return 0;
 240         }
 241
 242         while (hdr->tp_status != TP_STATUS_AVAILABLE) {
 243                 CHECK(send(ctx->s, NULL, 0, 0));
 244         }
 245
 246         //struct sockaddr_ll *addr = (void*)hdr + TPACKET_HDRLEN - sizeof(struct sockaddr_ll);
 247         struct can_frame *cf_mmap = (void*)hdr + TPACKET_HDRLEN  - sizeof(struct sockaddr_ll);
 248         *cf_mmap = *cf;
 249         hdr->tp_len = sizeof(*cf);
 250         hdr->tp_status = TP_STATUS_SEND_REQUEST;
 251         ctx->current = (ctx->current + 1) % FRAME_NR;
 252
 253         if (ctx->from_in == SEND){
 254                 CHECK(send(ctx->s, NULL, 0, 0));
 255                 return 0;
 256         }
 257         return 0;
 258 }
 259
 260
 261 void init_packet_tx(struct out_ctx *ctx)
 262 {
 263         int s;
 264         struct sockaddr_ll my_addr;
 265         struct ifreq ifr;
 266
 267         s = CHECK(socket(PF_PACKET, SOCK_RAW, htons(ETH_P_ALL)));
 268
 269         int val = TPACKET_V2;
 270         CHECK(setsockopt(s, SOL_PACKET, PACKET_VERSION, &val, sizeof(val)));
 271         socklen_t len = sizeof(ctx->hdrlen);
 272         CHECK(getsockopt(s, SOL_PACKET, PACKET_HDRLEN, &ctx->hdrlen, &len));
 273
 274         strncpy (ifr.ifr_name, devout, sizeof(ifr.ifr_name));
 275         CHECK(ioctl(s, SIOCGIFINDEX, &ifr));
 276
 277         my_addr.sll_family = AF_PACKET;
 278         my_addr.sll_protocol = htons(ETH_P_CAN);
 279         my_addr.sll_ifindex =  ifr.ifr_ifindex;
 280
 281         CHECK(bind(s, (struct sockaddr *)&my_addr, sizeof(struct sockaddr_ll)));
 282
 283         struct tpacket_req req = {
 284                 .tp_block_size = BLOCK_SIZE,
 285                 .tp_frame_size = FRAME_SIZE,
 286                 .tp_block_nr   = BLOCK_NR,
 287                 .tp_frame_nr   = FRAME_NR,
 288         };
 289         CHECK(setsockopt(s, SOL_PACKET, PACKET_TX_RING, (char *)&req, sizeof(req)));
 290
 291         ctx->ptr = (char*)CHECKPTR(mmap(0, BLOCK_SIZE*BLOCK_NR, PROT_READ|PROT_WRITE, MAP_SHARED, s, 0));
 292
 293         ctx->s = s;
 294         ctx->out_fn = out_packet_tx;
 295         ctx->current = 0;
 296 }
 297
 298 void init_in(struct in_ctx *in)
 299 {
 300         memset(in, 0, sizeof(*in));
 301         switch (in_method) {
 302         case IN_READ:
 303                 init_read(in);
 304                 break;
 305         case IN_MMAP:
 306         case IN_MMAPBUSY:
 307                 init_packet_rx(in);
 308                 break;
 309         default:
 310                 fprintf(stderr, "Unknown \"in method\" %d\n", in_method);
 311                 exit(1);
 312         }
 313 }
 314
 315 int in(struct in_ctx *ctx, struct can_frame *cf)
 316 {
 317         return ctx->in_fn(ctx, cf);
 318 }
 319
 320 void init_out(struct out_ctx *out)
 321 {
 322         memset(out, 0, sizeof(*out));
 323         switch (out_method) {
 324         case WRITE: init_write(out); break;
 325         case OUT_MMAP: init_packet_tx(out); break;
 326         default:
 327                 fprintf(stderr, "Unknown \"out method\" %d\n", out_method);
 328                 exit(1);
 329         }
 330 }
 331
 332 int out(struct out_ctx *ctx, struct can_frame *cf)
 333 {
 334         return ctx->out_fn(ctx, cf);
 335 }
 336
 337 void gw()
 338 {
 339         struct in_ctx    ic;
 340         struct out_ctx   oc;
 341         struct can_frame cf;
 342
 343         init_in(&ic);
 344         init_out(&oc);
 345
 346         VERBOSE("UGW started\n");
 347
 348         while (1) {
 349                 oc.from_in = in(&ic, &cf);
 350                 switch (oc.from_in) {
 351                 case SEND:       stats.send++;  break;
 352                 case STORE_ONLY: stats.store++; break;
 353                 case NOP:                       break;
 354                 }
 355                 out(&oc, &cf);
 356         }
 357 }
 358
 359
 360 int main(int argc, char *argv[])
 361 {
 362         int opt;
 363
 364         while ((opt = getopt(argc, argv, "b:nqr:t:")) != -1) {
 365                 switch (opt) {
 366                 case 'b':
 367                         busy_poll_us = atoi(optarg);
 368                         break;
 369                 case 'n':
 370                         nonblocking = true;
 371                         break;
 372                 case 'q':
 373                         quiet = true;
 374                         break;
 375                 case 'r':
 376                         if (strcmp(optarg, "read") == 0)
 377                                 in_method = IN_READ;
 378                         else if (strcmp(optarg, "mmap") == 0)
 379                                 in_method = IN_MMAP;
 380                         else if (strcmp(optarg, "mmapbusy") == 0)
 381                                 in_method = IN_MMAPBUSY;
 382                         else {
 383                                 fprintf(stderr, "Unsuported RX method: %s\n", optarg);
 384                                 exit(1);
 385                         }
 386                         break;
 387                 case 't':
 388                         if (strcmp(optarg, "write") == 0)
 389                                 out_method = WRITE;
 390                         else if (strcmp(optarg, "mmap") == 0)
 391                                 out_method = OUT_MMAP;
 392                         else {
 393                                 fprintf(stderr, "Unsuported TX method: %s\n", optarg);
 394                                 exit(1);
 395                         }
 396                         break;
 397                 default: /* '?' */
 398                         fprintf(stderr, "Usage: %s [in_interface out_interface]\n",
 399                                 argv[0]);
 400                         exit(EXIT_FAILURE);
 401                 }
 402         }
 403
 404         if (optind < argc)
 405                 devin  = argv[optind];
 406         if (optind+1 < argc)
 407                 devout = argv[optind+1];
 408
 409         signal(SIGINT, sigint);
 410         gw();
 411
 412         return 0;
 413 }