|
Packit |
d3489f |
/* SPDX-License-Identifier: MIT */
|
|
Packit |
d3489f |
/*
|
|
Packit |
d3489f |
* Simple test case showing using sendmsg and recvmsg through io_uring
|
|
Packit |
d3489f |
*/
|
|
Packit |
d3489f |
#include <stdio.h>
|
|
Packit |
d3489f |
#include <stdlib.h>
|
|
Packit |
d3489f |
#include <string.h>
|
|
Packit |
d3489f |
#include <unistd.h>
|
|
Packit |
d3489f |
#include <errno.h>
|
|
Packit |
d3489f |
#include <arpa/inet.h>
|
|
Packit |
d3489f |
#include <sys/types.h>
|
|
Packit |
d3489f |
#include <sys/socket.h>
|
|
Packit |
d3489f |
#include <pthread.h>
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
#include "liburing.h"
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
static char str[] = "This is a test of sendmsg and recvmsg over io_uring!";
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
#define MAX_MSG 128
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
#define PORT 10200
|
|
Packit |
d3489f |
#define HOST "127.0.0.1"
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
#define BUF_BGID 10
|
|
Packit |
d3489f |
#define BUF_BID 89
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
static int recv_prep(struct io_uring *ring, struct iovec *iov, int bgid)
|
|
Packit |
d3489f |
{
|
|
Packit |
d3489f |
struct sockaddr_in saddr;
|
|
Packit |
d3489f |
struct msghdr msg;
|
|
Packit |
d3489f |
struct io_uring_sqe *sqe;
|
|
Packit |
d3489f |
int sockfd, ret;
|
|
Packit |
d3489f |
int val = 1;
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
memset(&saddr, 0, sizeof(saddr));
|
|
Packit |
d3489f |
saddr.sin_family = AF_INET;
|
|
Packit |
d3489f |
saddr.sin_addr.s_addr = htonl(INADDR_ANY);
|
|
Packit |
d3489f |
saddr.sin_port = htons(PORT);
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
sockfd = socket(AF_INET, SOCK_DGRAM, 0);
|
|
Packit |
d3489f |
if (sockfd < 0) {
|
|
Packit |
d3489f |
perror("socket");
|
|
Packit |
d3489f |
return 1;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
val = 1;
|
|
Packit |
d3489f |
setsockopt(sockfd, SOL_SOCKET, SO_REUSEPORT, &val, sizeof(val));
|
|
Packit |
d3489f |
setsockopt(sockfd, SOL_SOCKET, SO_REUSEADDR, &val, sizeof(val));
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
ret = bind(sockfd, (struct sockaddr *)&saddr, sizeof(saddr));
|
|
Packit |
d3489f |
if (ret < 0) {
|
|
Packit |
d3489f |
perror("bind");
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
memset(&msg, 0, sizeof(msg));
|
|
Packit |
d3489f |
msg.msg_namelen = sizeof(struct sockaddr_in);
|
|
Packit |
d3489f |
msg.msg_iov = iov;
|
|
Packit |
d3489f |
msg.msg_iovlen = 1;
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
sqe = io_uring_get_sqe(ring);
|
|
Packit |
d3489f |
io_uring_prep_recvmsg(sqe, sockfd, &msg, 0);
|
|
Packit |
d3489f |
if (bgid) {
|
|
Packit |
d3489f |
sqe->user_data = (unsigned long) iov->iov_base;
|
|
Packit |
d3489f |
iov->iov_base = NULL;
|
|
Packit |
d3489f |
sqe->flags |= IOSQE_BUFFER_SELECT;
|
|
Packit |
d3489f |
sqe->buf_group = bgid;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
ret = io_uring_submit(ring);
|
|
Packit |
d3489f |
if (ret <= 0) {
|
|
Packit |
d3489f |
fprintf(stderr, "submit failed: %d\n", ret);
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
close(sockfd);
|
|
Packit |
d3489f |
return 0;
|
|
Packit |
d3489f |
err:
|
|
Packit |
d3489f |
close(sockfd);
|
|
Packit |
d3489f |
return 1;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
struct recv_data {
|
|
Packit |
d3489f |
pthread_mutex_t *mutex;
|
|
Packit |
d3489f |
int buf_select;
|
|
Packit |
d3489f |
int no_buf_add;
|
|
Packit |
d3489f |
};
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
static int do_recvmsg(struct io_uring *ring, struct iovec *iov,
|
|
Packit |
d3489f |
struct recv_data *rd)
|
|
Packit |
d3489f |
{
|
|
Packit |
d3489f |
struct io_uring_cqe *cqe;
|
|
Packit |
d3489f |
int ret;
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
ret = io_uring_wait_cqe(ring, &cqe);
|
|
Packit |
d3489f |
if (ret) {
|
|
Packit |
d3489f |
fprintf(stdout, "wait_cqe: %d\n", ret);
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
if (cqe->res < 0) {
|
|
Packit |
d3489f |
if (rd->no_buf_add && rd->buf_select)
|
|
Packit |
d3489f |
return 0;
|
|
Packit |
d3489f |
fprintf(stderr, "%s: failed cqe: %d\n", __FUNCTION__, cqe->res);
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
if (cqe->flags) {
|
|
Packit |
d3489f |
int bid = cqe->flags >> 16;
|
|
Packit |
d3489f |
if (bid != BUF_BID)
|
|
Packit |
d3489f |
fprintf(stderr, "Buffer ID mismatch %d\n", bid);
|
|
Packit |
d3489f |
/* just for passing the pointer to str */
|
|
Packit |
d3489f |
iov->iov_base = (void *) (uintptr_t) cqe->user_data;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
if (rd->no_buf_add && rd->buf_select) {
|
|
Packit |
d3489f |
fprintf(stderr, "Expected -ENOBUFS: %d\n", cqe->res);
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
if (cqe->res -1 != strlen(str)) {
|
|
Packit |
d3489f |
fprintf(stderr, "got wrong length: %d/%d\n", cqe->res,
|
|
Packit |
d3489f |
(int) strlen(str) + 1);
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
if (strcmp(str, iov->iov_base)) {
|
|
Packit |
d3489f |
fprintf(stderr, "string mismatch\n");
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
return 0;
|
|
Packit |
d3489f |
err:
|
|
Packit |
d3489f |
return 1;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
static void *recv_fn(void *data)
|
|
Packit |
d3489f |
{
|
|
Packit |
d3489f |
struct recv_data *rd = data;
|
|
Packit |
d3489f |
pthread_mutex_t *mutex = rd->mutex;
|
|
Packit |
d3489f |
char buf[MAX_MSG + 1];
|
|
Packit |
d3489f |
struct iovec iov = {
|
|
Packit |
d3489f |
.iov_base = buf,
|
|
Packit |
d3489f |
.iov_len = sizeof(buf) - 1,
|
|
Packit |
d3489f |
};
|
|
Packit |
d3489f |
struct io_uring_sqe *sqe;
|
|
Packit |
d3489f |
struct io_uring_cqe *cqe;
|
|
Packit |
d3489f |
struct io_uring ring;
|
|
Packit |
d3489f |
int ret;
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
ret = io_uring_queue_init(1, &ring, 0);
|
|
Packit |
d3489f |
if (ret) {
|
|
Packit |
d3489f |
fprintf(stderr, "queue init failed: %d\n", ret);
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
if (rd->buf_select && !rd->no_buf_add) {
|
|
Packit |
d3489f |
sqe = io_uring_get_sqe(&ring);
|
|
Packit |
d3489f |
io_uring_prep_provide_buffers(sqe, buf, sizeof(buf) -1, 1,
|
|
Packit |
d3489f |
BUF_BGID, BUF_BID);
|
|
Packit |
d3489f |
ret = io_uring_submit(&ring);
|
|
Packit |
d3489f |
if (ret != 1) {
|
|
Packit |
d3489f |
fprintf(stderr, "submit ret=%d\n", ret);
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
ret = io_uring_wait_cqe(&ring, &cqe);
|
|
Packit |
d3489f |
if (ret) {
|
|
Packit |
d3489f |
fprintf(stderr, "wait_cqe=%d\n", ret);
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
ret = cqe->res;
|
|
Packit |
d3489f |
io_uring_cqe_seen(&ring, cqe);
|
|
Packit |
d3489f |
if (ret == -EINVAL) {
|
|
Packit |
d3489f |
fprintf(stdout, "PROVIDE_BUFFERS not supported, skip\n");
|
|
Packit |
d3489f |
goto out;
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
} else if (ret < 0) {
|
|
Packit |
d3489f |
fprintf(stderr, "PROVIDER_BUFFERS %d\n", ret);
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
ret = recv_prep(&ring, &iov, rd->buf_select ? BUF_BGID : 0);
|
|
Packit |
d3489f |
if (ret) {
|
|
Packit |
d3489f |
fprintf(stderr, "recv_prep failed: %d\n", ret);
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
pthread_mutex_unlock(mutex);
|
|
Packit |
d3489f |
ret = do_recvmsg(&ring, &iov, rd);
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
io_uring_queue_exit(&ring);
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
err:
|
|
Packit |
d3489f |
return (void *)(intptr_t)ret;
|
|
Packit |
d3489f |
out:
|
|
Packit |
d3489f |
pthread_mutex_unlock(mutex);
|
|
Packit |
d3489f |
io_uring_queue_exit(&ring);
|
|
Packit |
d3489f |
return NULL;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
static int do_sendmsg(void)
|
|
Packit |
d3489f |
{
|
|
Packit |
d3489f |
struct sockaddr_in saddr;
|
|
Packit |
d3489f |
struct iovec iov = {
|
|
Packit |
d3489f |
.iov_base = str,
|
|
Packit |
d3489f |
.iov_len = sizeof(str),
|
|
Packit |
d3489f |
};
|
|
Packit |
d3489f |
struct msghdr msg;
|
|
Packit |
d3489f |
struct io_uring ring;
|
|
Packit |
d3489f |
struct io_uring_cqe *cqe;
|
|
Packit |
d3489f |
struct io_uring_sqe *sqe;
|
|
Packit |
d3489f |
int sockfd, ret;
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
ret = io_uring_queue_init(1, &ring, 0);
|
|
Packit |
d3489f |
if (ret) {
|
|
Packit |
d3489f |
fprintf(stderr, "queue init failed: %d\n", ret);
|
|
Packit |
d3489f |
return 1;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
memset(&saddr, 0, sizeof(saddr));
|
|
Packit |
d3489f |
saddr.sin_family = AF_INET;
|
|
Packit |
d3489f |
saddr.sin_port = htons(PORT);
|
|
Packit |
d3489f |
inet_pton(AF_INET, HOST, &saddr.sin_addr);
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
memset(&msg, 0, sizeof(msg));
|
|
Packit |
d3489f |
msg.msg_name = &saddr;
|
|
Packit |
d3489f |
msg.msg_namelen = sizeof(struct sockaddr_in);
|
|
Packit |
d3489f |
msg.msg_iov = &iov;
|
|
Packit |
d3489f |
msg.msg_iovlen = 1;
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
sockfd = socket(AF_INET, SOCK_DGRAM, 0);
|
|
Packit |
d3489f |
if (sockfd < 0) {
|
|
Packit |
d3489f |
perror("socket");
|
|
Packit |
d3489f |
return 1;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
sqe = io_uring_get_sqe(&ring);
|
|
Packit |
d3489f |
io_uring_prep_sendmsg(sqe, sockfd, &msg, 0);
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
ret = io_uring_submit(&ring);
|
|
Packit |
d3489f |
if (ret <= 0) {
|
|
Packit |
d3489f |
fprintf(stderr, "submit failed: %d\n", ret);
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
ret = io_uring_wait_cqe(&ring, &cqe);
|
|
Packit |
d3489f |
if (cqe->res < 0) {
|
|
Packit |
d3489f |
fprintf(stderr, "%s: failed cqe: %d\n", __FUNCTION__, cqe->res);
|
|
Packit |
d3489f |
goto err;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
close(sockfd);
|
|
Packit |
d3489f |
return 0;
|
|
Packit |
d3489f |
err:
|
|
Packit |
d3489f |
close(sockfd);
|
|
Packit |
d3489f |
return 1;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
static int test(int buf_select, int no_buf_add)
|
|
Packit |
d3489f |
{
|
|
Packit |
d3489f |
struct recv_data rd;
|
|
Packit |
d3489f |
pthread_mutexattr_t attr;
|
|
Packit |
d3489f |
pthread_t recv_thread;
|
|
Packit |
d3489f |
pthread_mutex_t mutex;
|
|
Packit |
d3489f |
int ret;
|
|
Packit |
d3489f |
void *retval;
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
pthread_mutexattr_init(&attr);
|
|
Packit |
d3489f |
pthread_mutexattr_setpshared(&attr, 1);
|
|
Packit |
d3489f |
pthread_mutex_init(&mutex, &attr);
|
|
Packit |
d3489f |
pthread_mutex_lock(&mutex);
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
rd.mutex = &mutex;
|
|
Packit |
d3489f |
rd.buf_select = buf_select;
|
|
Packit |
d3489f |
rd.no_buf_add = no_buf_add;
|
|
Packit |
d3489f |
ret = pthread_create(&recv_thread, NULL, recv_fn, &rd);
|
|
Packit |
d3489f |
if (ret) {
|
|
Packit |
d3489f |
fprintf(stderr, "Thread create failed\n");
|
|
Packit |
d3489f |
return 1;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
pthread_mutex_lock(&mutex);
|
|
Packit |
d3489f |
do_sendmsg();
|
|
Packit |
d3489f |
pthread_join(recv_thread, &retval);
|
|
Packit |
d3489f |
ret = (int)(intptr_t)retval;
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
return ret;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
int main(int argc, char *argv[])
|
|
Packit |
d3489f |
{
|
|
Packit |
d3489f |
int ret;
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
if (argc > 1)
|
|
Packit |
d3489f |
return 0;
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
ret = test(0, 0);
|
|
Packit |
d3489f |
if (ret) {
|
|
Packit |
d3489f |
fprintf(stderr, "send_recvmsg 0 failed\n");
|
|
Packit |
d3489f |
return 1;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
ret = test(1, 0);
|
|
Packit |
d3489f |
if (ret) {
|
|
Packit |
d3489f |
fprintf(stderr, "send_recvmsg 1 0 failed\n");
|
|
Packit |
d3489f |
return 1;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
ret = test(1, 1);
|
|
Packit |
d3489f |
if (ret) {
|
|
Packit |
d3489f |
fprintf(stderr, "send_recvmsg 1 1 failed\n");
|
|
Packit |
d3489f |
return 1;
|
|
Packit |
d3489f |
}
|
|
Packit |
d3489f |
|
|
Packit |
d3489f |
return 0;
|
|
Packit |
d3489f |
}
|