Ignore:
File:
1 edited

Legend:

Unmodified
Added
Removed
  • libcfa/src/concurrency/iocall.cfa

    r4998155 r2606a03  
    3232        #include "io/types.hfa"
    3333
    34         extern [* struct io_uring_sqe, __u32] __submit_alloc( struct __io_data & ring, __u64 data );
    35         extern void __submit( struct io_context * ctx, __u32 idx ) __attribute__((nonnull (1)));
    36 
    37         static inline void ?{}(struct io_uring_sqe & this, __u8 opcode, int fd) {
     34        extern [* struct io_uring_sqe, uint32_t] __submit_alloc( struct __io_data & ring, uint64_t data );
     35        extern void __submit( struct io_context * ctx, uint32_t idx ) __attribute__((nonnull (1)));
     36
     37        static inline void ?{}(struct io_uring_sqe & this, uint8_t opcode, int fd) {
    3838                this.opcode = opcode;
    3939                #if !defined(IOSQE_ASYNC)
     
    5151        }
    5252
    53         static inline void ?{}(struct io_uring_sqe & this, __u8 opcode, int fd, void * addr, __u32 len, __u64 off ) {
     53        static inline void ?{}(struct io_uring_sqe & this, uint8_t opcode, int fd, void * addr, uint32_t len, uint64_t off ) {
    5454                (this){ opcode, fd };
    5555                this.off = off;
    56                 this.addr = (__u64)(uintptr_t)addr;
     56                this.addr = (uint64_t)(uintptr_t)addr;
    5757                this.len = len;
    5858        }
     
    105105                (void)timeout; (void)cancellation; \
    106106                if( !context ) context = __get_io_context(); \
    107                 __io_user_data_t data = { 0 }; \
     107                __io_user_data_t data = { 0, active_thread() }; \
    108108                struct __io_data & ring = *context->thrd.ring; \
    109109                struct io_uring_sqe * sqe; \
    110                 __u32 idx; \
    111                 __u8 sflags = REGULAR_FLAGS & submit_flags; \
    112                 [sqe, idx] = __submit_alloc( ring, (__u64)(uintptr_t)&data ); \
     110                uint32_t idx; \
     111                uint8_t sflags = REGULAR_FLAGS & submit_flags; \
     112                [sqe, idx] = __submit_alloc( ring, (uint64_t)(uintptr_t)&data ); \
    113113                sqe->flags = sflags;
    114114
    115115        #define __submit_wait \
    116116                /*__cfaabi_bits_print_safe( STDERR_FILENO, "Preparing user data %p for %p\n", &data, data.thrd );*/ \
    117                 verify( sqe->user_data == (__u64)(uintptr_t)&data ); \
     117                verify( sqe->user_data == (uint64_t)(uintptr_t)&data ); \
    118118                __submit( context, idx ); \
    119                 wait( data.sem ); \
     119                park( __cfaabi_dbg_ctx ); \
    120120                if( data.result < 0 ) { \
    121121                        errno = -data.result; \
     
    149149
    150150        extern int fsync(int fd);
    151 
    152         typedef __off64_t off_t;
    153         typedef __off64_t off64_t;
    154         extern int sync_file_range(int fd, off64_t offset, off64_t nbytes, unsigned int flags);
     151        extern int sync_file_range(int fd, int64_t offset, int64_t nbytes, unsigned int flags);
    155152
    156153        struct msghdr;
     
    163160        extern int connect(int sockfd, const struct sockaddr *addr, socklen_t addrlen);
    164161
    165         extern int fallocate(int fd, int mode, off_t offset, off_t len);
    166         extern int posix_fadvise(int fd, off_t offset, off_t len, int advice);
     162        extern int fallocate(int fd, int mode, uint64_t offset, uint64_t len);
     163        extern int posix_fadvise(int fd, uint64_t offset, uint64_t len, int advice);
    167164        extern int madvise(void *addr, size_t length, int advice);
    168165
     
    193190                        sqe->fd = fd;
    194191                        sqe->off = offset;
    195                         sqe->addr = (__u64)iov;
     192                        sqe->addr = (uint64_t)(uintptr_t)iov;
    196193                        sqe->len = iovcnt;
    197194                        sqe->rw_flags = 0;
     
    210207                        __submit_prelude
    211208
    212                         sqe->opcode = IORING_OP_WRITEV;
    213                         sqe->ioprio = 0;
    214                         sqe->fd = fd;
    215                         sqe->off = offset;
    216                         sqe->addr = (__u64)iov;
    217                         sqe->len = iovcnt;
    218                         sqe->rw_flags = 0;
    219                         sqe->__pad2[0] = sqe->__pad2[1] = sqe->__pad2[2] = 0;
     209                        (*sqe){ IORING_OP_WRITEV, fd, iov, iovcnt, offset };
    220210
    221211                        __submit_wait
     
    230220                __submit_prelude
    231221
    232                 sqe->opcode = IORING_OP_FSYNC;
    233                 sqe->ioprio = 0;
    234                 sqe->fd = fd;
    235                 sqe->off = 0;
    236                 sqe->addr = 0;
    237                 sqe->len = 0;
    238                 sqe->rw_flags = 0;
    239                 sqe->__pad2[0] = sqe->__pad2[1] = sqe->__pad2[2] = 0;
    240 
    241                 __submit_wait
    242         #endif
    243 }
    244 
    245 int cfa_sync_file_range(int fd, off64_t offset, off64_t nbytes, unsigned int flags, int submit_flags, Duration timeout, io_cancellation * cancellation, io_context * context) {
     222                (*sqe){ IORING_OP_FSYNC, fd };
     223
     224                __submit_wait
     225        #endif
     226}
     227
     228int cfa_sync_file_range(int fd, int64_t offset, int64_t nbytes, unsigned int flags, int submit_flags, Duration timeout, io_cancellation * cancellation, io_context * context) {
    246229        #if !defined(CFA_HAVE_LINUX_IO_URING_H) || !defined(CFA_HAVE_IORING_OP_SYNC_FILE_RANGE)
    247230                return sync_file_range(fd, offset, nbytes, flags);
     
    292275
    293276                (*sqe){ IORING_OP_SEND, sockfd };
    294                 sqe->addr = (__u64)buf;
     277                sqe->addr = (uint64_t)buf;
    295278                sqe->len = len;
    296279                sqe->msg_flags = flags;
     
    307290
    308291                (*sqe){ IORING_OP_RECV, sockfd };
    309                 sqe->addr = (__u64)buf;
     292                sqe->addr = (uint64_t)buf;
    310293                sqe->len = len;
    311294                sqe->msg_flags = flags;
     
    322305
    323306                (*sqe){ IORING_OP_ACCEPT, sockfd };
    324                 sqe->addr  = (__u64)addr;
    325                 sqe->addr2 = (__u64)addrlen;
     307                sqe->addr = (uint64_t)(uintptr_t)addr;
     308                sqe->addr2 = (uint64_t)(uintptr_t)addrlen;
    326309                sqe->accept_flags = flags;
    327310
     
    337320
    338321                (*sqe){ IORING_OP_CONNECT, sockfd };
    339                 sqe->addr = (__u64)addr;
    340                 sqe->off  = (__u64)addrlen;
    341 
    342                 __submit_wait
    343         #endif
    344 }
    345 
    346 int cfa_fallocate(int fd, int mode, off_t offset, off_t len, int submit_flags, Duration timeout, io_cancellation * cancellation, io_context * context) {
     322                sqe->addr = (uint64_t)(uintptr_t)addr;
     323                sqe->off  = (uint64_t)(uintptr_t)addrlen;
     324
     325                __submit_wait
     326        #endif
     327}
     328
     329int cfa_fallocate(int fd, int mode, uint64_t offset, uint64_t len, int submit_flags, Duration timeout, io_cancellation * cancellation, io_context * context) {
    347330        #if !defined(CFA_HAVE_LINUX_IO_URING_H) || !defined(CFA_HAVE_IORING_OP_FALLOCATE)
    348331                return fallocate( fd, mode, offset, len );
     
    361344}
    362345
    363 int cfa_fadvise(int fd, off_t offset, off_t len, int advice, int submit_flags, Duration timeout, io_cancellation * cancellation, io_context * context) {
     346int cfa_fadvise(int fd, uint64_t offset, uint64_t len, int advice, int submit_flags, Duration timeout, io_cancellation * cancellation, io_context * context) {
    364347        #if !defined(CFA_HAVE_LINUX_IO_URING_H) || !defined(CFA_HAVE_IORING_OP_FADVISE)
    365348                return posix_fadvise( fd, offset, len, advice );
     
    368351
    369352                (*sqe){ IORING_OP_FADVISE, fd };
    370                 sqe->off = (__u64)offset;
     353                sqe->off = (uint64_t)offset;
    371354                sqe->len = len;
    372355                sqe->fadvise_advice = advice;
     
    383366
    384367                (*sqe){ IORING_OP_MADVISE, 0 };
    385                 sqe->addr = (__u64)addr;
     368                sqe->addr = (uint64_t)addr;
    386369                sqe->len = length;
    387370                sqe->fadvise_advice = advice;
     
    398381
    399382                (*sqe){ IORING_OP_OPENAT, dirfd };
    400                 sqe->addr = (__u64)pathname;
     383                sqe->addr = (uint64_t)pathname;
    401384                sqe->open_flags = flags;
    402385                sqe->len = mode;
     
    431414                __submit_prelude
    432415
    433                 (*sqe){ IORING_OP_STATX, dirfd, pathname, mask, (__u64)statxbuf };
     416                (*sqe){ IORING_OP_STATX, dirfd, pathname, mask, (uint64_t)statxbuf };
    434417                sqe->statx_flags = flags;
    435418
     
    473456                }
    474457                else {
    475                         sqe->off = (__u64)-1;
     458                        sqe->off = (uint64_t)-1;
    476459                }
    477460                sqe->len = len;
     
    481464                }
    482465                else {
    483                         sqe->splice_off_in = (__u64)-1;
     466                        sqe->splice_off_in = (uint64_t)-1;
    484467                }
    485468                sqe->splice_flags  = flags | (SPLICE_FLAGS & submit_flags);
Note: See TracChangeset for help on using the changeset viewer.