Ignore:
File:
1 edited

Legend:

Unmodified
Added
Removed
  • libcfa/src/concurrency/stats.cfa

    rdddb3dd0 r1e208ea  
    2525
    2626                #if defined(CFA_HAVE_LINUX_IO_URING_H)
    27                         stats->io.alloc.fast        = 0;
    28                         stats->io.alloc.slow        = 0;
    29                         stats->io.alloc.fail        = 0;
    30                         stats->io.alloc.revoke      = 0;
    31                         stats->io.alloc.block       = 0;
    32                         stats->io.submit.fast       = 0;
    33                         stats->io.submit.slow       = 0;
    34                         stats->io.flush.external    = 0;
    35                         stats->io.calls.flush       = 0;
    36                         stats->io.calls.submitted   = 0;
    37                         stats->io.calls.drain       = 0;
    38                         stats->io.calls.completed   = 0;
    39                         stats->io.calls.errors.busy = 0;
    40                         stats->io.poller.sleeps     = 0;
     27                        stats->io.submit_q.submit_avg.rdy = 0;
     28                        stats->io.submit_q.submit_avg.csm = 0;
     29                        stats->io.submit_q.submit_avg.cnt = 0;
     30                        stats->io.submit_q.look_avg.val   = 0;
     31                        stats->io.submit_q.look_avg.cnt   = 0;
     32                        stats->io.submit_q.look_avg.block = 0;
     33                        stats->io.submit_q.alloc_avg.val   = 0;
     34                        stats->io.submit_q.alloc_avg.cnt   = 0;
     35                        stats->io.submit_q.alloc_avg.block = 0;
     36                        stats->io.submit_q.helped = 0;
     37                        stats->io.submit_q.leader = 0;
     38                        stats->io.submit_q.busy   = 0;
     39                        stats->io.complete_q.completed_avg.val = 0;
     40                        stats->io.complete_q.completed_avg.cnt = 0;
     41                        stats->io.complete_q.blocks = 0;
    4142                #endif
    4243        }
     
    5960
    6061                #if defined(CFA_HAVE_LINUX_IO_URING_H)
    61                         __atomic_fetch_add( &cltr->io.alloc.fast       , proc->io.alloc.fast       , __ATOMIC_SEQ_CST ); proc->io.alloc.fast        = 0;
    62                         __atomic_fetch_add( &cltr->io.alloc.slow       , proc->io.alloc.slow       , __ATOMIC_SEQ_CST ); proc->io.alloc.slow        = 0;
    63                         __atomic_fetch_add( &cltr->io.alloc.fail       , proc->io.alloc.fail       , __ATOMIC_SEQ_CST ); proc->io.alloc.fail        = 0;
    64                         __atomic_fetch_add( &cltr->io.alloc.revoke     , proc->io.alloc.revoke     , __ATOMIC_SEQ_CST ); proc->io.alloc.revoke      = 0;
    65                         __atomic_fetch_add( &cltr->io.alloc.block      , proc->io.alloc.block      , __ATOMIC_SEQ_CST ); proc->io.alloc.block       = 0;
    66                         __atomic_fetch_add( &cltr->io.submit.fast      , proc->io.submit.fast      , __ATOMIC_SEQ_CST ); proc->io.submit.fast       = 0;
    67                         __atomic_fetch_add( &cltr->io.submit.slow      , proc->io.submit.slow      , __ATOMIC_SEQ_CST ); proc->io.submit.slow       = 0;
    68                         __atomic_fetch_add( &cltr->io.flush.external   , proc->io.flush.external   , __ATOMIC_SEQ_CST ); proc->io.flush.external    = 0;
    69                         __atomic_fetch_add( &cltr->io.calls.flush      , proc->io.calls.flush      , __ATOMIC_SEQ_CST ); proc->io.calls.flush       = 0;
    70                         __atomic_fetch_add( &cltr->io.calls.submitted  , proc->io.calls.submitted  , __ATOMIC_SEQ_CST ); proc->io.calls.submitted   = 0;
    71                         __atomic_fetch_add( &cltr->io.calls.drain      , proc->io.calls.drain      , __ATOMIC_SEQ_CST ); proc->io.calls.drain       = 0;
    72                         __atomic_fetch_add( &cltr->io.calls.completed  , proc->io.calls.completed  , __ATOMIC_SEQ_CST ); proc->io.calls.completed   = 0;
    73                         __atomic_fetch_add( &cltr->io.calls.errors.busy, proc->io.calls.errors.busy, __ATOMIC_SEQ_CST ); proc->io.calls.errors.busy = 0;
    74                         __atomic_fetch_add( &cltr->io.poller.sleeps    , proc->io.poller.sleeps    , __ATOMIC_SEQ_CST ); proc->io.poller.sleeps     = 0;
     62                        __atomic_fetch_add( &cltr->io.submit_q.submit_avg.rdy     , proc->io.submit_q.submit_avg.rdy     , __ATOMIC_SEQ_CST ); proc->io.submit_q.submit_avg.rdy      = 0;
     63                        __atomic_fetch_add( &cltr->io.submit_q.submit_avg.csm     , proc->io.submit_q.submit_avg.csm     , __ATOMIC_SEQ_CST ); proc->io.submit_q.submit_avg.csm      = 0;
     64                        __atomic_fetch_add( &cltr->io.submit_q.submit_avg.avl     , proc->io.submit_q.submit_avg.avl     , __ATOMIC_SEQ_CST ); proc->io.submit_q.submit_avg.avl      = 0;
     65                        __atomic_fetch_add( &cltr->io.submit_q.submit_avg.cnt     , proc->io.submit_q.submit_avg.cnt     , __ATOMIC_SEQ_CST ); proc->io.submit_q.submit_avg.cnt      = 0;
     66                        __atomic_fetch_add( &cltr->io.submit_q.look_avg.val       , proc->io.submit_q.look_avg.val       , __ATOMIC_SEQ_CST ); proc->io.submit_q.look_avg.val        = 0;
     67                        __atomic_fetch_add( &cltr->io.submit_q.look_avg.cnt       , proc->io.submit_q.look_avg.cnt       , __ATOMIC_SEQ_CST ); proc->io.submit_q.look_avg.cnt        = 0;
     68                        __atomic_fetch_add( &cltr->io.submit_q.look_avg.block     , proc->io.submit_q.look_avg.block     , __ATOMIC_SEQ_CST ); proc->io.submit_q.look_avg.block      = 0;
     69                        __atomic_fetch_add( &cltr->io.submit_q.alloc_avg.val      , proc->io.submit_q.alloc_avg.val      , __ATOMIC_SEQ_CST ); proc->io.submit_q.alloc_avg.val       = 0;
     70                        __atomic_fetch_add( &cltr->io.submit_q.alloc_avg.cnt      , proc->io.submit_q.alloc_avg.cnt      , __ATOMIC_SEQ_CST ); proc->io.submit_q.alloc_avg.cnt       = 0;
     71                        __atomic_fetch_add( &cltr->io.submit_q.alloc_avg.block    , proc->io.submit_q.alloc_avg.block    , __ATOMIC_SEQ_CST ); proc->io.submit_q.alloc_avg.block     = 0;
     72                        __atomic_fetch_add( &cltr->io.submit_q.helped             , proc->io.submit_q.helped             , __ATOMIC_SEQ_CST ); proc->io.submit_q.helped              = 0;
     73                        __atomic_fetch_add( &cltr->io.submit_q.leader             , proc->io.submit_q.leader             , __ATOMIC_SEQ_CST ); proc->io.submit_q.leader              = 0;
     74                        __atomic_fetch_add( &cltr->io.submit_q.busy               , proc->io.submit_q.busy               , __ATOMIC_SEQ_CST ); proc->io.submit_q.busy                = 0;
     75                        __atomic_fetch_add( &cltr->io.complete_q.completed_avg.val, proc->io.complete_q.completed_avg.val, __ATOMIC_SEQ_CST ); proc->io.complete_q.completed_avg.val = 0;
     76                        __atomic_fetch_add( &cltr->io.complete_q.completed_avg.cnt, proc->io.complete_q.completed_avg.cnt, __ATOMIC_SEQ_CST ); proc->io.complete_q.completed_avg.cnt = 0;
     77                        __atomic_fetch_add( &cltr->io.complete_q.blocks           , proc->io.complete_q.blocks           , __ATOMIC_SEQ_CST ); proc->io.complete_q.blocks            = 0;
    7578                #endif
    7679        }
     
    7982
    8083                if( flags & CFA_STATS_READY_Q ) {
     84                        double push_sur = (100.0 * ((double)ready.pick.push.success) / ready.pick.push.attempt);
     85                        double pop_sur  = (100.0 * ((double)ready.pick.pop .success) / ready.pick.pop .attempt);
     86
    8187                        double push_len = ((double)ready.pick.push.attempt) / ready.pick.push.success;
    8288                        double pop_len  = ((double)ready.pick.pop .attempt) / ready.pick.pop .success;
     89
     90                        double lpush_sur = (100.0 * ((double)ready.pick.push.lsuccess) / ready.pick.push.local);
     91                        double lpop_sur  = (100.0 * ((double)ready.pick.pop .lsuccess) / ready.pick.pop .local);
    8392
    8493                        double lpush_len = ((double)ready.pick.push.local) / ready.pick.push.lsuccess;
     
    8796                        __cfaabi_bits_print_safe( STDOUT_FILENO,
    8897                                "----- %s \"%s\" (%p) - Ready Q Stats -----\n"
    89                                 "- total threads  : %'15" PRIu64 "run, %'15" PRIu64 "schd (%'" PRIu64 "mig )\n"
    90                                 "- push avg probe : %'3.2lf, %'3.2lfl (%'15" PRIu64 " attempts, %'15" PRIu64 " locals)\n"
    91                                 "- pop  avg probe : %'3.2lf, %'3.2lfl (%'15" PRIu64 " attempts, %'15" PRIu64 " locals)\n"
    92                                 "- Idle Sleep     : %'15" PRIu64 "h, %'15" PRIu64 "c, %'15" PRIu64 "w, %'15" PRIu64 "e\n"
     98                                "- total threads run      : %'15" PRIu64 "\n"
     99                                "- total threads scheduled: %'15" PRIu64 "\n"
     100                                "- push average probe len : %'18.2lf, %'18.2lf%% (%'15" PRIu64 " attempts)\n"
     101                                "- pop  average probe len : %'18.2lf, %'18.2lf%% (%'15" PRIu64 " attempts)\n"
     102                                "- local push avg prb len : %'18.2lf, %'18.2lf%% (%'15" PRIu64 " attempts)\n"
     103                                "- local pop  avg prb len : %'18.2lf, %'18.2lf%% (%'15" PRIu64 " attempts)\n"
     104                                "- thread migrations      : %'15" PRIu64 "\n"
     105                                "- Idle Sleep -\n"
     106                                "-- halts                 : %'15" PRIu64 "\n"
     107                                "-- cancelled halts       : %'15" PRIu64 "\n"
     108                                "-- schedule wake         : %'15" PRIu64 "\n"
     109                                "-- wake on exit          : %'15" PRIu64 "\n"
    93110                                "\n"
    94111                                , type, name, id
    95112                                , ready.pick.pop.success
    96113                                , ready.pick.push.success
     114                                , push_len, push_sur, ready.pick.push.attempt
     115                                , pop_len , pop_sur , ready.pick.pop .attempt
     116                                , lpush_len, lpush_sur, ready.pick.push.local
     117                                , lpop_len , lpop_sur , ready.pick.pop .local
    97118                                , ready.threads.migration
    98                                 , push_len, lpush_len, ready.pick.push.attempt, ready.pick.push.local
    99                                 , pop_len , lpop_len , ready.pick.pop .attempt, ready.pick.pop .local
    100119                                , ready.sleep.halts, ready.sleep.cancels, ready.sleep.wakes, ready.sleep.exits
    101120                        );
     
    104123                #if defined(CFA_HAVE_LINUX_IO_URING_H)
    105124                        if( flags & CFA_STATS_IO ) {
    106                                 uint64_t total_allocs = io.alloc.fast + io.alloc.slow;
    107                                 double avgfasta = ((double)io.alloc.fast) / total_allocs;
     125                                double avgrdy = ((double)io.submit_q.submit_avg.rdy) / io.submit_q.submit_avg.cnt;
     126                                double avgcsm = ((double)io.submit_q.submit_avg.csm) / io.submit_q.submit_avg.cnt;
    108127
    109                                 uint64_t total_submits = io.submit.fast + io.submit.slow;
    110                                 double avgfasts = ((double)io.submit.fast) / total_submits;
     128                                double lavgv = 0;
     129                                double lavgb = 0;
     130                                if(io.submit_q.look_avg.cnt != 0) {
     131                                        lavgv = ((double)io.submit_q.look_avg.val  ) / io.submit_q.look_avg.cnt;
     132                                        lavgb = ((double)io.submit_q.look_avg.block) / io.submit_q.look_avg.cnt;
     133                                }
    111134
    112                                 double avgsubs = ((double)io.calls.submitted) / io.calls.flush;
    113                                 double avgcomp = ((double)io.calls.completed) / io.calls.drain;
     135                                double aavgv = 0;
     136                                double aavgb = 0;
     137                                if(io.submit_q.alloc_avg.cnt != 0) {
     138                                        aavgv = ((double)io.submit_q.alloc_avg.val  ) / io.submit_q.alloc_avg.cnt;
     139                                        aavgb = ((double)io.submit_q.alloc_avg.block) / io.submit_q.alloc_avg.cnt;
     140                                }
    114141
    115142                                __cfaabi_bits_print_safe( STDOUT_FILENO,
    116143                                        "----- %s \"%s\" (%p) - I/O Stats -----\n"
    117                                         "- total allocations : %'" PRIu64 "f, %'" PRIu64 "s (%'2.2lff) \n"
    118                                         "-     failures      : %'" PRIu64 "oom, %'" PRIu64 "rvk, %'" PRIu64 "blk\n"
    119                                         "- total submits     : %'" PRIu64 "f, %'" PRIu64 "s (%'2.2lf) \n"
    120                                         "- flush external    : %'" PRIu64 "\n"
    121                                         "- io_uring_enter    : %'" PRIu64 " (%'" PRIu64 ", %'" PRIu64 " EBUSY)\n"
    122                                         "-     submits       : %'" PRIu64 " (%'.2lf) \n"
    123                                         "-     completes     : %'" PRIu64 " (%'.2lf) \n"
    124                                         "- poller sleeping   : %'" PRIu64 "\n"
     144                                        "- total submit calls     : %'15" PRIu64 "\n"
     145                                        "- avg ready entries      : %'18.2lf\n"
     146                                        "- avg submitted entries  : %'18.2lf\n"
     147                                        "- total helped entries   : %'15" PRIu64 "\n"
     148                                        "- total leader entries   : %'15" PRIu64 "\n"
     149                                        "- total busy submit      : %'15" PRIu64 "\n"
     150                                        "- total ready search     : %'15" PRIu64 "\n"
     151                                        "- avg ready search len   : %'18.2lf\n"
     152                                        "- avg ready search block : %'18.2lf\n"
     153                                        "- total alloc search     : %'15" PRIu64 "\n"
     154                                        "- avg alloc search len   : %'18.2lf\n"
     155                                        "- avg alloc search block : %'18.2lf\n"
     156                                        "- total wait calls       : %'15" PRIu64 "\n"
     157                                        "- avg completion/wait    : %'18.2lf\n"
     158                                        "- total completion blocks: %'15" PRIu64 "\n"
    125159                                        "\n"
    126160                                        , type,  name, id
    127                                         , io.alloc.fast, io.alloc.slow, avgfasta
    128                                         , io.alloc.fail, io.alloc.revoke, io.alloc.block
    129                                         , io.submit.fast, io.submit.slow, avgfasts
    130                                         , io.flush.external
    131                                         , io.calls.flush, io.calls.drain, io.calls.errors.busy
    132                                         , io.calls.submitted, avgsubs
    133                                         , io.calls.completed, avgcomp
    134                                         , io.poller.sleeps
     161                                        , io.submit_q.submit_avg.cnt
     162                                        , avgrdy, avgcsm
     163                                        , io.submit_q.helped, io.submit_q.leader, io.submit_q.busy
     164                                        , io.submit_q.look_avg.cnt
     165                                        , lavgv, lavgb
     166                                        , io.submit_q.alloc_avg.cnt
     167                                        , aavgv, aavgb
     168                                        , io.complete_q.completed_avg.cnt
     169                                        , ((double)io.complete_q.completed_avg.val) / io.complete_q.completed_avg.cnt
     170                                        , io.complete_q.blocks
    135171                                );
    136172                        }
Note: See TracChangeset for help on using the changeset viewer.