source: libcfa/src/concurrency/stats.cfa @ e46c753

ADTarm-ehast-experimentalenumforall-pointer-decayjacob/cs343-translationnew-astnew-ast-unique-exprpthread-emulationqualifiedEnum
Last change on this file since e46c753 was e46c753, checked in by Thierry Delisle <tdelisle@…>, 4 years ago

Added new io algorithm that eagerly submits while still helping
  • Property mode set to 100644
File size: 9.0 KB
Line 
1#include <stdint.h>
2#include <stdlib.hfa>
3
4#include <unistd.h>                                                             // STDERR_FILENO
5#include <inttypes.h>
6#include "bits/debug.hfa"
7#include "stats.hfa"
8
9#if !defined(__CFA_NO_STATISTICS__)
10        void __init_stats( struct __stats_t * stats ) {
11                stats->ready.pick.push.attempt  = 0;
12                stats->ready.pick.push.success  = 0;
13                stats->ready.pick.push.local    = 0;
14                stats->ready.pick.push.lsuccess = 0;
15                stats->ready.pick.pop .probe    = 0;
16                stats->ready.pick.pop .attempt  = 0;
17                stats->ready.pick.pop .success  = 0;
18                stats->ready.pick.pop .local    = 0;
19                stats->ready.pick.pop .lsuccess = 0;
20                stats->ready.threads.migration = 0;
21                stats->ready.sleep.halts   = 0;
22                stats->ready.sleep.cancels = 0;
23                stats->ready.sleep.wakes   = 0;
24                stats->ready.sleep.exits   = 0;
25
26                #if defined(HAVE_LINUX_IO_URING_H)
27                        stats->io.submit_q.submit_avg.rdy = 0;
28                        stats->io.submit_q.submit_avg.csm = 0;
29                        stats->io.submit_q.submit_avg.cnt = 0;
30                        stats->io.submit_q.look_avg.val   = 0;
31                        stats->io.submit_q.look_avg.cnt   = 0;
32                        stats->io.submit_q.look_avg.block = 0;
33                        stats->io.submit_q.alloc_avg.val   = 0;
34                        stats->io.submit_q.alloc_avg.cnt   = 0;
35                        stats->io.submit_q.alloc_avg.block = 0;
36                        stats->io.submit_q.helped = 0;
37                        stats->io.submit_q.leader = 0;
38                        stats->io.complete_q.completed_avg.val = 0;
39                        stats->io.complete_q.completed_avg.slow_cnt = 0;
40                        stats->io.complete_q.completed_avg.fast_cnt = 0;
41                #endif
42        }
43
44        void __tally_stats( struct __stats_t * cltr, struct __stats_t * proc ) {
45                __atomic_fetch_add( &cltr->ready.pick.push.attempt , proc->ready.pick.push.attempt , __ATOMIC_SEQ_CST );
46                __atomic_fetch_add( &cltr->ready.pick.push.success , proc->ready.pick.push.success , __ATOMIC_SEQ_CST );
47                __atomic_fetch_add( &cltr->ready.pick.push.local   , proc->ready.pick.push.local   , __ATOMIC_SEQ_CST );
48                __atomic_fetch_add( &cltr->ready.pick.push.lsuccess, proc->ready.pick.push.lsuccess, __ATOMIC_SEQ_CST );
49                __atomic_fetch_add( &cltr->ready.pick.pop .probe   , proc->ready.pick.pop .probe   , __ATOMIC_SEQ_CST );
50                __atomic_fetch_add( &cltr->ready.pick.pop .attempt , proc->ready.pick.pop .attempt , __ATOMIC_SEQ_CST );
51                __atomic_fetch_add( &cltr->ready.pick.pop .success , proc->ready.pick.pop .success , __ATOMIC_SEQ_CST );
52                __atomic_fetch_add( &cltr->ready.pick.pop .local   , proc->ready.pick.pop .local   , __ATOMIC_SEQ_CST );
53                __atomic_fetch_add( &cltr->ready.pick.pop .lsuccess, proc->ready.pick.pop .lsuccess, __ATOMIC_SEQ_CST );
54                __atomic_fetch_add( &cltr->ready.threads.migration, proc->ready.threads.migration, __ATOMIC_SEQ_CST );
55                __atomic_fetch_add( &cltr->ready.sleep.halts  , proc->ready.sleep.halts  , __ATOMIC_SEQ_CST );
56                __atomic_fetch_add( &cltr->ready.sleep.cancels, proc->ready.sleep.cancels, __ATOMIC_SEQ_CST );
57                __atomic_fetch_add( &cltr->ready.sleep.wakes  , proc->ready.sleep.wakes  , __ATOMIC_SEQ_CST );
58                __atomic_fetch_add( &cltr->ready.sleep.exits  , proc->ready.sleep.exits  , __ATOMIC_SEQ_CST );
59
60                #if defined(HAVE_LINUX_IO_URING_H)
61                        __atomic_fetch_add( &cltr->io.submit_q.submit_avg.rdy          , proc->io.submit_q.submit_avg.rdy          , __ATOMIC_SEQ_CST );
62                        __atomic_fetch_add( &cltr->io.submit_q.submit_avg.csm          , proc->io.submit_q.submit_avg.csm          , __ATOMIC_SEQ_CST );
63                        __atomic_fetch_add( &cltr->io.submit_q.submit_avg.avl          , proc->io.submit_q.submit_avg.avl          , __ATOMIC_SEQ_CST );
64                        __atomic_fetch_add( &cltr->io.submit_q.submit_avg.cnt          , proc->io.submit_q.submit_avg.cnt          , __ATOMIC_SEQ_CST );
65                        __atomic_fetch_add( &cltr->io.submit_q.look_avg.val            , proc->io.submit_q.look_avg.val            , __ATOMIC_SEQ_CST );
66                        __atomic_fetch_add( &cltr->io.submit_q.look_avg.cnt            , proc->io.submit_q.look_avg.cnt            , __ATOMIC_SEQ_CST );
67                        __atomic_fetch_add( &cltr->io.submit_q.look_avg.block          , proc->io.submit_q.look_avg.block          , __ATOMIC_SEQ_CST );
68                        __atomic_fetch_add( &cltr->io.submit_q.alloc_avg.val           , proc->io.submit_q.alloc_avg.val           , __ATOMIC_SEQ_CST );
69                        __atomic_fetch_add( &cltr->io.submit_q.alloc_avg.cnt           , proc->io.submit_q.alloc_avg.cnt           , __ATOMIC_SEQ_CST );
70                        __atomic_fetch_add( &cltr->io.submit_q.alloc_avg.block         , proc->io.submit_q.alloc_avg.block         , __ATOMIC_SEQ_CST );
71                        __atomic_fetch_add( &cltr->io.submit_q.helped                  , proc->io.submit_q.helped                  , __ATOMIC_SEQ_CST );
72                        __atomic_fetch_add( &cltr->io.submit_q.leader                  , proc->io.submit_q.leader                  , __ATOMIC_SEQ_CST );
73                        __atomic_fetch_add( &cltr->io.complete_q.completed_avg.val     , proc->io.complete_q.completed_avg.val     , __ATOMIC_SEQ_CST );
74                        __atomic_fetch_add( &cltr->io.complete_q.completed_avg.slow_cnt, proc->io.complete_q.completed_avg.slow_cnt, __ATOMIC_SEQ_CST );
75                        __atomic_fetch_add( &cltr->io.complete_q.completed_avg.fast_cnt, proc->io.complete_q.completed_avg.fast_cnt, __ATOMIC_SEQ_CST );
76                #endif
77        }
78
79        void __print_stats( struct __stats_t * stats, int flags, bool cluster, const char * name, void * id ) with( *stats ) {
80
81                if( flags & CFA_STATS_READY_Q ) {
82                        double push_sur = (100.0 * ((double)ready.pick.push.success) / ready.pick.push.attempt);
83                        double pop_sur  = (100.0 * ((double)ready.pick.pop .success) / ready.pick.pop .attempt);
84
85                        double push_len = ((double)ready.pick.push.attempt) / ready.pick.push.success;
86                        double pop_len  = ((double)ready.pick.pop .attempt) / ready.pick.pop .success;
87
88                        double lpush_sur = (100.0 * ((double)ready.pick.push.lsuccess) / ready.pick.push.local);
89                        double lpop_sur  = (100.0 * ((double)ready.pick.pop .lsuccess) / ready.pick.pop .local);
90
91                        double lpush_len = ((double)ready.pick.push.local) / ready.pick.push.lsuccess;
92                        double lpop_len  = ((double)ready.pick.pop .local) / ready.pick.pop .lsuccess;
93
94                        __cfaabi_bits_print_safe( STDOUT_FILENO,
95                                "----- %s \"%s\" (%p) - Ready Q Stats -----\n"
96                                "- total threads run      : %'15" PRIu64 "\n"
97                                "- total threads scheduled: %'15" PRIu64 "\n"
98                                "- push average probe len : %'18.2lf, %'18.2lf%% (%'15" PRIu64 " attempts)\n"
99                                "- pop  average probe len : %'18.2lf, %'18.2lf%% (%'15" PRIu64 " attempts)\n"
100                                "- local push avg prb len : %'18.2lf, %'18.2lf%% (%'15" PRIu64 " attempts)\n"
101                                "- local pop  avg prb len : %'18.2lf, %'18.2lf%% (%'15" PRIu64 " attempts)\n"
102                                "- thread migrations      : %'15" PRIu64 "\n"
103                                "- Idle Sleep -\n"
104                                "-- halts                 : %'15" PRIu64 "\n"
105                                "-- cancelled halts       : %'15" PRIu64 "\n"
106                                "-- schedule wake         : %'15" PRIu64 "\n"
107                                "-- wake on exit          : %'15" PRIu64 "\n"
108                                "\n"
109                                , cluster ? "Cluster" : "Processor",  name, id
110                                , ready.pick.pop.success
111                                , ready.pick.push.success
112                                , push_len, push_sur, ready.pick.push.attempt
113                                , pop_len , pop_sur , ready.pick.pop .attempt
114                                , lpush_len, lpush_sur, ready.pick.push.local
115                                , lpop_len , lpop_sur , ready.pick.pop .local
116                                , ready.threads.migration
117                                , ready.sleep.halts, ready.sleep.cancels, ready.sleep.wakes, ready.sleep.exits
118                        );
119                }
120
121                #if defined(HAVE_LINUX_IO_URING_H)
122                        if( flags & CFA_STATS_IO ) {
123                                double avgrdy = ((double)io.submit_q.submit_avg.rdy) / io.submit_q.submit_avg.cnt;
124                                double avgcsm = ((double)io.submit_q.submit_avg.csm) / io.submit_q.submit_avg.cnt;
125
126                                double lavgv = 0;
127                                double lavgb = 0;
128                                if(io.submit_q.look_avg.cnt != 0) {
129                                        lavgv = ((double)io.submit_q.look_avg.val  ) / io.submit_q.look_avg.cnt;
130                                        lavgb = ((double)io.submit_q.look_avg.block) / io.submit_q.look_avg.cnt;
131                                }
132
133                                double aavgv = 0;
134                                double aavgb = 0;
135                                if(io.submit_q.alloc_avg.cnt != 0) {
136                                        aavgv = ((double)io.submit_q.alloc_avg.val  ) / io.submit_q.alloc_avg.cnt;
137                                        aavgb = ((double)io.submit_q.alloc_avg.block) / io.submit_q.alloc_avg.cnt;
138                                }
139
140                                __cfaabi_bits_print_safe( STDOUT_FILENO,
141                                        "----- %s \"%s\" (%p) - I/O Stats -----\n"
142                                        "- total submit calls     : %'15" PRIu64 "\n"
143                                        "- avg ready entries      : %'18.2lf\n"
144                                        "- avg submitted entries  : %'18.2lf\n"
145                                        "- total helped entries   : %'15" PRIu64 "\n"
146                                        "- total leader entries   : %'15" PRIu64 "\n"
147                                        "- total ready search     : %'15" PRIu64 "\n"
148                                        "- avg ready search len   : %'18.2lf\n"
149                                        "- avg ready search block : %'18.2lf\n"
150                                        "- total alloc search     : %'15" PRIu64 "\n"
151                                        "- avg alloc search len   : %'18.2lf\n"
152                                        "- avg alloc search block : %'18.2lf\n"
153                                        "- total wait calls       : %'15" PRIu64 "   (%'" PRIu64 " slow, %'" PRIu64 " fast)\n"
154                                        "- avg completion/wait    : %'18.2lf\n"
155                                        "\n"
156                                        , cluster ? "Cluster" : "Processor",  name, id
157                                        , io.submit_q.submit_avg.cnt
158                                        , avgrdy, avgcsm
159                                        , io.submit_q.helped, io.submit_q.leader
160                                        , io.submit_q.look_avg.cnt
161                                        , lavgv, lavgb
162                                        , io.submit_q.alloc_avg.cnt
163                                        , aavgv, aavgb
164                                        , io.complete_q.completed_avg.slow_cnt + io.complete_q.completed_avg.fast_cnt
165                                        , io.complete_q.completed_avg.slow_cnt,  io.complete_q.completed_avg.fast_cnt
166                                        , ((double)io.complete_q.completed_avg.val) / (io.complete_q.completed_avg.slow_cnt + io.complete_q.completed_avg.fast_cnt)
167                                );
168                        }
169                #endif
170        }
171#endif
Note: See TracBrowser for help on using the repository browser.