]> git.itanic.dy.fi Git - linux-stable/commit
io_uring/poll: use IOU_F_TWQ_LAZY_WAKE for wakeups
authorJens Axboe <axboe@kernel.dk>
Thu, 19 Oct 2023 12:42:29 +0000 (06:42 -0600)
committerJens Axboe <axboe@kernel.dk>
Thu, 19 Oct 2023 12:42:29 +0000 (06:42 -0600)
commit6ce4a93dbb5bd93bc2bdf14da63f9360a4dcd6a1
tree701180e12f59565d5b779956011e373359913ccd
parentb3a4dbc89d4021b3f90ff6a13537111a004f9d07
io_uring/poll: use IOU_F_TWQ_LAZY_WAKE for wakeups

With poll triggered retries, each event trigger will cause a task_work
item to be added for processing. If the ring is setup with
IORING_SETUP_DEFER_TASKRUN and a task is waiting on multiple events to
complete, any task_work addition will wake the task for processing these
items. This can cause more context switches than we would like, if the
application is deliberately waiting on multiple items to increase
efficiency.

For example, if an application has receive multishot armed for sockets
and wants to wait for N to complete within M usec of time, we should not
be waking up and processing these items until we have all the events we
asked for. By switching the poll trigger to lazy wake, we'll process
them when they are all ready, in one swoop, rather than wake multiple
times only to process one and then go back to sleep.

At some point we probably want to look at just making the lazy wake
the default, but for now, let's just selectively enable it where it
makes sense.

Signed-off-by: Jens Axboe <axboe@kernel.dk>
io_uring/poll.c