]> git.baikalelectronics.ru Git - kernel.git/commit
membarrier: Explicitly sync remote cores when SYNC_CORE is requested
authorAndy Lutomirski <luto@kernel.org>
Fri, 4 Dec 2020 05:07:05 +0000 (21:07 -0800)
committerThomas Gleixner <tglx@linutronix.de>
Wed, 9 Dec 2020 08:37:43 +0000 (09:37 +0100)
commit2bac59c2caed3913f279ed014463fe3a69281092
treef3f9f01ed246b831abadedd53887d2d9a81935af
parent7f8500eb99f58f0ff5bf1494e8856ad1bf161d3c
membarrier: Explicitly sync remote cores when SYNC_CORE is requested

membarrier() does not explicitly sync_core() remote CPUs; instead, it
relies on the assumption that an IPI will result in a core sync.  On x86,
this may be true in practice, but it's not architecturally reliable.  In
particular, the SDM and APM do not appear to guarantee that interrupt
delivery is serializing.  While IRET does serialize, IPI return can
schedule, thereby switching to another task in the same mm that was
sleeping in a syscall.  The new task could then SYSRET back to usermode
without ever executing IRET.

Make this more robust by explicitly calling sync_core_before_usermode()
on remote cores.  (This also helps people who search the kernel tree for
instances of sync_core() and sync_core_before_usermode() -- one might be
surprised that the core membarrier code doesn't currently show up in a
such a search.)

Fixes: 6c444ef1257e ("membarrier: Provide core serializing command, *_SYNC_CORE")
Signed-off-by: Andy Lutomirski <luto@kernel.org>
Signed-off-by: Thomas Gleixner <tglx@linutronix.de>
Reviewed-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>
Cc: stable@vger.kernel.org
Link: https://lore.kernel.org/r/776b448d5f7bd6b12690707f5ed67bcda7f1d427.1607058304.git.luto@kernel.org
kernel/sched/membarrier.c