Являются ли компоненты Swing (например, JList) многопоточными? Что будет, если несколько потоков будут быстро-быстро добавлять элементы в список? Достаточно ли для избавления от проблем воспользоваться в потоках методом invokeLater? Является ли многопоточным сам метод invokeLater? Что-то я не вижу у него признака synchronized. Что будет, если несколько потоков будут быстро-быстро вызывать invokeLater? Не может ли это привести к тому, что в очередь будут становиться повреждённые или неправильно сформированные Runnable?

Нет, Swing компоненты не являются многопоточными.
По поводу работы со Swing'ом в нескольких потоках почитайте вот это: Concurrency in Swing