Если уж захотел писать по-английски, то надо было "искейп последовательность" или ещё более по-английски "искейп ссиквинстельность". Если "+" получается в результате URL кодирования, то применить URL декодирование. Иначе надо подобрать правильное регулярное выражение (ну, "регексп"). Думаю, подойдёт "[+]", хотя самому проверить лень.

"\\+" это запись в Java регулярного выражения "\+" в котором \ служит чтобы показать, что + надо использовать как обыкновенный символ, а не как специальный символ регулярного выражения. Специальный символ + означает "один или более элементов, находящихся перед ним".
"[+]" это регуляное выражение, означающее выбор одного из символов, находящихся в квадратных скобках. В данном случае \ не обязателен по синтакису. Однако если б мы захотели усложнить регулярное выражение, то мог бы понадобиться и там. Например, хотим, чтобы разделителем был + или пробел. Пишем: "[+\s]". А если хотим, чтоб произвольное число + и пробелов, то получается например "[+\s]+". Кратко синтаксис регулярных выражений описан в документации по JDK, см. java.util.Regex (следует туда заглянуть потому что такие простые регулярные выражения там обозрены), подробнее в книжках (можно найти в интернете).

Регулярные выражения придуманы не специально для Java. Поэтому если в регулярном выражении тербуется \+ то \ отностится к синтаксису регулярного выражения, а не строки Java. А в строке Java требуется заменять \ на \\, и неважно, изображает ли эта строка регулярное выражение или нет. Поэтому получаем Java строку "\\+" которая изображает собой регулярное выражение \+

да.
А если бы понадобилось написать \ как простой символ, например, надо было разбить строку не по + а по \.
Тогда в регулярном выражении вместо \ пишем \\, а преобразуя это в строку Java получаем "\\\\".
Поскольку в регулярном выражении легко сделать ошибку, то я обычно делаю простую тестовую программу, чтоб смотреть, что получается.