Java SE - это просто Java как язык программирования.
Java EE - сервер для Java.
Грубо говоря Java SE - аналог PHP, JavaEE - аналог веб сервера Apache и mod_php.
Кроме Apachе есть другие веб-сервера, в которых можно запускать PHP. Так же и в Java есть разные JavaEE сервера, например Tomcat, Jetty, Glassfish, JBoss.
Для сайтов наиболее популярен Tomcat.

Для среднего сайта я советую PHP.

JavaSE - это core java (язык, работа с файлами, коллекциями, потоками и т.п.) + swing (библиотека графических интерфейсов десктоп приложений). JavaSE - это обычная поставка JRE.

JavaEE - это набор спецификаций для разработки enterprise приложений. Судя входят JSP/Servlet, JSF, EJB, ... и условно Hibernate, Spring, ... . Если мы говорим именно о JEE, то как правило используется какая-либо реализация в виде сервера приложений (Glassfish, JBoss, IBM Websphere, ... ).

Вы написали то же что и я, только более подробно.
Я пытался спуститься до уровня автора, чтобы ему было понятнее, что я специально оговорил (см мою ремарку "грубо говоря").

Ну так если я буду знать JavaSE, могу ли я без книжек перейти на JavaEE? Есть ли различия в коде (или же как я писал на JavaSE, я буду так же писать на JavaEE)?

У вас сложилось неверное впечатление о том, что такое JavaEE.
JavaEE - это некий стандарт. Он стандартизирует функциональность сервера. Есть несколько реализаций этого стандарта, то есть несколько реализаций серверов.
Эти сервера очень сложны, в них много функций. Но для разработки веб-сайтов нужно примерно 5% от функциональности этих серверов. Все что нужно, это чтобы сервер принимал HTTP запросы и передавал их написанному вами компоненту. В случае с PHP компонентом является файл с расширением PHP, в случае с Java это будет некий Java класс.
Чтобы понять, что вам пришло в HTTP запросе, в PHP вам надо читать массивы $_GET и $_POST. В java надо вызывать функцию
javax.servlet.HttpRequest.getParameter. Для работы с сессиями тоже есть функции. Набор таких функций и есть JavaEE.





Да. Скачайте сервер Tomcat, вместе с ним идут примеры кода на JavaEE.

Во-первых, для создания сайтов нужна очень маленькая чамть

Не дописал ответ.
Если допустим я выучу JavaSE, то смоги ли я не уча JavaEE начать писать сайты (или там подход к программирования и т.п разное)?

Да, сможете.