ILIs544Защищаем мы заметки Васи от любого несанкционированного доступа, т.е. на тот случай если:
трафик Васи при создании заметок будет перехвачен
администратор, который может смотреть админку тоже не должен видеть заметки Васи
будет утянута база
будет несанкционированный доступ к хостингу (тут вообще может что-нибудь помочь?:))

Вот с этого нужно было начинать. Потому что это цель. А всё остальное - пустота.

Если цель состоит только в шифровании заметок, то адреса контактов под такую цель не попадают и, соответственно, их можно хранить в открытом виде, ну и отправлять по ним всякую шифрованную дрянь, которую клиенты уж как-нибудь сами переварят. Если они сами не переваривают, то тогда у них один путь - доверять посреднику. Но посредник может создать для них туннель, по которому можно обеспечить взаимодействие между браузерами, например через https. При этом останется проблема обмена ключами между пользователями. Посредник может предложить им найти удобный способ (подсказать варианты). Например - качаете тулзу такую-то, она делает вам ключ, шлёте его через предпочитаемую почту своим друзьям, ставите полученные от друзей ключи в браузер и далее смело рубитесь в порно-игры через предлагаемый посредником туннель, ваш обнажённый торс посредник не увидит. Здесь опять встаёт проблема доверия, но уже скачанной тулзе и каналу передачи ключей. Но поскольку тулза и канал скорее всего не знают о назначении создаваемых/передаваемых байт, то про порно-игры могут и не догадаться. Ну а если догадаются - Васе с Петей придётся раскошелиться за ограничение публичности их занятий перед монитором писюка :) В общем - снимаете с себя ответственность за канал и тулзу, заявляя, что лучший способ передачи - из рук в руки.

Ну а джанги там всякие и прочие поделия к теме вообще никакого отношения не имеют. Это лишь мусор, набрасывая который вы упорно не давали нам вас понять. Потому что если вы уж взялись за какую-то джангу, значит оно вам нравится и вы готовы приседать до упаду ради реализации правильного подхода на вами любимой джанге или ещё какой приблуде. Для нас от названия приблуды ничего не меняется.

Arm79Использование асимметричных ключей приведет к тому, что вам придется ваши заметки шифровать тем количеством сертификатов, которое равно количеству ваших адресатов. При этом ранее созданные заметки для всех новых адресатов просто будут недоступны, если их не перешифровать.
Так и должно быть. Как минимум автор озвучил такое ТЗ.

Количество ключей так же не проблема - шифрует клиент (браузер, например).
Arm79А ручной обмен паролями для симметричных шифров - я затрудняюсь назвать это хоть каким то решением.
Если юзер готов платить своим временем за свою безопасность - вы затрудняетесь обеспечить ему решение его задачи.
Arm79Обычно используют ...
Вы ТЗ прочитайте, а что там и для чего "обычно используют" - это к маркетолухам, они вам и не такое споют.

В общем - не нагоняйте жути, ваш ход гораздо страшнее :)