Гость
Целевая тема:
Создать новую тему:
Автор:
Форумы / Java [игнор отключен] [закрыт для гостей] / Хороший у меня кеш получился? / 25 сообщений из 39, страница 1 из 2
21.05.2014, 15:08
    #38647674
zig zu
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
Какие плюсы/минусы в такой реализации?
Будет ли он вообще безопасно работать в многопоточной среде?

Код: java
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
public class Data{

    private volatile Map data = new HashMap();

   public void updateData(.....){
       Map tmpData = new HashMap();
       // fill tmpData
       data = tmpData;
   }

   public Item getData_1(someKey1){
      tmpData = data;
      // find data in tmpData 

      return mapItem;
   }

   public Item getData_2(someKey2){
      tmpData = data;
      // find data in tmpData 

      return mapItem;
   }
}
...
Рейтинг: 0 / 0
21.05.2014, 15:13
    #38647685
Blazkowicz
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
...
Рейтинг: 0 / 0
21.05.2014, 15:29
    #38647698
zig zu
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
Blazkowicz Copy on Write Map ?

А как в этом случае быть с обновлением мапы? Мне ее сначала надо все очистить, и потом заново записть туда данные, получается, что в какой-то момент методы getData могут получить пустую или незаполненную мапу. Не?
...
Рейтинг: 0 / 0
21.05.2014, 15:36
    #38647710
Blazkowicz
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
zig zuА как в этом случае быть с обновлением мапы?

Посмотреть реализацию в существующих примерах?

zig zuМне ее сначала надо все очистить, и потом заново записть туда данные, получается, что в какой-то момент методы getData могут получить пустую или незаполненную мапу. Не?
Вы сами не понимаете как работает то что написали? Мапу зачем чистить?
...
Рейтинг: 0 / 0
21.05.2014, 16:06
    #38647773
zig zu
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
Blazkowicz Мапу зачем чистить?

Чтобы ее обновить. Приходят новые данные для мапы, старые все удаляем, записываем новые.
Или вы предлагаете усложнить процесс обновления мапы и каждый раз в цикле сравнивать старые и новые данные?
...
Рейтинг: 0 / 0
21.05.2014, 16:17
    #38647801
Blazkowicz
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
zig zuЧтобы ее обновить. Приходят новые данные для мапы, старые все удаляем, записываем новые.
Или вы предлагаете усложнить процесс обновления мапы и каждый раз в цикле сравнивать старые и новые данные?
Тогда я не понял что у вас за кэш вообще. Идея Copy on Write в том что бегущие потоки используют старую версию данных, что вполне безопасно. А "новые" потоки, посетившие кэш уже получат новую копию. Таким образом нет никакого промежуточного состояния, когда поток может увидеть невалидный кэш.

Если вы имели ввиду что-то другое, то я не совсем понимаю что ваш код должен вообще делать.
...
Рейтинг: 0 / 0
21.05.2014, 16:25
    #38647810
zig zu
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
Blazkowicz
Если вы имели ввиду что-то другое, то я не совсем понимаю что ваш код должен вообще делать.

Код делает следующее: получили данные, сохранили их(updateData()), пользуемся данными из нескольких потоков(getData()). Раз в сутки обновляем данные, опять через updateData().
...
Рейтинг: 0 / 0
21.05.2014, 16:53
    #38647849
Blazkowicz
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
zig zuКод делает следующее: получили данные, сохранили их(updateData()), пользуемся данными из нескольких потоков(getData()). Раз в сутки обновляем данные, опять через updateData().
Тогда у меня для вас вот ещё схема вечного двигателя.
...
Рейтинг: 0 / 0
21.05.2014, 17:08
    #38647872
zig zu
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
BlazkowiczТогда у меня для вас вот ещё схема вечного двигателя.


Стареете?
Сначала не разобравшись в проблеме CopyOnWriteMap посоветовали.
Потом еще раз не разобравшись картинку не в тему выложили.
Жду от вас какой-нибудь смешной ролик из ютуба.
...
Рейтинг: 0 / 0
21.05.2014, 17:13
    #38647880
Blazkowicz
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
zig zuСтареете?

Переходите на личности?

zig zuСначала не разобравшись в проблеме CopyOnWriteMap посоветовали.

Чтобы в чем-то разобраться, нужно что-то в чем можно было бы разобраться.

zig zuПотом еще раз не разобравшись картинку не в тему выложили.

Это намек на то что рассуждения о кешировании в этой теме, пока что на уровне обсуждения вот этой реализации вечного двигателя.
...
Рейтинг: 0 / 0
21.05.2014, 17:26
    #38647896
zig zu
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
Blazkowiczzig zuСтареете?

Переходите на личности?


Нет, просто мне кажется, что вы надо мной издеваетесь.

Не знаю как еще подробнее объяснить задачу.

Попробую еще раз. Давайте уберем из обсуждения пока слово кеш, может оно сбило вас с толку.

Делаем запрос через веб сервис, получаем немаленький ответ, сохраняем его в мапе. Далее потоки, которым нужны данные из ответа, берут его из мапы, а не делают каждый раз запрос к веб сервису.
В самом веб сервисе данные иногда обновляются и нам соотвтественно надо нашу мапу тоже обновлять.
Свое решение я привел в коде в самом первом посте.

Как вариант, можно еще использовть ehcache, но хотелось пока сделать что-нибудь попроще.
...
Рейтинг: 0 / 0
21.05.2014, 17:50
    #38647928
For All
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
zig zuКод делает следующее: получили данные, сохранили их(updateData()), пользуемся данными из нескольких потоков(getData()). Раз в сутки обновляем данные, опять через updateData().Вам уже ответили, что ConcurrentHashMap уже реализует нужную вам фунциональность:
BlazkowiczИдея Copy on Write в том что бегущие потоки используют старую версию данных, что вполне безопасно. А "новые" потоки, посетившие кэш уже получат новую копию
...
Рейтинг: 0 / 0
21.05.2014, 17:56
    #38647949
zig zu
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
For AllВам уже ответили, что ConcurrentHashMap уже реализует нужную вам фунциональность:


Это я видел и задал вопрос про обновление этой мапы, ответа пока не получил.

Zig ZuА как в этом случае быть с обновлением мапы? Мне ее сначала надо все очистить, и потом заново записть туда данные, получается, что в какой-то момент методы getData могут получить пустую или незаполненную мапу. Не?
...
Рейтинг: 0 / 0
21.05.2014, 18:01
    #38647956
For All
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
У мапы есть метод put - предназначен для обновлений данных
...
Рейтинг: 0 / 0
21.05.2014, 18:03
    #38647962
zig zu
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
For AllУ мапы есть метод put - предназначен для обновлений данных

Как удалить старые данные?
...
Рейтинг: 0 / 0
21.05.2014, 18:06
    #38647965
For All
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
метод remove - там вверху страницы все методы перечислены (и для добавления, и для удаления, и для замены и т.д.)
...
Рейтинг: 0 / 0
21.05.2014, 18:11
    #38647967
ivanra
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
zig zu,
не ведитесь, для русских форумов это нормальная ситуация вместо ответа получить кучу мнений.
Приведенный код вполне подходит для решения поставленной задачи.
Запись и последующее чтение volatile поля связаны отношением happens-before
...
Рейтинг: 0 / 0
21.05.2014, 18:16
    #38647969
For All
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
Просто zig zu никак не может понять, что вместо его собственного класса Data (код которого он привёл в первом сообщении) ему рекомендуют использовать (или хотябы ознакомиться) готовый, идущий в составе JDK, класс ConcurrentHashMap
...
Рейтинг: 0 / 0
21.05.2014, 18:27
    #38647978
zig zu
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
For Allметод remove - там вверху страницы все методы перечислены (и для добавления, и для удаления, и для замены и т.д.)

У меня есть мапа с данными, я получил новые данные, вы мне предалагаете мержить даннные??? Нафиг мне это надо, проще удалить все данные из мапы и залить новые. Не? Так вот как ваша ConcurrentHashMap поможешь? Приведите код. Я свой код привел, там как раз есть решение этой проблемы с использованием копирования volatile ссылки при чтении и записи.
...
Рейтинг: 0 / 0
21.05.2014, 18:28
    #38647980
mayton
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
А вы не ругайтесь 20 страниц а просто приведите usecase когда его код будет делать damage
или overhead.
...
Рейтинг: 0 / 0
21.05.2014, 18:33
    #38647984
For All
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
zig zuЯ свой код привел, там как раз есть решение этой проблемы с использованием копирования volatile ссылки при чтении и записи.Привели, да не совсем. Вот кусок вашего кода:
Код: java
1.
2.
3.
4.
5.
  public void updateData(.....){
       Map tmpData = new HashMap();
       // fill tmpData
       data = tmpData;
   }

Прежде, чем спрашиватьzig zuТак вот как ваша ConcurrentHashMap поможешь?нужно вместо многоточий в аргументах updateData(.....) написать нечто более конкретное
...
Рейтинг: 0 / 0
21.05.2014, 18:48
    #38647997
zig zu
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
For Allнужно вместо многоточий в аргументах updateData(.....) написать нечто более конкретное

А что там непонятного? Сначала создается новая мапа, а потом ее ссылка сбрасывается вместо устаревшей основной.

Как пример:
Код: java
1.
2.
3.
4.
5.
6.
7.
  public void updateData(List<User> data){
       Map tmpData = new HashMap();
       for(User user: data){
           tmpData.put(user.getId, user);
       }
       data = tmpData;
   }
...
Рейтинг: 0 / 0
21.05.2014, 18:50
    #38647999
For All
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
zig zu,
Ну а в чём тогда вопрос? Молодец ли вы, что такой класс написали? Ну Ок - молодец
...
Рейтинг: 0 / 0
21.05.2014, 18:55
    #38648002
Blazkowicz
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
zig zuНет, просто мне кажется, что вы надо мной издеваетесь.

Ну, у меня аналогичные ощущения.
Вы привели код, который почти ничего не иллюстрирует, но отказываетесь его объяснить.
Код похож на концепцию copy-on-write, но вы это почему-то отрицаете, тоже не пытаясь объяснить причину.
Вы говорите о какой-то "очистке", которой в вашем коде нет, и которая особо не нужна. И тоже не объясняете для чего нужна эта "очистка".

zig zuНе знаю как еще подробнее объяснить задачу.

Задача - кеш в многопоточной среде.
Плюсы и минусы - изучаем copy on write и читаем про плюсы и минусы.
Будет ли он вообще безопасно работать в многопоточной среде? Сложно сказать, потому что не рассмотрены все сценарии использования - например совершенно неожиданно всплыли суточные обновления. Если данные обновлять раз в сутки, то вообще до одного места как там кеш реализован, можно спокойно в ReadWriteLock обернуть.

zig zuПопробую еще раз. Давайте уберем из обсуждения пока слово кеш, может оно сбило вас с толку.

Вот это поворот.

zig zuДелаем запрос через веб сервис, получаем немаленький ответ, сохраняем его в мапе. Далее потоки, которым нужны данные из ответа, берут его из мапы, а не делают каждый раз запрос к веб сервису.
В самом веб сервисе данные иногда обновляются и нам соотвтественно надо нашу мапу тоже обновлять.
Свое решение я привел в коде в самом первом посте.
Ну, так-то на много лучше. Что мешало сразу расписать сценарий использования?
Не понятно на сколько критично получать актуальные данные. Не понятно зачем два метода getData() и зачем в них хранить ссылку в локальной переменной.

zig zuКак вариант, можно еще использовть ehcache, но хотелось пока сделать что-нибудь попроще.
Его, например, можно сразу персистить, в отличие от велосипеда. Но надо оно вам или нет, мы не знаем.
...
Рейтинг: 0 / 0
21.05.2014, 19:02
    #38648010
Blazkowicz
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Хороший у меня кеш получился?
maytonА вы не ругайтесь 20 страниц а просто приведите usecase когда его код будет делать damage
или overhead.
- updateData() стоило бы объявить synchronized, если там подразумеваются долгие вычисления. Если нет, то не понятно кто будет гарантировать, что "тяжелые" вычисления не будут запускаться параллельно.
- локальная переменная в get-методе лишняя, как и 2й get-метод
- сбивает с толку использование Map - так как там по задаче выходит любой бизнес-объкт. Так же как и применение сюда термина "кеш", который в комбинации с Map, обычно служит совершенно иным задачам.
- ну, и с обновлениями раз в сутки, оптимизировать что либо особого смысла нет. Достаточно следить за тем чтобы чтение не блокировалось и тяжелые вычисления не запускались параллельно. И если не блокируемое чтение мы тут видим, то что там как с обновлением приведенный код не особо объясняет.
...
Рейтинг: 0 / 0
Форумы / Java [игнор отключен] [закрыт для гостей] / Хороший у меня кеш получился? / 25 сообщений из 39, страница 1 из 2
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]