ReSQL.ru
     
powered by simpleCommunicator - 2.0.30     © 2024 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Map
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / Java [игнор отключен] [закрыт для гостей] / как тестить кафку?
13 сообщений из 38, страница 2 из 2
  2  все
как тестить кафку?
    #40059508
andreykaT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
andreykaT
Участник
PetroNotC Sharp
andreykaT,
>чот тут все какие то агрессоры сплошные.
= тех кто не показывает код или то что просят мемберы тут по пальцам пересчитать.
Вот и делай выводы... почему к тебе именно агрессивны.

чуть выше я код показал. кроме того чел сказал типа не дойдет. я задал вполне разумно вопрос в постперсисте тоже не дойдет? чел меня просто отчленососил на ровном месте вообще без агрессии с моей стороны. что то там про мартышек рассказал про то что это вне инфры и тп (хотя это не так). это норм? мне кажется это типичный пример русского форума с агрессивными форумчанами класса "му**к".

я так потихоньку начинаю понимать бесполезность этого форума.

ответы на мои вопросы были просты до безобразия - юзай готовый прекрасный кафкамок продьюсер из коробки и юзай спай чтоб его заинжектить. всё.
всякие советы как в хибере перехватывать события - это советы хоть и полезные (хотя смотря как их подать) но не совсем по тематике.
...
Рейтинг: 0 / 0
04.04.2021, 11:10
| Ответить | Цитировать | Написать  
как тестить кафку?
    #40059509
PetroNotC Sharp
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
PetroNotC Sharp
Участник
andreykaT,
Кто тебе давал право обобщать?
авторрусского форума
Хочешь чтобы тебя забанили?
Меня поражает толерантность чела, когда жрет со своим соседом из одной кастрюли и поносит соседа.
НЕ ОБОБЩАЙ.
...
Рейтинг: 0 / 0
04.04.2021, 11:22
| Ответить | Цитировать | Написать  
как тестить кафку?
    #40059517
andreykaT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
andreykaT
Участник
PetroNotC Sharp
andreykaT,
Кто тебе давал право обобщать?
авторрусского форума

Хочешь чтобы тебя забанили?
Меня поражает толерантность чела, когда жрет со своим соседом из одной кастрюли и поносит соседа.
НЕ ОБОБЩАЙ.
смтри: тебя не возмущает что некий агрессивный гражданин тут помоями брызгается причем совершенно немотивированно, но ты возбудился на то что я назвал вещи своими именами. мне совершенно параллельно забанят меня тут или нет. с недавних пор технической ценности этот форум больше не представляет. благодаря таким вот гражданам. тут обсуждать нечего.

все обсуждения скатываются во взаимные оскорбления.
...
Рейтинг: 0 / 0
04.04.2021, 11:52
| Ответить | Цитировать | Написать  
как тестить кафку?
    #40059518
Фотография mayton
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
mayton
Участник
andreykaT
PetroNotC Sharp
andreykaT,
>чот тут все какие то агрессоры сплошные.
= тех кто не показывает код или то что просят мемберы тут по пальцам пересчитать.
Вот и делай выводы... почему к тебе именно агрессивны.

чуть выше я код показал. кроме того чел сказал типа не дойдет. я задал вполне разумно вопрос в постперсисте тоже не дойдет? чел меня просто отчленососил на ровном месте вообще без агрессии с моей стороны. что то там про мартышек рассказал про то что это вне инфры и тп (хотя это не так). это норм? мне кажется это типичный пример русского форума с агрессивными форумчанами класса "му**к".

я так потихоньку начинаю понимать бесполезность этого форума.

ответы на мои вопросы были просты до безобразия - юзай готовый прекрасный кафкамок продьюсер из коробки и юзай спай чтоб его заинжектить. всё.
всякие советы как в хибере перехватывать события - это советы хоть и полезные (хотя смотря как их подать) но не совсем по тематике.

У меня есть точка зрения что кафку не нужно тестировать (на correctness) вообще. Это - инфраструктурный объект.
Как LAN, NAS, S3 buckets, Google Drives, файрволы и проч. Кафка РАБОТАЕТ по определению. Работает всегда корректно.
Нужно тестировать свою бизнес-логику на модульном уровне.

Если говорить об удобстве инжекции для интеграционных тестов - то здесь тоже можно обсуждать но это опять-же
вопрос вообще к кафке не имеет отношения а имеет к Спрингу. Ну создай себе бин. Мокай его. Шпионь за ним.
При чем тут несчастная кафка?

Кафку можно еще отдельно посмотреть под нагрузкой. Но нагрузочные тесты - это отдельная тема. Их делают пару
раз в жизни. Один раз для POC и второй раз когда уже совсем все плохо и "пропало всё" (c).

Можно еще отдельно рассмотреть ошибки архитектуры конфигурации Кафка приложения. Кажется андрей уже
один такой архитектурный вопрос поднимал. Но - тема потребует больше контекста. Возможно даже опубликовать
конфиги и архетип приложения.

P.S. Кстате дайте архетипы maven для типичного Kafka приложения.
...
Рейтинг: 0 / 0
04.04.2021, 11:53
| Ответить | Цитировать | Написать  
как тестить кафку?
    #40059519
andreykaT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
andreykaT
Участник
ну что тестировать. я ж не про кафку говорил. а про свой код.
банально - как он себя поведет если кафка недоступна? скипнет мессадж и дальше поедет или упадет?
или как у тебя формируется сам документ что ты шлешь - все ли поля на месте? или поиграться с разными ошибками что может продьюссер возвращать? это ближе к первой части.

я про эти тесты.

или банально сработал ли у тебя в хибере ивент слушающий изменения сущности АДРЕС, когда ты обновил сущность ЮЗЕР присвоив ей вместо АДРЕС1 АДРЕС2. будет ли ивент на обновление? ведь ты юзера же обновляешь с точки зрения кода? а под капотом меняется ФК у АДРЕСа.

насчет спринга - так я его не юзаю уже года 3 :) с чего весь спич и начался что в энтитилистенере нельзя заинжектить бины.
зато при определенном конфиге (где ты уже ивентлистенеры в регистри сам подкладываешь) можно вполне законно это делать без всяких ухищрений.

в любом случае, задачку я сделал, тесты написал. всё работает и не кашляет.
...
Рейтинг: 0 / 0
04.04.2021, 12:04
| Ответить | Цитировать | Написать  
как тестить кафку?
    #40059524
Андрей Панфилов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Андрей Панфилов
Участник
andreykaT
тему с триггерами в оракле и логингом обновлений я тут предлагал с полгода назад - обосрали точно так же. но ща вроде ок ))
если мне не изменяет память, то в прошлый раз ты вместо того чтобы решать реальную проблему, пытался заткнуть ее кафкой, здесь же вопрос про то, что данные, которые даже засунулись в БД еще не факт что зафиксируются, и Леонид общий посыл понял, а ты нет, что какбы намекает на твой уровень.

andreykaT
его вариант мне как то не очень. слишком много кода выходит и что то у меня смутные подозрения.
Очень профессиональный подход как мне кажется: если для правильной реализации нужно, о боже! писать код, то это автоматически признается тупиковым решением. Я хотел бы знать в какой конторе трудятся такие говнокодеры как ты, чтобы не дай бог не связаться с ней.

andreykaT
ну и второе

Код: java
1.
2.
3.
        ((SessionImpl)session).getActionQueue().registerProcess((isOk, sessionImplementor) -> {
            //бла бла делаем что хотим затаскиваем бин какой хотим хз как вытряхнуть сущность из имплементора
        });



Опять же, похоже что твой уровень не позволяет связать вместе два куска кода, прямо рокет-сайнс какой-то, не иначе:

Код: java
1.
2.
3.
4.
5.
6.
7.
@Override
public void onPostInsert(PostInsertEvent event) {
    SessionImplementor session = event.getSession().unwrap(SessionImplementor.class);
    session.getActionQueue().registerProcess((success, sess) -> {
        sendMessage(event.getEntity());
    });
}



andreykaT
всякие советы как в хибере перехватывать события - это советы хоть и полезные (хотя смотря как их подать) но не совсем по тематике.


andreykaT
зато при определенном конфиге (где ты уже ивентлистенеры в регистри сам подкладываешь) можно вполне законно это делать без всяких ухищрений


Я считаю прекрасным, что этот топик позволил выявить такого чмо как ты: все это время ноешь, что то что тебе говорят - это чушь собачья, а сам втихую выполнил рекомендации, и все же продолжаешь ныть.
...
Рейтинг: 0 / 0
04.04.2021, 12:44
| Ответить | Цитировать | Написать  
как тестить кафку?
    #40059528
PetroNotC Sharp
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
PetroNotC Sharp
Участник
andreykaT,
Ты дорасти ТРУДОМ до его уровня и потом будешь так поучать.
Меня возмущает когда 11 страниц форума занимают мемберы которые могли бы решить проблему на второй странице.
не совсем джава но вдруг. кафка.
Ещё раз неписанное правило форума - "ТС должен работать больше отвечающих".
На твое обучение форум тратит больше и без всякой отдачи от тебя.
Удачи!
...
Рейтинг: 0 / 0
04.04.2021, 13:18
| Ответить | Цитировать | Написать  
как тестить кафку?
    #40059532
andreykaT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
andreykaT
Участник
PetroNotC Sharp
andreykaT,
Ты дорасти ТРУДОМ до его уровня и потом будешь так поучать.
Меня возмущает когда 11 страниц форума занимают мемберы которые могли бы решить проблему на второй странице.
не совсем джава но вдруг. кафка.
Ещё раз неписанное правило форума - "ТС должен работать больше отвечающих".
На твое обучение форум тратит больше и без всякой отдачи от тебя.
Удачи!

я всё жду когда же ты мне писать то перестанешь ) там проблема где была там и осталась. мессаджи терялись при ребалансе. ты вообще там утверждал что офсеты прыгать не могут. а они могут и это вообще поведение на 143% конвенционное это к слову о технических компетенциях. если вкратце, там я задачу решил просто количеством консамеров равным количеству партиций. что там в ее глубинах происходит - ушло задачами к тем кто заявляет что специалист по кафкам. ) а это как ты понимаешь не я. и, к сожалению, не ты. а следуя вашим советам я потратил неделю выпиливая вертикс чтоб проверить ваши убеждения что после этого точно "терять не будет".
...
Рейтинг: 0 / 0
04.04.2021, 13:28
| Ответить | Цитировать | Написать  
как тестить кафку?
    #40059552
PetroNotC Sharp
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
PetroNotC Sharp
Участник
andreykaT
я всё жду когда же ты мне писать то перестанешь )

:) я тут живу и работаю. А ты гость вроде )))))))
По поводу твоего топика в 11 страниц, то там причина была в конфиге с галочкой.
А конфиг В КОМПЛЕКТЕ с демкой ты 11 страниц отказывался выложить.
Если бы выложил то топик был бы всего две страницы.
Меньше пиши - лучше ссылку сюда кинь если я не прав.
...
Рейтинг: 0 / 0
04.04.2021, 14:28
| Ответить | Цитировать | Написать  
как тестить кафку?
    #40059616
mad_nazgul
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
mad_nazgul
Участник
andreykaT
собссно есть компонент. в хибере в энтитилистенере вставлен кафка продьюссер. просто в конструкторе инициализируется.
оттуда и шлет в топик все изменения сущностей.
продьюссер не инжектится в энтитилистенер а прям там через нью создается.

вопрос - как это тестировать. я поднял контекст хибера. прикрутил н2. ну оно и работает - создает реальный продьюссер (я максимум в тестах могу подкрутить конфиг продьюссера) и продьюссер фигачит реально объекты в топик.

как мне замокать в таком конфиге продьюссера (это в идеале) и сдернуть с него объект который в него попадает.

если бы это был простой юнит тест там понятно привинтить каптор и поехали. но здесь то реальный контекст поднимается.

рассматривал вариант с тестконтейнером. но во-первых, контора против тестконтейнеров. во-вторых, мне же придется консамеры еще поднимать и вылавливать объекты. а это прям много кода.

и что тут делать? как внутри энтитилистенера поймать объект который уходит в продьюссер и замокать продьюссер?

мне все же нужен контекст хибера, чтоб проверить как отрабатывает именно взаимодействие с ним.


Kafka embedded

Stackoverflow

Тестируйте, не обляпайтесь!
<:o)
...
Рейтинг: 0 / 0
05.04.2021, 06:48
| Ответить | Цитировать | Написать  
как тестить кафку?
    #40059764
andreykaT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
andreykaT
Участник
mad_nazgul
andreykaT
собссно есть компонент. в хибере в энтитилистенере вставлен кафка продьюссер. просто в конструкторе инициализируется.
оттуда и шлет в топик все изменения сущностей.
продьюссер не инжектится в энтитилистенер а прям там через нью создается.

вопрос - как это тестировать. я поднял контекст хибера. прикрутил н2. ну оно и работает - создает реальный продьюссер (я максимум в тестах могу подкрутить конфиг продьюссера) и продьюссер фигачит реально объекты в топик.

как мне замокать в таком конфиге продьюссера (это в идеале) и сдернуть с него объект который в него попадает.

если бы это был простой юнит тест там понятно привинтить каптор и поехали. но здесь то реальный контекст поднимается.

рассматривал вариант с тестконтейнером. но во-первых, контора против тестконтейнеров. во-вторых, мне же придется консамеры еще поднимать и вылавливать объекты. а это прям много кода.

и что тут делать? как внутри энтитилистенера поймать объект который уходит в продьюссер и замокать продьюссер?

мне все же нужен контекст хибера, чтоб проверить как отрабатывает именно взаимодействие с ним.


Kafka embedded

Stackoverflow

Тестируйте, не обляпайтесь!
<:o)

спасибо. мне пока понравилась тема с кафка-мок консамирами и продюссерами. прям то что надо. там есть и методы для симуляции ошибок и методы для вытаскивания очереди сообщений и т.п.
...
Рейтинг: 0 / 0
05.04.2021, 13:32
| Ответить | Цитировать | Написать  
как тестить кафку?
    #40059776
Фотография mayton
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
mayton
Участник
Я так понмаю что тему можно уже закрыть?
...
Рейтинг: 0 / 0
05.04.2021, 13:49
| Ответить | Цитировать | Написать  
как тестить кафку?
    #40059793
andreykaT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
andreykaT
Участник
mayton
Я так понмаю что тему можно уже закрыть?

да. пообсуждать тему как там хибер что сохраняет и как правильно это делать - можно отдельно.
...
Рейтинг: 0 / 0
05.04.2021, 14:16
| Ответить | Цитировать | Написать  
13 сообщений из 38, страница 2 из 2
  2  все
Форумы / Java [игнор отключен] [закрыт для гостей] / как тестить кафку?
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение
NoSQL.ru, Чат Кролика       Пашэ: Рисунки, Чат       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=59&msg=40059524&tid=2120488]:
 0ms
get settings:
 16ms
get forum list:
 5ms
check forum access:
 1ms
check topic access:
 1ms
track hit:
 51ms
get topic data:
 2ms
get forum data:
 1ms
get page messages:
 290ms
get tp. blocked users:
 0ms
others: 280ms
total:  647ms
созд. / загр.: 647ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]