|
Действия ...
|
13.12.2021, 13:09
|
|||
|---|---|---|---|
|
|||
Spark: Отправка InputSplit на конкретный Executor |
|||
|
|
|
13.12.2021, 14:11
|
|||
|---|---|---|---|
|
|||
Spark: Отправка InputSplit на конкретный Executor |
|||
|
|
Этот баннер — требование Роскомнадзора для исполнения 152 ФЗ.
«На сайте осуществляется обработка файлов cookie, необходимых для работы сайта, а также для анализа использования сайта и улучшения предоставляемых сервисов с использованием метрической программы Яндекс.Метрика. Продолжая использовать сайт, вы даёте согласие с использованием данных технологий».
Политика конфиденциальности
Новые сообщения [новые:0]
Дайджест
Горячие темы
Избранное [новые:0]
Форумы
Пользователи
Статистика
Статистика нагрузки
Мод. лог
Поиск
|
|
13.12.2021, 00:10
|
|||
|---|---|---|---|
|
|||
Spark: Отправка InputSplit на конкретный Executor |
|||
|
#18+
Можно ли в Spark создать набор InputSplit при чтении RDD с диска и отправить конкретный InputSplt на конкретный Executor Попробывал переопределить preferredLocations - но не помогло ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
13.12.2021, 13:09
|
|||
|---|---|---|---|
Spark: Отправка InputSplit на конкретный Executor |
|||
|
#18+
нет ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
13.12.2021, 14:11
|
|||
|---|---|---|---|
|
|||
Spark: Отправка InputSplit на конкретный Executor |
|||
|
#18+
rinda0 Можно ли в Spark создать набор InputSplit при чтении RDD с диска и отправить конкретный InputSplt на конкретный Executor ПопробыОвал переопределить preferredLocations - но не помогло ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
13.12.2021, 20:36
|
|||
|---|---|---|---|
|
|||
Spark: Отправка InputSplit на конкретный Executor |
|||
|
#18+
Дедушка нет А как раздать на все экзекуторы гарантированно одинаковый набор байт ? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
start [/forum/topic.php?fid=48&tablet=1&tid=1856510]: |
0ms |
get settings: |
7ms |
get forum list: |
12ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
63ms |
get topic data: |
11ms |
get forum data: |
3ms |
get page messages: |
49ms |
get tp. blocked users: |
2ms |
| others: | 321ms |
| total: | 474ms |
| 0 / 0 |
