|
Spark: Отправка InputSplit на конкретный Executor
|
|||
---|---|---|---|
#18+
Можно ли в Spark создать набор InputSplit при чтении RDD с диска и отправить конкретный InputSplt на конкретный Executor Попробывал переопределить preferredLocations - но не помогло ... |
|||
:
Нравится:
Не нравится:
|
|||
13.12.2021, 00:10 |
|
Spark: Отправка InputSplit на конкретный Executor
|
|||
---|---|---|---|
#18+
нет ... |
|||
:
Нравится:
Не нравится:
|
|||
13.12.2021, 13:09 |
|
Spark: Отправка InputSplit на конкретный Executor
|
|||
---|---|---|---|
#18+
rinda0 Можно ли в Spark создать набор InputSplit при чтении RDD с диска и отправить конкретный InputSplt на конкретный Executor ПопробыОвал переопределить preferredLocations - но не помогло ... |
|||
:
Нравится:
Не нравится:
|
|||
13.12.2021, 14:11 |
|
Spark: Отправка InputSplit на конкретный Executor
|
|||
---|---|---|---|
#18+
Дедушка нет А как раздать на все экзекуторы гарантированно одинаковый набор байт ? ... |
|||
:
Нравится:
Не нравится:
|
|||
13.12.2021, 20:36 |
|
|
start [/forum/topic.php?fid=48&gotonew=1&tid=1856510]: |
0ms |
get settings: |
11ms |
get forum list: |
6ms |
check forum access: |
1ms |
check topic access: |
1ms |
track hit: |
72ms |
get topic data: |
72ms |
get first new msg: |
4ms |
get forum data: |
1ms |
get page messages: |
133ms |
get tp. blocked users: |
2ms |
others: | 326ms |
total: | 629ms |
0 / 0 |