ReSQL.ru
     
powered by simpleCommunicator - 2.0.38     © 2025 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / Unix-системы [игнор отключен] [закрыт для гостей] / sh script (command line vs crontab)
25 сообщений из 43, страница 1 из 2
  1  все
sh script (command line vs crontab)
    #39595742
Фотография justIT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
justIT
Участник
Есть sh скрипт ( mgbc.sh ), запускающий SQL-скрипт и выводящий результат в файл result_mgbc.txt

Код: powershell
1.
2.
3.
#!/bin/sh

(echo "SET @cid=570; SET @cid2='service@';" ; cat /root/bin/mgbc.sql) |mysql -uusername -pservetword  > /root/bin/result_mgbc.txt



SQL-скрипт для выборки из MySQL таблицы

Код: sql
1.
2.
3.
4.
5.
6.
SELECT  table1.id, table1.a_id, table2.email
FROM table1
INNER JOIN table2 ON table1.a_id=table2.id
AND table1.campaign_id = @cid
AND table2.email LIKE CONCAT('%', @cid2 ,'%')
;




Запуская /root/bin/mgbc.sh из терминала,
в файле result_mgbc.txt имеем данные по выборке

А запуская тот же /root/bin/mgbc.sh из КРОНа


35 10 1 * * /root/bin/mgbc.sh


в файле result_mgbc.txt пусто

Где собака порылась?
...
Рейтинг: 0 / 0
02.02.2018, 16:23
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39595782
Ivan_Pisarevsky
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ivan_Pisarevsky
Участник
justITГде собака порылась?в путях? либо скорми крону пути вида PATH=/usr/... , либо укажи c явным путем mysql.
...
Рейтинг: 0 / 0
02.02.2018, 17:25
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39595814
Фотография justIT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
justIT
Участник
Ivan_PisarevskyjustITГде собака порылась?
в путях? либо скорми крону пути вида PATH=/usr/... , либо укажи c явным путем mysql.


Увы

Код: powershell
1.
2.
3.
#!/bin/sh

(echo "SET @cid=570; SET @cid2='service@';" ; cat /root/bin/mgbc.sql) | /usr/bin/mysql -uusername -pservetword  > /root/bin/result_mgbc.txt



результат тот же.
Командная строка - отработал
Из крона результат селекта ноль.
Именно что в result_mgbc.txt

Код: plsql
1.
2.
campaign_recipient.id campaign_recipient.account_id account.marketing_contact_email
0



sql-скрипт отрабатывает, но вместо @cid=570 и @cid2='service@' в него идет что-то иное, пустое.
...
Рейтинг: 0 / 0
02.02.2018, 18:10
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39595842
Фотография OoCc
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
OoCc
Участник
justITА запуская тот же /root/bin/mgbc.sh из КРОНа


35 10 1 * * /root/bin/mgbc.sh


в файле result_mgbc.txt пусто

Где собака порылась?
В crontab-е. Под каким юзером скрипт запускается?
...
Рейтинг: 0 / 0
02.02.2018, 18:49
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39595866
Фотография justIT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
justIT
Участник
OoCcjustITА запуская тот же /root/bin/mgbc.sh из КРОНа


35 10 1 * * /root/bin/mgbc.sh


в файле result_mgbc.txt пусто

Где собака порылась?
В crontab-е. Под каким юзером скрипт запускается?

логинюсь под root
запускаю скрипт стало быть тоже.
crontab -e из той же сессии.

Скрипт-то запускается, и отрабатывает (крон-лог)
текстовый файл-с-отчетом-создается.
В нем список полей из селекта есть, только данных нету,
точно будто вместо параметра 570 идет нуль.
...
Рейтинг: 0 / 0
02.02.2018, 19:48
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39595928
vkle
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
vkle
Участник
Может, в запросе кодировку SET NAMES указать явно? При консольном вызове mysql она берется из переменных окружения. Гипотетически, в сессии крона она может отличаться от пользовательской сессии. Хотя, если кириллицы нет, то и повлиять оно не должно.
...
Рейтинг: 0 / 0
02.02.2018, 21:48
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39596030
Фотография justIT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
justIT
Участник
Кириллицы нет в таблицах вообще.
...
Рейтинг: 0 / 0
03.02.2018, 12:47
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39596108
Фотография justIT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
justIT
Участник
Разумеется если SET @cid=...; SET @cid2=... вставить непосредственно в sql-script то все раотает как часы.
...
Рейтинг: 0 / 0
03.02.2018, 17:40
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39596310
Мутаген
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Мутаген
Гость
Это же легко проверить.
Код: powershell
1.
2.
#!/bin/sh
(echo "SET @cid=570; SET @cid2='service@';" ; cat /root/bin/mgbc.sql) > /tmp/tmp.txt


и посмотреть чего будет в /tmp/tmp.txt

Плюс обычные средства отладки cron: посмотреть чего он в email напишет.

Я подозреваю /bin/sh это какой-то облегченный шелл и не понимает таких новшеств со скобками. Типа ash/dash или вообще какой-нибудь HP-UX, у которого /bin/sh неизменный с 80х.
...
Рейтинг: 0 / 0
04.02.2018, 13:35
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39596356
Фотография justIT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
justIT
Участник
МутагенЭто же легко проверить.
Код: powershell
1.
2.
#!/bin/sh
(echo "SET @cid=570; SET @cid2='service@';" ; cat /root/bin/mgbc.sql) > /tmp/tmp.txt


и посмотреть чего будет в /tmp/tmp.txt


в /tmp/tmp.txt имеем

При запуске вручную

Код: powershell
1.
2.
3.
SET @cid=570; SET @cid2='service@';

+ содержимое /root/bin/mgbc.sql



При запуске через cron ничего.
Хм....

В cron-логе видно, что скрипт запустился.
...
Рейтинг: 0 / 0
04.02.2018, 16:28
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39596366
Фотография justIT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
justIT
Участник
МутагенЭто же легко проверить.


НО!

При выполнении вручную

Код: powershell
1.
2.
3.
#!/bin/sh

(echo "SET @cid=570; SET @cid2='service@';" ; cat /root/bin/mgbc.sql) |/full-path-to/mysql -uusername -pservetword  > /root/bin/result_mgbc.txt



В /root/bin/result_mgbc.txt
имеем

Код: powershell
1.
2.
3.
table1.id, table1.a_id, table2.email
1245       4578    service@somedomain.com
и еще 500+ таких строк



Удаляю /root/bin/result_mgbc.txt и
запускаю через крон

В /root/bin/result_mgbc.txt
имеем

Код: powershell
1.
2.
3.
table1.id, table1.a_id, table2.email
и больше ничего!! 
списот полей таблицы, но нет данных



Что говорит о том, что оба скрипта обрабатывают, только вместо
SET @cid=570; SET @cid2='service@';
передаются скорей всего пустые cid и cid2



Суть задачи-то в том, чтобы сделать шелл скрипт, который в кроне потом запускать несколько раз в сутки
вот так:

Код: powershell
1.
2.
3.
4.
15 8 * * * /root/bin/mgbc.sh 570 'service@'
15 9 * * * /root/bin/mgbc.sh 571 'service@'
15 10 * * * /root/bin/mgbc.sh 572 'service@'
15 11 * * * /root/bin/mgbc.sh 573 'service@'



Я пока не смог найти иного метода, кроме как указанный выше.

Буду благодарен, если натолкнете на альнернативную идею.
...
Рейтинг: 0 / 0
04.02.2018, 16:54
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39596377
vkle
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
vkle
Участник
Сходу такие мысли.

1. Попробовать bash вместо sh. Всё же, разные они сильно.
2. Попробовать заэкранировать @. Не уверен, что поможет, вроде не спецсимвол.
3. Тупо написать несколько файликов, по одному на каждый вид запуска и читать их через cat. Ну это уж совсем тупо :-)
4. Непосредственно в тексте запроса присваивать значения переменным в соответствии с временем запуска (если есть какая-то строгая зависимость значения от времени). Если вариантов значений много - разместить их в дополнительную табличку и читать в переменные через SELECT...INTO. Время можно вычислить функциями MySQL.
5. Перенести код в хранимую процедуру и вызывать её с параметрами (строковые значения). Мне этот вариант больше всего нравится.
6. Перейти на встроенный планировщик MySQL, если это возможно (у него более скудные возможности по расписанию), и перенести туда весь код.
...
Рейтинг: 0 / 0
04.02.2018, 17:14
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39596936
Фотография Vadim Lejnin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Vadim Lejnin
Участник
crond не устанавливает никаких переменных
запускать из скрипта с установкой всех необходимых env
я тестирую сбросом всех переменных:
Код: sql
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
# новых экземпляр shell чтобы можно было дальше работать после теста
$ unset `set `set | cut -f1 -d=`

# set PS1 и PATH
PS=\$\ 
$ PATH=/bin:/usr/bin

# scipt testing
$ /path/script
...

# возврат в нормальное окружение
$ exit
...
Рейтинг: 0 / 0
05.02.2018, 16:54
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39596949
Андрей Панфилов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Андрей Панфилов
Участник
justIT
Код: powershell
1.
#!/bin/sh



чет странно что никто до сих пор для отладки не посоветовал
Код: sql
1.
#!/bin/sh -x
...
Рейтинг: 0 / 0
05.02.2018, 17:13
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39596984
Фотография justIT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
justIT
Участник
Vadim Lejnincrond не устанавливает никаких переменных
запускать из скрипта с установкой всех необходимых env
я тестирую сбросом всех переменных:


к сожалению не понял Вас.
Какие ему нужны переменные, если все пути указаны полностью?

Как я уже писал выше 99% трабла в том, что при выполнении из Крона
мои @cid and @cid2 не считываются,
а вместо них идет "пустота",
и, соответственно select выполняется но ничего не выводит.

Кстати та же байда, если я выношу @cid наружу
То есть запускаю как
Код: powershell
1.
mysh.sh 570



А в скрипте
Код: powershell
1.
(echo "SET @cid = $1..... и так далее"



crontab не понимает конструкцию echo "SET.....



Андрей Панфиловчет странно что никто до сих пор для отладки не посоветовал

Код: sql
1.
2.
3.
4.
5.
6.
set -x

#body of my sh script
(echo "SET @cid = 570.....

set +x

[/quot]

в терминале вижу все, но если из крона задача пойдет, где debug output увидеть смогу?
...
Рейтинг: 0 / 0
05.02.2018, 17:40
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39597050
Мутаген
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Мутаген
Гость
Vadim Lejnincrond не устанавливает никаких переменныхЭто тут не при чём.
Vadim Lejninя тестирую сбросом всех переменных:
Код: sql
1.
2.
# новых экземпляр shell чтобы можно было дальше работать после теста
$ unset `set `set | cut -f1 -d=`


проще командой
Код: plaintext
env -i
...
Рейтинг: 0 / 0
05.02.2018, 19:10
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39597394
ncux199rus
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
ncux199rus
Гость
Так может сами переменные взять в кавычки?
Код: sql
1.
"SET '@cid'=570; SET '@cid2'='service@';"
...
Рейтинг: 0 / 0
06.02.2018, 12:56
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39597407
Вячеслав Любомудров
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Вячеслав Любомудров
Участник
justITА в скрипте
Код: powershell
1.
(echo "SET @cid = $1..... и так далее"



crontab не понимает конструкцию echo "SET.....
А /bin/echo ?
...
Рейтинг: 0 / 0
06.02.2018, 13:12
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39597557
Q.Tarantino
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Q.Tarantino
Участник
Vadim Lejnincrond не устанавливает никаких переменных
поэтому лучше просто подгрузить profile рута в начале скрипта....
...
Рейтинг: 0 / 0
06.02.2018, 16:17
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39597681
Фотография justIT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
justIT
Участник
Вячеслав ЛюбомудровjustITА в скрипте
Код: powershell
1.
(echo "SET @cid = $1..... и так далее"



crontab не понимает конструкцию echo "SET.....
А /bin/echo ?

не помогло.

В файле имена полей и полное отсутствие данных


Q.TarantinoVadim Lejnincrond не устанавливает никаких переменных
поэтому лучше просто подгрузить profile рута в начале скрипта....

Все манипуляции под рутом делаются.
как и ручное вполнение скрипта, так и редактирование кронтаба (cron -e)
...
Рейтинг: 0 / 0
06.02.2018, 18:41
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39597686
Фотография justIT
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
justIT
Участник
Склоняюсь к мысли, что это просто невозможно сделать.
...
Рейтинг: 0 / 0
06.02.2018, 18:46
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39597746
неТолик1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
неТолик1
Гость
justIT,

попробуй так запустить из крона
Код: coco
1.
35 10 1 * * source /root/bin/mgbc.sh
...
Рейтинг: 0 / 0
06.02.2018, 20:31
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39597983
Sergey Orlov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Sergey Orlov
Участник
justITСклоняюсь к мысли, что это просто невозможно сделать.
А кто вам не дает написать полностью скрипт, в котором вы сначала сформируете нужный вам файл с командами sql и отправить его на обработку...
В конечном счете можно попробовать создать задание для самого root'а... crontab -e -u root
...
Рейтинг: 0 / 0
07.02.2018, 10:45
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39597989
Q.Tarantino
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Q.Tarantino
Участник
justITВсе манипуляции под рутом делаются.
как и ручное вполнение скрипта, так и редактирование кронтаба (cron -e)
justITСклоняюсь к мысли, что это просто невозможно сделать.
склоняюсь к мысли что ты тупой.
тебе вроде сказали - крон не подгружает профайл рута!
руками его подгрузи в скрипте!
...
Рейтинг: 0 / 0
07.02.2018, 10:49
| Ответить | Цитировать | Написать  
sh script (command line vs crontab)
    #39598145
Вячеслав Любомудров
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Вячеслав Любомудров
Участник
Есть подозрение, что просто к нам, на форум друзей, вываливаются недостоверные данные
Типо, это не имеет значения, но там символ %, но это же не важно
...
Рейтинг: 0 / 0
07.02.2018, 13:20
| Ответить | Цитировать | Написать  
25 сообщений из 43, страница 1 из 2
  1  все
Форумы / Unix-системы [игнор отключен] [закрыт для гостей] / sh script (command line vs crontab)
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение
NoSQL.ru             Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=25&msg=39598145&tid=1481389]:
 0ms
get settings:
 11ms
get forum list:
 15ms
check forum access:
 4ms
check topic access:
 4ms
track hit:
 31ms
get topic data:
 10ms
get forum data:
 3ms
get page messages:
 57ms
get tp. blocked users:
 2ms
others: 285ms
total:  422ms
созд. / загр.: 422ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]