HunterikНу тогда вроде понятно...
Должно вам помочь следующее:
1. vi dsenv
2. дописываем в конец что-то вроде:
PATH=$PATH:/opt/IBM/db2/V9/bin
export PATH
...или где там у вас db2 команда находится, либы вы уже прописывали, так что на опыте...
3. . ./dsenv
4. bin/uv -admin -stop
bin/uv -admin -start

Мне по крайней мере помогло, а было так:
1. $ cat ~/testik/testik.c
#include <stdlib.h>

int main()
{
int retv;
// retv = system("ls -l /tmp");
retv = system("db2 connect to sample user dsadm using password");
return retv;
}
$ gcc testik.c -o testik
2. testik_0,0: sh: db2: command not found
3. Добавил указанные выше строки в dsenv, рестартанул движок, попробовал и:
testik_0,0: Database Connection Information
Database server = DB2/LINUXX8664 9.7.4
SQL authorization ID = DSADM
Local database alias = SAMPLE

Если это вам поможет, значит вы для dsadm в его собственный профайл вносили какие-то изменения, раз из командной строки работало, а из под движка нет (например, прописывали вызов db2profile в .profile)...

Я обычно этого пользователя никак не трогаю - так проще отлавливать ошибки. Если что-то из shell руками не толкнулось, то не толкнется и из под движка.

Добрый день!
Спасибо большое за столь подробные описания.
Из командной строки testik выполняется отлично с выводом следующих строк:



Но при обработке через DataStage Designer Wrapper stage происходит ошибка. Ругается на пакеты и переменные окружения, погуглил, не помогло. Описание ошибки:

DataStage Report - Detail Log for job: TestikJob
Produced on: 13.08.2012 17:56:16
Project: TestProject
Host system: STEND-ITFPK4.APLANA.COM
Items: 1 - 14
Sorted on: Date Sorter

Item #: 1
Event ID: 0
Timestamp: 2012-08-13 07:55:51
Type: Reset
User Name: dsadm
Message Id: IIS-DSTAGE-REP-I-0065
Message: Log cleared by user

Item #: 2
Event ID: 1
Timestamp: 2012-08-13 07:55:55
Type: Info
User Name: dsadm
Message Id: IIS-DSTAGE-RUN-I-0120
Message: From previous run
DataStage Job 22 Phantom 9147
DataStage Phantom Finished.

Record Id s???`?1????f,?D%^?$?X??g?K?i?IF?@??c??Q?W*??????dR?\\)`^bO??TP??@??Y?Z??_?x&?RP??s??1?0?g??????q???s?)?%?O?l?f??',mV??X??[;?l contains characters which are not defined in the file's NLS map.

Record Id ???;2s??z??*F?T?? ????????0???g?%??p??[#j,
?~j?m?O?"?K7f?' dcq7?':???S?t??Oq??]A????Az?h-??0????d?g?q?Mk???`???H?UA4?QNku??=??I??eb??Ph?l???Kw?????dby contains characters which are not defined in the file's NLS map.

Item #: 3
Event ID: 2
Timestamp: 2012-08-13 07:55:56
Type: Control
User Name: dsadm
Message Id: IIS-DSTAGE-RUN-I-0070
Message: Starting Job TestikJob.

Item #: 4
Event ID: 3
Timestamp: 2012-08-13 07:55:56
Type: Info
User Name: dsadm
Message Id: IIS-DSTAGE-RUN-I-0126
Message: Environment variable settings:
_=/usr/bin/nohup
APT_COMPILEOPT=-O -fPIC -Wno-deprecated -c -m64 -mtune=generic -mcmodel=small
APT_COMPILER=g++
APT_CONFIG_FILE=/opt/IBM/InformationServer/Server/Configurations/default.apt
APT_ERROR_CONFIGURATION=severity, !vseverity, !jobid, moduleid, errorIndex, timestamp, !ipaddr, !nodeplayer, !nodename, opid, message
APT_LINKER=g++
APT_LINKOPT=-shared -m64
APT_MONITOR_MINTIME=10
APT_NO_ONE_NODE_COMBINING_OPTIMIZATION=1
APT_OPERATOR_REGISTRY_PATH=/opt/IBM/InformationServer/Server/Projects/TestProject/buildop
APT_ORCHHOME=/opt/IBM/InformationServer/Server/PXEngine
ASBHOME=/opt/IBM/InformationServer/ASBNode
BELL=^G
CONSOLE=/dev/pts/0
DB2INSTANCE=db2inst1
DS_ENABLE_RESERVED_CHAR_CONVERT=0
DS_OPERATOR_BUILDOP_DIR=buildop
DS_OPERATOR_WRAPPED_DIR=wrapped
DS_OPTIMIZE_FILE_BROWSE=0
DS_PX_RESET=1
DS_TDM_PIPE_OPEN_TIMEOUT=720
DS_TDM_TRACE_SUBROUTINE_CALLS=0
DS_USERNO=-9159
DSHOME=/opt/IBM/InformationServer/Server/DSEngine
DSIPC_OPEN_TIMEOUT=30
DSRPCD_PORT_NUMBER=31538
FLAVOR=-1
HOME=/home/dsadm
INIT_VERSION=sysvinit-2.86
ISFSHMID=3735563
ISUSER=wasadmin
LANG=en_US.UTF-8
LD_LIBRARY_PATH=/opt/IBM/InformationServer/Server/Projects/TestProject/RT_BP22.O:/opt/IBM/InformationServer/Server/DSComponents/lib:/opt/IBM/InformationServer/Server/DSComponents/bin:/opt/IBM/InformationServer/Server/DSParallel:/opt/IBM/InformationServer/Server/PXEngine/user_lib:/opt/IBM/InformationServer/Server/PXEngine/lib:/opt/IBM/InformationServer/Server/Projects/TestProject/buildop:/opt/IBM/InformationServer/Server/branded_odbc/lib:/opt/IBM/InformationServer/Server/DSEngine/lib:/opt/IBM/InformationServer/Server/DSEngine/uvdlls:/opt/IBM/InformationServer/ASBNode/apps/jre/bin:/opt/IBM/InformationServer/ASBNode/apps/jre/bin/classic:/opt/IBM/InformationServer/ASBNode/lib/cpp:/opt/IBM/InformationServer/ASBNode/apps/proxy/cpp/linux-all-x86_64:/opt/ibm/db2/V9.7/lib64/:/usr/lib:.:/lib
LOGNAME=dsadm
ODBCINI=/opt/IBM/InformationServer/Server/DSEngine/.odbc.ini
OLDPWD=/
OSH_STDOUT_MSG=1
PATH=/opt/IBM/InformationServer/Server/Projects/TestProject/wrapped:/opt/IBM/InformationServer/Server/Projects/TestProject/buildop:/opt/IBM/InformationServer/Server/Projects/TestProject/RT_BP22.O:/opt/IBM/InformationServer/Server/DSComponents/lib:/opt/IBM/InformationServer/Server/DSComponents/bin:/opt/IBM/InformationServer/Server/DSParallel:/opt/IBM/InformationServer/Server/PXEngine/user_osh_wrappers:/opt/IBM/InformationServer/Server/PXEngine/osh_wrappers:/opt/IBM/InformationServer/Server/PXEngine/bin:/sbin:/usr/sbin:/bin:/usr/bin:/opt/ibm/db2/V9.7/bin:/usr/kerberos/bin:/usr/local/bin:/usr/X11R6/bin:.
PIDTOK=8698
PREVLEVEL=N
PWD=/opt/IBM/InformationServer/Server/DSEngine
PX_DBCONNECTHOME=/opt/IBM/InformationServer/Server/DSComponents
previous=N
RUNLEVEL=5
runlevel=5
SELINUX_INIT=YES
SHELL=/bin/ksh
SHLVL=3
TERM=
UDTBIN=/opt/IBM/InformationServer/Server/DSEngine/ud41/bin
UDTHOME=/opt/IBM/InformationServer/Server/DSEngine/ud41
USER=dsadm
WHO=TestProject

Item #: 5
Event ID: 4
Timestamp: 2012-08-13 07:55:56
Type: Info
User Name: dsadm
Message Id: IIS-DSTAGE-RUN-I-0121
Message: Parallel job initiated

Item #: 6
Event ID: 5
Timestamp: 2012-08-13 07:55:56
Type: Info
User Name: dsadm
Message Id: IIS-DSTAGE-RUN-I-0133
Message: Parallel job default NLS map UTF-8, default locale OFF

Item #: 7
Event ID: 6
Timestamp: 2012-08-13 07:55:56
Type: Info
User Name: dsadm
Message Id: IIS-DSEE-TFCN-00001
Message: main_program: IBM InfoSphere DataStage Enterprise Edition 8.7.0.6126
Copyright (c) 2001, 2005-2011 IBM Corporation. All rights reserved

Item #: 8
Event ID: 7
Timestamp: 2012-08-13 07:55:56
Type: Info
User Name: dsadm
Message Id: IIS-DSEE-TFCN-00006
Message: main_program: conductor uname: -s=Linux; -r=2.6.18-238.el5; -v=#1 SMP Thu Jan 13 15:51:15 EST 2011; -n=stend-itfpk4.aplana.com; -m=x86_64

Item #: 9
Event ID: 8
Timestamp: 2012-08-13 07:55:56
Type: Info
User Name: dsadm
Message Id: IIS-DSEE-TOSH-00002
Message: main_program: orchgeneral: loaded
orchsort: loaded
orchstats: loaded

Item #: 10
Event ID: 9
Timestamp: 2012-08-13 07:55:56
Type: Fatal
User Name: dsadm
Message Id: IIS-DSEE-TOSH-00205
Message: main_program: PATH search failure:

Item #: 11
Event ID: 10
Timestamp: 2012-08-13 07:55:56
Type: Fatal
User Name: dsadm
Message Id: IIS-DSEE-TOSH-00384
Message: main_program: Could not locate operator definition, wrapper, or Unix command for "Testik.op"; please check that all needed libraries are preloaded, and check the PATH for the wrappers

Item #: 12
Event ID: 11
Timestamp: 2012-08-13 07:55:56
Type: Warning
User Name: dsadm
Message Id: IIS-DSEE-TFOG-00004
Message: main_program: Operator Testik.op does not exist in the registry.

Item #: 13
Event ID: 12
Timestamp: 2012-08-13 07:55:56
Type: Fatal
User Name: dsadm
Message Id: IIS-DSEE-TCOS-00029
Message: main_program: Creation of a step finished with status = FAILED.

Item #: 14
Event ID: 13
Timestamp: 2012-08-13 07:56:02
Type: Control
User Name: dsadm
Message Id: IIS-DSTAGE-RUN-I-0075
Message: Job TestikJob aborted.

End of report.

Новый ГодHunterikНовый Год, не правильно поправили...
В первом случае вызов идёт из задания, для которого переменные файла dsenv уже применены, программа наследует окружение при запуске.

а в dsenv есть коннект к дб2, и все послед. команды должны через один и тот же коннекшн выполняться?
и больше никаких коннектов в скриптах/программах быть не должно?

впрочем, разбиратся все равно не буду...

Мне тоже кажется что вы немножко не понимаете задачу.
Задача состоит не в том что вызвать Си-шную программу из командной строки и сделать какие-то операции в DB2. (Это я уже сделал).
Задача состоит в том, чтобы вызвать Си-шную программу из DataStage с передачей параметров, и сделать что-нибудь в db2 из DataStage.

Ой не то, я забыл написать что свою загрузку blob файлов переделал как вы сказали, и назвал так же testik.
Час еще раз попробую сделать точно так, как вы написали.

HunterikТут конечно другой вопрос к Вам, vadipok, почему вы не хотите просто грузить данные через DB2 Connector (bulk load)?
Загрузка происходит с использованием утилиты load - всё должно быть хорошо. =)

Вы понимаете нужно же не только загрузить в БД эти блоб файлы(черт бы их побрал! :) ), но нужно еще через DataStage преобразовать их в CSV(Это уже второй этап задачи), так что я в любом случае не смогу обойти этот камень.
В голову приходили даже такие извращенные мысли сделать таблицу и заливать туда необходимые данные типа название файла, расширение и т. д. А на эту таблицу повесить триггер, который бы вызывал С/С++ программку по нужным операциям. )))
Еще больше убивает то, что в IBM-вской доке прям везде пестрит реклама типа мы можем вызвать C/C++, а на практике нет ни одного нормального описания как это сделать для практической работу, хотя бы один туториал.

HunterikНу я прямо не знаю...
Складывается впечатление, что вы DataStage просто, как дорогой шедулер собираетесь использовать... =)
Это та же задача? Давайте вспоминать, было вроде так:
1. xls в базе данных
2. Надо выкачать из бд
3. Надо конвертнуть в csv
4. Надо разобрать csv и разложить по таблицам
Загрузка blob-ов, которую вы сейчас делаете откуда взялась?
По C/C++...
На каком уровне и с какой периодичностью вы хотите вызывать внешнюю программу (sequence/job, once/per row)?
Что хотите делать с помощью внешней программы?

Мне самому смешно ))
Да, та же. Порядок примерное такой как вы описали, только может понадобиться xls файлы сперва перекинуть в другую БД между которыми будет стоять MQ vs DataStage(пока данная архитектура размыта и не ясна).
Просто самым первым изучил загрузку, поэтому ее и начал долбить, подумал что если она получиться то и остальное смогу решить.
А дальше примерно так.
С периодичностью пока не известно, думаю это надо будет уточнить завтра.
Вызвать выгрузку и преобразование xls --> csv, а дальше загрузка в БД(я думаю, что это самый легкий этап).

Новый Годvadipok,

дай мэйл. пришлю пару картинок.
хотя бы как MQ vs DataStage интегрироавть (только там неправильно)
иле как с DataStage/SolidDB/С++ юзаьб
связку С++/Datastage/DB2 что-то не нашел


я бы конечно всё сделал, если бы мне это было надо

Добрый день!
Спасибо большое за помощь.
Пришлите пожалуйста сюда mat_ochkun@mail.ru

PS:Я сейчас работаю от МКАДа примерно за 2000 км, у меня нет таких денег чтобы просить помощи у специалистов, которые внутри МКАДа. ))
Приходиться рассчитывать только на себя и на доброту людей которых совсем не знаю.)) + google

Hunterik,

Спасибо большое!
Буду разбираться. )

Новый Годvadipok,

лови

Спасибо! Нашел полезные вещи.

Все! Тему можно закрывать, все что хотел получилось! )