HunterikВ администраторе DataStage тоже выставьте MS1251-CS (General->NLS->Client), перезапуск Desinger после этого обязателен.

Про UTF8 - я в курсе.
Техническая сторона интересует, т.к. не работаю с Datastage...
 Я правильно понимаю,нужно поменять в администраторе DataStage General->NLS->Client на UTF8? Кроме того, в Datastage File тоже должен быть установлен UTF8?

Спасибо за ваши ответы...

Hunterik,

cпасибо вам большое. Завтра попробую ваше решение...

Hunterik,

попробовали загрузить твой файл в версии 8.0.1.
получили ошибку:
HCA.dsx does not appear to be a valid DataStage export file or is from an incompatible release.
A valid DataStage export file is expected to be in Windows format (i.e. using CRLF line terminators).

При попытке поменять настройки клиента (Administrator Client->General->NLS) на UTF8, получили ошибку:
Map 'UTF8' is unsuitable for client/server use -
Does not map the UniVerse mark character IM to a single byte

Завтра будет возможность попробовать на версии 8.5

Hunterik,

Какая версия Dstage у Вас?

HunterikПредположим вы решили перейти на обработку в utf8, для этого:
1. Вы переводите ПРОЕКТЫ DataStage на работу в UTF8 (выбираете проект->NLS->Server Maps+Parallel Maps)
2. Эта настройка автоматически унаследуется на нижних уровнях где оставлены значения по умолчанию (Project Default), там где нзначения менялись пользователем - всё сохранится. Прочитайте, что я писал раньше про переопределение на нижних уровнях...
Например, если придёт файл в 1251 - вы сможете его прочитать заданием, работающим в utf8 в проекте с utf8, только надо будет элементу, читающему данный файл указать, что файл в соответствующей кодировке, чтобы чтение прошло корректно.
Разберётесь с примером, что я вчера выложил - будет понятнее.
3. Client настраивается так, чтобы бы корректно происходило взаимодействие и отображение символов. У меня 1251 при utf-ных серверах, но я работаю только с русским и английским (без национальных спец.симолов вроде умляутов), у себя - "будете посмотреть", может и utf8 поставите.

Попытался сделать, все как вы сказали
1. Загрузить Ваш файл
2. Клиента перевести на UTF8

Кодировка Client/Server в Administrator WIN1252-CS. Windows должен быть 1252. Dstage у коллеги проинсталирован. Будем пробовать Ваш файл в 8.5 загрузить.

Я их тоже спросил, почему старую версию используют. Говорят, что через пару месяцев будут переходить на 9.1

Hunterik,

Ваш пример работает на 8.5. Но это немного другое решение проблемы. Вы чиаете всю строку в Stage File, а затем разбиваете ее на 3 поля. Можно ли, без прмежуточных шагом, читать файл в Stage File, состоящий из 3 полей???

Technote (FAQ)
Using IBM InfoSphere DataStage to read in UTF8 data as fixed length

Question
Can the DataStage sequential file stage be used to read in UTF8 data as fixed length?

Answer
UTF-8 is not a fixed size character set, characters may be 1, 2 or 3 bytes long. The server sequential file stage is not capable of handling this format as the columns are fixed width at the byte level. So a given column must be n bytes wide. Clearly this will only work with fixed width character sets.

Neither a server nor a parallel job sequential file stage can cope with a fixed-width file where the row length is not also a fixed number of bytes. Both of them take "fixed width" to mean that each column is a fixed number of bytes, not characters. Which means that they cannot work with an NLS map where the character length is not the same as the byte length (such as UTF8). This applies when the data has 2-byte UTF8 chars combined with single byte characters.

The only way of processing such a file is to change the job to read it as a single variable-length column per row (assuming there is a row delimiter such as newline), using a UTF8 map. Then have a Transformer stage that uses substringing to substring the row into each column. There is also a column import stage that would allow the data to be split into columns after reading it in as UTF8, but this would only be available in a parallel job.

Source:
http://www-01.ibm.com/support/docview.wss?uid=swg21455000

Hunterik,

такой способ решения был у коллег в запасе. Я думал, что получиться читать данные сразу в Stage Fail.

Спасибо вам большое за консультацию. Они теперь четко знают, как менять кодировки.

Спасибо всем и успехов...