Гость
Войти | Профиль | Очистить
Целевая тема:
Создать новую тему:
Автор:
Действия ...
Форумы / Unix-системы [игнор отключен] [закрыт для гостей] / Сложить несколько файлов в один на shell / 6 сообщений из 6, страница 1 из 1
10.02.2015, 23:57
    #38876442
Wolf79
Wolf79
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Сложить несколько файлов в один на shell
Народ, помогите со скриптом. Нужно из нескольких файлов сложить один.
Минимальный опыт простых линукс команд есть, но тут не могу понять как реализовать.

Задача такая:
Есть два файла где структура строк с разделителем |

Один файл с перечнем товаров tovar.txt (1млн и более записей)
01451145|45|451.90
01457156|887|478.40
где 45 и 887 - это коды типов товара стоят между первой и второй |

Второй файл с перечнем наименования товаров name.txt (около 5 тыс записей)
45|Телевизор
887|Микроволновка
где к коду привязано наименование

Нужен пример которым можно добавить в конец каждой строки первого файла наименование товара согласно его кода из второго.
Пример требуемого результата на выходе exit.txt
01451145|45|451.90|Телевизор
01457156|887|478.40|Микроволновка

Подскажите как это написать простой командой.
Хотя бы рабочий пример с пояснением, дальше уже докручу его.

З.Ы. Ранее это клелил через excell и сохранял в файл, но теперь записей 1млн и более, что совсем затруднительно стало исходя из доступного количества строк в excell, размеров файлов и нагрузки на комп вплоть до зависания на долгие минуты.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.02.2015, 00:56
    #38876461
miksoft
miksoft
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Сложить несколько файлов в один на shell
Хм, обычно это делают JOIN-м в любой РСУБД. Что мешает сделать так же?
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.02.2015, 01:26
    #38876474
скукотища
скукотища
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Сложить несколько файлов в один на shell
Wolf79,

Код: powershell
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
#!/bin/sh

# параметры:
#  1 - файл с продуктами 
#  2 - файл с именами

gawk '
BEGIN { 
  IFS="|"; OFS=IFS; 
  while (getline<"'"$2"'") names[$1] = $2;
}
{ 
  $4 = names[$2]; 
  print; 
}
' "$1" > tovar_name.txt
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.02.2015, 01:38
    #38876481
скукотища
скукотища
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Сложить несколько файлов в один на shell
Wolf79,
сорри, - опечатка.
надо
Код: powershell
1.
2.
BEGIN { 
  FS="|"; OFS=FS;
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
15.02.2015, 21:51
    #38880276
volodin661
volodin661
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Сложить несколько файлов в один на shell
Wolf79,

В файл tovar.txt вставляешь первыми 5-ю строчками ( включая __DATA__)
Код: php
1.
2.
3.
4.
5.
6.
7.
8.
9.
#! /usr/bin/env perl
open NAMES,"names.txt" or die $!;
while( <NAMES>) { chomp; ($id,$name)=split'[|]'; $names{$id} = $name }
while( <DATA> ) { chomp; (undef,$id)=split'[|]'; print $_, '|', $names{$id}, "\n" }
__DATA__
01451145|45|451.90
01457156|887|478.40
014511767649|496|451.90
0145715697|8871|478.40




делаешь
Код: powershell
1.
chmod +x tovar.txt



и затем, если надо вывести содержимое, так, как хотел, то просто
Код: powershell
1.
 ./tovar.txt



perl могуч, меняя одну строчку шапки, вывод текста можно сделать любым;
то есть, получился самоформатирующийся текст
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
16.02.2015, 03:10
    #38880336
volodin661
volodin661
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Сложить несколько файлов в один на shell
вот так даже поканоничней:
Код: perl
1.
2.
3.
4.
5.
6.
7.
8.
#! /usr/bin/env perl
open (  NAMES,  "names.txt" ) or die 'Ошибка при попытке открыть файл names.txt: ', $!;
while( <NAMES>) { chomp; @a = split '[|]'; $names{$a[0]} = $a[1];                     }
while( <DATA> ) { chomp; @a = split '[|]'; print "$a[0]|$a[1]|$a[2]|$names{$a[1]}\n"; }                  

__DATA__
01451145|45|451.90
01457156|887|478.40
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
Форумы / Unix-системы [игнор отключен] [закрыт для гостей] / Сложить несколько файлов в один на shell / 6 сообщений из 6, страница 1 из 1
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение
созд. / загр.: 512ms
Закрыть
start [/forum/topic.php?fid=25&mobile=1&tid=1482186]:
 0ms
get settings:
 13ms
get forum list:
 14ms
check forum access:
 4ms
check topic access:
 4ms
track hit:
 162ms
get topic data:
 14ms
get forum data:
 3ms
get page messages:
 50ms
get tp. blocked users:
 2ms
others: 246ms
total:  512ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]