powered by simpleCommunicator - 2.0.53     © 2025 Programmizd 02
Форумы / Firebird, InterBase [игнор отключен] [закрыт для гостей] / firebird в виртуальной машине.
25 сообщений из 45, страница 1 из 2
firebird в виртуальной машине.
    #39087168
Ivan_Pisarevsky
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Коллеги, приветствую.

Собственно возник сабжевый вопрос. кто может поделиться "бест практикс" или просто опытом?

Работать с ФБ на железе мы более менее умеем, возникла задача работать с несколькими сайтами, причем достаточно интенсивно. Сайты сидят на всяких хостингах, на виртуальных машинах, гоним данные через инет туда, что не быстро, захотелось базу разместить поближе, чтобы сайт подпитывать быстрее.

Под это дело изготовили тестовый полигон: железо пара зионов+24гига памяти и массив адаптек САС 6хРэйд10 сервак не новый, но на голом железе (центос6+фб2.5) крутит нашу базу весом примерно 50 гиг довольно весело и тормозов при нескольких десятках коннектов не наблюдается.
Снесли с железа центос и поставили проксмокс4 (это такой дистриб на базе дебиана, заточен по виртуализацию https://www.proxmox.com/en/ ) в ВМ поставили центос7, ФБ, залили базу и поехали... точнее мы надеялись , что оно поедет, но оно поползло, скорость копирования по сети упала с 80 мегабайт/сек до 25-30, в интерактивном режиме наш АРМ стал заметно задумываться, отзывчивость по моим прикидкам с секундомером ухудшилась раза в 3, длительность сбора отчетов примерно вдвое и это при том, что ради тестов никто основной сервер не останавливал и он обслуживал помимо меня еще под сотню коннектов, а тестовый только мои изыскания.

В общем эксперимент провалился.
Это у нас настолько кривые руки или у всех так?
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39087204
fankhm
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Ivan_Pisarevsky,

скорость копирования по сети упала с 80 мегабайт/сек до 25-30

я бы смотрел в сторону настройки виртуалки

PS: у меня FB на VirtualBOX работает в тех же параметрах, что и хостовая машина
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39087250
Фотография kdv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Ivan_Pisarevsky,

очень интересует
"массив адаптек САС 6хРэйд10" -
1. производительность диска на голом центос, какие-нибудь попугаи, что угодно
2. --//-- на голом proxmox
3. --//-- в вм Centos7.
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39087265
Ivan_Pisarevsky
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
fankhmя бы смотрел в сторону настройки виртуалкиценный совет, всеобъемлющий, я бы сказал.
fankhmFB на VirtualBOXэто тоже попробуем, на одном из десктопов он уже есть.
kdv"массив адаптек САС 6хРэйд10"уточню завтра у нашего админа и остальное тоже.
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39087270
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Ivan_Pisarevskyценный совет, всеобъемлющий, я бы сказал.
Насколько я помню, у KVM вообще сё железо виртуальное, поэтому там есть куда крутить и
большое поле для кривых драйверов.
Posted via ActualForum NNTP Server 1.5
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39087280
Ivan_Pisarevsky
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Dimitry SibiryakovKVMна нем свет клином не сошелся, просто полдюжины малонагруженных виртуалок у нашего админа на КВМе есть, вот и начали изыскания с него, как с более привычного.
Dimitry Sibiryakovтам есть куда крутитьвот бы поконкретнее...
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39087307
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Ivan_Pisarevskyвот бы поконкретнее...
Первое же по ссылкам:
http://www.linux-kvm.org/page/Tuning_Kernel
http://www.linux-kvm.org/page/Tuning_KVM
Posted via ActualForum NNTP Server 1.5
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39087368
Зимаргл
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Ivan_Pisarevsky,

http://www.vmware.com/ru/products/vsphere-hypervisor
остальное от лукавого
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39090958
Ivan_Pisarevsky
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
kdvочень интересует
"массив адаптек САС 6хРэйд10" -
нормально там все с настройкой, если очень-очень интересно вся портянка параметров под спойлером
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
31.
32.
33.
34.
35.
36.
37.
38.
39.
40.
41.
42.
43.
44.
45.
46.
47.
48.
49.
50.
51.
52.
53.
54.
55.
56.
57.
58.
59.
60.
61.
62.
63.
64.
65.
66.
67.
68.
69.
70.
71.
72.
73.
74.
75.
76.
77.
78.
79.
80.
81.
82.
83.
84.
85.
86.
87.
88.
89.
90.
91.
92.
93.
94.
95.
96.
97.
98.
99.
100.
101.
102.
103.
104.
105.
106.
107.
108.
109.
110.
111.
112.
113.
114.
115.
116.
117.
118.
119.
120.
121.
122.
123.
124.
125.
126.
127.
128.
129.
130.
131.
132.
133.
134.
135.
136.
137.
138.
139.
140.
141.
142.
143.
144.
145.
146.
147.
148.
149.
150.
151.
152.
153.
154.
155.
156.
157.
158.
159.
160.
161.
162.
163.
164.
165.
166.
167.
168.
169.
170.
171.
172.
173.
174.
175.
176.
177.
178.
179.
180.
181.
182.
183.
184.
185.
186.
187.
188.
189.
190.
191.
192.
193.
194.
195.
196.
197.
198.
199.
200.
201.
202.
203.
204.
205.
206.
207.
208.
209.
210.
211.
212.
213.
214.
215.
216.
217.
218.
219.
220.
221.
222.
223.
224.
225.
226.
227.
228.
229.
230.
231.
232.
233.
234.
root@pve:~# ./arcconf getconfig 1
Controllers found: 1
----------------------------------------------------------------------
Controller information
----------------------------------------------------------------------
   Controller Status                        : Optimal
   Channel description                      : SAS/SATA
   Controller Model                         : Adaptec 5805
   Controller Serial Number                 : 1D4511D2236
   Physical Slot                            : 4
   Temperature                              : 55 C/ 131 F (Normal)
   Installed memory                         : 512 MB
   Copyback                                 : Disabled
   Background consistency check             : Disabled
   Automatic Failover                       : Enabled
   Global task priority                     : High
   Performance Mode                         : OLTP/Database
   Stayawake period                         : Disabled
   Spinup limit internal drives             : 0
   Spinup limit external drives             : 0
   Defunct disk drive count                 : 0
   Logical devices/Failed/Degraded          : 1/0/0
   SSDs assigned to MaxCache pool           : 0
   Maximum SSDs allowed in MaxCache pool    : 8
   MaxCache Read Cache Pool Size            : 0.000 GB
   MaxCache flush and fetch rate            : 0
   MaxCache Read, Write Balance Factor      : 3,1
   NCQ status                               : Enabled
   Statistics data collection mode          : Enabled
   --------------------------------------------------------
   Controller Version Information
   --------------------------------------------------------
   BIOS                                     : 5.2-0 (18937)
   Firmware                                 : 5.2-0 (18937)
   Driver                                   : 1.2-1 (40709)
   Boot Flash                               : 5.2-0 (18937)
   --------------------------------------------------------
   Controller Battery Information
   --------------------------------------------------------
   Status                                   : Optimal
   Over temperature                         : No
   Capacity remaining                       : 98 percent
   Time remaining (at current draw)         : 3 days, 6 hours, 52 minutes

----------------------------------------------------------------------
Logical device information
----------------------------------------------------------------------
Logical device number 0
   Logical device name                      : Raid_10
   RAID level                               : 10
   Status of logical device                 : Optimal
   Size                                     : 857078 MB
   Stripe-unit size                         : 256 KB
   Read-cache mode                          : Enabled
   MaxCache preferred read cache setting    : Disabled
   MaxCache read cache setting              : Disabled
   Write-cache mode                         : Enabled (write-back)
   Write-cache setting                      : Enabled (write-back) when protected by battery/ZMM
   Partitioned                              : Yes
   Protected by Hot-Spare                   : Yes
   Global Hot-Spare                         : 0,7
   Bootable                                 : Yes
   Failed stripes                           : No
   Power settings                           : Disabled
   --------------------------------------------------------
   Logical device segment information
   --------------------------------------------------------
   Group 0, Segment 0                       : Present (Controller:1,Connector:0,Device:1)             LVV31K2N
   Group 0, Segment 1                       : Present (Controller:1,Connector:0,Device:2)             J0YWUUSN
   Group 1, Segment 0                       : Present (Controller:1,Connector:0,Device:3)             LVV31Y0N
   Group 1, Segment 1                       : Present (Controller:1,Connector:1,Device:0)             LVV4GMXS
   Group 2, Segment 0                       : Present (Controller:1,Connector:1,Device:1)             LVV9N1HS
   Group 2, Segment 1                       : Present (Controller:1,Connector:1,Device:2)             LVV9NG9S


----------------------------------------------------------------------
Physical Device information
----------------------------------------------------------------------
      Device #0
         Device is a Hard drive
         State                              : Online
         Supported                          : Yes
         Transfer Speed                     : SAS 3.0 Gb/s
         Reported Channel,Device(T:L)       : 0,1(1:0)
         Reported Location                  : Connector 0, Device 1
         Vendor                             : HITACHI
         Model                              : HUS156030VLS600
         Firmware                           : A5D0
         Serial number                      : LVV31K2N
         World-wide name                    : 5000CCA02A058BBF
         Size                               : 286168 MB
         Write Cache                        : Disabled (write-through)
         FRU                                : None
         S.M.A.R.T.                         : No
         S.M.A.R.T. warnings                : 0
         Power State                        : Full rpm
         Supported Power States             : Full rpm,Powered off
         SSD                                : No
         MaxCache Capable                   : No
         MaxCache Assigned                  : No
      Device #1
         Device is a Hard drive
         State                              : Online
         Supported                          : Yes
         Transfer Speed                     : SAS 3.0 Gb/s
         Reported Channel,Device(T:L)       : 0,2(2:0)
         Reported Location                  : Connector 0, Device 2
         Vendor                             : HITACHI
         Model                              : HUS156030VLS600
         Firmware                           : A5D0
         Serial number                      : J0YWUUSN
         World-wide name                    : 5000CCA01FDBB5FF
         Size                               : 286168 MB
         Write Cache                        : Disabled (write-through)
         FRU                                : None
         S.M.A.R.T.                         : No
         S.M.A.R.T. warnings                : 0
         Power State                        : Full rpm
         Supported Power States             : Full rpm,Powered off
         SSD                                : No
         MaxCache Capable                   : No
         MaxCache Assigned                  : No
      Device #2
         Device is a Hard drive
         State                              : Online
         Supported                          : Yes
         Transfer Speed                     : SAS 3.0 Gb/s
         Reported Channel,Device(T:L)       : 0,3(3:0)
         Reported Location                  : Connector 0, Device 3
         Vendor                             : HITACHI
         Model                              : HUS156030VLS600
         Firmware                           : A5D0
         Serial number                      : LVV31Y0N
         World-wide name                    : 5000CCA02A059187
         Size                               : 286168 MB
         Write Cache                        : Disabled (write-through)
         FRU                                : None
         S.M.A.R.T.                         : No
         S.M.A.R.T. warnings                : 0
         Power State                        : Full rpm
         Supported Power States             : Full rpm,Powered off
         SSD                                : No
         MaxCache Capable                   : No
         MaxCache Assigned                  : No
      Device #3
         Device is a Hard drive
         State                              : Online
         Supported                          : Yes
         Transfer Speed                     : SAS 3.0 Gb/s
         Reported Channel,Device(T:L)       : 0,4(4:0)
         Reported Location                  : Connector 1, Device 0
         Vendor                             : HITACHI
         Model                              : HUS156030VLS600
         Firmware                           : A5D0
         Serial number                      : LVV4GMXS
         World-wide name                    : 5000CCA02A0821CF
         Size                               : 286168 MB
         Write Cache                        : Disabled (write-through)
         FRU                                : None
         S.M.A.R.T.                         : No
         S.M.A.R.T. warnings                : 0
         Power State                        : Full rpm
         Supported Power States             : Full rpm,Powered off
         SSD                                : No
         MaxCache Capable                   : No
         MaxCache Assigned                  : No
      Device #4
         Device is a Hard drive
         State                              : Online
         Supported                          : Yes
         Transfer Speed                     : SAS 3.0 Gb/s
         Reported Channel,Device(T:L)       : 0,5(5:0)
         Reported Location                  : Connector 1, Device 1
         Vendor                             : HITACHI
         Model                              : HUS156030VLS600
         Firmware                           : A5D0
         Serial number                      : LVV9N1HS
         World-wide name                    : 5000CCA02A118A67
         Size                               : 286168 MB
         Write Cache                        : Disabled (write-through)
         FRU                                : None
         S.M.A.R.T.                         : No
         S.M.A.R.T. warnings                : 0
         Power State                        : Full rpm
         Supported Power States             : Full rpm,Powered off
         SSD                                : No
         MaxCache Capable                   : No
         MaxCache Assigned                  : No
      Device #5
         Device is a Hard drive
         State                              : Online
         Supported                          : Yes
         Transfer Speed                     : SAS 3.0 Gb/s
         Reported Channel,Device(T:L)       : 0,6(6:0)
         Reported Location                  : Connector 1, Device 2
         Vendor                             : HITACHI
         Model                              : HUS156030VLS600
         Firmware                           : A5D0
         Serial number                      : LVV9NG9S
         World-wide name                    : 5000CCA02A11909B
         Size                               : 286168 MB
         Write Cache                        : Disabled (write-through)
         FRU                                : None
         S.M.A.R.T.                         : No
         S.M.A.R.T. warnings                : 0
         Power State                        : Full rpm
         Supported Power States             : Full rpm,Powered off
         SSD                                : No
         MaxCache Capable                   : No
         MaxCache Assigned                  : No
      Device #6
         Device is a Hard drive
         State                              : Hot Spare
         Supported                          : Yes
         Transfer Speed                     : SAS 3.0 Gb/s
         Reported Channel,Device(T:L)       : 0,7(7:0)
         Reported Location                  : Connector 1, Device 3
         Vendor                             : HITACHI
         Model                              : HUS156030VLS600
         Firmware                           : A5D0
         Serial number                      : LVV9P4YS
         World-wide name                    : 5000CCA02A119B17
         Size                               : 286168 MB
         Write Cache                        : Disabled (write-through)
         FRU                                : None
         S.M.A.R.T.                         : No
         S.M.A.R.T. warnings                : 0
         Power State                        : Full rpm
         Supported Power States             : Full rpm,Powered off
         SSD                                : No
         MaxCache Capable                   : No
         MaxCache Assigned                  : No


Command completed successfully.

kdv1. производительность диска на голом центос, какие-нибудь попугаи, что угоднонаш админ гонял какую-то синтетику и уверяет, что все кругом зашибись и на железе и в вм. Из того, что видно невооруженным глазом, копирование по ssh почти сровнялось в ВМ и на хосте, разброс уже не в разы, а процентов 25-30. Но тем не менее АРМ продолжает тупить, хотя ВМке отдали почти всю память и почти все ядра.
Над написанием теста, который сымитирует нашу нагрузку я пока "чешу репу", синтетика мне вообще неинтересна.

Поднял еще центос на своем десктопе в виртуалке (вмварь плейер, на железе OpenSuse 64 бита, ОЗУ 16гб, виртуалке отдал 8гб), визуально тупит даже меньше, чем центос в КВМе на вполне себе серверном железе. Для минимизации влияния дискововго ИО проводил несколько заходов, чтоб база закэшировалась, в вмваре тупить почти переставало (у меня на десктопе нет САС массива), в КВМе весь тупняк оставался на месте.

Пока впечатление: "гамно все эти виртуалки".
набросаю тест, который нарисует неких попугаев под наши задачи, там можно будет более предметно сравнить.
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39091027
DBConstructor
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Иван, какой драйвер используется в гостевой системе на виртуальном сетевом адаптере? Para-virtualized "Virtio"?
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39091032
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Ivan_PisarevskyАРМ продолжает тупить
А что говорит стандартный мониторинг производительности при этом? top/iotop?
Posted via ActualForum NNTP Server 1.5
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39091066
Ivan_Pisarevsky
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
DBConstructor"Virtio"?да. пробовали всякие, лучше не становилось.

Dimitry Sibiryakovtop/iotop?"сервер бьет баклуши" в моем кратком образном пересказе.

Я никак не въеду в чем проблема, поэтому, возможно, несу тут ахинею.
Курю доки и придумываю тесткейз, ВМки для меня покуда темный лес с партизанами.
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39091076
DBConstructor
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Ivan_PisarevskyDBConstructor"Virtio"?да. пробовали всякие, лучше не становилось.
"Всякие" для гостевой в KVM - это вред. Оптимальная производительность гостевых ОС гарантируется только при использовании комплекта драйверов "VirtIO".
https://access.redhat.com/documentation/en-US/Red_Hat_Enterprise_Linux/6/html/Virtualization_Host_Configuration_and_Guest_Installation_Guide/ch10s04.html
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39091085
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Ivan_PisarevskyАРМ продолжает тупить
Есть возможность запустить этот АРМ в той же самой ВМ чтобы исключить очевидное - длинный
пинг?
Posted via ActualForum NNTP Server 1.5
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39091678
IgorVl
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Ivan_Pisarevsky,

Важно чтобы для гостевой системы использовались подходящие паравиртуальные драйвера,
особенно для сетевой карты и SCSI.
https://lonesysadmin.net/2013/12/13/use-paravirtualized-devices-virtual-machines/
https://linux.web.cern.ch/linux/centos7/docs/rhel/Red_Hat_Enterprise_Linux-7-Virtualization_Getting_Started_Guide-en-US.pdf
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39091695
IgorVl
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Ivan_Pisarevsky,

Весь комплект документации по RHEL7, в том числе и
Virtualization_Deployment_and_Administration_Guide.
http://www.nnme.racing/torrent/1658696818/RHEL7 zip
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39092462
Ivan_Pisarevsky
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
DBConstructor"Всякие" для гостевой в KVM - это вред.Попробовать на тестовой железяке это не вред, это опыт.
DBConstructorОптимальная производительность гостевых ОС гарантируется только при использовании комплекта драйверов "VirtIO".виртио и выставлено в итоге.

Dimitry SibiryakovЕсть возможность запустить этот АРМ в той же самой ВМ чтобы исключить очевидное - длинный пинг? пинг там локальной сети, АРМ виндовый, сентос в минимальной обвязке, там даже иксов нету, не то что вайна. хлопотно короче арм прямо там запускать, да по вайном его плотно не тестировали, можно еще на кучу граблей напороться.

За ссылки на доки спасибо, я пока не успеваю все изучить, по мере осознания постараюсь осмысленно ответить.
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39092499
DBConstructor
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Удалось установить, что в итоге стало "бутылочным горлышком"? Пропускная способность виртуального сетевого адаптера или мапированный раздел raid массива?
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39092509
Ivan_Pisarevsky
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
DBConstructorУдалось установить, что в итоге стало "бутылочным горлышком"?Ivan_PisarevskyКурю доки и придумываю тесткейзПока конкретики нет.
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39092641
DBConstructor
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Ivan_PisarevskyIvan_PisarevskyКурю доки и придумываю тесткейзПока конкретики нет.
Гугля Хабр наткнулся на интересную публикацию по замеру скорости дисковых операций:
http://habrahabr.ru/post/154235/
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39092843
Dmitriy_3206
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
А есть зависимость между блоком на HDD и рекомендуемым размером страницы?

Сейчас я определился для себя путем эксперимента. Восстанавливал базы с разными размерами страницы и выполнял "тяжелый запрос".
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39092852
DBConstructor
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Dmitriy_3206, "блок" данных на HDD всегда 512 байт. Может, вы имели в виду размер кластера файловой системы или размер страйпа raid массива?
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39092858
Фотография kdv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Dmitriy_3206,

блок (сектор) на hdd поменять невозможно. у hdd это 512 байт, у ssd 4 килобайта. Новые большие hdd тоже с сектором 4кб.
Поменять можно размер кластера файловой системы.

Dmitriy_3206Восстанавливал базы с разными размерами страницы и выполнял "тяжелый запрос".
на чтении это будет практически незаметно, разве только если размер кластера ставить совсем мелким, а размер страницы БД - 16к.
Разница будет скорее при записи, если кластер и page_size отличаются. Если кластер больше - будет лишняя запись, если кластер меньше - будет несколько операций записи на 1 страницу БД. Впрочем, ОС это оптимизирует.
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39093752
Dmitriy_3206
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Спасибо за ответ.
...
Рейтинг: 0 / 0
firebird в виртуальной машине.
    #39111310
Ivan_Pisarevsky
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Признали эксперимент с виртуалками провалившимся, вынесли нах и все зашуршало весело и без затыков. Под сайт просто арендовали железку и он(сайт) тоже тупить перестал и обмен данными ускорился в разы даже без размещения нашей базы рядом с сайтом.
...
Рейтинг: 0 / 0
25 сообщений из 45, страница 1 из 2
Форумы / Firebird, InterBase [игнор отключен] [закрыт для гостей] / firebird в виртуальной машине.
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]