Пользовательская документация
Дерево страниц
Перейти к концу метаданных
Переход к началу метаданных

Вы просматриваете старую версию данной страницы. Смотрите текущую версию.

Сравнить с текущим просмотр истории страницы

« Предыдущий Версия 2 Следующий »

Создаем требуемые папки

mkdir /home/support/1.33
chmod 0755 /home/support/1.33
mkdir /home/support/kubernetes/
chmod 0755 /home/support/kubernetes
mkdir /home/support/1.33/docker
chmod 0755 /home/support/1.33/docker

Закачиваем папку docker в /home/support/1.33/ и содержимое папки k8s-latest в /home/support/kubernetes/ из \\ukm5-fs\builds\mintukm-server\release

Проверка сетевых адаптеров и настройка DNS

Интерфейс eth0 внутренняя сеть клиента, статический

не должен начинаться на 172.17, 172.18, 10.0 - на эти адреса завязана работа внутри кубов

Интерфейс eth1 (172.17.8.101) должен быть подключен в изолированную сеть (DMZ)

Интерфейс docker0 автоматический


Настраиваем DNS в докере, чтобы сервер нормально общался в сети клиента со службами внутри себя и вне себя:

sudo mcedit /etc/systemd/system/docker.service.d/docker-dns.conf

Если у клиента нет своих DNS серверов, можно оставить общедоступные:

Содержимое docker-dns.conf

[Service]
Environment="DOCKER_DNS_OPTIONS=\
--dns 10.100.0.3 --dns 8.8.8.8 --dns 8.8.4.4 \
--dns-search default.svc.cluster.local --dns-search svc.cluster.local \
--dns-opt ndots:2 --dns-opt timeout:2 --dns-opt attempts:2 \
"

10.100.0.3 - системный кубовый днс, этот параметр не менять.

Пример правильной настроенной сети:

Вывод ifconfig

docker0: flags=4099<UP,BROADCAST,MULTICAST> mtu 1500
inet 172.18.0.1 netmask 255.255.0.0 broadcast 172.18.255.255
ether 02:42:34:f3:65:60 txqueuelen 0 (Ethernet)
RX packets 0 bytes 0 (0.0 B)
RX errors 0 dropped 0 overruns 0 frame 0
TX packets 0 bytes 0 (0.0 B)
TX errors 0 dropped 0 overruns 0 carrier 0 collisions 0

eth0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST> mtu 1500
inet <ip-адрес_клиента> netmask 255.255.255.0 broadcast <ip-шлюза_клиента>
inet6 fe80::20c:29ff:fec4:dfdd prefixlen 64 scopeid 0x20<link>
ether 00:0c:29:c4:df:dd txqueuelen 1000 (Ethernet)
RX packets 13226845 bytes 6830028149 (6.3 GiB)
RX errors 0 dropped 4 overruns 0 frame 0
TX packets 2100608 bytes 157899252 (150.5 MiB)
TX errors 0 dropped 0 overruns 0 carrier 0 collisions 0

eth1: flags=4163<UP,BROADCAST,RUNNING,MULTICAST> mtu 1500
inet 172.17.8.101 netmask 255.255.255.0 broadcast 172.17.8.255
inet6 fe80::20c:29ff:fec4:dfe7 prefixlen 64 scopeid 0x20<link>
ether 00:0c:29:c4:df:e7 txqueuelen 1000 (Ethernet)
RX packets 9069806 bytes 697074353 (664.7 MiB)
RX errors 0 dropped 36 overruns 0 frame 0
TX packets 480 bytes 20480 (20.0 KiB)
TX errors 0 dropped 0 overruns 0 carrier 0 collisions 0

lo: flags=73<UP,LOOPBACK,RUNNING> mtu 65536
inet 127.0.0.1 netmask 255.0.0.0
inet6 ::1 prefixlen 128 scopeid 0x10<host>
loop txqueuelen 1000 (Local Loopback)
RX packets 54962423 bytes 9159436515 (8.5 GiB)
RX errors 0 dropped 0 overruns 0 frame 0
TX packets 54962423 bytes 9159436515 (8.5 GiB)
TX errors 0 dropped 0 overruns 0 carrier 0 collisions 0



Настройка второго диска

пропускаем, если диск один


 Нажмите здесь для раскрытия...

Диск (следующие пункты нужны, если система будет на втором диске - боевой сервер)
Для тестового сервера пункты по работе с дисками модно пропустить.


ls /sys/class/scsi_host/
echo "- - -" > /sys/class/scsi_host/host0/scan
echo "- - -" > /sys/class/scsi_host/host1/scan
echo "- - -" > /sys/class/scsi_host/host2/scan
fdisk -l

Форматирование диска

fdisk /dev/sdb
[n]
[p] (primary) - важно
<Enter>
<Enter>
<Enter>
[t]
<Enter>
[8e] Linux LVM (важно)
[p]
[w]

Формат раздела (создастся раздел LVM на все свободное пространство примонтированного диска)

--------------------------
partprobe
pvcreate /dev/sdb1
[y]
pvdisplay
vgcreate disk2 /dev/sdb1
vgdisplay
lvcreate -n data -l 100%FREE disk2
[y]
lvdisplay
mkfs.xfs /dev/disk2/data

Примонтировать диск и перенести данные (оригинальный раздел дата передет на новый диск)

sudo mv /data /data.orig
sudo mkdir -p /data
sudo mount /dev/disk2/data /data
sudo echo '/dev/disk2/data /data xfs defaults 0 0' >> /etc/fstab
sudo cp -rp /data.orig/* /data
_______________________________________________________________________________

Перезагрузка сервера

Проверка запуска MariaDB и установка HAproxy

sudo systemctl restart mariadb
sudo systemctl enable mariadb
sudo systemctl status mariadb

1. Устанавливаем HAproxy (чтобы видеть айпишники касс):

cd /opt/compose
sudo yum install haproxy

2. Копируем конфиг текущего HAproxy в свежеустановленный (перезаписать файл, при необходимости):

sudo cp /opt/compose/cfg/haproxy/haproxy.cfg /etc/haproxy/haproxy.cfg

3. Останавливаем Docker-Compose

sudo docker-compose down

4. В текущем файле /etc/haproxy/haproxy.cfg комментируем кусок про frontend stats (c 216 строки до конца)

sudo mcedit /etc/haproxy/haproxy.cfg

4. Проверяем текущий конфиг HAproxy на валидность:

haproxy -c -f /etc/haproxy/haproxy.cfg

ответ - Configuration file is valid
Если есть ошибки - смотрим чем вызваны, правим, проверяем снова.

5. Запускаем HAproxy

sudo systemctl start haproxy
sudo systemctl status haproxy

6. Удаляем DC из автозагрузки

sudo mcedit /opt/compose/docker-compose.yaml

Меняем параметр restart на no

restart: 'no'

и сохраняем файл. При следующей загрузке docker-compose не стартует контейнер с HAproxy.

7. Добавляем хапрокси в загрузку

sudo systemctl enable haproxy

Разворачивание экосистемы

cd /opt/ecosystem
sh _create-ecosystem.sh

ждать установки и смотреть вывод статуса служб:

kubectl get pods -A
kubectl get pods -A -o wide

prometheus не нужен, если что можно его удалить (или если он не работает)

Настройка внешнего доступа к kafka

Отредактируйте файл kube-configmap.yaml

sudo mcedit /opt/ecosystem/kafka/kube-configmap.yaml

Вписать актуальный IP/FQDN клиентского укм5 сервера eth0 в соответствующих строчках

Содержимое файла kube-configmap.yaml

data:
  KAFKA_CFG_ADVERTISED_HOST_NAME: "ip-сервера или dns-hostname"
  KAFKA_CFG_ADVERTISED_LISTENERS: "INTERNAL://:9093,CLIENT://:9092,EXTERNAL://ip-сервера или dns-hostname:39094"
cd /opt/ecosystem/kafka/
sh _restart-kafka-zookeeper.sh

Загружаем докеры

cd /home/support/1.33/docker/
sudo docker load < admin-impl-1.33.5
sudo docker load < clickhouse-1.33.5
sudo docker load < converters_service-1.33.5
sudo docker load < db-migration-srvdata-1.33.5
sudo docker load < db-migration-srvsales-1.33.5
sudo docker load < export-doc-api-1.33.5
sudo docker load < flush-queue-1.33.5
sudo docker load < frontend-1.33.5
sudo docker load < import-doc-api-1.33.5
sudo docker load < import-export-api-1.33.5
sudo docker load < jsreport-1.33.5
sudo docker load < licensing-impl-1.33.5
sudo docker load < login-impl-1.33.5
sudo docker load < logs_cleaner-1.33.5
sudo docker load < monitoring-impl-1.33.5
sudo docker load < ntp_timezones-1.33.5
sudo docker load < pos_agent-1.33.5
sudo docker load < public-api-1.33.5
sudo docker load < receipts_cutter-1.33.5
sudo docker load < receipt-search-appender-1.33.5
sudo docker load < receipt-search-cleaner-1.33.5
sudo docker load < report-data-pump-1.33.5
sudo docker load < tradedata_processing-1.33.5
sudo docker load < transport_service_nginx-1.33.5
sudo docker load < transport_service-1.33.5


отредактировать транспорт - DOWNLOAD_URL_PREFIX заменить ukm5-qa-server на ukm5-server

sudo mcedit /home/support/kubernetes/configmap-common/configmap-common.yaml


Если используется TM ( модуль интеграции) - отредактировать PRODUCE_ITEMS_DOCUMENT: "false", иначе true

sudo mcedit /home/support/kubernetes/tradedata-processing-import/configmap.yaml
sudo su

cd /home/support/kubernetes
./_start-base.sh

Запускаем и ждем ~10-50 минут

  • Нет меток