HAProxy 0.7.2: sac-api для Seaca, check-ssl на всех HTTPS-бэкендах.
Веб-SAC остаётся за allowlist; sac-api.kalinamall.ru открыт для мобильных клиентов. Документация по connection coalescing Git+SAC. Co-authored-by: Cursor <cursoragent@cursor.com>
This commit is contained in:
@@ -2,32 +2,32 @@
|
|||||||
|
|
||||||
Периметровая конфигурация **HAProxy** для сети **kalinamall.ru**: Exchange, RDS (веб/шлюз по HTTPS), 1С, Git, SAC, почтовый шлюз KSMG. Прямой RDP (3389) через HAProxy не используется — клиенты идут через RDS на **443** (`rds.kalinamall.ru`).
|
Периметровая конфигурация **HAProxy** для сети **kalinamall.ru**: Exchange, RDS (веб/шлюз по HTTPS), 1С, Git, SAC, почтовый шлюз KSMG. Прямой RDP (3389) через HAProxy не используется — клиенты идут через RDS на **443** (`rds.kalinamall.ru`).
|
||||||
|
|
||||||
TLS: на целевых серверах в основном **wildcard-сертификаты GlobalSign**; **Git** (`git.kalinamall.ru`) и **SAC** (`sac.kalinamall.ru`) используют **свои** сертификаты на **192.168.160.129** и **192.168.160.145**. HAProxy на **443** работает в режиме **TCP + SNI** и **не терминирует** TLS — сертификаты остаются на бэкендах.
|
TLS: HAProxy на **443** в режиме **TCP + SNI**, **не терминирует** TLS — сертификаты на бэкендах.
|
||||||
|
|
||||||
Доступ снаружи по allowlist: **Git** и **SAC** — файл `git-sac-allowed`; **1С** (`erp.kalinamall.ru`) — файл `1c-allowed`.
|
Доступ снаружи по allowlist: **Git** и **веб-SAC** (`sac.kalinamall.ru`) — файл `git-sac-allowed`; **1С** (`erp.kalinamall.ru`) — `1c-allowed`. **Seaca** — **`sac-api.kalinamall.ru`** без IP-фильтра (аутентификация на SAC).
|
||||||
|
|
||||||
Репозиторий: [https://git.kalinamall.ru/PapaTramp/reverse-proxy](https://git.kalinamall.ru/PapaTramp/reverse-proxy)
|
Репозиторий: [https://git.kalinamall.ru/PapaTramp/reverse-proxy](https://git.kalinamall.ru/PapaTramp/reverse-proxy)
|
||||||
|
|
||||||
## Соответствие имён и адресов
|
## Соответствие имён и адресов
|
||||||
|
|
||||||
| Служба | Внешнее имя (клиенты) | Внутренний хост / IP | Порт снаружи |
|
| Служба | Внешнее имя (клиенты) | Внутренний хост / IP | Порт | Allowlist |
|
||||||
|--------|------------------------|----------------------|--------------|
|
|--------|------------------------|----------------------|------|-----------|
|
||||||
| Microsoft Exchange (OWA `https://ext.kalinamall.ru/owa`, EWS, MAPI/HTTPS и т.д.) | `ext.kalinamall.ru` | fifth.kalinamall.ru — **192.168.160.42** | 443 (TCP/SNI) |
|
| Microsoft Exchange (OWA и т.д.) | `ext.kalinamall.ru` | fifth.kalinamall.ru — **192.168.160.42** | 443 | нет |
|
||||||
| Autodiscover | `autodiscover.kalinamall.ru` | тот же Exchange — **192.168.160.42** | 443 (TCP/SNI) |
|
| Autodiscover | `autodiscover.kalinamall.ru` | тот же Exchange — **192.168.160.42** | 443 | нет |
|
||||||
| RDS | `rds.kalinamall.ru` (**443** на HAProxy) | k6a-dc3.b26.kalinamall.ru — **192.168.160.40**, служба **4430** | 443 (SNI → внутр. **4430**) |
|
| RDS | `rds.kalinamall.ru` | k6a-dc3 — **192.168.160.40**, служба **4430** | 443 → 4430 | нет |
|
||||||
| 1С | `erp.kalinamall.ru` | hp-serv.b26.kalinamall.ru — **192.168.160.150** | 443 (снаружи только IP из **`1c-allowed`**) |
|
| 1С | `erp.kalinamall.ru` | hp-serv — **192.168.160.150** | 443 | **`1c-allowed`** |
|
||||||
| Git (HTTPS) | `git.kalinamall.ru` | git.kalinamall.ru — **192.168.160.129** (свой TLS-сертификат; снаружи только IP из **`git-sac-allowed`**) | 443 (TCP/SNI) |
|
| Git (HTTPS) | `git.kalinamall.ru` | **192.168.160.129** | 443 | **`git-sac-allowed`** |
|
||||||
| SAC | `sac.kalinamall.ru` | sac.kalinamall.ru — **192.168.160.145** (свой TLS-сертификат; снаружи только IP из **`git-sac-allowed`**) | 443 (TCP/SNI) |
|
| SAC (веб) | `sac.kalinamall.ru` | **192.168.160.145** | 443 | **`git-sac-allowed`** |
|
||||||
| Почтовый шлюз (KSMG) | `ksmg.kalinamall.ru` | ksmg.kalinamall.ru — **192.168.160.57** | 25 |
|
| SAC / Seaca (mobile API) | **`sac-api.kalinamall.ru`** | тот же **192.168.160.145** | 443 | **нет** |
|
||||||
|
| Почтовый шлюз (KSMG) | `ksmg.kalinamall.ru` | **192.168.160.57** | 25 | нет |
|
||||||
|
|
||||||
DNS: записи **A** для `ext`, **`autodiscover`**, `rds`, `erp`, **`git`**, **`sac`**, `ksmg` должны указывать на **публичный IP** хоста с HAProxy. Имя `autodiscover.kalinamall.ru` должно быть в **SAN** wildcard `*.kalinamall.ru` или отдельно в сертификате на Exchange.
|
DNS: **A** для `ext`, `autodiscover`, `rds`, `erp`, `git`, `sac`, **`sac-api`**, `ksmg` → публичный IP HAProxy.
|
||||||
|
|
||||||
Доступ по **SSH** к внутренним хостам (например Ubuntu **192.168.160.85**) в этом репозитории **не** настраивается через HAProxy — организуйте отдельно (прямой проброс, VPN, бастион и т.д.).
|
Если после **Git** в том же браузере **SAC** показывает Gitea — см. [SAC, Seaca и coalescing](docs/sac-access.md).
|
||||||
|
|
||||||
В режиме **TCP + SNI** отдельные строки в HAProxy для путей вроде `/owa` **не нужны**: после согласования TLS клиент шлёт HTTP внутри шифрования, разбор путей делает **IIS/Exchange** на `192.168.160.42`.
|
|
||||||
|
|
||||||
## Документация
|
## Документация
|
||||||
|
|
||||||
- [Установка HAProxy и развёртывание конфигурации](docs/haproxy-install.md)
|
- [Установка HAProxy и развёртывание конфигурации](docs/haproxy-install.md)
|
||||||
|
- [SAC: веб vs sac-api, Seaca, Git+SAC в браузере](docs/sac-access.md)
|
||||||
- [Работа с Git: clone, pull, push, ключи и PAT](docs/git.md)
|
- [Работа с Git: clone, pull, push, ключи и PAT](docs/git.md)
|
||||||
- [Let's Encrypt / ACME через HAProxy (порт 80)](docs/letsencrypt-acme.md)
|
- [Let's Encrypt / ACME через HAProxy (порт 80)](docs/letsencrypt-acme.md)
|
||||||
|
|||||||
@@ -63,3 +63,11 @@ sudo haproxy -c -f /etc/haproxy/haproxy.cfg
|
|||||||
На хосте с HAProxy с интернета обычно открывают только то, что слушает конфиг: **25**, **443** (и при использовании — **8404** для stats). Остальной трафик — по политике безопасности.
|
На хосте с HAProxy с интернета обычно открывают только то, что слушает конфиг: **25**, **443** (и при использовании — **8404** для stats). Остальной трафик — по политике безопасности.
|
||||||
|
|
||||||
Если позже добавите фронтенд на **80** для ACME (см. [letsencrypt-acme.md](letsencrypt-acme.md)), откройте и **TCP 80**.
|
Если позже добавите фронтенд на **80** для ACME (см. [letsencrypt-acme.md](letsencrypt-acme.md)), откройте и **TCP 80**.
|
||||||
|
|
||||||
|
## SAC и Seaca (sac-api)
|
||||||
|
|
||||||
|
- Веб-SAC: **`sac.kalinamall.ru`** — IP из **`git-sac-allowed`**
|
||||||
|
- Seaca (Android): **`sac-api.kalinamall.ru`** — без allowlist; добавьте **A**-запись на тот же IP HAProxy
|
||||||
|
- На nginx SAC (**192.168.160.145**): `server_name sac.kalinamall.ru sac-api.kalinamall.ru;`
|
||||||
|
|
||||||
|
Подробнее: [sac-access.md](sac-access.md).
|
||||||
|
|||||||
@@ -0,0 +1,93 @@
|
|||||||
|
# SAC: веб, Seaca (sac-api) и HAProxy
|
||||||
|
|
||||||
|
## Два имени — один сервер
|
||||||
|
|
||||||
|
| Имя | Клиенты | IP-allowlist HAProxy | Бэкенд |
|
||||||
|
|-----|---------|----------------------|--------|
|
||||||
|
| **`sac.kalinamall.ru`** | Веб-интерфейс SAC (браузер) | **Да** (`git-sac-allowed`) | 192.168.160.145:443 |
|
||||||
|
| **`sac-api.kalinamall.ru`** | Seaca (Android), mobile API | **Нет** (доступ с любого IP) | тот же 192.168.160.145:443 |
|
||||||
|
|
||||||
|
Защита `sac-api`: код регистрации `sacmob_…`, JWT, отзыв устройств в веб-SAC.
|
||||||
|
|
||||||
|
### DNS
|
||||||
|
|
||||||
|
Добавьте **A**-запись:
|
||||||
|
|
||||||
|
```text
|
||||||
|
sac-api.kalinamall.ru → тот же публичный IP, что у sac / ext / git (хост HAProxy)
|
||||||
|
```
|
||||||
|
|
||||||
|
### nginx на 192.168.160.145
|
||||||
|
|
||||||
|
В `server_name` должны быть **оба** имени (wildcard `*.kalinamall.ru` в сертификате это покрывает):
|
||||||
|
|
||||||
|
```nginx
|
||||||
|
server_name sac.kalinamall.ru sac-api.kalinamall.ru;
|
||||||
|
```
|
||||||
|
|
||||||
|
Для чужих имён (например `ext.kalinamall.ru`) — отдельный default или `return 444`, иначе SAC ответит на любой Host.
|
||||||
|
|
||||||
|
### Seaca
|
||||||
|
|
||||||
|
В приложении указывают **`https://sac-api.kalinamall.ru`**, не `sac.kalinamall.ru`.
|
||||||
|
|
||||||
|
---
|
||||||
|
|
||||||
|
## Git → SAC в одном браузере: «Page Not Found — Gitea»
|
||||||
|
|
||||||
|
### Симптом
|
||||||
|
|
||||||
|
1. Открыли **`git.kalinamall.ru`** — Gitea работает.
|
||||||
|
2. В **той же вкладке/браузере** перешли на **`sac.kalinamall.ru`**.
|
||||||
|
3. В адресной строке SAC, на экране — **Gitea 404** («Page Not Found - Gitea»).
|
||||||
|
|
||||||
|
В логах HAProxy при этом может быть **`be_git`**, хотя URL — sac.
|
||||||
|
|
||||||
|
### Причина: HTTP/2 connection coalescing
|
||||||
|
|
||||||
|
Git и SAC снаружи идут на **один IP:443** HAProxy. В режиме **TCP passthrough** backend выбирается **один раз** при ClientHello (SNI) на **TCP-соединение**.
|
||||||
|
|
||||||
|
Современные браузеры (Chrome, Firefox) при **HTTP/2** могут **объединять** несколько hostname на одном IP в **одно TLS-соединение**, если сертификаты «совместимы» (часто так с `*.kalinamall.ru`).
|
||||||
|
|
||||||
|
Тогда:
|
||||||
|
|
||||||
|
1. Первое соединение: SNI `git.kalinamall.ru` → HAProxy → **Gitea**.
|
||||||
|
2. Запрос к `sac.kalinamall.ru` идёт **по тому же TCP** (без нового SNI для HAProxy).
|
||||||
|
3. Gitea получает `Host: sac.kalinamall.ru` → отдаёт **404 Gitea**.
|
||||||
|
|
||||||
|
Это **не ошибка маршрутизации ACL** и **не баг SAC** — ограничение схемы «несколько HTTPS-имён на одном IP + TCP passthrough».
|
||||||
|
|
||||||
|
### Обходные пути (без смены архитектуры)
|
||||||
|
|
||||||
|
| Способ | Комментарий |
|
||||||
|
|--------|-------------|
|
||||||
|
| **Новая вкладка / приватное окно** для SAC после Git | Новое TCP-соединение, свой SNI |
|
||||||
|
| **Закрыть вкладку с Git** перед SAC | Сброс keep-alive / H2 coalescing |
|
||||||
|
| **Разные публичные IP** в DNS: `git.*` → IP1, `sac.*` → IP2 | Надёжное решение для passthrough |
|
||||||
|
| **`http2 off;`** в nginx Gitea и SAC | Часто уменьшает coalescing (на серверах .129 и .145) |
|
||||||
|
| **`Connection: close`** в ответах Git | Жёстче рвёт keep-alive (на .129) |
|
||||||
|
|
||||||
|
### Долгосрочно
|
||||||
|
|
||||||
|
- Отдельный WAN IP для Git и для SAC, **или**
|
||||||
|
- TLS-терминация на HAProxy с маршрутизацией по Host (больше изменений).
|
||||||
|
|
||||||
|
---
|
||||||
|
|
||||||
|
## Деплой изменений HAProxy
|
||||||
|
|
||||||
|
```bash
|
||||||
|
sudo cp ~/reverse-proxy/haproxy.cfg /etc/haproxy/haproxy.cfg
|
||||||
|
sudo haproxy -c -f /etc/haproxy/haproxy.cfg
|
||||||
|
sudo systemctl reload haproxy
|
||||||
|
```
|
||||||
|
|
||||||
|
Проверка:
|
||||||
|
|
||||||
|
```bash
|
||||||
|
# веб SAC — только с allowlist IP
|
||||||
|
curl -sI --resolve sac.kalinamall.ru:443:ПУБЛИЧНЫЙ_IP https://sac.kalinamall.ru/dashboard
|
||||||
|
|
||||||
|
# mobile API — с любого IP
|
||||||
|
curl -s --resolve sac-api.kalinamall.ru:443:ПУБЛИЧНЫЙ_IP https://sac-api.kalinamall.ru/health
|
||||||
|
```
|
||||||
+26
-22
@@ -1,9 +1,11 @@
|
|||||||
# HAProxy — периметровый reverse-proxy для kalinamall.ru
|
# HAProxy — периметровый reverse-proxy для kalinamall.ru
|
||||||
# Режим: TCP + SNI на 443 (TLS end-to-end, сертификаты GlobalSign wildcard на бэкендах)
|
# Config version: 0.7.2
|
||||||
|
# Режим: TCP + SNI на 443 (TLS end-to-end, сертификаты на бэкендах)
|
||||||
#
|
#
|
||||||
# Проверка синтаксиса: haproxy -c -f haproxy.cfg
|
# Проверка синтаксиса: haproxy -c -f haproxy.cfg
|
||||||
# Установка: скопируйте в /etc/haproxy/haproxy.cfg
|
# Установка: скопируйте в /etc/haproxy/haproxy.cfg
|
||||||
# Allowlist: git-sac-allowed, 1c-allowed → /etc/haproxy/
|
# Allowlist: git-sac-allowed (git + sac веб), 1c-allowed → /etc/haproxy/
|
||||||
|
# sac-api.kalinamall.ru — без IP-фильтра (Seaca с любого адреса, auth на SAC)
|
||||||
|
|
||||||
global
|
global
|
||||||
log stdout format raw local0
|
log stdout format raw local0
|
||||||
@@ -22,10 +24,11 @@ defaults
|
|||||||
# Для ActiveSync / больших вложений Exchange при необходимости увеличьте client/server
|
# Для ActiveSync / больших вложений Exchange при необходимости увеличьте client/server
|
||||||
|
|
||||||
# -----------------------------------------------------------------------------
|
# -----------------------------------------------------------------------------
|
||||||
# HTTPS (443): маршрутизация по SNI → внутренние серверы с wildcard на 443
|
# HTTPS (443): маршрутизация по SNI → внутренние серверы
|
||||||
# Клиенты: ext, autodiscover (Exchange) / rds / erp / git / sac
|
# ext, autodiscover (Exchange) / rds / erp / git / sac (веб) / sac-api (Seaca)
|
||||||
# Git и SAC — allowlist git-sac-allowed; 1С (erp) — allowlist 1c-allowed
|
# Git и sac.kalinamall.ru (веб) — allowlist git-sac-allowed
|
||||||
# Пути URL ( /owa, /ecp, /ews/, /mapi/ … ) HAProxy не разбирает — они внутри TLS; достаточно SNI ext.kalinamall.ru
|
# sac-api.kalinamall.ru (мобильное API) — без allowlist
|
||||||
|
# См. docs/sac-access.md — connection coalescing (git + sac на одном IP)
|
||||||
# -----------------------------------------------------------------------------
|
# -----------------------------------------------------------------------------
|
||||||
|
|
||||||
frontend fe_https_sni
|
frontend fe_https_sni
|
||||||
@@ -41,50 +44,51 @@ frontend fe_https_sni
|
|||||||
acl sni_known req_ssl_sni -i erp.kalinamall.ru
|
acl sni_known req_ssl_sni -i erp.kalinamall.ru
|
||||||
acl sni_known req_ssl_sni -i git.kalinamall.ru
|
acl sni_known req_ssl_sni -i git.kalinamall.ru
|
||||||
acl sni_known req_ssl_sni -i sac.kalinamall.ru
|
acl sni_known req_ssl_sni -i sac.kalinamall.ru
|
||||||
|
acl sni_known req_ssl_sni -i sac-api.kalinamall.ru
|
||||||
|
|
||||||
acl sni_git req_ssl_sni -i git.kalinamall.ru
|
acl sni_git req_ssl_sni -i git.kalinamall.ru
|
||||||
acl sni_sac req_ssl_sni -i sac.kalinamall.ru
|
acl sni_sac_web req_ssl_sni -i sac.kalinamall.ru
|
||||||
acl sni_erp req_ssl_sni -i erp.kalinamall.ru
|
acl sni_erp req_ssl_sni -i erp.kalinamall.ru
|
||||||
acl src_git_sac_allowed src -f /etc/haproxy/git-sac-allowed
|
acl src_git_sac_allowed src -f /etc/haproxy/git-sac-allowed
|
||||||
acl src_1c_allowed src -f /etc/haproxy/1c-allowed
|
acl src_1c_allowed src -f /etc/haproxy/1c-allowed
|
||||||
|
|
||||||
# tcp-request обрабатываются до use_backend — reject ставим ДО use_backend, иначе предупреждение парсера
|
# tcp-request обрабатываются до use_backend — reject ставим ДО use_backend
|
||||||
tcp-request content reject if !sni_known
|
tcp-request content reject if !sni_known
|
||||||
tcp-request content reject if sni_git !src_git_sac_allowed
|
tcp-request content reject if sni_git !src_git_sac_allowed
|
||||||
tcp-request content reject if sni_sac !src_git_sac_allowed
|
tcp-request content reject if sni_sac_web !src_git_sac_allowed
|
||||||
tcp-request content reject if sni_erp !src_1c_allowed
|
tcp-request content reject if sni_erp !src_1c_allowed
|
||||||
|
|
||||||
# OWA: https://ext.kalinamall.ru/owa — тот же поток, отдельное правило не требуется
|
|
||||||
use_backend be_exchange if { req_ssl_sni -i ext.kalinamall.ru }
|
use_backend be_exchange if { req_ssl_sni -i ext.kalinamall.ru }
|
||||||
use_backend be_exchange if { req_ssl_sni -i autodiscover.kalinamall.ru }
|
use_backend be_exchange if { req_ssl_sni -i autodiscover.kalinamall.ru }
|
||||||
use_backend be_rds if { req_ssl_sni -i rds.kalinamall.ru }
|
use_backend be_rds if { req_ssl_sni -i rds.kalinamall.ru }
|
||||||
use_backend be_erp if { req_ssl_sni -i erp.kalinamall.ru }
|
use_backend be_erp if { req_ssl_sni -i erp.kalinamall.ru }
|
||||||
use_backend be_git if { req_ssl_sni -i git.kalinamall.ru }
|
use_backend be_git if { req_ssl_sni -i git.kalinamall.ru }
|
||||||
use_backend be_sac if { req_ssl_sni -i sac.kalinamall.ru }
|
use_backend be_sac if { req_ssl_sni -i sac.kalinamall.ru }
|
||||||
|
use_backend be_sac if { req_ssl_sni -i sac-api.kalinamall.ru }
|
||||||
|
|
||||||
backend be_exchange
|
backend be_exchange
|
||||||
# fifth.kalinamall.ru (192.168.160.42) — внешние имена HTTPS: ext.kalinamall.ru, autodiscover.kalinamall.ru
|
# fifth.kalinamall.ru (192.168.160.42)
|
||||||
server exch 192.168.160.42:443 check ssl verify none
|
server exch 192.168.160.42:443 check check-ssl check-sni ext.kalinamall.ru verify none
|
||||||
|
|
||||||
backend be_rds
|
backend be_rds
|
||||||
# k6a-dc3.b26.kalinamall.ru (192.168.160.40) — RDS слушает TLS на 4430; снаружи клиенты идут на rds.kalinamall.ru:443
|
# k6a-dc3.b26.kalinamall.ru (192.168.160.40), TLS на 4430
|
||||||
server rds 192.168.160.40:4430 check ssl verify none
|
server rds 192.168.160.40:4430 check check-ssl check-sni rds.kalinamall.ru verify none
|
||||||
|
|
||||||
backend be_erp
|
backend be_erp
|
||||||
# hp-serv.b26.kalinamall.ru (192.168.160.150) — erp.kalinamall.ru; снаружи только IP из 1c-allowed
|
# hp-serv.b26.kalinamall.ru (192.168.160.150)
|
||||||
server erp 192.168.160.150:443 check ssl verify none
|
server erp 192.168.160.150:443 check check-ssl check-sni erp.kalinamall.ru verify none
|
||||||
|
|
||||||
backend be_git
|
backend be_git
|
||||||
# git.kalinamall.ru (192.168.160.129) — свой TLS-сертификат; снаружи только IP из git-sac-allowed
|
# git.kalinamall.ru (192.168.160.129); снаружи только IP из git-sac-allowed
|
||||||
server git 192.168.160.129:443 check ssl verify none
|
server git 192.168.160.129:443 check check-ssl check-sni git.kalinamall.ru verify none
|
||||||
|
|
||||||
backend be_sac
|
backend be_sac
|
||||||
# sac.kalinamall.ru (192.168.160.145) — свой TLS-сертификат; снаружи только IP из git-sac-allowed
|
# sac.kalinamall.ru + sac-api.kalinamall.ru → 192.168.160.145
|
||||||
server sac 192.168.160.145:443 check ssl verify none
|
# веб sac.kalinamall.ru — только IP из git-sac-allowed; sac-api — без фильтра на frontend
|
||||||
|
server sac 192.168.160.145:443 check check-ssl check-sni sac.kalinamall.ru verify none
|
||||||
|
|
||||||
# -----------------------------------------------------------------------------
|
# -----------------------------------------------------------------------------
|
||||||
# SMTP (25): почтовый шлюз KSMG
|
# SMTP (25): почтовый шлюз KSMG — ksmg.kalinamall.ru
|
||||||
# Внешнее имя: ksmg.kalinamall.ru
|
|
||||||
# -----------------------------------------------------------------------------
|
# -----------------------------------------------------------------------------
|
||||||
|
|
||||||
frontend fe_smtp
|
frontend fe_smtp
|
||||||
|
|||||||
Reference in New Issue
Block a user