HAProxy 0.7.2: sac-api для Seaca, check-ssl на всех HTTPS-бэкендах.

Веб-SAC остаётся за allowlist; sac-api.kalinamall.ru открыт для мобильных клиентов. Документация по connection coalescing Git+SAC.

Co-authored-by: Cursor <cursoragent@cursor.com>
This commit is contained in:
PTah
2026-06-13 12:01:06 +10:00
parent ed77ec1e56
commit f802a5ac46
4 changed files with 142 additions and 37 deletions
+15 -15
View File
@@ -2,32 +2,32 @@
Периметровая конфигурация **HAProxy** для сети **kalinamall.ru**: Exchange, RDS (веб/шлюз по HTTPS), 1С, Git, SAC, почтовый шлюз KSMG. Прямой RDP (3389) через HAProxy не используется — клиенты идут через RDS на **443** (`rds.kalinamall.ru`).
TLS: на целевых серверах в основном **wildcard-сертификаты GlobalSign**; **Git** (`git.kalinamall.ru`) и **SAC** (`sac.kalinamall.ru`) используют **свои** сертификаты на **192.168.160.129** и **192.168.160.145**. HAProxy на **443** работает в режиме **TCP + SNI** и **не терминирует** TLS — сертификаты остаются на бэкендах.
TLS: HAProxy на **443** в режиме **TCP + SNI**, **не терминирует** TLS — сертификаты на бэкендах.
Доступ снаружи по allowlist: **Git** и **SAC** — файл `git-sac-allowed`; **1С** (`erp.kalinamall.ru`) — файл `1c-allowed`.
Доступ снаружи по allowlist: **Git** и **веб-SAC** (`sac.kalinamall.ru`) — файл `git-sac-allowed`; **1С** (`erp.kalinamall.ru`) — `1c-allowed`. **Seaca****`sac-api.kalinamall.ru`** без IP-фильтра (аутентификация на SAC).
Репозиторий: [https://git.kalinamall.ru/PapaTramp/reverse-proxy](https://git.kalinamall.ru/PapaTramp/reverse-proxy)
## Соответствие имён и адресов
| Служба | Внешнее имя (клиенты) | Внутренний хост / IP | Порт снаружи |
|--------|------------------------|----------------------|--------------|
| Microsoft Exchange (OWA `https://ext.kalinamall.ru/owa`, EWS, MAPI/HTTPS и т.д.) | `ext.kalinamall.ru` | fifth.kalinamall.ru — **192.168.160.42** | 443 (TCP/SNI) |
| Autodiscover | `autodiscover.kalinamall.ru` | тот же Exchange — **192.168.160.42** | 443 (TCP/SNI) |
| RDS | `rds.kalinamall.ru` (**443** на HAProxy) | k6a-dc3.b26.kalinamall.ru**192.168.160.40**, служба **4430** | 443 (SNI → внутр. **4430**) |
| 1С | `erp.kalinamall.ru` | hp-serv.b26.kalinamall.ru**192.168.160.150** | 443 (снаружи только IP из **`1c-allowed`**) |
| Git (HTTPS) | `git.kalinamall.ru` | git.kalinamall.ru — **192.168.160.129** (свой TLS-сертификат; снаружи только IP из **`git-sac-allowed`**) | 443 (TCP/SNI) |
| SAC | `sac.kalinamall.ru` | sac.kalinamall.ru — **192.168.160.145** (свой TLS-сертификат; снаружи только IP из **`git-sac-allowed`**) | 443 (TCP/SNI) |
| Почтовый шлюз (KSMG) | `ksmg.kalinamall.ru` | ksmg.kalinamall.ru — **192.168.160.57** | 25 |
| Служба | Внешнее имя (клиенты) | Внутренний хост / IP | Порт | Allowlist |
|--------|------------------------|----------------------|------|-----------|
| Microsoft Exchange (OWA и т.д.) | `ext.kalinamall.ru` | fifth.kalinamall.ru — **192.168.160.42** | 443 | нет |
| Autodiscover | `autodiscover.kalinamall.ru` | тот же Exchange — **192.168.160.42** | 443 | нет |
| RDS | `rds.kalinamall.ru` | k6a-dc3**192.168.160.40**, служба **4430** | 443 → 4430 | нет |
| 1С | `erp.kalinamall.ru` | hp-serv — **192.168.160.150** | 443 | **`1c-allowed`** |
| Git (HTTPS) | `git.kalinamall.ru` | **192.168.160.129** | 443 | **`git-sac-allowed`** |
| SAC (веб) | `sac.kalinamall.ru` | **192.168.160.145** | 443 | **`git-sac-allowed`** |
| SAC / Seaca (mobile API) | **`sac-api.kalinamall.ru`** | тот же **192.168.160.145** | 443 | **нет** |
| Почтовый шлюз (KSMG) | `ksmg.kalinamall.ru` | **192.168.160.57** | 25 | нет |
DNS: записи **A** для `ext`, **`autodiscover`**, `rds`, `erp`, **`git`**, **`sac`**, `ksmg` должны указывать на **публичный IP** хоста с HAProxy. Имя `autodiscover.kalinamall.ru` должно быть в **SAN** wildcard `*.kalinamall.ru` или отдельно в сертификате на Exchange.
DNS: **A** для `ext`, `autodiscover`, `rds`, `erp`, `git`, `sac`, **`sac-api`**, `ksmg` → публичный IP HAProxy.
Доступ по **SSH** к внутренним хостам (например Ubuntu **192.168.160.85**) в этом репозитории **не** настраивается через HAProxy — организуйте отдельно (прямой проброс, VPN, бастион и т.д.).
В режиме **TCP + SNI** отдельные строки в HAProxy для путей вроде `/owa` **не нужны**: после согласования TLS клиент шлёт HTTP внутри шифрования, разбор путей делает **IIS/Exchange** на `192.168.160.42`.
Если после **Git** в том же браузере **SAC** показывает Gitea — см. [SAC, Seaca и coalescing](docs/sac-access.md).
## Документация
- [Установка HAProxy и развёртывание конфигурации](docs/haproxy-install.md)
- [SAC: веб vs sac-api, Seaca, Git+SAC в браузере](docs/sac-access.md)
- [Работа с Git: clone, pull, push, ключи и PAT](docs/git.md)
- [Let's Encrypt / ACME через HAProxy (порт 80)](docs/letsencrypt-acme.md)
+8
View File
@@ -63,3 +63,11 @@ sudo haproxy -c -f /etc/haproxy/haproxy.cfg
На хосте с HAProxy с интернета обычно открывают только то, что слушает конфиг: **25**, **443** (и при использовании — **8404** для stats). Остальной трафик — по политике безопасности.
Если позже добавите фронтенд на **80** для ACME (см. [letsencrypt-acme.md](letsencrypt-acme.md)), откройте и **TCP 80**.
## SAC и Seaca (sac-api)
- Веб-SAC: **`sac.kalinamall.ru`** — IP из **`git-sac-allowed`**
- Seaca (Android): **`sac-api.kalinamall.ru`** — без allowlist; добавьте **A**-запись на тот же IP HAProxy
- На nginx SAC (**192.168.160.145**): `server_name sac.kalinamall.ru sac-api.kalinamall.ru;`
Подробнее: [sac-access.md](sac-access.md).
+93
View File
@@ -0,0 +1,93 @@
# SAC: веб, Seaca (sac-api) и HAProxy
## Два имени — один сервер
| Имя | Клиенты | IP-allowlist HAProxy | Бэкенд |
|-----|---------|----------------------|--------|
| **`sac.kalinamall.ru`** | Веб-интерфейс SAC (браузер) | **Да** (`git-sac-allowed`) | 192.168.160.145:443 |
| **`sac-api.kalinamall.ru`** | Seaca (Android), mobile API | **Нет** (доступ с любого IP) | тот же 192.168.160.145:443 |
Защита `sac-api`: код регистрации `sacmob_…`, JWT, отзыв устройств в веб-SAC.
### DNS
Добавьте **A**-запись:
```text
sac-api.kalinamall.ru → тот же публичный IP, что у sac / ext / git (хост HAProxy)
```
### nginx на 192.168.160.145
В `server_name` должны быть **оба** имени (wildcard `*.kalinamall.ru` в сертификате это покрывает):
```nginx
server_name sac.kalinamall.ru sac-api.kalinamall.ru;
```
Для чужих имён (например `ext.kalinamall.ru`) — отдельный default или `return 444`, иначе SAC ответит на любой Host.
### Seaca
В приложении указывают **`https://sac-api.kalinamall.ru`**, не `sac.kalinamall.ru`.
---
## Git → SAC в одном браузере: «Page Not Found — Gitea»
### Симптом
1. Открыли **`git.kalinamall.ru`** — Gitea работает.
2. В **той же вкладке/браузере** перешли на **`sac.kalinamall.ru`**.
3. В адресной строке SAC, на экране — **Gitea 404** («Page Not Found - Gitea»).
В логах HAProxy при этом может быть **`be_git`**, хотя URL — sac.
### Причина: HTTP/2 connection coalescing
Git и SAC снаружи идут на **один IP:443** HAProxy. В режиме **TCP passthrough** backend выбирается **один раз** при ClientHello (SNI) на **TCP-соединение**.
Современные браузеры (Chrome, Firefox) при **HTTP/2** могут **объединять** несколько hostname на одном IP в **одно TLS-соединение**, если сертификаты «совместимы» (часто так с `*.kalinamall.ru`).
Тогда:
1. Первое соединение: SNI `git.kalinamall.ru` → HAProxy → **Gitea**.
2. Запрос к `sac.kalinamall.ru` идёт **по тому же TCP** (без нового SNI для HAProxy).
3. Gitea получает `Host: sac.kalinamall.ru` → отдаёт **404 Gitea**.
Это **не ошибка маршрутизации ACL** и **не баг SAC** — ограничение схемы «несколько HTTPS-имён на одном IP + TCP passthrough».
### Обходные пути (без смены архитектуры)
| Способ | Комментарий |
|--------|-------------|
| **Новая вкладка / приватное окно** для SAC после Git | Новое TCP-соединение, свой SNI |
| **Закрыть вкладку с Git** перед SAC | Сброс keep-alive / H2 coalescing |
| **Разные публичные IP** в DNS: `git.*` → IP1, `sac.*` → IP2 | Надёжное решение для passthrough |
| **`http2 off;`** в nginx Gitea и SAC | Часто уменьшает coalescing (на серверах .129 и .145) |
| **`Connection: close`** в ответах Git | Жёстче рвёт keep-alive (на .129) |
### Долгосрочно
- Отдельный WAN IP для Git и для SAC, **или**
- TLS-терминация на HAProxy с маршрутизацией по Host (больше изменений).
---
## Деплой изменений HAProxy
```bash
sudo cp ~/reverse-proxy/haproxy.cfg /etc/haproxy/haproxy.cfg
sudo haproxy -c -f /etc/haproxy/haproxy.cfg
sudo systemctl reload haproxy
```
Проверка:
```bash
# веб SAC — только с allowlist IP
curl -sI --resolve sac.kalinamall.ru:443:ПУБЛИЧНЫЙ_IP https://sac.kalinamall.ru/dashboard
# mobile API — с любого IP
curl -s --resolve sac-api.kalinamall.ru:443:ПУБЛИЧНЫЙ_IP https://sac-api.kalinamall.ru/health
```
+26 -22
View File
@@ -1,9 +1,11 @@
# HAProxy — периметровый reverse-proxy для kalinamall.ru
# Режим: TCP + SNI на 443 (TLS end-to-end, сертификаты GlobalSign wildcard на бэкендах)
# Config version: 0.7.2
# Режим: TCP + SNI на 443 (TLS end-to-end, сертификаты на бэкендах)
#
# Проверка синтаксиса: haproxy -c -f haproxy.cfg
# Установка: скопируйте в /etc/haproxy/haproxy.cfg
# Allowlist: git-sac-allowed, 1c-allowed → /etc/haproxy/
# Allowlist: git-sac-allowed (git + sac веб), 1c-allowed → /etc/haproxy/
# sac-api.kalinamall.ru — без IP-фильтра (Seaca с любого адреса, auth на SAC)
global
log stdout format raw local0
@@ -22,10 +24,11 @@ defaults
# Для ActiveSync / больших вложений Exchange при необходимости увеличьте client/server
# -----------------------------------------------------------------------------
# HTTPS (443): маршрутизация по SNI → внутренние серверы с wildcard на 443
# Клиенты: ext, autodiscover (Exchange) / rds / erp / git / sac
# Git и SAC — allowlist git-sac-allowed; 1С (erp) — allowlist 1c-allowed
# Пути URL ( /owa, /ecp, /ews/, /mapi/ … ) HAProxy не разбирает — они внутри TLS; достаточно SNI ext.kalinamall.ru
# HTTPS (443): маршрутизация по SNI → внутренние серверы
# ext, autodiscover (Exchange) / rds / erp / git / sac (веб) / sac-api (Seaca)
# Git и sac.kalinamall.ru (веб) — allowlist git-sac-allowed
# sac-api.kalinamall.ru (мобильное API) — без allowlist
# См. docs/sac-access.md — connection coalescing (git + sac на одном IP)
# -----------------------------------------------------------------------------
frontend fe_https_sni
@@ -41,50 +44,51 @@ frontend fe_https_sni
acl sni_known req_ssl_sni -i erp.kalinamall.ru
acl sni_known req_ssl_sni -i git.kalinamall.ru
acl sni_known req_ssl_sni -i sac.kalinamall.ru
acl sni_known req_ssl_sni -i sac-api.kalinamall.ru
acl sni_git req_ssl_sni -i git.kalinamall.ru
acl sni_sac req_ssl_sni -i sac.kalinamall.ru
acl sni_sac_web req_ssl_sni -i sac.kalinamall.ru
acl sni_erp req_ssl_sni -i erp.kalinamall.ru
acl src_git_sac_allowed src -f /etc/haproxy/git-sac-allowed
acl src_1c_allowed src -f /etc/haproxy/1c-allowed
# tcp-request обрабатываются до use_backend — reject ставим ДО use_backend, иначе предупреждение парсера
# tcp-request обрабатываются до use_backend — reject ставим ДО use_backend
tcp-request content reject if !sni_known
tcp-request content reject if sni_git !src_git_sac_allowed
tcp-request content reject if sni_sac !src_git_sac_allowed
tcp-request content reject if sni_sac_web !src_git_sac_allowed
tcp-request content reject if sni_erp !src_1c_allowed
# OWA: https://ext.kalinamall.ru/owa — тот же поток, отдельное правило не требуется
use_backend be_exchange if { req_ssl_sni -i ext.kalinamall.ru }
use_backend be_exchange if { req_ssl_sni -i autodiscover.kalinamall.ru }
use_backend be_rds if { req_ssl_sni -i rds.kalinamall.ru }
use_backend be_erp if { req_ssl_sni -i erp.kalinamall.ru }
use_backend be_git if { req_ssl_sni -i git.kalinamall.ru }
use_backend be_sac if { req_ssl_sni -i sac.kalinamall.ru }
use_backend be_sac if { req_ssl_sni -i sac-api.kalinamall.ru }
backend be_exchange
# fifth.kalinamall.ru (192.168.160.42) — внешние имена HTTPS: ext.kalinamall.ru, autodiscover.kalinamall.ru
server exch 192.168.160.42:443 check ssl verify none
# fifth.kalinamall.ru (192.168.160.42)
server exch 192.168.160.42:443 check check-ssl check-sni ext.kalinamall.ru verify none
backend be_rds
# k6a-dc3.b26.kalinamall.ru (192.168.160.40) — RDS слушает TLS на 4430; снаружи клиенты идут на rds.kalinamall.ru:443
server rds 192.168.160.40:4430 check ssl verify none
# k6a-dc3.b26.kalinamall.ru (192.168.160.40), TLS на 4430
server rds 192.168.160.40:4430 check check-ssl check-sni rds.kalinamall.ru verify none
backend be_erp
# hp-serv.b26.kalinamall.ru (192.168.160.150) — erp.kalinamall.ru; снаружи только IP из 1c-allowed
server erp 192.168.160.150:443 check ssl verify none
# hp-serv.b26.kalinamall.ru (192.168.160.150)
server erp 192.168.160.150:443 check check-ssl check-sni erp.kalinamall.ru verify none
backend be_git
# git.kalinamall.ru (192.168.160.129) — свой TLS-сертификат; снаружи только IP из git-sac-allowed
server git 192.168.160.129:443 check ssl verify none
# git.kalinamall.ru (192.168.160.129); снаружи только IP из git-sac-allowed
server git 192.168.160.129:443 check check-ssl check-sni git.kalinamall.ru verify none
backend be_sac
# sac.kalinamall.ru (192.168.160.145) — свой TLS-сертификат; снаружи только IP из git-sac-allowed
server sac 192.168.160.145:443 check ssl verify none
# sac.kalinamall.ru + sac-api.kalinamall.ru → 192.168.160.145
# веб sac.kalinamall.ru — только IP из git-sac-allowed; sac-api — без фильтра на frontend
server sac 192.168.160.145:443 check check-ssl check-sni sac.kalinamall.ru verify none
# -----------------------------------------------------------------------------
# SMTP (25): почтовый шлюз KSMG
# Внешнее имя: ksmg.kalinamall.ru
# SMTP (25): почтовый шлюз KSMG — ksmg.kalinamall.ru
# -----------------------------------------------------------------------------
frontend fe_smtp