fix: исправить URL медиа — nginx /media/ проксирует без имени бакета

- vk_parser: убрать bucket из MINIO_PUBLIC_URL (nginx добавляет /news-media/ сам)
- admin_system: добавить endpoint POST /repair-media-urls для обновления старых URL в БД
- SystemStatus: кнопка «Починить URL медиа» запускает repair endpoint
- .env.example: заменить реальные адреса/пароли на плейсхолдеры

Co-Authored-By: Claude Sonnet 4.6 <noreply@anthropic.com>
This commit is contained in:
jze9
2026-05-20 16:44:36 +05:00
parent 00acc59cc4
commit 9e277de65d
6 changed files with 109 additions and 12 deletions

View File

@@ -1,12 +1,14 @@
# ============= БАЗА ДАННЫХ =============
DATABASE_URL=postgresql+asyncpg://news_admin:news_secure_2026@192.168.1.11:5432/news
DATABASE_URL=postgresql+asyncpg://db_user:db_password@db-host:5432/news
# ============= MINIO / ХРАНИЛИЩЕ =============
MINIO_ENDPOINT=minio:9000
MINIO_ACCESS_KEY=minioadmin
MINIO_SECRET_KEY=minioadmin
MINIO_ENDPOINT=minio-host:9000
MINIO_ACCESS_KEY=your-access-key
MINIO_SECRET_KEY=your-secret-key
MINIO_BUCKET=news-media
MINIO_PUBLIC_URL=http://localhost:9000
# MINIO_PUBLIC_URL — публичный URL через который браузер загружает медиа.
# nginx проксирует /media/ → MinIO bucket, поэтому ставим домен сайта + /media (без имени бакета)
MINIO_PUBLIC_URL=https://your-domain.ru/media
# ============= JWT / БЕЗОПАСНОСТЬ =============
JWT_SECRET=your-super-secret-key-change-in-production

View File

@@ -113,3 +113,60 @@ async def system_status(db: AsyncSession = Depends(get_db), _: str = Depends(req
"redis": redis,
"minio": minio,
}
@router.post("/repair-media-urls")
async def repair_media_urls(db: AsyncSession = Depends(get_db), _: str = Depends(require_admin)):
"""Заменяет старые MinIO URL на актуальный MINIO_PUBLIC_URL во всех статьях и медиафайлах.
Системный nginx проксирует /media/ → MinIO bucket /news-media/, поэтому bucket исключается из URL.
Старый формат: http://host:port/news-media/object_path
Новый формат: MINIO_PUBLIC_URL/object_path (без bucket)
Запускать один раз после изменения MINIO_PUBLIC_URL в .env.
"""
new_base = MINIO_PUBLIC_URL.rstrip("/")
# cover_url: http://host/news-media/path → new_base/path
r_cover = await db.execute(text(r"""
UPDATE articles
SET cover_url = :new_base || '/' ||
regexp_replace(cover_url, '^https?://[^/]+(:[0-9]+)?/[^/]+/', '')
WHERE cover_url IS NOT NULL
AND cover_url LIKE '%/news-media/%'
AND cover_url NOT LIKE :prefix
RETURNING id
"""), {"new_base": new_base, "prefix": new_base + "%"})
# HTML-контент: src="http://host/news-media/path" → src="new_base/path"
r_content = await db.execute(text(r"""
UPDATE articles
SET content = regexp_replace(
content,
'https?://[^/]+(:[0-9]+)?/[^/]+/([^"'' ]+)',
:new_base || '/\2',
'g'
)
WHERE content LIKE '%/news-media/%'
AND content NOT LIKE :prefix
RETURNING id
"""), {"new_base": new_base, "prefix": "%" + new_base + "%"})
# media.url
r_media = await db.execute(text(r"""
UPDATE media
SET url = :new_base || '/' ||
regexp_replace(url, '^https?://[^/]+(:[0-9]+)?/[^/]+/', '')
WHERE url LIKE '%/news-media/%'
AND url NOT LIKE :prefix
RETURNING id
"""), {"new_base": new_base, "prefix": new_base + "%"})
await db.commit()
return {
"new_base": new_base,
"cover_url_fixed": r_cover.rowcount,
"content_fixed": r_content.rowcount,
"media_fixed": r_media.rowcount,
}

View File

@@ -162,7 +162,8 @@ async def _upload_from_url(url: str, db: AsyncSession | None = None,
mc = _minio_client()
_ensure_bucket(mc)
mc.put_object(MINIO_BUCKET, object_name, io.BytesIO(data), len(data), content_type=ct)
public_url = f"{MINIO_PUBLIC_URL}/{MINIO_BUCKET}/{object_name}"
# Системный nginx проксирует /media/ → MinIO bucket, поэтому bucket не дублируем в URL
public_url = f"{MINIO_PUBLIC_URL}/{object_name}"
if db is not None:
from bd.models import Media
db.add(Media(
@@ -302,7 +303,7 @@ async def _download_vk_video(owner_id: int, video_id: int,
mc = _minio_client()
_ensure_bucket(mc)
mc.put_object(MINIO_BUCKET, object_name, io.BytesIO(data), len(data), content_type="video/mp4")
public_url = f"{MINIO_PUBLIC_URL}/{MINIO_BUCKET}/{object_name}"
public_url = f"{MINIO_PUBLIC_URL}/{object_name}"
print(f"[VK] Видео загружено в MinIO: {object_name} ({total/1024/1024:.1f}MB)")
if db is not None:
from bd.models import Media

View File

@@ -23,7 +23,6 @@ server {
proxy_pass http://api:8000/;
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
# Отключаем буферизацию для быстрого ответа
proxy_buffering off;
}

View File

@@ -114,3 +114,6 @@ export const adminVkImportHistory = (token, sourceId, sinceDays = 365) =>
export const adminSystemStatus = token =>
req('GET', 'admin/system/status', token)
export const adminRepairMediaUrls = token =>
req('POST', 'admin/system/repair-media-urls', token)

View File

@@ -1,6 +1,6 @@
import React, { useState, useEffect, useCallback } from 'react'
import { useAuth } from '../../hooks/useAuth'
import { adminSystemStatus } from '../../api/index'
import { adminSystemStatus, adminRepairMediaUrls } from '../../api/index'
import AdminLayout from '../../components/AdminLayout'
import Loader from '../../components/Loader'
@@ -90,6 +90,7 @@ export default function SystemStatus() {
const [data, setData] = useState(null)
const [loading, setLoading] = useState(true)
const [lastUpdated, setLastUpdated] = useState(null)
const [repairState, setRepairState] = useState(null) // null | 'running' | result-object
const load = useCallback(async () => {
setLoading(true)
@@ -106,6 +107,17 @@ export default function SystemStatus() {
useEffect(() => { load() }, [load])
const runRepair = async () => {
if (!window.confirm('Обновить все MinIO URL в базе данных?\nЭто перезапишет cover_url и img-теги в контенте статей.')) return
setRepairState('running')
try {
const result = await adminRepairMediaUrls(token)
setRepairState(result)
} catch (e) {
setRepairState({ error: String(e) })
}
}
const allOk = data && Object.values(data).every(s => s.ok)
return (
@@ -127,11 +139,34 @@ export default function SystemStatus() {
</span>
)}
</div>
<button className="btn btn-ghost btn-sm" onClick={load} disabled={loading}>
{loading ? 'Проверяю...' : '🔄 Обновить'}
</button>
<div style={{ display: 'flex', gap: '0.5rem', flexWrap: 'wrap' }}>
<button className="btn btn-ghost btn-sm" onClick={load} disabled={loading}>
{loading ? 'Проверяю...' : '🔄 Обновить'}
</button>
<button
className="btn btn-sm"
style={{ background: 'var(--c-warning, #f59e0b)', color: '#fff', border: 'none' }}
onClick={runRepair}
disabled={repairState === 'running'}
>
{repairState === 'running' ? 'Исправляю...' : '🔧 Починить URL медиа'}
</button>
</div>
</div>
{repairState && repairState !== 'running' && (
<div style={{
background: repairState.error ? 'var(--c-danger-bg, #fee2e2)' : 'var(--c-success-bg, #d1fae5)',
color: repairState.error ? 'var(--c-danger, #991b1b)' : 'var(--c-success, #065f46)',
borderRadius: 8, padding: '0.75rem 1rem', marginBottom: '1rem', fontSize: '0.875rem',
}}>
{repairState.error
? `Ошибка: ${repairState.error}`
: `✅ Готово. Новый base: ${repairState.new_base} | cover_url: ${repairState.cover_url_fixed} | контент: ${repairState.content_fixed} | media: ${repairState.media_fixed}`
}
</div>
)}
{loading && !data ? <Loader /> : (
<div style={{ display: 'grid', gap: '1rem', gridTemplateColumns: 'repeat(auto-fill, minmax(340px, 1fr))' }}>
<ServiceCard title="PostgreSQL" icon="🐘" data={data?.postgres} />