Enot/GitHubToGiTea
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

Обновить .woodpecker.yml

Browse Source
This commit is contained in:
EnotAdmin
2025-05-05 14:53:46 +03:00
parent d12ab12d20
commit 499463b1ec
1 changed files with 46 additions and 51 deletions
Download Patch File Download Diff File Expand all files Collapse all files

97
.woodpecker.yml
View File

@@ -8,12 +8,17 @@ trigger:
pipeline: pipeline:
sync_releases: sync_releases:
image: alpine/git # Базовый образ с git image: alpine/git # Базовый образ с git
secrets: [ gitea_url, gitea_token, github_token ] # Подключаем секреты # Убираем gitea_url из секретов, но оставляем gitea_token!
secrets: [ gitea_token, github_token ]
environment: environment:
# Передаем секреты и имя файла в окружение контейнера # GITEA_URL теперь берется из окружения, предоставленного Woodpecker
GITEA_URL: ${GITEA_URL} # Мы просто используем ее напрямую в скрипте, если она доступна,
GITEA_TOKEN: ${GITEA_TOKEN} # или можно явно присвоить для ясности:
GITHUB_TOKEN: ${GITHUB_TOKEN} # Может быть пустым, если не используется # SCRIPT_GITEA_URL: ${WOODPECKER_GITEA_URL} # Явное присваивание для скрипта
# Передаем нужные секреты и имя файла
GITEA_TOKEN: ${GITEA_TOKEN} # Этот секрет все еще НУЖЕН!
GITHUB_TOKEN: ${GITHUB_TOKEN} # Опционально, но рекомендуется
REPO_LIST_FILE: repos_to_sync.txt # Имя файла со списком репозиториев REPO_LIST_FILE: repos_to_sync.txt # Имя файла со списком репозиториев
commands: commands:
# 1. Установка зависимостей (curl и jq) # 1. Установка зависимостей (curl и jq)
@@ -23,28 +28,37 @@ pipeline:
- | - |
#!/bin/bash #!/bin/bash
set -e # Останавливаться при ошибках set -e # Останавливаться при ошибках
# set -x # Для отладки можно раскомментировать # set -x # Для отладки
echo "Starting release sync..." echo "Starting release sync..."
# --- Конфигурация --- # --- Конфигурация ---
REPO_FILE="${REPO_LIST_FILE:-repos_to_sync.txt}" # Используем переменную окружения или дефолтное имя REPO_FILE="${REPO_LIST_FILE:-repos_to_sync.txt}"
# Проверка наличия файла репозиториев # Используем переменную WOODPECKER_GITEA_URL из окружения шага
if [ ! -f "$REPO_FILE" ]; then # Если ее нет, скрипт завершится с ошибкой ниже
echo "Error: Repository list file '$REPO_FILE' not found!" CURRENT_GITEA_URL="${WOODPECKER_GITEA_URL}"
# Проверка наличия GITEA_URL (полученного из WOODPECKER_GITEA_URL)
if [ -z "$CURRENT_GITEA_URL" ]; then
echo "Error: GITEA_URL (from WOODPECKER_GITEA_URL) is not set in the environment!"
exit 1 exit 1
fi fi
# Проверка наличия GITEA_TOKEN # Проверка наличия GITEA_TOKEN (из секрета)
if [ -z "$GITEA_TOKEN" ]; then if [ -z "$GITEA_TOKEN" ]; then
echo "Error: GITEA_TOKEN secret is not set!" echo "Error: GITEA_TOKEN secret is not set!"
exit 1 exit 1
fi fi
echo "Using Gitea URL: $CURRENT_GITEA_URL"
# Заголовок авторизации для Gitea # Заголовок авторизации для Gitea
GITEA_AUTH_HEADER="Authorization: token ${GITEA_TOKEN}" GITEA_AUTH_HEADER="Authorization: token ${GITEA_TOKEN}"
GITEA_API_URL="${GITEA_URL}/api/v1" # Убираем /api/v1 из базового URL, если он там есть, и добавляем снова
GITEA_API_URL="$(echo ${CURRENT_GITEA_URL} | sed 's|/api/v1$||; s|/*$||')/api/v1"
echo "Using Gitea API URL: $GITEA_API_URL"
# Заголовок авторизации для GitHub (если токен есть) # Заголовок авторизации для GitHub (если токен есть)
GITHUB_AUTH_HEADER="" GITHUB_AUTH_HEADER=""
@@ -72,30 +86,26 @@ pipeline:
local filename="$3" local filename="$3"
echo "Uploading asset: $filename to Gitea release ID $release_id" echo "Uploading asset: $filename to Gitea release ID $release_id"
UPLOAD_URL="${GITEA_API_URL}/repos/${gitea_repo_path}/releases/${release_id}/assets?name=$(basename "$filename")" UPLOAD_URL="${GITEA_API_URL}/repos/${gitea_repo_path}/releases/${release_id}/assets?name=$(basename "$filename")"
# Используем --fail для curl, чтобы он возвращал ненулевой код при HTTP ошибках > 400
curl -sf --fail -X POST -H "$GITEA_AUTH_HEADER" -H "Content-Type: application/octet-stream" --data-binary "@$filename" "$UPLOAD_URL" curl -sf --fail -X POST -H "$GITEA_AUTH_HEADER" -H "Content-Type: application/octet-stream" --data-binary "@$filename" "$UPLOAD_URL"
if [ $? -ne 0 ]; then if [ $? -ne 0 ]; then
echo "Error uploading asset: $filename" echo "Error uploading asset: $filename"
# Оставляем файл для возможного анализа при ошибке
return 1 return 1
else else
rm "$filename" # Удаляем локальный файл после успешной загрузки rm "$filename"
return 0 return 0
fi fi
} }
# --- Основной цикл по репозиториям из файла --- # --- Основной цикл по репозиториям из файла (без изменений) ---
if [ ! -f "$REPO_FILE" ]; then
echo "Error: Repository list file '$REPO_FILE' not found!"
exit 1
fi
echo "Reading repository list from $REPO_FILE" echo "Reading repository list from $REPO_FILE"
while IFS= read -r repo_pair || [[ -n "$repo_pair" ]]; do # Читаем строки из файла while IFS= read -r repo_pair || [[ -n "$repo_pair" ]]; do
if [[ -z "$repo_pair" || "$repo_pair" == \#* ]]; then continue; fi
# Пропускаем пустые строки и комментарии
if [[ -z "$repo_pair" || "$repo_pair" == \#* ]]; then
continue
fi
# Проверяем формат строки
if ! echo "$repo_pair" | grep -q ':'; then if ! echo "$repo_pair" | grep -q ':'; then
echo "Warning: Skipping invalid line in $REPO_FILE: $repo_pair (format should be github/repo:gitea/repo)" echo "Warning: Skipping invalid line in $REPO_FILE: $repo_pair"
continue continue
fi fi
@@ -107,31 +117,25 @@ pipeline:
# 1. Получаем существующие теги релизов из Gitea # 1. Получаем существующие теги релизов из Gitea
echo "Fetching existing Gitea releases for $GITEA_REPO_PATH..." echo "Fetching existing Gitea releases for $GITEA_REPO_PATH..."
# Используем --fail, чтобы прервать пайплайн, если Gitea недоступен или репо нет
GITEA_RELEASES_JSON=$(curl -sf --fail -H "$GITEA_AUTH_HEADER" "${GITEA_API_URL}/repos/${GITEA_REPO_PATH}/releases") || \ GITEA_RELEASES_JSON=$(curl -sf --fail -H "$GITEA_AUTH_HEADER" "${GITEA_API_URL}/repos/${GITEA_REPO_PATH}/releases") || \
{ echo "Error fetching Gitea releases for $GITEA_REPO_PATH, stopping sync."; exit 1; } { echo "Error fetching Gitea releases for $GITEA_REPO_PATH. Does the repo exist and token have read access?"; continue; } # Пропускаем репо при ошибке Gitea
EXISTING_GITEA_TAGS=$(echo "$GITEA_RELEASES_JSON" | jq -r '.[].tag_name') EXISTING_GITEA_TAGS=$(echo "$GITEA_RELEASES_JSON" | jq -r '.[].tag_name')
# echo "Found Gitea tags: $EXISTING_GITEA_TAGS" # Можно включить для отладки
# 2. Получаем последние релизы из GitHub (например, 20 последних для большей надежности) # 2. Получаем последние релизы из GitHub
echo "Fetching latest GitHub releases for $GITHUB_REPO_PATH..." echo "Fetching latest GitHub releases for $GITHUB_REPO_PATH..."
# Используем --fail для обработки ошибок GitHub API
GITHUB_RELEASES_JSON=$(curl -sf --fail -H "$GITHUB_AUTH_HEADER" "${GITHUB_API_URL}/repos/${GITHUB_REPO_PATH}/releases?per_page=20") || \ GITHUB_RELEASES_JSON=$(curl -sf --fail -H "$GITHUB_AUTH_HEADER" "${GITHUB_API_URL}/repos/${GITHUB_REPO_PATH}/releases?per_page=20") || \
{ echo "Error fetching GitHub releases for $GITHUB_REPO_PATH, skipping this repo."; continue; } # Пропускаем репо при ошибке GitHub { echo "Error fetching GitHub releases for $GITHUB_REPO_PATH, skipping this repo."; continue; }
# 3. Итерируем по релизам GitHub в ОБРАТНОМ порядке # 3. Итерируем по релизам GitHub в ОБРАТНОМ порядке
echo "$GITHUB_RELEASES_JSON" | jq -c '.[] | select(.draft == false)' | tac | while IFS= read -r release_json; do echo "$GITHUB_RELEASES_JSON" | jq -c '.[] | select(.draft == false)' | tac | while IFS= read -r release_json; do
TAG_NAME=$(echo "$release_json" | jq -r '.tag_name') TAG_NAME=$(echo "$release_json" | jq -r '.tag_name')
# Проверяем, есть ли уже релиз с таким тегом в Gitea # Проверяем, есть ли уже релиз с таким тегом в Gitea
if echo "$EXISTING_GITEA_TAGS" | grep -q -x -F "$TAG_NAME"; then # -x: точное совпадение строки, -F: строка, а не регэкс if echo "$EXISTING_GITEA_TAGS" | grep -q -x -F "$TAG_NAME"; then
# echo "Release tag $TAG_NAME already exists in Gitea, skipping." continue
continue # Переходим к следующему релизу GitHub
fi fi
echo ">>> Found new release tag in GitHub: $TAG_NAME. Processing..." echo ">>> Found new release tag in GitHub: $TAG_NAME. Processing..."
# Извлекаем данные релиза
RELEASE_NAME=$(echo "$release_json" | jq -r '.name') RELEASE_NAME=$(echo "$release_json" | jq -r '.name')
RELEASE_BODY=$(echo "$release_json" | jq -r '.body // ""') RELEASE_BODY=$(echo "$release_json" | jq -r '.body // ""')
IS_PRERELEASE=$(echo "$release_json" | jq -r '.prerelease') IS_PRERELEASE=$(echo "$release_json" | jq -r '.prerelease')
@@ -142,16 +146,14 @@ pipeline:
CREATE_PAYLOAD=$(jq -n --arg tag "$TAG_NAME" --arg name "$RELEASE_NAME" --arg body "$RELEASE_BODY" --argjson prerelease "$IS_PRERELEASE" \ CREATE_PAYLOAD=$(jq -n --arg tag "$TAG_NAME" --arg name "$RELEASE_NAME" --arg body "$RELEASE_BODY" --argjson prerelease "$IS_PRERELEASE" \
'{tag_name: $tag, name: $name, body: $body, prerelease: $prerelease}') '{tag_name: $tag, name: $name, body: $body, prerelease: $prerelease}')
# Используем --fail для обработки ошибок создания релиза (например, нет тега)
GITEA_NEW_RELEASE_JSON=$(curl -sf --fail -X POST -H "$GITEA_AUTH_HEADER" -H "Content-Type: application/json" \ GITEA_NEW_RELEASE_JSON=$(curl -sf --fail -X POST -H "$GITEA_AUTH_HEADER" -H "Content-Type: application/json" \
-d "$CREATE_PAYLOAD" \ -d "$CREATE_PAYLOAD" \
"${GITEA_API_URL}/repos/${GITEA_REPO_PATH}/releases") "${GITEA_API_URL}/repos/${GITEA_REPO_PATH}/releases")
if [ $? -ne 0 ]; then if [ $? -ne 0 ]; then
echo "Error creating release $TAG_NAME in Gitea. Maybe the tag '$TAG_NAME' is not synced yet or another issue occurred. Skipping this release." echo "Error creating release $TAG_NAME in Gitea for repo $GITEA_REPO_PATH. Check if tag exists in Gitea Git repo and token permissions. Skipping."
continue # Пропускаем этот релиз, попробуем в следующий раз continue
fi fi
GITEA_RELEASE_ID=$(echo "$GITEA_NEW_RELEASE_JSON" | jq -r '.id') GITEA_RELEASE_ID=$(echo "$GITEA_NEW_RELEASE_JSON" | jq -r '.id')
echo "Gitea release created with ID: $GITEA_RELEASE_ID" echo "Gitea release created with ID: $GITEA_RELEASE_ID"
@@ -161,27 +163,20 @@ pipeline:
echo "$ASSETS" | while IFS= read -r asset_json; do echo "$ASSETS" | while IFS= read -r asset_json; do
ASSET_NAME=$(echo "$asset_json" | jq -r '.name') ASSET_NAME=$(echo "$asset_json" | jq -r '.name')
ASSET_URL=$(echo "$asset_json" | jq -r '.browser_download_url') ASSET_URL=$(echo "$asset_json" | jq -r '.browser_download_url')
TMP_ASSET_FILE="asset_${ASSET_NAME}" # Временное имя файла TMP_ASSET_FILE="asset_${ASSET_NAME}"
if download_asset "$ASSET_URL" "$TMP_ASSET_FILE"; then if download_asset "$ASSET_URL" "$TMP_ASSET_FILE"; then
if ! upload_asset "$GITEA_REPO_PATH" "$GITEA_RELEASE_ID" "$TMP_ASSET_FILE"; then if ! upload_asset "$GITEA_REPO_PATH" "$GITEA_RELEASE_ID" "$TMP_ASSET_FILE"; then
((UPLOAD_FAILED_COUNT++)) ((UPLOAD_FAILED_COUNT++))
# Оставляем временный файл при ошибке загрузки для анализа
fi fi
else else
echo "Skipping asset $ASSET_NAME due to download error." echo "Skipping asset $ASSET_NAME due to download error."
((UPLOAD_FAILED_COUNT++)) ((UPLOAD_FAILED_COUNT++))
fi fi
done done
else else
echo "No assets found for release $TAG_NAME." echo "No assets found for release $TAG_NAME."
fi fi
if [ $UPLOAD_FAILED_COUNT -eq 0 ]; then echo "Successfully processed release $TAG_NAME with all assets."; else echo "Processed release $TAG_NAME, but $UPLOAD_FAILED_COUNT asset(s) failed to download or upload."; fi
if [ $UPLOAD_FAILED_COUNT -eq 0 ]; then
echo "Successfully processed release $TAG_NAME with all assets."
else
echo "Processed release $TAG_NAME, but $UPLOAD_FAILED_COUNT asset(s) failed to download or upload."
fi
done # Конец цикла по релизам GitHub done # Конец цикла по релизам GitHub