diff --git a/.woodpecker.yml b/.woodpecker.yml index ec6b879..8efae4d 100644 --- a/.woodpecker.yml +++ b/.woodpecker.yml @@ -8,12 +8,17 @@ trigger: pipeline: sync_releases: image: alpine/git # Базовый образ с git - secrets: [ gitea_url, gitea_token, github_token ] # Подключаем секреты + # Убираем gitea_url из секретов, но оставляем gitea_token! + secrets: [ gitea_token, github_token ] environment: - # Передаем секреты и имя файла в окружение контейнера - GITEA_URL: ${GITEA_URL} - GITEA_TOKEN: ${GITEA_TOKEN} - GITHUB_TOKEN: ${GITHUB_TOKEN} # Может быть пустым, если не используется + # GITEA_URL теперь берется из окружения, предоставленного Woodpecker + # Мы просто используем ее напрямую в скрипте, если она доступна, + # или можно явно присвоить для ясности: + # SCRIPT_GITEA_URL: ${WOODPECKER_GITEA_URL} # Явное присваивание для скрипта + + # Передаем нужные секреты и имя файла + GITEA_TOKEN: ${GITEA_TOKEN} # Этот секрет все еще НУЖЕН! + GITHUB_TOKEN: ${GITHUB_TOKEN} # Опционально, но рекомендуется REPO_LIST_FILE: repos_to_sync.txt # Имя файла со списком репозиториев commands: # 1. Установка зависимостей (curl и jq) @@ -23,28 +28,37 @@ pipeline: - | #!/bin/bash set -e # Останавливаться при ошибках - # set -x # Для отладки можно раскомментировать + # set -x # Для отладки echo "Starting release sync..." # --- Конфигурация --- - REPO_FILE="${REPO_LIST_FILE:-repos_to_sync.txt}" # Используем переменную окружения или дефолтное имя + REPO_FILE="${REPO_LIST_FILE:-repos_to_sync.txt}" - # Проверка наличия файла репозиториев - if [ ! -f "$REPO_FILE" ]; then - echo "Error: Repository list file '$REPO_FILE' not found!" + # Используем переменную WOODPECKER_GITEA_URL из окружения шага + # Если ее нет, скрипт завершится с ошибкой ниже + CURRENT_GITEA_URL="${WOODPECKER_GITEA_URL}" + + # Проверка наличия GITEA_URL (полученного из WOODPECKER_GITEA_URL) + if [ -z "$CURRENT_GITEA_URL" ]; then + echo "Error: GITEA_URL (from WOODPECKER_GITEA_URL) is not set in the environment!" exit 1 fi - # Проверка наличия GITEA_TOKEN + # Проверка наличия GITEA_TOKEN (из секрета) if [ -z "$GITEA_TOKEN" ]; then echo "Error: GITEA_TOKEN secret is not set!" exit 1 fi + echo "Using Gitea URL: $CURRENT_GITEA_URL" + # Заголовок авторизации для Gitea GITEA_AUTH_HEADER="Authorization: token ${GITEA_TOKEN}" - GITEA_API_URL="${GITEA_URL}/api/v1" + # Убираем /api/v1 из базового URL, если он там есть, и добавляем снова + GITEA_API_URL="$(echo ${CURRENT_GITEA_URL} | sed 's|/api/v1$||; s|/*$||')/api/v1" + echo "Using Gitea API URL: $GITEA_API_URL" + # Заголовок авторизации для GitHub (если токен есть) GITHUB_AUTH_HEADER="" @@ -72,30 +86,26 @@ pipeline: local filename="$3" echo "Uploading asset: $filename to Gitea release ID $release_id" UPLOAD_URL="${GITEA_API_URL}/repos/${gitea_repo_path}/releases/${release_id}/assets?name=$(basename "$filename")" - # Используем --fail для curl, чтобы он возвращал ненулевой код при HTTP ошибках > 400 curl -sf --fail -X POST -H "$GITEA_AUTH_HEADER" -H "Content-Type: application/octet-stream" --data-binary "@$filename" "$UPLOAD_URL" if [ $? -ne 0 ]; then echo "Error uploading asset: $filename" - # Оставляем файл для возможного анализа при ошибке return 1 else - rm "$filename" # Удаляем локальный файл после успешной загрузки + rm "$filename" return 0 fi } - # --- Основной цикл по репозиториям из файла --- + # --- Основной цикл по репозиториям из файла (без изменений) --- + if [ ! -f "$REPO_FILE" ]; then + echo "Error: Repository list file '$REPO_FILE' not found!" + exit 1 + fi echo "Reading repository list from $REPO_FILE" - while IFS= read -r repo_pair || [[ -n "$repo_pair" ]]; do # Читаем строки из файла - - # Пропускаем пустые строки и комментарии - if [[ -z "$repo_pair" || "$repo_pair" == \#* ]]; then - continue - fi - - # Проверяем формат строки + while IFS= read -r repo_pair || [[ -n "$repo_pair" ]]; do + if [[ -z "$repo_pair" || "$repo_pair" == \#* ]]; then continue; fi if ! echo "$repo_pair" | grep -q ':'; then - echo "Warning: Skipping invalid line in $REPO_FILE: $repo_pair (format should be github/repo:gitea/repo)" + echo "Warning: Skipping invalid line in $REPO_FILE: $repo_pair" continue fi @@ -107,31 +117,25 @@ pipeline: # 1. Получаем существующие теги релизов из Gitea echo "Fetching existing Gitea releases for $GITEA_REPO_PATH..." - # Используем --fail, чтобы прервать пайплайн, если Gitea недоступен или репо нет GITEA_RELEASES_JSON=$(curl -sf --fail -H "$GITEA_AUTH_HEADER" "${GITEA_API_URL}/repos/${GITEA_REPO_PATH}/releases") || \ - { echo "Error fetching Gitea releases for $GITEA_REPO_PATH, stopping sync."; exit 1; } + { echo "Error fetching Gitea releases for $GITEA_REPO_PATH. Does the repo exist and token have read access?"; continue; } # Пропускаем репо при ошибке Gitea EXISTING_GITEA_TAGS=$(echo "$GITEA_RELEASES_JSON" | jq -r '.[].tag_name') - # echo "Found Gitea tags: $EXISTING_GITEA_TAGS" # Можно включить для отладки - # 2. Получаем последние релизы из GitHub (например, 20 последних для большей надежности) + # 2. Получаем последние релизы из GitHub echo "Fetching latest GitHub releases for $GITHUB_REPO_PATH..." - # Используем --fail для обработки ошибок GitHub API GITHUB_RELEASES_JSON=$(curl -sf --fail -H "$GITHUB_AUTH_HEADER" "${GITHUB_API_URL}/repos/${GITHUB_REPO_PATH}/releases?per_page=20") || \ - { echo "Error fetching GitHub releases for $GITHUB_REPO_PATH, skipping this repo."; continue; } # Пропускаем репо при ошибке GitHub + { echo "Error fetching GitHub releases for $GITHUB_REPO_PATH, skipping this repo."; continue; } # 3. Итерируем по релизам GitHub в ОБРАТНОМ порядке echo "$GITHUB_RELEASES_JSON" | jq -c '.[] | select(.draft == false)' | tac | while IFS= read -r release_json; do TAG_NAME=$(echo "$release_json" | jq -r '.tag_name') # Проверяем, есть ли уже релиз с таким тегом в Gitea - if echo "$EXISTING_GITEA_TAGS" | grep -q -x -F "$TAG_NAME"; then # -x: точное совпадение строки, -F: строка, а не регэкс - # echo "Release tag $TAG_NAME already exists in Gitea, skipping." - continue # Переходим к следующему релизу GitHub + if echo "$EXISTING_GITEA_TAGS" | grep -q -x -F "$TAG_NAME"; then + continue fi echo ">>> Found new release tag in GitHub: $TAG_NAME. Processing..." - - # Извлекаем данные релиза RELEASE_NAME=$(echo "$release_json" | jq -r '.name') RELEASE_BODY=$(echo "$release_json" | jq -r '.body // ""') IS_PRERELEASE=$(echo "$release_json" | jq -r '.prerelease') @@ -142,16 +146,14 @@ pipeline: CREATE_PAYLOAD=$(jq -n --arg tag "$TAG_NAME" --arg name "$RELEASE_NAME" --arg body "$RELEASE_BODY" --argjson prerelease "$IS_PRERELEASE" \ '{tag_name: $tag, name: $name, body: $body, prerelease: $prerelease}') - # Используем --fail для обработки ошибок создания релиза (например, нет тега) GITEA_NEW_RELEASE_JSON=$(curl -sf --fail -X POST -H "$GITEA_AUTH_HEADER" -H "Content-Type: application/json" \ -d "$CREATE_PAYLOAD" \ "${GITEA_API_URL}/repos/${GITEA_REPO_PATH}/releases") if [ $? -ne 0 ]; then - echo "Error creating release $TAG_NAME in Gitea. Maybe the tag '$TAG_NAME' is not synced yet or another issue occurred. Skipping this release." - continue # Пропускаем этот релиз, попробуем в следующий раз + echo "Error creating release $TAG_NAME in Gitea for repo $GITEA_REPO_PATH. Check if tag exists in Gitea Git repo and token permissions. Skipping." + continue fi - GITEA_RELEASE_ID=$(echo "$GITEA_NEW_RELEASE_JSON" | jq -r '.id') echo "Gitea release created with ID: $GITEA_RELEASE_ID" @@ -161,27 +163,20 @@ pipeline: echo "$ASSETS" | while IFS= read -r asset_json; do ASSET_NAME=$(echo "$asset_json" | jq -r '.name') ASSET_URL=$(echo "$asset_json" | jq -r '.browser_download_url') - TMP_ASSET_FILE="asset_${ASSET_NAME}" # Временное имя файла - + TMP_ASSET_FILE="asset_${ASSET_NAME}" if download_asset "$ASSET_URL" "$TMP_ASSET_FILE"; then if ! upload_asset "$GITEA_REPO_PATH" "$GITEA_RELEASE_ID" "$TMP_ASSET_FILE"; then ((UPLOAD_FAILED_COUNT++)) - # Оставляем временный файл при ошибке загрузки для анализа fi else - echo "Skipping asset $ASSET_NAME due to download error." - ((UPLOAD_FAILED_COUNT++)) + echo "Skipping asset $ASSET_NAME due to download error." + ((UPLOAD_FAILED_COUNT++)) fi done else echo "No assets found for release $TAG_NAME." fi - - if [ $UPLOAD_FAILED_COUNT -eq 0 ]; then - echo "Successfully processed release $TAG_NAME with all assets." - else - echo "Processed release $TAG_NAME, but $UPLOAD_FAILED_COUNT asset(s) failed to download or upload." - fi + if [ $UPLOAD_FAILED_COUNT -eq 0 ]; then echo "Successfully processed release $TAG_NAME with all assets."; else echo "Processed release $TAG_NAME, but $UPLOAD_FAILED_COUNT asset(s) failed to download or upload."; fi done # Конец цикла по релизам GitHub