GitLab在Linux環境中如何優化存儲空間

GitLab在Linux環境中優化存儲空間的方法

1. 清理無用數據與歷史文件

定期執行GitLab提供的Rake任務，清理不再需要的數據是釋放存儲的關鍵。常用命令包括：

• 清理未引用的LFS文件：sudo gitlab-rake gitlab:cleanup:orphan_lfs_files（直接刪除孤立的大文件），或先檢查再刪除（DRY_RUN=false確認效果）；
• 清理項目上傳文件：sudo gitlab-rake gitlab:cleanup:project_uploads（清理本地無記錄的上傳文件，若使用對象存儲需先遷移）；
• 清理孤立的作業產物：sudo gitlab-rake gitlab:cleanup:orphan_job_artifact_files（刪除未關聯作業的產物文件）；
• 清理舊備份：sudo gitlab-rake gitlab:backup:cleanup（刪除超過保留期限的備份文件）；
• 清理舊CI/CD作業：sudo gitlab-rake gitlab:ci:cleanup（刪除超過保留期限的CI/CD運行記錄）。
  這些任務需在非工作時間執行，避免影響團隊協作。執行前建議備份數據，防止誤刪。

2. 優化Git倉庫存儲

• 使用Git LFS管理大文件：對于二進制文件（如PSD、視頻、安裝包等），通過Git LFS將大文件存儲在獨立區域，避免主倉庫膨脹。安裝后，用git lfs track "*.psd"標記文件類型，提交并推送至遠程倉庫即可生效。
• 去除歷史中的大文件：若倉庫歷史中存在已刪除的大文件，使用git-filter-repo工具徹底清除。步驟：安裝工具→運行git filter-repo --path 大文件路徑 --invert-paths→強制推送（git push origin --force）。

3. 調整GitLab配置參數

修改/etc/gitlab/gitlab.rb配置文件，優化資源使用：

• 啟用壓縮：設置gitlab_rails['git_data_compression'] = true，減少倉庫文件的存儲占用；
• 調整PostgreSQL參數：優化數據庫性能以減少存儲壓力，例如postgresql['shared_buffers'] = "25% of total RAM"（占總內存25%）、postgresql['work_mem'] = "4MB"（每個查詢的內存分配）、postgresql['maintenance_work_mem'] = "512MB"（索引維護內存）；
• 限制并發進程：減少Unicorn和Sidekiq的并發數（如unicorn['worker_processes'] = 3、sidekiq['concurrency'] = 10），降低內存占用；
• 啟用緩存：設置redis['enable'] = true，利用Redis緩存會話和數據，提升訪問效率。

4. 使用外部存儲解決方案

將非核心數據遷移至外部存儲，減輕本地磁盤壓力：

• 對象存儲：配置Amazon S3、MinIO等對象存儲，用于存儲大附件、備份文件、容器鏡像等。修改gitlab.rb中的gitlab_rails['object_store']['enabled'] = true及相關參數（如bucket、access_key）；
• 遠程文件系統：將Git數據目錄（默認/var/opt/gitlab/git-data）遷移至單獨分區或NFS共享目錄，修改gitlab.rb中的git_data_dir參數指向新路徑。

5. 優化數據庫性能

數據庫是GitLab的核心組件，優化其配置可減少存儲占用：

• 升級PostgreSQL：使用最新穩定版本的PostgreSQL，獲取性能改進和存儲優化特性；
• 定期維護：執行VACUUM和ANALYZE命令，清理無用數據并更新統計信息，提升查詢效率；
• 調整連接池：根據并發用戶數調整postgresql['max_connections']（建議為并發用戶的2倍），避免過多連接占用內存。

6. 監控與定期維護

• 監控存儲使用：使用Prometheus+Grafana、Zabbix等工具實時監控磁盤空間、內存、CPU使用情況，設置閾值告警（如磁盤空間剩余10%時報警）；
• 定期審查：每周檢查存儲使用趨勢，清理過期數據（如日志、備份、舊作業），確保系統高效運行。