نگهداری داده و لاگ: چه چیزی، چقدر و تا کِی بماند

مدت نگهداری داده را بر اساس نوع، تعیین کنید: لاگ دسترسی، بکاپ، داده مشتری و سابقه صورتحساب هرکدام دوره و محل ذخیره جداگانه می‌خواهند.

۷ دقیقه به‌روزرسانی ۲۷ آبان ۱۴۰۵

دنبال یک عدد می‌گردید. کسی از شما پرسیده «لاگ‌ها را چند وقت نگه می‌داریم؟» و شما نمی‌دانید بگویید ۳۰ روز یا ۹۰ روز یا «تا وقتی فضا پر شود». یا سرویسی لغو شده و مشتری می‌پرسد داده‌اش کِی پاک می‌شود و شما مطمئن نیستید اصلاً پاک می‌شود یا نه. این مقاله همان عددها و همان تعریف‌ها را می‌دهد؛ نه آموزش پیکربندی از صفر.

یک نکته را از اول بگویم: «مدت نگهداری داده» یک عدد نیست. حداقل شش دسته داده روی سرور شما هست که هرکدام دوره نگهداری متفاوتی می‌خواهند و اگر همه را یک‌جا با یک سیاست ببندید، یا هزینه ذخیره‌سازی‌تان چند برابر می‌شود یا در یک بازرسی گیر می‌افتید.

شش دسته داده و دوره‌ای که واقعاً لازم دارند

این جدول را با تیم خودتان مرور کنید. ستون آخر مهم‌ترین است: جایی که داده باید واقعاً حذف شود، نه فقط از دید پنهان بماند.

دستهدوره پیشنهادیمحل ذخیرهنکته حذف
لاگ دسترسی وب (access log)۱۴ تا ۳۰ روزدیسک محلی یا سرویس لاگ متمرکزچرخش خودکار با logrotate
لاگ خطا و لاگ اپلیکیشن۳۰ تا ۹۰ روزدیسک محلی + آرشیو سردفشرده‌سازی با gzip اجباری
لاگ احراز هویت و SSH۹۰ روز تا یک سالفقط‌خواندنی، جدا از سرور اصلیبدون حذف تا پایان دوره
بکاپ دیتابیس۷ روز روزانه + ۴ هفته هفتگی + ۱۲ ماه ماهانهخارج از سرور اصلیحذف نسخه‌های قدیمی طبق زمان‌بندی
داده مشتری (پروفایل، سفارش، تیکت)تا پایان قرارداد + دوره قانونی پس از آندیتابیس اصلیحذف واقعی پس از پایان دوره
سابقه صورتحساب و پرداختمعمولاً چند سال، طبق الزام حسابداریسیستم مالیمعمولاً از حذف معاف است

ردیف سوم را جدی بگیرید. لاگ SSH تنها جایی است که بعد از نفوذ می‌توانید بازسازی کنید چه اتفاقی افتاده. اگر ۱۴ روزه پاکش کنید و نفوذ سه هفته پیش رخ داده باشد، هیچ مدرکی ندارید. این تنها دسته‌ای است که به‌سمت دوره بلندتر می‌روم، نه کوتاه‌تر.

چرا لاگ دسترسی را بیشتر از ۳۰ روز نگه نمی‌دارم

یک سرور وب با ترافیک متوسط روزانه چند صد مگابایت لاگ تولید می‌کند. سیصد روز نگه داشتنش یعنی ده‌ها گیگابایت که هیچ‌کس نمی‌خواند، ولی هر جست‌وجو روی آن کند است و هر بکاپ را سنگین‌تر می‌کند. بدتر: اگر آن لاگ‌ها روی همان دیسکی باشند که دیتابیس رویش است، پر شدن دیسک باعث خطای No space left on device در MySQL می‌شود و سایت از دسترس خارج می‌شود. علت خرابی، خود لاگ نیست؛ نبودِ سیاست چرخش است.

پیکربندی‌ای که تقریباً روی هر سروری می‌گذارم این است:

/var/log/nginx/*.log {
    daily
    rotate 30
    compress
    delaycompress
    missingok
    notifempty
    sharedscripts
    postrotate
        systemctl reload nginx > /dev/null 2>&1 || true
    endscript
}

rotate 30 با daily یعنی سی نسخه فشرده، حدود یک ماه. delaycompress را حذف نکنید؛ بدون آن، فایل تازه‌چرخیده هم فشرده می‌شود و ابزارهایی که هنوز به آن نوشته‌اند خطا می‌دهند. با logrotate -d /etc/logrotate.d/nginx می‌توانید قبل از اعمال، خروجی خشک را ببینید.

این‌جا اشتباه می‌کنند

خطای رایج این است که rotate 30 را با «۳۰ روز نگهداری» یکی می‌گیرند، در حالی که اگر weekly باشد سی هفته است. من دیده‌ام تیمی فکر می‌کرد لاگ‌ها یک ماهه پاک می‌شوند و بعد از شش ماه متوجه شد دیسک پر شده. نشانه‌اش هم واضح است: df -h روی پارتیشن /var درصد بالایی نشان می‌دهد ولی du -sh /var/log عدد کوچکی می‌دهد، چون فایل‌های حذف‌شده هنوز توسط پروسه باز نگه داشته شده‌اند. با lsof +L1 می‌بینید کدام پروسه فایل پاک‌شده را در دست دارد؛ راه‌حل، ری‌استارت همان سرویس است، نه پاک کردن دستی.

پس از لغو سرویس چه چیزی و تا کِی می‌ماند

این بخشی است که بیشترین سوءتفاهم را دارد. وقتی سرویس میزبانی لغو می‌شود، سه چیز جدا از هم اتفاق می‌افتد و باید برای هر سه، عدد مشخص داشته باشید.

  1. دسترسی: بلافاصله قطع می‌شود. سایت و پنل خاموش می‌شوند.
  2. نگهداری موقت: داده برای مدتی روی دیسک می‌ماند تا اگر مشتری برگشت، بازیابی ممکن باشد. این دوره را در قرارداد بنویسید؛ عدد رایج بین چند روز تا چند هفته است.
  3. حذف نهایی: پس از پایان دوره، دیسک پاک و بازنویسی می‌شود. بکاپ‌های خودکار هم باید در همین مرحله حذف شوند، وگرنه داده در بکاپ زنده می‌ماند.

مشکلی که در عمل پیش می‌آید این است که مرحله سوم در مستندات نوشته می‌شود ولی در فرایند اجرایی گم می‌شود. نتیجه‌اش را در بازرسی می‌بینید: مشتری داده‌اش را حذف کرده، ولی نسخه پشتیبان شش ماه پیش هنوز روی یک سرور آرشیو نشسته است. اگر می‌خواهید مطمئن شوید، فهرست بکاپ‌ها را با فهرست مشتریان فعال مقایسه کنید؛ هر بکاپی که صاحبش دیگر مشتری نیست، باید در صف حذف باشد.

یک استثنا هم هست: داده‌های مالی و صورتحساب معمولاً از این چرخه بیرون‌اند و طبق الزام حسابداری سال‌ها می‌مانند. این را از قبل به مشتری بگویید تا فکر نکند «حذف کامل» یعنی همه‌چیز.

داده‌ای که نباید اصلاً ذخیره شود

قبل از تعیین مدت نگهداری، بپرسید آیا این داده باید وجود داشته باشد. لاگ‌های دسترسی معمولاً آدرس IP کامل، مسیر درخواست و User-Agent را ثبت می‌کنند. اگر در همان لاگ، توکن ورود یا رمز در query string باشد، شما رمزها را در فایلی ذخیره کرده‌اید که همه اعضای تیم می‌توانند بخوانند. یک بار دیده‌ام ?token=... در لاگ nginx بود و کسی متوجه نشده بود.

دو کار سریع: اول، پارامترهای حساس را از لاگ حذف کنید یا مسیرهای حساس را کلاً لاگ نکنید. دوم، سطح دسترسی فایل‌های لاگ را ببندید. راهنمای تنظیم سطح دسترسی امن فایل‌ها در لینوکس دقیقاً همین را پوشش می‌دهد؛ خلاصه‌اش این است که لاگ‌ها نباید 644 با مالکیت کاربر وب باشند.

اگر سایت وردپرسی دارید، لاگ‌های افزونه‌ها و فرم‌های تماس هم به این فهرست اضافه می‌شوند. فرم تماس پر از نام و ایمیل و متن پیام است؛ این داده مشتری است، نه لاگ فنی، و باید در همان دسته «داده مشتری» بگذاریدش. برای چارچوب کلی صفحات قانونی و کوکی، راهنمای حریم خصوصی سایت نقطه شروع خوبی است.

سیاست نگهداری داده را کجا بنویسید

یک فایل متنی کوتاه کافی است، به شرطی که سه چیز داشته باشد: نام دسته، مدت، و مسئول حذف. اگر مسئول مشخص نباشد، حذف هیچ‌وقت انجام نمی‌شود. نمونه سطر:

access_log | 30d | logrotate | owner: ops
db_backup  | 7d daily / 12m monthly | backup-job | owner: dba
customer   | contract + 90d | manual review | owner: support-lead

این را در همان جایی نگه دارید که تیم واقعاً نگاه می‌کند، نه در یک ویکی که آخرین بار یک سال پیش باز شده. و هر بار که سرویس جدیدی اضافه می‌کنید، یک سطر به آن اضافه کنید. سیاستی که سرویس جدید را پوشش ندهد، سیاست نیست.

هزینه‌ای که باید بپذیرید

نگهداری کوتاه‌تر یعنی هزینه ذخیره‌سازی کمتر و سطح ریسک پایین‌تر، ولی یعنی وقتی سه هفته بعد مشتری می‌گوید «سفارش من گم شده»، نمی‌توانید لاگ را باز کنید و ثابت کنید چه شد. من در بیشتر موارد ۳۰ روز را انتخاب می‌کنم و برای سرویس‌هایی که تراکنش مالی دارند به ۹۰ روز می‌روم. اگر کسب‌وکارتان در حوزه‌ای است که شکایت و بازپرداخت زیاد دارد، عدد را بالاتر ببرید و هزینه دیسک را بپذیرید. تصمیم درست به این بستگی دارد که کدام درد بیشتر است: دیسک پر، یا نبودِ مدرک.

اگر نگرانی‌تان امنیت خود سرور است نه فقط داده، مسدود کردن IPهای مخرب و بستن دسترسی‌های اضافی را جدا از این بحث ببینید؛ راهنمای مسدودسازی آی پی مخرب و فعال‌سازی احراز هویت دو مرحله‌ای هر دو روی همین اصل کار می‌کنند: کمتر نگه دار، کمتر باز بگذار. برای لایه شبکه هم اگر حمله حجمی به سرور می‌رسد، خدمات امنیت سرورنت گزینه‌ای است که در همین سطح بررسی می‌شود.

پرسش‌های پرتکرار

لاگ‌های سرور را چند وقت یک بار باید پاک کرد؟

لاگ دسترسی وب را ۱۴ تا ۳۰ روز و لاگ خطا را ۳۰ تا ۹۰ روز نگه دارید. لاگ احراز هویت و SSH را کمتر از ۹۰ روز نکنید، چون تنها مدرک بازسازی یک نفوذ همین است. مهم‌تر از عدد، خودکار بودن حذف است؛ اگر دستی پاک می‌کنید، در عمل پاک نمی‌شود.

بعد از لغو سرویس، داده‌ها چه مدت باقی می‌مانند؟

معمولاً یک دوره کوتاه نگهداری موقت برای امکان بازیابی، و بعد حذف نهایی. طول این دوره را باید در قرارداد یا مستندات سرویس ببینید، نه حدس بزنید. داده‌های مالی و صورتحساب معمولاً از این چرخه مستثنا هستند و طبق الزام حسابداری مدت بیشتری می‌مانند.

آیا حذف فایل از سرور یعنی داده واقعاً پاک شده است؟

نه. تا وقتی پروسه‌ای فایل را باز نگه داشته باشد، فضا آزاد نمی‌شود و با lsof +L1 هنوز قابل مشاهده است. در سطح دیسک هم تا بازنویسی نشود، بازیابی ممکن است. برای داده حساس، حذف امن یا رمزنگاری در مبدأ لازم است.

آیا نگهداری داده مشمول قوانین خاصی است؟

بستگی به حوزه کسب‌وکار و محل مشتریان دارد. حداقل کاری که در هر حالتی باید انجام دهید این است که مدت نگهداری هر دسته را مکتوب کنید، به مشتری اطلاع دهید و حذف را واقعاً اجرا کنید. سیاستی که فقط روی کاغذ است، در بازرسی ارزشی ندارد.

قدم بعدی: همین امروز فهرست شش دسته بالا را بردارید و برای هرکدام یک عدد و یک نام مسئول بنویسید. اگر برای بیش از دو دسته نمی‌توانید عدد بدهید، یعنی سیاست نگهداری داده ندارید و فقط فکر می‌کنید دارید.

آیا این مطلب برایتان مفید بود؟