ترکیب کردن دستورات

در دنیای یونیکس، قدرت واقعی زمانی آشکار می‌شود که بتوانید ابزارهای ساده را به‌صورت ترکیبی و زنجیره‌ای به کار بگیرید تا کارهای پیچیده را انجام دهید. این فصل به سه مفهوم کلیدی در ترکیب دستورات می‌پردازد: xargs برای ساخت و اجرای دستورات از روی ورودی، tee برای انشعاب جریان داده، و استراتژی‌های پیشرفته‌تر برای ترکیب دستورات با Pipeها.

xargs (Execute Arguments)

دستور xargs (مخفف X ARGument Standard) یکی از قدرتمندترین و در عین حال ظریف‌ترین ابزارهای خط فرمان است. وظیفه‌ی اصلی xargs این است که ورودی استاندارد (stdin) را بگیرد، آن را به بخش‌هایی (آرگومان‌ها) تقسیم کند و این آرگومان‌ها را به‌عنوان پارامتر به یک دستور دیگر بدهد و آن را اجرا کند.

در بسیاری از موارد، دستورات خروجی خود را به‌صورت خط به خط (یا با فاصله) تولید می‌کنند، اما دستور دیگری ممکن است نتواند این ورودی را مستقیماً از stdin بخواند و نیاز به آرگومان در خط فرمان داشته باشد. xargs این شکاف را پر می‌کند.

ساختار کلی:

command1 | xargs [option] command2

نحوه‌ی کار xargs

xargs ورودی خود را از stdin می‌خواند، آن را به آرگومان‌های جداگانه تبدیل می‌کند (به‌طور پیش‌فرض بر اساس فاصله یا خط جدید) و سپس دستور مشخص‌شده را با آن آرگومان‌ها اجرا می‌کند.

مثال ساده:

echo "file1 file2 file3" | xargs rm

این دستور معادل اجرای rm file1 file2 file3 است.

گزینه‌های اصلی xargs

مثال‌های پایه

1. حذف همه‌ی فایل‌های .tmp:

    

   find . -name "*.tmp" | xargs rm

   کپی

   (معادل rm کردن تمام فایل‌های پیدا شده)

2. ایجاد دایرکتوری‌های لیست شده در یک فایل:

    

   cat dirs.txt | xargs mkdir

   کپی

   dirs.txt شامل نام دایرکتوری‌هاست.

3. استفاده از xargs با echo برای نمایش آرگومان‌ها:

    

   echo "one two three" | xargs echo
   # خروجی: one two three

   کپی

4. محدود کردن تعداد آرگومان‌ها در هر بار (با -n):

    

   echo "1 2 3 4 5 6" | xargs -n 2 echo
   # خروجی:
   # 1 2
   # 3 4
   # 5 6

   کپی

   این قابلیت زمانی مفید است که دستور شما نمی‌تواند تعداد زیادی آرگومان را یکجا بپذیرد.

5. جایگزینی آرگومان‌ها در یک دستور با -I:

    

   echo "file1 file2" | xargs -I {} cp {} /backup/

   کپی

   {} به‌عنوان جایگزین برای هر آرگومان عمل می‌کند. این دستور معادل cp file1 /backup/ و سپس cp file2 /backup/ است.

6. استفاده از xargs برای اجرای دستورات با تأیید (با -p):

    

   find . -name "*.log" | xargs -p rm

   کپی

   قبل از هر بار اجرای rm، از شما تأیید می‌خواهد.

7. نمایش دستور در حال اجرا (با -t):

    

   echo "file1 file2" | xargs -t rm
   # خروجی: rm file1 file2

   کپی

۱. xargs و find: ترکیبی قدرتمند

یکی از رایج‌ترین کاربردهای xargs، ترکیب آن با find برای اجرای دستورات بر روی فایل‌های پیدا شده است.

مثال‌ها:

1. حذف فایل‌های *.tmp با مدیریت نام‌های دارای فاصله:

    

   find . -name "*.tmp" -print0 | xargs -0 rm

   کپی

   • -print0: فایل‌ها را با کاراکتر null جدا می‌کند (به‌جای خط جدید).

   • -0: xargs را با جداکننده‌ی null تنظیم می‌کند.
     این روش برای فایل‌هایی که نام آن‌ها شامل فاصله یا کاراکترهای خاص است، ضروری است.

2. تغییر مجوزهای فایل‌ها:

    

   find . -type f -name "*.sh" -print0 | xargs -0 chmod +x

   کپی

   تمام فایل‌های .sh را اجرایی می‌کند.

3. جستجوی یک متن در فایل‌ها (با grep):

    

   find . -name "*.py" -print0 | xargs -0 grep "TODO"

   کپی

4. استخراج محتوای فایل‌های فشرده:

    

   find . -name "*.zip" -print0 | xargs -0 -I {} unzip {} -d /extracted/

   کپی

5. کپی فایل‌ها به یک دایرکتوری خاص (با -I):

    

   find . -name "*.pdf" -print0 | xargs -0 -I {} cp {} ~/Documents/

   کپی

۲. xargs در ترکیب با grep و sed

xargs می‌تواند خروجی grep را به دستورات دیگری مانند sed و awk بدهد تا تغییرات گسترده‌ای روی فایل‌ها اعمال شود.

مثال‌ها:

1. جایگزینی یک متن در تمام فایل‌های .txt:

    

   grep -l "old_text" *.txt | xargs sed -i 's/old_text/new_text/g'

   کپی

   • grep -l: فقط نام فایل‌های حاوی old_text را نمایش می‌دهد.

   • xargs: این نام‌ها را به sed -i می‌دهد تا جایگزینی را انجام دهد.

2. حذف خطوط خالی از تمام فایل‌های .log:

    

   find . -name "*.log" | xargs sed -i '/^$/d'

   کپی

۳. xargs با -P برای اجرای موازی

گزینه‌ی -P به xargs اجازه می‌دهد که چندین فرآیند را به‌صورت همزمان (Parallel) اجرا کند. این قابلیت برای پردازش حجم عظیم داده و افزایش سرعت بسیار مفید است.

مثال‌ها:

1. فشرده‌سازی همزمان چند فایل (با gzip):

    

   ls *.log | xargs -P 4 -I {} gzip {}

   کپی

   ۴ فایل به‌صورت همزمان فشرده می‌شوند.

2. دانلود همزمان چند فایل (با wget):

    

   cat urls.txt | xargs -P 4 -I {} wget {}

   کپی

   ۴ دانلود به‌صورت همزمان انجام می‌شود.

3. پردازش همزمان فایل‌ها (با یک اسکریپت):

    

   find . -name "*.data" | xargs -P 2 -I {} ./process.sh {}

   کپی

tee (بازبینی در این بخش)

دستور tee (که پیش‌تر در بخش Redirection معرفی شد) برای انشعاب (Branching) جریان داده استفاده می‌شود. به عبارت دیگر، tee ورودی خود را هم به خروجی استاندارد (stdout) می‌فرستد و هم در یک یا چند فایل می‌نویسد.

ساختار کلی:

command | tee [option] [file...]

گزینه‌های اصلی tee

مثال‌ها

1. ذخیره‌ی خروجی ls در یک فایل و مشاهده‌ی آن روی صفحه:

    

   ls -la | tee filelist.txt

   کپی

   خروجی هم روی صفحه دیده می‌شود و هم در filelist.txt ذخیره می‌شود.

2. نوشتن در چند فایل به‌طور همزمان:

    

   echo "Hello World" | tee file1.txt file2.txt file3.txt

   کپی

3. افزودن به یک فایل (با -a):

    

   echo "New line" | tee -a log.txt

   کپی

4. استفاده با sudo برای نوشتن در فایل‌های محافظت‌شده:

    

   echo "new_config" | sudo tee /etc/myapp/config.conf

   کپی

   این روش استاندارد و امن‌تر از sudo echo > است.

5. ذخیره‌ی خروجی و خطاها با استفاده از tee (با 2>&1):

    

   command 2>&1 | tee output.log

   کپی

6. ذخیره‌ی خروجی در یک فایل و ارسال به دستور بعدی (Pipeline):

    

   dmesg | tee kernel.log | grep "error"

   کپی

   خروجی dmesg هم در kernel.log ذخیره می‌شود، هم به grep فرستاده می‌شود.

Combining Commands with Pipes

استفاده از Pipeها (|) برای ترکیب دستورات، قلب فلسفه‌ی یونیکس است. با ترکیب xargs و tee با سایر ابزارها، می‌توانید گردش‌های کاری بسیار قدرتمندی ایجاد کنید.

۱. الگوی استاندارد: command1 | command2 | command3

این الگوی ساده و پرکاربرد، خروجی دستور اول را به دستور دوم و خروجی دستور دوم را به دستور سوم می‌دهد.

مثال:

ps aux | grep "python" | awk '{ print $2 }' | xargs kill -9

• ps aux: لیست فرآیندها.

• grep "python": فیلتر فرآیندهای پایتون.

• awk '{ print $2 }': استخراج PIDها.

• xargs kill -9: کشتن همه‌ی فرآیندهای پایتون.

۲. الگوی ذخیره‌سازی میانی با tee

زمانی که می‌خواهید خروجی یک مرحله را هم ذخیره کنید و هم به مرحله‌ی بعد بفرستید، از tee استفاده کنید.

مثال:

cat log.txt | tee raw.log | grep "ERROR" | tee errors.log | awk '{ print $1 }' > ip_list.txt

• cat log.txt: خواندن لاگ.

• tee raw.log: ذخیره‌ی نسخه‌ی کامل.

• grep "ERROR": فیلتر خطاها.

• tee errors.log: ذخیره‌ی خطاها.

• awk '{ print $1 }': استخراج آیپی‌ها (فیلد اول).

• > ip_list.txt: ذخیره‌ی آیپی‌ها.

۳. الگوی find | xargs برای پردازش فایل‌ها

این یکی از رایج‌ترین و قدرتمندترین ترکیب‌ها در سیستم‌های یونیکس است.

مثال‌ها:

1. پیدا کردن و حذف فایل‌های قدیمی (بیش از ۳۰ روز):

    

   find /var/log -name "*.log" -mtime +30 -print0 | xargs -0 rm

   کپی

2. پیدا کردن فایل‌های بزرگ و نمایش آن‌ها به‌صورت مرتب:

    

   find . -type f -exec du -h {} + | sort -hr | head -10

   کپی

   (این روش از xargs استفاده نمی‌کند، اما ترکیب find و du و sort را نشان می‌دهد)

3. جستجو و جایگزینی در چند فایل به‌صورت ایمن (با ساخت بکاپ):

    

   grep -l "old" *.txt | xargs -I {} sed -i.bak 's/old/new/g' {}

   کپی

4. پیدا کردن فایل‌های حاوی یک متن و نمایش آن‌ها با less (صفحه‌به‌صفحه):

    

   find . -name "*.py" -print0 | xargs -0 grep -l "TODO" | xargs less

   کپی

۴. الگوی cat | ... | xargs برای تولید دستورات

مثال:

cat urls.txt | xargs -I {} echo "wget -O output_{}.html {}" | 

• cat urls.txt: خواندن لیست URLها.

• xargs -I {} echo "...": ساخت دستورات wget.

• bash: اجرای دستورات ساخته شده.

استراتژی‌های پیشرفته‌ی ترکیب دستورات

۱. استفاده از && و || در کنار xargs

می‌توانید با xargs -I {} دستورات شرطی بسازید:

find . -name "*.sh" -print0 | xargs -0 -I {} sh -c 'chmod +x "{}" && echo "Made executable: {}"'

۲. استفاده از xargs با -n برای پردازش دسته‌ای

زمانی که دستور شما نمی‌تواند همه‌ی آرگومان‌ها را یکجا بپذیرد (مثلاً به دلیل محدودیت طول خط فرمان)، از -n استفاده کنید:

ls *.jpg | xargs -n 10 convert -resize 800x600 {} thumbnails/

هر بار ۱۰ فایل را پردازش می‌کند.

۳. ترکیب tee با xargs برای نظارت و پردازش

tail -f log.txt | tee /dev/tty | grep "ERROR" | xargs -I {} echo "ALERT: {}" >> alerts.txt

• tail -f: دنبال کردن لاگ.

• tee /dev/tty: نمایش همزمان روی صفحه.

• grep "ERROR": فیلتر خطاها.

• xargs: ساخت هشدار و ذخیره در alerts.txt.

۴. استفاده از xargs برای موازی‌سازی پردازش داده‌ها

seq 1 100 | xargs -P 10 -I {} echo "Processing {}", {}

۱۰ فرآیند همزمان، اعداد ۱ تا ۱۰۰ را پردازش می‌کنند.

خلاصه و نکات کلیدی

• xargs برای تبدیل stdin به آرگومان‌های خط فرمان استفاده می‌شود. برای کار با فایل‌هایی که نام آن‌ها شامل فاصله است، حتماً از -print0 و -0 استفاده کنید.

• tee برای انشعاب جریان داده (نمایش و ذخیره‌سازی همزمان) استفاده می‌شود. برای نوشتن در فایل‌های محافظت‌شده، آن را با sudo اجرا کنید.

• ترکیب find | xargs یکی از قدرتمندترین الگوها برای پردازش دسته‌جمعی فایل‌هاست.

• استفاده از -P در xargs برای افزایش سرعت با اجرای موازی بسیار مفید است.

• ترتیب و نوع جداکننده‌ها در xargs بسیار مهم است. همیشه از -0 با find -print0 استفاده کنید تا از مشکلات نام فایل‌ها با فاصله جلوگیری کنید.

• xargs یک ابزار کم‌مصرف و بسیار سریع است که در مقایسه با حلقه‌های while در shell، کارایی بسیار بالاتری دارد.

مقایسه‌ی xargs با حلقه‌های while

گاهی می‌توان به‌جای xargs از حلقه‌های while استفاده کرد:

# با xargs
find . -name "*.txt" | xargs -I {} cp {} /backup/

# با while
find . -name "*.txt" | while read file; do cp "$file" /backup/; done

برای دستورات ساده، xargs بسیار سریع‌تر است. برای منطق پیچیده، حلقه‌ی while مناسب‌تر است.