Computer >> Hướng Dẫn Máy Tính >  >> Lập Trình >> Lập Trình Bash

Làm chủ Scripting: Tăng năng suất bằng cách tự động hóa các tác vụ lặp lại

Làm chủ Scripting: Tăng năng suất bằng cách tự động hóa các tác vụ lặp lại

Các nhà phát triển có nhiều kinh nghiệm xây dựng phần mềm chất lượng, chặt chẽ thường tự động hóa hầu hết công việc của họ bằng cách viết script. Các script này bao gồm từ các lệnh alias Bash đơn giản đến các tác vụ cron lặp lại chạy trên máy chủ.

Trong hướng dẫn này, bạn sẽ tìm hiểu về khái niệm scripting, các trường hợp sử dụng phổ biến, cũng như ưu và nhược điểm của việc sử dụng script. Chúng ta cũng sẽ cùng đi qua một vài ví dụ script thực tế để bạn thấy chúng hoạt động như thế nào.

Script là gì?

Script là một tập hợp các hướng dẫn được viết bằng ngôn ngữ scripting (như Bash, Python, JavaScript, v.v.) giúp bạn tự động hóa các tác vụ hoặc kiểm soát các quy trình. Khác với chương trình được biên dịch, script thường được thông dịch, nghĩa là chúng được thực thi trực tiếp bởi môi trường chạy mà không cần biên dịch trước.

Script là công cụ mạnh mẽ để tự động hóa các tác vụ lặp lại, quản lý quy trình làm việc và giải quyết các vấn đề nhỏ (và đôi khi lớn) một cách hiệu quả. Dù bạn là người mới bắt đầu hay nhà phát triển giàu kinh nghiệm, việc hiểu cách viết script sẽ nâng cao năng suất và mở rộng khả năng kỹ thuật của bạn.

Tại sao nên viết Script?

Tôi đã nhắc sơ qua những gì script có thể làm. Bây giờ hãy xem xét các ưu điểm (và thách thức) của chúng để bạn hiểu tại sao chúng lại mạnh mẽ – và khi nào nên sử dụng.

Ưu điểm của Script

  1. Tự động hóa: Script giúp đơn giản hóa các tác vụ lặp lại như xử lý dữ liệu hay quản lý tệp.

  2. Hiệu quả: Chúng tiết kiệm thời gian bằng cách tự động hóa những việc bạn phải làm thủ công.

  3. Giảm lỗi: Script giúp giảm thiểu lỗi do con người nhờ thực thi hướng dẫn nhất quán.

  4. Linh hoạt: Script có thể thích ứng với nhiều loại tác vụ khác nhau chỉ với ít sửa đổi.

  5. Tích hợp: Chúng có thể tích hợp liền mạch với các hệ thống, công cụ hoặc quy trình làm việc khác.

Thách thức khi dùng Script

  1. Hiệu năng: Script có thể chậm hơn chương trình biên dịch do chi phí thông dịch.

  2. Khả năng mở rộng: Chúng không luôn phù hợp cho các tác vụ quy mô lớn hoặc phức tạp cao.

  3. Gỡ lỗi: Debug script đôi khi khó khăn do bản chất động của chúng.

  4. Rủi ro bảo mật: Script viết kém có thể làm lộ lỗ hổng, đặc biệt khi thực thi lệnh cấp hệ thống.

Khi nào nên dùng và không nên dùng Script

Script lý tưởng cho:

  1. Các tác vụ đơn giản, xác định rõ hoặc chỉ chạy một lần.

  2. Tạo nguyên mẫu hoặc tự động hóa nhanh một quy trình.

  3. Phạm vi đủ nhỏ để tránh độ phức tạp.

Script không lý tưởng cho:

  1. Tác vụ đòi hỏi hiệu năng cao, cần hiệu suất tối đa. Thay vào đó, hãy dùng công cụ ETL (Extract, Transform, Load) chuyên dụng, message broker hoặc công cụ phù hợp khác.

  2. Ứng dụng có giao diện người dùng phức tạp. Nên xây dựng ứng dụng nhỏ hoặc hệ thống mô-đun với logging, testing và tài liệu chuẩn.

  3. Tình huống cần bảo trì lâu dài, nơi chương trình biên dịch có thể ổn định hơn. Hãy dùng task scheduler hoặc workflow manager như CRON, Airflow, AWS Lambda/GCP Functions.

Cách viết Script hiệu quả

Đây là quy trình tôi sử dụng để viết script hữu ích. Sau khi đi qua các bước này, chúng ta sẽ xem ví dụ script bằng các ngôn ngữ khác nhau để bạn thực hành.

  1. Xác định vấn đề: Trước khi viết script, hãy xác định bài toán nó giải quyết. Làm rõ tác vụ cần tự động hóa và kết quả mong đợi.

  2. Chọn ngôn ngữ phù hợp:

    • Bash: Lý tưởng cho tác vụ cấp hệ thống như thao tác tệp hoặc quản lý máy chủ.

    • Python: Tuyệt vời cho xử lý dữ liệu, web scraping và tự động hóa phức tạp hơn.

    • JavaScript: Phù hợp cho phát triển web và tự động hóa dựa trên trình duyệt.

  3. Viết script: Sử dụng trình soạn thảo văn bản hoặc IDE, tuân thủ các best practice như comment, đặt tên biến có ý nghĩa, code mô-đun.

  4. Kiểm thử script: Chạy script trong môi trường kiểm soát để đảm bảo hoạt động như mong đợi mà không gây lỗi.

  5. Thực thi và triển khai: Chạy script trong môi trường thực tế. Nếu cần, lên lịch thực thi bằng công cụ như Cron (cho Bash) hoặc task scheduler.

Ví dụ Script

Bây giờ bạn đã nắm cơ bản, hãy thực hành. Giả sử bạn có khoảng 100 tệp tên "book-part-1.pdf", "book-part-2.pdf", …, "book-part-100.pdf". Bạn muốn thay tất cả dấu gạch ngang (-) trong tên tệp thành dấu gạch dưới (_), vì trang web bạn muốn tải lên không cho phép tên tệp chứa dấu gạch ngang.

Dưới đây là script bằng 3 ngôn ngữ khác nhau thực hiện cùng một thao tác. Quy trình như sau:

  1. Tìm tất cả tệp trong thư mục,

  2. Kiểm tra xem tên có chứa dấu gạch ngang (-) không,

  3. Thay thế dấu gạch ngang bằng dấu gạch dưới (_).

Tên tệp ban đầu (chứa dấu gạch ngang):

Làm chủ Scripting: Tăng năng suất bằng cách tự động hóa các tác vụ lặp lại

Script Bash

Bắt đầu với script Bash:

#!/bin/bash # Thay "-" bằng "_" trong tên tệp DIRECTORY="/path/to/your/folder" for FILE in "$DIRECTORY"/*; do if [[ "$FILE" == *-* ]]; then NEW_NAME=$(echo "$FILE" | sed 's/-/_/g') mv "$FILE" "$NEW_NAME" echo "Đã đổi tên: $FILE -> $NEW_NAME" fi done 

Chúng ta định nghĩa thư mục chứa tệp ở đầu. Với mỗi tệp trong thư mục, kiểm tra xem tên có chứa -. Nếu có, tạo tên mới lưu vào biến NEW_NAME bằng cách copy tên cũ qua lệnh echo và thay - thành _ bằng lệnh sed. Cuối cùng dùng lệnh move mv với tên cũ và tên mới làm đối số.

Script Python

Tiếp theo, xem script Python:

import os # Thay "-" bằng "_" trong tên tệp directory = "/path/to/your/folder" for filename in os.listdir(directory): if "-" in filename: old_path = os.path.join(directory, filename) new_filename = filename.replace("-", "_") new_path = os.path.join(directory, new_filename) os.rename(old_path, new_path) print(f"Đã đổi tên: {filename} -> {new_filename}") 

Các bước tương tự như Bash. Đầu tiên định nghĩa thư mục, sau đó lặp qua từng tệp. Để lấy danh sách tệp, dùng phương thức listdir từ package os.

Kiểm tra xem tên tệp có chứa -. Nếu có, tìm đường dẫn hiện tại (old_path) bằng cách nối thư mục và tên tệp. Tạo tên mới bằng phương thức replace thay - thành _.

Tạo đường dẫn mới (new_path) tương tự. Cuối cùng gọi phương thức rename trong package os với đường dẫn cũ và mới.

Script JavaScript

Bây giờ xem script JavaScript:

const fs = require('fs'); const path = require('path'); const directory = '/path/to/your/folder'; fs.readdir(directory, (err, files) => { if (err) { console.error('Lỗi đọc thư mục:', err); return; } files.forEach(file => { if (file.includes('-')) { const oldPath = path.join(directory, file); const newFilename = file.replace(/-/g, '_'); const newPath = path.join(directory, newFilename); fs.rename(oldPath, newPath, err => { if (err) { console.error(`Lỗi đổi tên ${file}:`, err); } else { console.log(`Đã đổi tên: ${file} -> ${newFilename}`); } }); } }); }); 

Cách triển khai JavaScript tương tự Python nhưng cần viết nhiều code hơn. Thông thường dev không dùng JavaScript cho loại script này, đa số dùng Bash/Python. JavaScript phù hợp hơn cho tự động hóa dựa trên trình duyệt.

Vẫn cùng xem code: Cần dùng 2 package fs và path. Định nghĩa thư mục, đọc tệp bằng readdir từ fs, truyền thư mục và callback function chạy khi đọc xong.

Trong callback, lặp qua từng tệp, kiểm tra có dấu gạch ngang (-). Nếu có, tìm đường dẫn cũ bằng package path. Tạo tên mới bằng phương thức replace. Tương tự tìm đường dẫn mới. Dùng rename từ fs để đổi tên. Nếu lỗi thì log lỗi, thành công thì log thông báo.

Cách chạy các script này

Đây là cách thực tế sử dụng:

  1. Thay /path/to/your/folder bằng thư mục thực chứa tệp.

  2. Chạy script trong môi trường tương ứng:

    • Bash: Lưu thành file .sh, chạy bash script.sh

    • Python: Lưu thành file .py, chạy python script.py

    • JavaScript: Lưu thành file .js, chạy node script.js

Ảnh chụp màn hình dưới đây minh họa chạy script Bash đổi tên tệp.

Làm chủ Scripting: Tăng năng suất bằng cách tự động hóa các tác vụ lặp lại

Làm chủ Scripting: Tăng năng suất bằng cách tự động hóa các tác vụ lặp lại

Script định kỳ (Recurring Scripts)

Script định kỳ được thiết kế để thực thi theo khoảng thời gian đều đặn, như kiểm tra trạng thái hệ thống hàng tuần, dọn dẹp log, hoặc lấy cập nhật dữ liệu. Các script này thường dùng task scheduler.

Các cách phổ biến

  1. CRON jobs: Hầu hết hệ điều hành hỗ trợ CRON, cho phép kích hoạt script theo lịch định sẵn.

  2. Task queues: Công cụ như Celery (Python), Bull (Node.js), Sidekiq (Ruby) xử lý job định kỳ linh hoạt hơn.

  3. Cloud schedulers: Dịch vụ như AWS Lambda với EventBridge, Google Cloud Scheduler, Azure Logic Apps cho phép thiết lập script định kỳ trong kiến trúc serverless.

Ví dụ điển hình: gửi báo cáo hàng ngày/tuần về sử dụng/hiệu năng hệ thống. Viết script tìm số user mới đăng ký và đăng ký dịch vụ, gửi báo cáo qua email mỗi ngày/tuần.

Best Practice khi viết Script

Những lưu ý quan trọng khi viết script:

1. Sử dụng comment: Giải thích các phần phức tạp.

Ví dụ dưới đây, nếu không có comment, người khác phải mất thời gian hiểu tại sao tỷ suất thuế là số thập phân chứ không phải phần trăm.

# Tính giá tổng cộng kèm thuế def calculate_price_with_tax(price, tax_rate): # Tỷ suất thuế biểu diễn dưới dạng thập phân (ví dụ 0.07 cho 7%) return price + (price * tax_rate) 

2. Xử lý lỗi (Error handling): Dự phòng lỗi có thể xảy ra và xử lý nhẹ nhàng.

Ví dụ dưới đây, nếu tệp thiếu, script không bị crash mà hiển thị thông báo hữu ích.

try: with open('data.csv', 'r') as file: data = file.readlines() except FileNotFoundError: print("Lỗi: Không tìm thấy tệp 'data.csv'. Đảm bảo tệp tồn tại trước khi chạy script.") except Exception as e: print(f"Lỗi không mong đợi: {e}") 

3. Thiết kế mô-đun (Modular design): Tách script thành các function/module tái sử dụng.

Ví dụ dưới đây, tách chức năng thành các function nhỏ, độc lập giúp debug và tái dùng dễ dàng.

def fetch_data_from_api(api_url): # Lấy dữ liệu từ API pass def process_data(data): # Xử lý dữ liệu thành định dạng mong muốn pass def save_to_file(data, filename): # Lưu dữ liệu đã xử lý vào tệp pass # Script chính if __name__ == "__main__": data = fetch_data_from_api("https://example.com/api") processed_data = process_data(data) save_to_file(processed_data, "output.json") 

4. Kiểm tra đầu vào (Input validation): Validate input người dùng để tránh lỗi hoặc rủi ro bảo mật.

Nếu không validate, kẻ xấu có thể nhập dữ liệu độc hại (ví dụ chuỗi SQL injection).

import re # Kiểm tra định dạng email hợp lệ def validate_email(email): pattern = r'^[a-zA-Z0-9_.+-]+@[a-zA-Z0-9-]+\.[a-zA-Z0-9-.]+$' if not re.match(pattern, email): raise ValueError("Định dạng email không hợp lệ") return email # Ví dụ sử dụng try: user_email = validate_email(input("Nhập email: ")) print(f"Email hợp lệ: {user_email}") except ValueError as e: print(e) 

5. Kiểm soát phiên bản (Version control): Dùng Git hoặc công cụ tương tự để theo dõi thay đổi.

Nếu thay đổi làm hỏng script, dễ dàng quay lại commit trước bằng git checkout. Cũng hỗ trợ cộng tác nhóm mượt mà.

git init git add script.py git commit -m "Initial commit" 

Kết luận

Viết script là kỹ năng giúp tăng đáng kể năng suất và khả năng giải quyết vấn đề. Bằng cách hiểu cơ bản về Bash, Python, JavaScript, bạn có thể tự động hóa tác vụ, hợp lý hóa quy trình và tiết kiệm thời gian quý báu. Hãy bắt đầu từ những việc nhỏ, xây dựng dần và thực hành viết script cho nhiều trường hợp để thành thạo kỹ năng quý giá này.

Tôi có bài tập cho bạn. Để chạy và kiểm tra ví dụ script, bạn có thể nghĩ phải tạo thủ công 100 tệp – rất tốn thời gian.

Tôi đã viết script tạo 100 tệp đó. Tôi khuyên bạn hãy thử tự viết script tạo 100 tệp có dấu gạch ngang trong tên, sau đó chạy script ví dụ để chuyển sang dấu gạch dưới.

Điều này nghe có vẻ khó, nhưng thực tế bạn chỉ cần 5 dòng code Bash để tạo 100 tệp. Không chỉ 100 – bạn có thể tạo cả triệu, tỷ tệp chỉ với 5 dòng code.

Nếu muốn tìm hiểu thêm về Script, hãy đăng ký newsletter email của tôi (https://5minslearn.gogosoon.com/) và theo dõi trên mạng xã hội.

Chúc bạn scripting vui vẻ!

Học lập trình miễn phí. Chương trình mã nguồn mở của freeCodeCamp đã giúp hơn 40.000 người tìm việc lập trình viên. Bắt đầu ngay