CÔNG CỤ
MODULES
THAM KHẢO
Cách chia List thành các phần bằng nhau trong Python Cách xóa một khóa (key) ra khỏi dictionary trong Python Hướng dẫn chuyển đổi file Google Colab sang Markdown trong Python Bài tập Python: Lập trình cơ sở dữ liệu trong Python Kết nối cơ sở dữ liệu MySQL Python Hướng dẫn kết nối Python PostgreSQL bằng Psycopg2 Hướng dẫn kết nối SQLite sử dụng sqlite3 trong Python Bài tập Python : Pandas trong Python Phạm vi số float của Python Cách lên lịch chạy script Python bằng GitHub Actions Cách tạo hằng số trong Python Các nền tảng lưu trữ tốt nhất cho ứng dụng và script Python 6 Tip viết vòng lặp For hiệu quả hơn trong Python Cách đảo ngược Chuỗi String trong Python Cách gỡ lỗi ứng dụng Python trong Docker Container bằng VS Code 10 tip One Liner bạn cần biết trong Python Cách áp dụng ngưỡng hình ảnh trong Python với NumPy Tìm hiểu về các phép toán Groupby trong Pandas Lập trình Socket trong Python Mô-đun base64 trong Python Cách giới hạn float values trong Python Tìm hiểu Mô-đun statistics Trong Python File Organizing trong Python Đổi tên File trong Python Tìm hiểu về Deque trong Python Mô-đun Calendar trong Python Tìm hiểu về Enum trong Python Sử dụng pprint trong Python Làm việc với cấu trúc Dữ liệu Stack trong Python Thư viện functools trong Python Tip sử dụng hàm round() với tham số âm trong Python Hàm print có thể nhận thêm các tham số bổ sung trong Python Tip tìm chuỗi dài nhất bằng hàm max() trong Python Cách lặp qua nhiều list với hàm zip() trong Python Tìm hiểu về MLOps trong Python Docker và Kubernetes với MLOps trong Python Kết hợp DevOps với MLOps trong Python Xử lý độ chính xác các hàm floor, ceil, round, trunc, format trong Python tối ưu quy trình MLOps Với Python Sự khác biệt giữa byte objects và string trong Python Top 4 thư viện phổ biến nhất của NLP trong Python Cách sử dụng ThreadPoolExecutor trong Python Phân tích dữ liệu Blockchain với Python Hướng dẫn triển khai Smart Contracts với Python Blockchain APIs với Python Làm việc với file ZIP trong Python Sự khác biệt giữa toán tử == và is trong Python Chuyển đổi kiểu dữ liệu trong Python Cách làm việc với file tarball/tar trong Python Sự khác biệt giữa iterator và iterable trong Python Quản lý sinh viên Python & MySQL
CÁC CHỦ ĐỀ
BÀI MỚI NHẤT
MỚI CẬP NHẬT

Thông báo: Download 4 khóa học Python từ cơ bản đến nâng cao tại đây.

Cách sử dụng ThreadPoolExecutor trong Python

Nếu một chương trình Python chứa nhiều tác vụ I/O, chạy nó theo cách tuần tự/synchronous có thể làm tăng thời gian thực thi. Với thư viện đa luồng, thời gian này có thể giảm đáng kể. Bài viết này sẽ hướng dẫn cách sử dụng ThreadPoolExecutor của Python để thực hiện các hàm bằng các luồng.

test php

banquyen png
Bài viết này được đăng tại freetuts.net, không được copy dưới mọi hình thức.

Về ThreadPoolExecutor của Python

Một chương trình Python thông thường chạy với một tiến trình và một luồng duy nhất. Tuy nhiên, việc sử dụng nhiều luồng có thể cải thiện hiệu suất đáng kể.

ThreadPoolExecutor từ module concurrent.futures giúp quản lý luồng một cách đơn giản qua API tiện lợi, tự động tạo và phân phối tác vụ cho các luồng. Điều này rất hữu ích cho các tác vụ I/O như web scraping, nơi một luồng có thể chờ phản hồi từ máy chủ trong khi các luồng khác tiếp tục thu thập dữ liệu.

Gán nhiều tác vụ bằng map() của Python

from concurrent.futures import ThreadPoolExecutor

urls = ["python-engineer.com", "twitter.com", "youtube.com"]

def scrape_site(url):
    res = f'{url} đã được thu thập!'
    return res

pool = ThreadPoolExecutor(max_workers=8)

results = pool.map(scrape_site, urls)  # không chặn

for res in results:
    print(res)  # in kết quả khi có sẵn

pool.shutdown()

Giải thích: Đầu tiên, tạo một instance của ThreadPoolExecutor với số luồng công nhân (max_workers). Phương thức map() dùng để gán các tác vụ cho các luồng, trả về ngay lập tức một iterable cho phép truy xuất kết quả. Cuối cùng, gọi shutdown() để giải phóng tài nguyên khi các tác vụ đã hoàn tất.

Bài viết này được đăng tại [free tuts .net]

Kết quả:

python-engineer.com đã được thu thập!
twitter.com đã được thu thập!
youtube.com đã được thu thập!

Gán một tác vụ duy nhất bằng submit()

from concurrent.futures import ThreadPoolExecutor

pool = ThreadPoolExecutor(max_workers=8)

future = pool.submit(my_task, argument)  # không chặn

value = future.result()  # chặn

print(value)

pool.shutdown()

Phương thức submit() gán một tác vụ vào thread pool và trả về một đối tượng Future. Dùng result() để truy cập kết quả (chặn cho đến khi có kết quả).

Sử dụng ThreadPoolExecutor với Context Manager của Python

Cách tốt nhất để sử dụng ThreadPoolExecutor là với Context Manager, tự động gọi shutdown() khi hoàn thành.

with ThreadPoolExecutor(max_workers=1) as pool:
    future = pool.submit(pow, 2, 15)
    print(future.result())

Trên đây là hướng dẫn cơ bản về cách sử dụng ThreadPoolExecutor để tối ưu hóa hiệu suất chương trình Python trong các tác vụ I/O.

Kết bài

Qua bài viết, bạn đã nắm được cách sử dụng ThreadPoolExecutor trong Python để tối ưu hóa hiệu suất cho các tác vụ I/O nặng, giảm thời gian thực thi và tối ưu hóa mã nguồn. Sử dụng map() cho nhiều tác vụ và submit() cho từng tác vụ riêng lẻ sẽ giúp quản lý luồng hiệu quả hơn. Việc áp dụng Context Manager cũng giúp đảm bảo tài nguyên được giải phóng tự động sau khi hoàn tất các tác vụ. Đây là một kỹ thuật quan trọng, giúp mã Python trở nên gọn gàng và hiệu quả hơn khi xử lý các tác vụ đa luồng.

Cùng chuyên mục:

Sự khác biệt giữa iterator và iterable trong Python

Sự khác biệt giữa iterator và iterable trong Python

Cách làm việc với file tarball/tar trong Python

Cách làm việc với file tarball/tar trong Python

Chuyển đổi kiểu dữ liệu trong Python

Chuyển đổi kiểu dữ liệu trong Python

Sự khác biệt giữa toán tử == và is trong Python

Sự khác biệt giữa toán tử == và is trong Python

Làm việc với file ZIP trong Python

Làm việc với file ZIP trong Python

Sự khác biệt giữa byte objects và string trong Python

Sự khác biệt giữa byte objects và string trong Python

Xử lý độ chính xác các hàm floor, ceil, round, trunc, format  trong Python

Xử lý độ chính xác các hàm floor, ceil, round, trunc, format trong Python

Cách lặp qua nhiều list với hàm zip() trong Python

Cách lặp qua nhiều list với hàm zip() trong Python

Tip tìm chuỗi dài nhất bằng hàm max() trong Python

Tip tìm chuỗi dài nhất bằng hàm max() trong Python

Hàm print có thể nhận thêm các tham số bổ sung trong Python

Hàm print có thể nhận thêm các tham số bổ sung trong Python

Tip sử dụng hàm round() với tham số âm trong Python

Tip sử dụng hàm round() với tham số âm trong Python

Thư viện functools trong Python

Thư viện functools trong Python

Làm việc với cấu trúc Dữ liệu Stack trong Python

Làm việc với cấu trúc Dữ liệu Stack trong Python

Sử dụng pprint trong Python

Sử dụng pprint trong Python

Tìm hiểu về Enum trong Python

Tìm hiểu về Enum trong Python

Mô-đun Calendar trong Python

Mô-đun Calendar trong Python

Tìm hiểu về Deque trong Python

Tìm hiểu về Deque trong Python

Đổi tên File trong Python

Đổi tên File trong Python

File Organizing trong Python

File Organizing trong Python

Tìm hiểu Mô-đun statistics Trong Python

Tìm hiểu Mô-đun statistics Trong Python

Top