Khoa học công nghệ ngành Công Thương

Thứ sáu, 19/04/2024 | 11:19

Thứ sáu, 19/04/2024 | 11:19

Kết quả nhiệm vụ KHCN

Cập nhật lúc 20:25 ngày 25/01/2021

Tối ưu hóa máy học cực trị sử dụng thuật toán phản ứng hóa học nhân tạo

TÓM TẮT
Máy học cực trị (ELM) là một thuật toán học đơn giản ứng dụng cho các mạng nơ-ron truyền thẳng một lớp ẩn. Tốc độ học của ELM nhanh hơn gấp nghìn lần so với thuật toán lan truyền ngược, trong khi đó nó đạt được hiệu suất cao hơn. Tuy nhiên, vì các trọng số nút vào và các sai lệch nút ẩn được lựa chọn ngẫu nhiên, nên thuật toán ELM có thể cần nhiều nơ-ron ở lớp ẩn và dẫn đến vấn đề nhiều điều kiện ràng buộc. Để giải quyết mặt hạn chế này của ELM, bài báo này đề xuất một chiến lược tối ưu cho ELM trên cơ sở thuật toán tối ưu phản ứng hóa học nhân tạo (ACROA). Bằng việc sử dụng ACROA để tối ưu hóa các trọng số vào và sai lệch của các nút ẩn trên cơ sở hai tiêu chuẩn định mức trọng số đầu ra và lỗi bình phương trung bình, hiệu suất phân loại của ELM được cải thiện. Kết quả thực nghiệm trên vài tập mẫu chuẩn trong thực tế chứng minh rằng phương pháp đã đề xuất đạt độ chính xác phân loại cao hơn ELM gốc và các ELM tiến hóa khác. 
Từ khóa: Máy học cực trị (ELM), thuật toán tối ưu phản ứng hóa học nhân tạo (ACROA), mạng nơ-ron truyền thẳng một lớp ẩn (SLFN), thuật toán học, sự phân loại. 
AN OPTIMIZED EXTREME LEARNING MACHINE USING ARTIFICIAL CHEMICAL REACTION OPTIMIZATION ALGORITHM
ABSTRACT
Extreme Learning Machine (ELM) is a simple learning algorithm for singlehidden-layer feed-forward neural network. The learning speed of ELM can be thousands of times faster than back-propagation algorithm, while obtaining better generalization performance. However, ELM may need high number of hidden neurons and lead to ill-condition problem due to the random determination of the input weights and hidden biases. In order to surmount the weakness of ELM, this paper proposes an optimization scheme for ELM based on artificial chemical reaction optimization algorithm (ACROA). By using ACROA to optimize the hidden biases and input weights according to both Root mean squared error and the Norm of output weights, the classification performance of ELM will be improved. The experimental result on several real benchmark problems demonstrates that the proposed method can attain higher classification accuracy than traditional ELM and other evolutionary ELMs.
Keywords: Extreme learning machine (ELM), artificial chemical reaction optimization algorithm (ACROA), single-hidden-layer feed-forward neural network (SLFN); learning algorithm; classification.
Xem nội dung bài báo đầy đủ tại đây/Click here to view the full article.
Trần Thủy Văn - Đại học Công nghiệp Hà Nội
(Theo TẠP CHÍ KHOA HỌC CÔNG NGHỆ SỐ 5 (10/2020))
lên đầu trang