🥷 Điểm đột phá của Devin:
- Khả năng tự động hóa toàn diện: Devin có thể thực hiện một dự án phần mềm từ đầu đến cuối, bao gồm viết code, sửa lỗi, và triển khai.
- Hiệu quả vượt trội: Devin làm việc nhanh chóng và chính xác hơn con người, rút ngắn đáng kể thời gian phát triển phần mềm.
- Khả năng học hỏi và thích ứng: Devin liên tục học hỏi từ kinh nghiệm và cải thiện kỹ năng của mình, mở ra tiềm năng phát triển vô hạn.
🌵 Tìm hiểu sâu hơn về Devin - Kỹ sư phần mềm AI đầu tiên:
Theo Cognition, Devin được giới thiệu là kỹ sư phần mềm AI hoàn toàn tự chủ đầu tiên trên thế giới. Đây được coi là một bước tiến mới mẻ trong lĩnh vực AI và hứa hẹn sẽ thay đổi cách thức làm việc của các lập trình viên.
Devin được mô tả như một đồng đội tận tâm và có kỹ năng, sẵn sàng xây dựng phần mềm cùng bạn hoặc độc lập hoàn thành các nhiệm vụ để bạn xem xét. Với Devin, các kỹ sư có thể tập trung vào những vấn đề thú vị hơn và các nhóm kỹ thuật có thể phấn đấu đạt được những mục tiêu tham vọng hơn.
🚌 Khả năng của Devin:
Nhờ những tiến bộ trong lập luận và lập kế hoạch dài hạn, Devin có thể lập kế hoạch và thực hiện các tác vụ kỹ thuật phức tạp đòi hỏi hàng nghìn quyết định. Devin có thể nhớ lại bối cảnh liên quan ở mỗi bước, học hỏi theo thời gian và sửa chữa lỗi.
Cognition cũng trang bị cho Devin các công cụ dành cho nhà phát triển thông thường bao gồm shell, trình soạn thảo code và trình duyệt web trong một môi trường điện toán được kiểm soát - mọi thứ mà con người cần để thực hiện công việc của họ.
Cuối cùng, Devin được trao khả năng cộng tác tích cực với người dùng. Devin báo cáo tiến độ theo thời gian thực, chấp nhận phản hồi và cùng bạn làm việc thông qua các lựa chọn thiết kế khi cần thiết.
🫴 Một số ví dụ về những gì Devin có thể làm:
- Học hỏi sử dụng các công nghệ mới: Sau khi đọc một bài đăng trên blog, Devin có thể chạy ControlNet trên Modal để tạo ra hình ảnh có chứa tin nhắn ẩn.
- Xây dựng và triển khai ứng dụng đầu cuối: Devin tạo ra một trang web tương tác mô phỏng Trò chơi của sự sống! Nó dần dần thêm các tính năng theo yêu cầu của người dùng và sau đó triển khai ứng dụng lên Netlify.
- Huấn luyện và tinh chỉnh các mô hình AI của riêng mình: Devin thiết lập tinh chỉnh cho một mô hình ngôn ngữ lớn chỉ với một liên kết đến kho lưu trữ nghiên cứu trên GitHub.
- Xử lý lỗi và yêu cầu tính năng trong các kho lưu trữ mã nguồn mở: Chỉ cần một liên kết đến sự cố trên GitHub, Devin thực hiện tất cả quá trình thiết lập và thu thập ngữ cảnh cần thiết.
- Góp phần vào các kho lưu trữ sản xuất trưởng thành: Devin giải quyết lỗi tính toán logarit trong hệ thống đại số Python sympy. Devin thiết lập môi trường code, tái tạo lỗi, tự viết code và kiểm thử bản sửa lỗi.
- Thậm chí thực hiện các công việc thực tế: Devin có thể viết và gỡ lỗi code để chạy một mô hình thị giác máy tính. Devin lấy mẫu dữ liệu kết quả và biên soạn báo cáo ở cuối.
🦜 Hiệu suất của Devin:
Devin được đánh giá trên SWE-bench, một điểm chuẩn đầy thách thức yêu cầu các tác nhân giải quyết các sự cố GitHub thực tế được tìm thấy trong các dự án nguồn mở như Django và scikit-learn.
- Devin giải quyết chính xác 13,86% các sự cố theo quy trình, vượt xa mức kỹ thuật tiên tiến trước đó là 1,96%.
- Ngay cả khi được cung cấp các file chính xác để chỉnh sửa, các mô hình tốt nhất trước đây chỉ có thể giải quyết được 4,80% các sự cố.
🌗 Điều quan trọng cần lưu ý:
- Devin được đánh giá trên 25% tập dữ liệu ngẫu nhiên.
- Devin không được hỗ trợ, trong khi tất cả các mô hình khác đều được hỗ trợ (nghĩa là mô hình được cho biết chính xác những file nào cần chỉnh sửa).
🎯 Kết luận:
Hiệu suất của Devin trên SWE-bench là một minh chứng cho khả năng của nó trong việc giải quyết các vấn đề lập trình thực tế. Khả năng tự động hóa các tác vụ lập trình phức tạp của Devin có tiềm năng thay đổi cách thức phần mềm được phát triển.
