Như đã hứa, Elon Musk đã phát hành mô hình đằng sau chatbot xAI, Grok-1.

Phát hành theo giấy phép Apache 2.0, trọng số mô hình cơ sở và kiến ​​trúc mạng hiện đã có sẵn. Model có 314 tỷ thông số và cần phần cứng có đủ bộ nhớ GPU để chạy. Nó được tinh chỉnh cho các ứng dụng như hộp thoại ngôn ngữ tự nhiên và thể hiện điểm kiểm tra mô hình cơ sở thô từ giai đoạn tiền đào tạo, kết thúc vào tháng 2023 năm XNUMX.

Các nhà phê bình đã chỉ ra hiệu suất tương đối mờ nhạt trong các điểm chuẩn; trong khi Grok là một mô hình lớn, nó hoạt động kém hơn so với những gì một số kỹ sư đã thấy. “Xét đến mức độ kém của nó so với các mẫu máy khác, nó thực sự nhấn mạnh tầm quan trọng của việc tinh chỉnh. Một mô hình có số lượng thông số nhỏ hơn RẤT NHIỀU đang hoạt động tốt hơn nó ở nhiều chỉ số,” một người cho biết poster trên diễn đàn Hacker News tối qua.

Bạn có thể thấy rằng càng nhỏ Gió bấc thổi từ hướng tây chẳng hạn, hoạt động tốt như Grok-1.

Để đặt kích thước của nó vào quan điểm, ngay cả ở mức 314 tỷ thông số, nó vẫn có một số điểm bắt kịp với GPT-4 của OpenAI, có 1.76 nghìn tỷ thông số ở lần đếm cuối cùng.

Đáng chú ý, không giống như các LLM hiện tại, được đào tạo về dữ liệu với một điểm giới hạn, Grok có quyền truy cập vào kho dữ liệu thời gian thực của Xeets của mọi người thông qua X.com, điều này sẽ tạo ra một số thử nghiệm thú vị trong những ngày tới, mặc dù như một thử nghiệm khác người bình luận lưu ý: “Bản thân dữ liệu tweet của Twitter vừa mang phong cách riêng vừa ngắn gọn theo thiết kế, chỉ điều này thôi thì không có lợi cho việc đào tạo LLM.”

Cảm nhận sẽ quen thuộc với người dùng nền tảng truyền thông xã hội X của Musk và những người đăng ký đã có thể đặt câu hỏi cho chatbot và nhận câu trả lời. Theo xAI, Grok được mô phỏng theo Hướng dẫn về thiên hà của Hitchhiker. “Nó nhằm mục đích trả lời hầu hết mọi thứ và thậm chí còn gợi ý những câu hỏi nên hỏi.”

Nếu người dùng lướt qua một bản sao quăn góc của Kịch bản radio Hướng dẫn đến thiên hà của người đi nhờ xe, định nghĩa sau đây có thể được tìm thấy trong Fit the Tenth: “Hướng dẫn về Thiên hà của Người quá giang là người bạn đồng hành không thể thiếu đối với tất cả những ai muốn tìm hiểu ý nghĩa của cuộc sống trong một vũ trụ vô cùng phức tạp và khó hiểu, mặc dù nó không thể hy vọng trở thành hữu ích hoặc mang tính thông tin về mọi vấn đề, nó đưa ra khẳng định chắc chắn rằng nếu nó không chính xác thì ít nhất dứt khoát không chính xác.

“Trong trường hợp có sự khác biệt lớn thì thực tế luôn luôn sai.”

Việc phát hành diễn ra vào dịp kỷ niệm đầu tiên ra mắt mẫu GPT-4 của OpenAI và cuộc tranh cãi pháp lý của Musk với những người bạn AI cũ của anh ấy vẫn còn ẩn giấu. Vào đầu tháng này, Musk kiện OpenAI, cáo buộc có rất ít thông tin cởi mở về công ty, bất chấp tên gọi của nó. OpenAI trả lời bằng cách tung ra một loạt email, tuyên bố rằng Musk đã biết đầy đủ về kế hoạch của mình và muốn sáp nhập nó vào Tesla.

Patrik Backman, đối tác chung tại OpenOcean, nói về việc Grok-1 được phát hành: “Lần đầu tiên, Elon Musk đang áp dụng các nguyên tắc của mình vào hành động. Nếu bạn kiện OpenAI vì đã chuyển đổi thành một tổ chức hoạt động vì lợi nhuận, bạn phải sẵn sàng tuân thủ những lý tưởng tương tự.”

Điều gì đã không được phát hành bởi xAI cũng đáng chú ý. Trọng lượng Grok-1 đã có sẵn, tuy nhiên dữ liệu được sử dụng để đào tạo không được cung cấp theo cùng một giấy phép, khiến chuyên gia AI Gary Marcus phải nói hài hước: “OpenAI một phần.”

Các công cụ AI tạo nguồn mở đã gây tranh cãi. Một số nhà phát triển lo ngại rằng việc cung cấp công nghệ có nguy cơ bị lạm dụng và những người khác chỉ ra những lợi ích vốn có của tính minh bạch.

Siêu dữ liệu chia sẻ – loại – mẫu Llama 2 của hãng này vào năm ngoái và các công ty khác cũng đã làm theo. Mặt khác, OpenAI chắc chắn là không.

Bằng cách mở rộng tầm quan trọng đằng sau Grok-1, Musk đang cố gắng cắm cờ ở phe đối diện với thế giới độc quyền của OpenAI.

Về hiệu suất tối ưu của nó, giống như mọi thứ mà Musk chạm vào, nó có thể đi theo một trong hai hướng. ®

• Phân phối nội dung và PR được hỗ trợ bởi SEO. Được khuếch đại ngay hôm nay.
• PlatoData.Network Vertical Generative Ai. Trao quyền cho chính mình. Truy cập Tại đây.
• PlatoAiStream. Thông minh Web3. Kiến thức khuếch đại. Truy cập Tại đây.
• Trung tâmESG. Than đá, công nghệ sạch, Năng lượng, Môi trường Hệ mặt trời, Quản lý chất thải. Truy cập Tại đây.
• PlatoSức khỏe. Tình báo thử nghiệm lâm sàng và công nghệ sinh học. Truy cập Tại đây.
• nguồn: https://go.theregister.com/feed/www.theregister.com/2024/03/18/grok_chatbot_code_released/