Gặp gỡ PaLM 2, nỗ lực mới nhất của Google để quay lại cuộc đua AI

Google I/O mang đến LLM mới cho cuộc đua AI. Gặp gỡ công cụ mới của Bard AI, PaLM 2. Nó có thể cạnh tranh với GPT4 và giúp Google trong cuộc đua AI không?

Chúng tôi đã hỏi trực tiếp câu hỏi này với AI chatbot Bard của Google và đây là câu trả lời của nó:

“Vâng, PaLM 2 có tiềm năng cạnh tranh với GPT4 và giúp Google trong cuộc đua AI. Palm 2 là một mô hình mới hơn GPT4 và nó đã được đào tạo trên tập dữ liệu văn bản và mã lớn hơn. Điều này có nghĩa là Palm 2 có tiềm năng mạnh mẽ và linh hoạt hơn GPT4.

Ngoài ra, PaLM 2 là mã nguồn mở, có nghĩa là nó có sẵn cho bất kỳ ai sử dụng và cải thiện. Điều này có nghĩa là Palm 2 có tiềm năng được áp dụng rộng rãi hơn GPT4, vốn chỉ dành cho một số công ty được chọn.

Cuối cùng, Google có rất nhiều tài nguyên và chuyên môn trong lĩnh vực AI. Điều này có nghĩa là Google có vị trí thuận lợi để phát triển và cải tiến PaLM 2, đồng thời sử dụng nó để tạo ra các sản phẩm và dịch vụ mới và sáng tạo.

Nhìn chung, PaLM 2 có tiềm năng trở thành người chơi chính trong cuộc đua AI. Đó là một mô hình mạnh mẽ và linh hoạt có sẵn cho tất cả mọi người. Google có nguồn lực và chuyên môn để phát triển và cải tiến PaLM 2, đồng thời sử dụng nó để tạo ra các sản phẩm và dịch vụ mới và sáng tạo.”

-Bard AI

Đó là một câu trả lời đầy tham vọng, nhưng nếu Google không muốn đánh mất vị thế của mình trong ngành công nghiệp AI đang bùng nổ, thì điều này phải đúng.

PaLM2 là gì?

PaLM (Mô hình ngôn ngữ Pathway) 2 là một mô hình ngôn ngữ lớn (LLM) mới do Google phát triển và được công bố tại hội nghị Google I/O năm 2023. Đây là phiên bản thứ hai của PaLM, được ra mắt vào tháng 2022 năm XNUMX. Nó được thiết kế để cải thiện khả năng đa ngôn ngữ, lý luận và viết mã.

• Đa ngôn ngữ: PaLM2 được đào tạo bằng hơn 100 ngôn ngữ, bao gồm các thành ngữ, bài thơ và câu đố. Nó cũng có thể vượt qua các bài kiểm tra trình độ ngôn ngữ nâng cao ở cấp độ “chuyên gia”.
• lý luận: PaLM2 có thể xử lý logic, suy luận thông thường và toán học tốt hơn so với các mẫu trước đó. Nó được đào tạo trên một bộ dữ liệu trên phạm vi rộng bao gồm các bài báo khoa học và các trang web có chứa các biểu thức toán học.
• Lập trình: PaLM2 đòi hỏi một cải tiến mã hóa có ý nghĩa đáng kể. Bản cập nhật đáng chú ý này bao gồm đào tạo toàn diện về danh mục hơn 20 ngôn ngữ lập trình, bao gồm cả những ngôn ngữ được sử dụng rộng rãi và chuyên dụng như Prolog và Fortran. Google nhấn mạnh rằng LLM mới của họ thậm chí có thể cung cấp tài liệu đa ngôn ngữ làm sáng tỏ quy trình tạo mã của mình, khiến sự phát triển này trở thành một tiến bộ đáng kể tiềm năng cho các lập trình viên đang tìm kiếm sự thành thạo và hiểu biết nâng cao.

PaLM 2 dự kiến ​​sẽ cung cấp sức mạnh cho hơn 25 sản phẩm và tính năng của Google, chẳng hạn như Google Assistant, Google Translate, Google Photos và Google Search. Nó cũng được cho là sẽ cạnh tranh với GPT-4 của OpenAI, một LLM khác có hơn một nghìn tỷ tham số.

Hôm nay, chúng tôi xin giới thiệu mô hình PaLM mới nhất của mình, PaLM 2, dựa trên nghiên cứu cơ bản và cơ sở hạ tầng mới nhất của chúng tôi. Nó có khả năng cao trong nhiều nhiệm vụ và dễ triển khai. Hôm nay, chúng tôi sẽ công bố hơn 25 sản phẩm và tính năng được cung cấp bởi PaLM 2. #GoogleIO

- Google (@Google) 10 Tháng Năm, 2023

Những cải tiến này có thể rất hữu ích và nếu bạn cần một “phiên bản nhẹ” dành cho di động, Google đã nghĩ đến điều đó. PaLM2 có bốn kích cỡ khác nhau:

• Con cắc kè
• Rái cá
• Loại bò rừng
• Kỳ lân

Gecko là mô hình nhỏ nhất và nhanh nhất có thể hoạt động trên thiết bị di động ngay cả khi ngoại tuyến. Otter, Bison và Unicorn là những mô hình lớn hơn và mạnh mẽ hơn, có thể xử lý các tác vụ phức tạp hơn.

PaLM 2 hoạt động như thế nào?

PaLM 2 là một mô hình mạng thần kinh được đào tạo trên một tập dữ liệu lớn gồm văn bản và mã. Mô hình có thể học các mối quan hệ giữa các từ và cụm từ, và nó có thể sử dụng kiến ​​thức này để thực hiện nhiều nhiệm vụ khác nhau.

Tuy nhiên, Bard hỗ trợ PaLM 2 vẫn là một thử nghiệm, theo Google. Đôi khi nó có thể mắc lỗi và có thể không hiểu được tất cả các loại văn bản hoặc bị ảo giác. Google tin rằng khi nó tiếp tục phát triển, nó sẽ trở nên chống lỗi hơn nữa.

Thông số Google PaLM 2

Song song với cách tiếp cận của OpenAI, Google đã chọn tiết lộ các chi tiết kỹ thuật hạn chế liên quan đến phương pháp đào tạo được sử dụng cho mô hình nâng cao này, bao gồm cả số lượng tham số chính xác. Tuy nhiên, điều đáng chú ý là PaLM 2 là một mô hình đáng gờm, tự hào với quy mô ấn tượng 540 tỷ tham số.

Thông tin do Google cung cấp làm nổi bật nền tảng của PaLM2 trên khung JAX và cơ sở hạ tầng TPU v4 mới nhất của họ, phản ánh cam kết của họ trong việc tận dụng các công nghệ tiên tiến để tạo điều kiện thuận lợi cho sự phát triển và hiệu suất của mô hình.

Bạn có thể làm gì nhờ PaLM 2?

Palm 2, một mô hình ngôn ngữ lớn (LLM) tiên tiến do Google phát triển, đại diện cho một bước đột phá tiên tiến và hiện có sẵn cho công chúng. LLM mới nhất của Google được đào tạo dựa trên tập dữ liệu lớn gồm văn bản và mã và có thể thực hiện nhiều tác vụ, bao gồm:

• Hiểu ngôn ngữ tự nhiên: PaLM2 có thể hiểu ý nghĩa của văn bản, ngay cả khi nó phức tạp hoặc mơ hồ.
• Thế hệ ngôn ngữ tự nhiên: PaLM2 có thể tạo văn bản mạch lạc và đúng ngữ pháp.
• Tạo mã: PaLM2 có thể tạo mã bằng nhiều ngôn ngữ lập trình.
• Dịch: PaLM2 có thể dịch văn bản từ ngôn ngữ này sang ngôn ngữ khác.
• Câu trả lời câu hỏi: PaLM2 có thể trả lời các câu hỏi về văn bản, mã và thế giới thực.

Với PaLM 2, Bard hứa hẹn gần như mọi thứ GPT4 cung cấp trong ChatGPT, với thông tin cập nhật.

Làm thế nào để sử dụng PaLM2?

Cách đơn giản nhất để sử dụng/truy cập PaLM 2 là sử dụng Bard AI. Để sử dụng Bard, chỉ cần nhấp vào tại đây.

Ngoài ra, PaLM 2 sẽ có sẵn thông qua Google AI Platform. Bạn có thể sử dụng nó để tạo văn bản, dịch ngôn ngữ, viết các loại nội dung sáng tạo khác nhau và trả lời các câu hỏi của bạn theo cách đầy đủ thông tin.

Để tìm hiểu thêm về nó, vui lòng truy cập Google và Báo cáo kỹ thuật PaLM 2.

So sánh: PaLM 2 với GPT4

Trong những năm gần đây, đã có một sự gia tăng quan tâm đến các mô hình ngôn ngữ lớn (LLM). Các mô hình này được đào tạo trên các bộ dữ liệu văn bản và mã khổng lồ và chúng có thể được sử dụng cho nhiều tác vụ khác nhau, bao gồm xử lý ngôn ngữ tự nhiên, dịch máy và tạo mã.

Hai trong số các LLM nổi bật nhất hiện nay là PaLM 2 và GPT-4, lần lượt được phát triển bởi Google và OpenAI. Trong bài đăng trên blog này, chúng tôi sẽ so sánh hai mô hình này và xem chúng khác nhau như thế nào về kích thước, dữ liệu, khả năng và ứng dụng.

PaLM 2 so với GPT4: Kích thước

Một trong những yếu tố chính giúp phân biệt các LLM là quy mô của chúng, được đo bằng số lượng tham số mà chúng có. Tham số là các giá trị số xác định cách mô hình xử lý đầu vào và tạo đầu ra. Một mô hình càng có nhiều tham số thì càng phức tạp và mạnh mẽ, nhưng cũng tốn kém hơn về mặt tính toán và khó đào tạo.

PaLM2 có bốn mô hình con với các kích cỡ khác nhau: Kỳ lân (lớn nhất), Bò rừng, Rái cá và Tắc kè (nhỏ nhất). Google chưa tiết lộ số lượng tham số chính xác cho từng mô hình con. GPT-4 có 12 mô hình con với các kích thước khác nhau, từ 125 triệu đến 1 nghìn tỷ tham số. Cả hai mô hình đều sử dụng kiến ​​trúc máy biến áp, là một thiết kế mạng thần kinh cho phép xử lý song song và các phụ thuộc tầm xa.

PaLM 2 so với GPT4: Dữ liệu

Một yếu tố khác giúp phân biệt các LLM là dữ liệu mà họ được đào tạo. Dữ liệu là nguồn kiến ​​thức và kỹ năng cho các mô hình, và nó ảnh hưởng đến hiệu suất và khả năng khái quát hóa của chúng. Dữ liệu càng đa dạng và chất lượng cao thì mô hình được đào tạo càng linh hoạt và chính xác.

PaLM 2 được đào tạo trên hơn 100 ngôn ngữ và nhiều lĩnh vực khác nhau, chẳng hạn như toán học, khoa học, lập trình, văn học, v.v. Nó sử dụng một bộ dữ liệu được tuyển chọn để lọc ra văn bản có chất lượng thấp hoặc có hại, chẳng hạn như thư rác, ngôn từ kích động thù địch hoặc thông tin sai lệch. PaLM 2 cũng sử dụng một kỹ thuật gọi là học theo lộ trình, cho phép nó học từ nhiều nguồn thông tin và kết hợp chúng một cách mạch lạc.

GPT-4 được đào tạo trên nhiều loại dữ liệu hơn PaLM 2, bao gồm hầu hết tất cả các miền và ngôn ngữ có sẵn trên internet. Nó sử dụng một tập dữ liệu có tên là Pile, bao gồm 825 terabyte văn bản được lấy từ nhiều nguồn khác nhau, chẳng hạn như Wikipedia, Reddit, sách, bài báo, trang web, v.v. GPT-4 không sử dụng bất kỳ bộ lọc hoặc quản lý nào đối với dữ liệu của mình, điều đó có nghĩa là nó có thể học hỏi từ bất kỳ văn bản nào mà nó gặp phải, nhưng cũng có khả năng kế thừa các thành kiến ​​hoặc lỗi của nó.

PaLM 2 so với GPT4: Khả năng

Yếu tố thứ ba phân biệt các LLM là khả năng của họ hoặc những gì họ có thể làm với văn bản mà họ tạo ra. Các khả năng phụ thuộc vào cả kích thước và dữ liệu của các mô hình, cũng như các nhiệm vụ mà chúng được tinh chỉnh. Tinh chỉnh là quá trình điều chỉnh một mô hình chung cho một nhiệm vụ hoặc miền cụ thể bằng cách đào tạo nó trên một tập dữ liệu nhỏ hơn có liên quan đến nhiệm vụ hoặc miền đó.

PaLM 2 đã cải thiện các khả năng về logic và lý luận nhờ được đào tạo rộng rãi trong các lĩnh vực đó. Nó có thể giải các bài toán nâng cao, giải thích các bước của nó và cung cấp các sơ đồ. Nó cũng có thể viết và gỡ lỗi mã bằng hơn 20 ngôn ngữ lập trình và cung cấp tài liệu bằng nhiều ngôn ngữ. Nó cũng có thể tạo văn bản ngôn ngữ tự nhiên cho các nhiệm vụ và lĩnh vực khác nhau, chẳng hạn như dịch thuật, tóm tắt, trả lời câu hỏi, hội thoại chatbot, dữ liệu cập nhật, v.v.

Tuy nhiên, GPT-4 có nhiều khả năng linh hoạt hơn LLM của Google nhờ dữ liệu đào tạo rộng hơn. Hiện tại, nó có thể tạo văn bản ngôn ngữ tự nhiên cho hầu hết mọi tác vụ hoặc miền có thể tưởng tượng được. Một số trong số đó là dịch thuật, tóm tắt, trả lời câu hỏi, hội thoại chatbot, hoàn thành văn bản, tạo văn bản, phân tích văn bản, tổng hợp văn bản, phân loại văn bản, trích xuất văn bản,
diễn giải văn bản, và nhiều hơn nữa.

Phán quyết: PaLM 2 so với GPT4

Nó phụ thuộc vào nhu cầu của bạn. Nếu bạn cần một LLM mạnh về lý luận và logic, với nút “Google it”, thì PaLM 2 là lựa chọn tốt hơn. Nếu bạn cần một LLM nhanh, tạo văn bản tốt và đã chứng minh được bản thân thì GPT-4 là lựa chọn tốt hơn.

Cuối cùng, cách tốt nhất để chọn LLM là thử cả hai và xem cái nào phù hợp nhất với bạn. AI là một hành trình chỉ giới hạn trong trí tưởng tượng của bạn.

Ồ, bạn mới làm quen với AI à, và mọi thứ dường như quá phức tạp? Hãy đọc tiếp…

---

Hình ảnh lịch sự: Google

AI 101

Bạn vẫn có thể lên tàu AI! Chúng tôi đã tạo ra một chi tiết Bảng thuật ngữ AI để được sử dụng phổ biến nhất thuật ngữ trí tuệ nhân tạo và giải thích những điều cơ bản về trí tuệ nhân tạo cũng như các rủi ro và lợi ích của AI. Hãy thoải mái sử dụng chúng. Học hỏi cách sử dụng AI là một thay đổi trò chơi! Mô hình AI sẽ thay đổi thế giới.

Trong phần tiếp theo, bạn có thể tìm thấy công cụ AI tốt nhất để sử dụng để tạo video do AI tạo và hơn thế nữa.

Các công cụ AI chúng tôi đã xem xét

Hầu như mỗi ngày, một công cụ, mô hình hoặc tính năng mới xuất hiện và thay đổi cuộc sống của chúng tôi và chúng tôi đã xem xét một số công cụ, mô hình hoặc tính năng tốt nhất:

• Công cụ AI chuyển văn bản thành văn bản

Bạn có muốn học không cách sử dụng ChatGPT hiệu quả? Chúng tôi có một số mẹo và thủ thuật dành cho bạn mà không cần chuyển sang Trò chuyệnGPT Plus, Giống như cách tải PDF lên ChatGPT! Tuy nhiên, khi bạn muốn sử dụng công cụ AI, bạn có thể gặp lỗi như “ChatGPT hiện đang hoạt động hết công suất” và "quá nhiều yêu cầu trong 1 giờ, hãy thử lại sau". Vâng, chúng thực sự là những lỗi khó chịu, nhưng đừng lo lắng; chúng tôi biết làm thế nào để sửa chữa chúng. Đạo văn ChatGPT có miễn phí không? Đó là một câu hỏi khó để tìm thấy một câu trả lời duy nhất. Nếu bạn sợ đạo văn, hãy sử dụng Công cụ kiểm tra đạo văn AI. Ngoài ra, bạn có thể kiểm tra khác Chatbot AI và người viết tiểu luận AI cho kết quả tốt hơn.

• Công cụ AI chuyển văn bản thành hình ảnh

Trong khi vẫn còn một số tranh luận về hình ảnh do trí tuệ nhân tạo tạo ra, mọi người vẫn đang tìm kiếm máy tạo nghệ thuật AI tốt nhất. AI sẽ thay thế các nhà thiết kế? Tiếp tục đọc và tìm hiểu.

• Công cụ video AI
• Công cụ trình bày AI
• Công cụ tìm kiếm AI
• Công cụ thiết kế nội thất AI
• Các công cụ AI khác

• Phân phối nội dung và PR được hỗ trợ bởi SEO. Được khuếch đại ngay hôm nay.
• PlatoAiStream. Thông minh dữ liệu Web3. Kiến thức khuếch đại. Truy cập Tại đây.
• Đúc kết tương lai với Adryenn Ashley. Truy cập Tại đây.
• Mua và bán cổ phần trong các công ty PRE-IPO với PREIPO®. Truy cập Tại đây.
• nguồn: https://dataconomy.com/2023/05/11/what-is-palm-2-vs-gpt4-google-ai-bard/