• Contact Us
  • Disclaimer
  • Terms and Conditions
  • Privacy Policy
  • Login
Diễn Đàn Phổ Cập Blockchain
  • Trang chủ
  • Tin tức 24H
    • Tất cả
    • Bình luận dự án
    • Bình luận sự kiện trong tuần
    • Sự kiện
    • Tin 24H
    • Tin tức AI
    • Tin tức Blockchain
    Sở Giao dịch Moscow tại Nga ra mắt hợp đồng tương lai Bitcoin

    Sở Giao dịch Moscow tại Nga ra mắt hợp đồng tương lai Bitcoin

    Mỹ truy thu 7,7 triệu USD từ mưu đồ crypto của Triều Tiên

    Mỹ truy thu 7,7 triệu USD từ mưu đồ crypto của Triều Tiên

    Bưu điện Romania đặt cược vào Bitcoin trong chiến lược số hóa

    Bưu điện Romania đặt cược vào Bitcoin trong chiến lược số hóa

    Cựu Chủ tịch CFTC cảnh báo Clarity Act có thể làm suy yếu thị trường

    Cựu Chủ tịch CFTC cảnh báo Clarity Act có thể làm suy yếu thị trường

    Ngân hàng Kenya sẵn sàng tham gia thị trường tiền mã hóa

    Ngân hàng Kenya sẵn sàng tham gia thị trường tiền mã hóa

    Tổ chức crypto vận động bảo vệ nhà phát triển phần mềm

    Tổ chức crypto vận động bảo vệ nhà phát triển phần mềm

    Kazakhstan phê duyệt phát hành thẻ thanh toán tiền mã hóa

    Kazakhstan phê duyệt phát hành thẻ thanh toán tiền mã hóa

    BlackRock dẫn dắt dòng vốn ETF Bitcoin đạt 87 triệu USD

    BlackRock dẫn dắt dòng vốn ETF Bitcoin đạt 87 triệu USD

    Uber xem xét stablecoin để giảm chi phí thanh toán toàn cầu

    Uber xem xét stablecoin để giảm chi phí thanh toán toàn cầu

  • Kiến thức
    • Tất cả
    • Kiến thức chuyên sâu
    • Kiến thức cơ bản
    • Nghiên cứu
    Tiền mã hóa: Cuộc đối đầu định hình trật tự toàn cầu

    Tiền mã hóa: Cuộc đối đầu định hình trật tự toàn cầu

    Cách tin tặc sử dụng điện thoại giả để đánh cắp tài sản mã hóa

    Cách tin tặc sử dụng điện thoại giả để đánh cắp tài sản mã hóa

    Các quy định thuế mà digital nomad cần biết vào năm 2025

    Các quy định thuế mà digital nomad cần biết vào năm 2025

    Tìm hiểu về sự kết hợp và thách thức của AI và DeFi

    Tìm hiểu về sự kết hợp và thách thức của AI và DeFi

    Lừa đảo tình cảm bằng AI: Biên giới mới trong gian lận tiền mã hóa

    Lừa đảo tình cảm bằng AI: Biên giới mới trong gian lận tiền mã hóa

    Chính phủ sử dụng blockchain cho các dịch vụ công như thế nào?

    Chính phủ sử dụng blockchain cho các dịch vụ công như thế nào?

    Sự khác nhau giữa CBDC trực tuyến và CBDC ngoại tuyến

    Sự khác nhau giữa CBDC trực tuyến và CBDC ngoại tuyến

    Cách token hóa tài sản thực (RWA): So sánh giữa Ethereum và Solana

    Cách token hóa tài sản thực (RWA): So sánh giữa Ethereum và Solana

    Sự khác biệt giữa stablecoin thuật toán và stablecoin được thế chấp

    Sự khác biệt giữa stablecoin thuật toán và stablecoin được thế chấp

  • Pháp lý
    • Tất cả
    • Gian lận & Scam
    • Quốc tế
    • Việt Nam
    CFTC giảm tốc xử lý pháp lý trong lĩnh vực tiền mã hóa

    CFTC giảm tốc xử lý pháp lý trong lĩnh vực tiền mã hóa

    83% nhà đầu tư crypto từng là nạn nhân của lừa đảo hoặc hack

    83% nhà đầu tư crypto từng là nạn nhân của lừa đảo hoặc hack

    Solana Policy Institute xuất hiện tại Washington

    Solana Policy Institute xuất hiện tại Washington

    Nigeria chính thức công nhận tiền mã hóa là tài sản

    Nigeria chính thức công nhận tiền mã hóa là tài sản

    Thượng nghị sĩ Kennedy đòi điều tra cha mẹ nhà sáng lập FTX

    Thượng nghị sĩ Kennedy đòi điều tra cha mẹ nhà sáng lập FTX

    Hàn Quốc siết chặt kiểm soát sàn tiền mã hóa nước ngoài

    Hàn Quốc siết chặt kiểm soát sàn tiền mã hóa nước ngoài

    Cảnh báo lừa đảo trát tòa giả mạo, yêu cầu nộp Bitcoin

    Cảnh báo lừa đảo trát tòa giả mạo, yêu cầu nộp Bitcoin

    Tội phạm mạng Nga tăng 30% hàng năm, thiệt hại 3 tỷ USD

    Tội phạm mạng Nga tăng 30% hàng năm, thiệt hại 3 tỷ USD

    Cảnh sát Tây Ban Nha phá đường dây lừa đảo crypto 32 triệu USD

    Cảnh sát Tây Ban Nha phá đường dây lừa đảo crypto 32 triệu USD

  • Ứng dụng
    • Tất cả
    • CBDC
    • Game
    • Kinh tế
    • NFT
    • Tài chính ngân hàng
    Hàn Quốc thử nghiệm CBDC với 100.000 người dùng

    Hàn Quốc thử nghiệm CBDC với 100.000 người dùng

    Tổng thống Ghana coi Solana là chìa khóa cho fintech

    Tổng thống Ghana coi Solana là chìa khóa cho fintech

    Stablecoin: cuộc đua mới của ngân hàng và fintech

    Stablecoin: cuộc đua mới của ngân hàng và fintech

    Mỹ thành lập nhóm nghị sĩ lưỡng đảng về tiền mã hóa

    Nghị sĩ mỹ: stablecoin là chìa khóa củng cố vị thế đồng USD

    Nishikigoi NFT là tên của loài cá koi nổi tiếng

    Dự án NFT hỗ trợ người cao tuổi tại làng Yamakoshi Nhật Bản

    Tất tần tật về hàng hoá được mã hoá (Tokenized Commodities)

    Tất tần tật về hàng hoá được mã hoá (Tokenized Commodities)

    Nhật Bản ra mắt hội đồng chuyên gia để nghiên cứu CBDC

    Nhật Bản ra mắt hội đồng chuyên gia để nghiên cứu CBDC

    Các Ngân hàng Trung ương có thể mất kiểm soát nếu không áp dụng CBDC

    Các Ngân hàng Trung ương có thể mất kiểm soát nếu không áp dụng CBDC

    Tỉnh Phúc Kiến – Trung Quốc xử lý gần 22 tỷ USD giao dịch bằng CBDC

    Tỉnh Phúc Kiến – Trung Quốc xử lý gần 22 tỷ USD giao dịch bằng CBDC

  • DeFi
    Sự trỗi dậy của DeFi: Khám phá cơ hội và thách thức

    Sự trỗi dậy của DeFi: Khám phá cơ hội và thách thức

    Tổng giá trị bị khóa (TVL) là gì và tại sao nó lại quan trọng?

    Tổng giá trị bị khóa (TVL) là gì và tại sao nó lại quan trọng?

    Tương lai của DeFi – Sự phát triển mới nổi

    Tương lai của DeFi – Sự phát triển mới nổi

    Tài chính truyền thống là gì? Tại sao hệ thống tài chính hiện tại đang lung lay?

    Tài chính truyền thống là gì? Tại sao hệ thống tài chính hiện tại đang lung lay?

    SushiSwap (SUSHI) là gì?

    Curve Finance (CRV) là gì?

    Uniswap (UNI) là gì?

    Compound (COMP) là gì?

    Compound (COMP) là gì?

    Tìm hiểu về cho vay tiền điện tử

    Tìm hiểu về cho vay tiền điện tử

  • Góc nhìn
    Kiyosaki: khủng hoảng tài chính lớn nhất lịch sử đã bắt đầu

    Kiyosaki: khủng hoảng tài chính lớn nhất lịch sử đã bắt đầu

    Đồng yên Nhật tăng, tác động lên thị trường toàn cầu

    Đồng yên Nhật tăng, tác động lên thị trường toàn cầu

    Sử dụng AI để giải thích về loài người cho người ngoài hành tinh

    Sử dụng AI để giải thích về loài người cho người ngoài hành tinh

    Ethereum “lép vế” Bitcoin: 3 nguyên nhân chính trong năm 2024

    Ethereum “lép vế” Bitcoin: 3 nguyên nhân chính trong năm 2024

    Cách mạng niềm tin trong kỷ nguyên số: Blockchain tăng cường bảo mật và minh bạch

    Cách mạng niềm tin trong kỷ nguyên số: Blockchain tăng cường bảo mật và minh bạch

    AI Tổng hợp AGI sẽ trở thành hiện thực vào 2027?

    AI Tổng hợp AGI sẽ trở thành hiện thực vào 2027?

    Bitcoin có thể đạt 130.000 USD vào tháng 9/2025

    Bitcoin có thể đạt 130.000 USD vào tháng 9/2025

    Account Abstraction: Cách mạng mới trong quản lý tài sản Web3

    Account Abstraction: Cách mạng mới trong quản lý tài sản Web3

    Game Blockchain: Xu hướng chơi game mới

    Game Blockchain: Xu hướng chơi game mới

  • Đầu tư
    • Tất cả
    • Đầu tư Tài chính
    • Tài chính cá nhân
    • Tài chính doanh nghiệp
    Robert Kiyosaki: Bạc sẽ vượt mặt Bitcoin và vàng

    Robert Kiyosaki: Bạc sẽ vượt mặt Bitcoin và vàng

    XRP giữa ngưỡng $2.30, đối diện rủi ro đảo chiều

    XRP giữa ngưỡng $2.30, đối diện rủi ro đảo chiều

    Bitcoin mất tương quan với vàng, kim loại quý lập đỉnh mới

    Bitcoin mất tương quan với vàng, kim loại quý lập đỉnh mới

    Ripple được cấp phép hoạt động tại Dubai, mở rộng sang Trung Đông

    Ripple được cấp phép hoạt động tại Dubai, mở rộng sang Trung Đông

    Đề xuất “trái phiếu Bitcoin” giải quyết nợ quốc gia Mỹ

    Đề xuất “trái phiếu Bitcoin” giải quyết nợ quốc gia Mỹ

    USD và lợi suất trái phiếu giảm: cứu cánh cho tài sản rủi ro?

    USD và lợi suất trái phiếu giảm: cứu cánh cho tài sản rủi ro?

    Samsung lãi hơn 7 tỷ USD trong quý 2/2024

    Samsung lãi hơn 7 tỷ USD trong quý 2/2024

    Ethena là gì? Mô hình hoạt động của Ethena có phải là Ponzi và rủi ro như UST-LUNA?

    Ethena là gì? Mô hình hoạt động của Ethena có phải là Ponzi và rủi ro như UST-LUNA?

    BlackRock ra mắt quỹ tài sản token hoá

    BlackRock ra mắt quỹ tài sản token hoá

  • Nhân sự blockchain

    Tìm kiếm công việc của bạn trong thế giới tiền điện tử

No Result
View All Result
  • Trang chủ
  • Tin tức 24H
    • Tất cả
    • Bình luận dự án
    • Bình luận sự kiện trong tuần
    • Sự kiện
    • Tin 24H
    • Tin tức AI
    • Tin tức Blockchain
    Sở Giao dịch Moscow tại Nga ra mắt hợp đồng tương lai Bitcoin

    Sở Giao dịch Moscow tại Nga ra mắt hợp đồng tương lai Bitcoin

    Mỹ truy thu 7,7 triệu USD từ mưu đồ crypto của Triều Tiên

    Mỹ truy thu 7,7 triệu USD từ mưu đồ crypto của Triều Tiên

    Bưu điện Romania đặt cược vào Bitcoin trong chiến lược số hóa

    Bưu điện Romania đặt cược vào Bitcoin trong chiến lược số hóa

    Cựu Chủ tịch CFTC cảnh báo Clarity Act có thể làm suy yếu thị trường

    Cựu Chủ tịch CFTC cảnh báo Clarity Act có thể làm suy yếu thị trường

    Ngân hàng Kenya sẵn sàng tham gia thị trường tiền mã hóa

    Ngân hàng Kenya sẵn sàng tham gia thị trường tiền mã hóa

    Tổ chức crypto vận động bảo vệ nhà phát triển phần mềm

    Tổ chức crypto vận động bảo vệ nhà phát triển phần mềm

    Kazakhstan phê duyệt phát hành thẻ thanh toán tiền mã hóa

    Kazakhstan phê duyệt phát hành thẻ thanh toán tiền mã hóa

    BlackRock dẫn dắt dòng vốn ETF Bitcoin đạt 87 triệu USD

    BlackRock dẫn dắt dòng vốn ETF Bitcoin đạt 87 triệu USD

    Uber xem xét stablecoin để giảm chi phí thanh toán toàn cầu

    Uber xem xét stablecoin để giảm chi phí thanh toán toàn cầu

  • Kiến thức
    • Tất cả
    • Kiến thức chuyên sâu
    • Kiến thức cơ bản
    • Nghiên cứu
    Tiền mã hóa: Cuộc đối đầu định hình trật tự toàn cầu

    Tiền mã hóa: Cuộc đối đầu định hình trật tự toàn cầu

    Cách tin tặc sử dụng điện thoại giả để đánh cắp tài sản mã hóa

    Cách tin tặc sử dụng điện thoại giả để đánh cắp tài sản mã hóa

    Các quy định thuế mà digital nomad cần biết vào năm 2025

    Các quy định thuế mà digital nomad cần biết vào năm 2025

    Tìm hiểu về sự kết hợp và thách thức của AI và DeFi

    Tìm hiểu về sự kết hợp và thách thức của AI và DeFi

    Lừa đảo tình cảm bằng AI: Biên giới mới trong gian lận tiền mã hóa

    Lừa đảo tình cảm bằng AI: Biên giới mới trong gian lận tiền mã hóa

    Chính phủ sử dụng blockchain cho các dịch vụ công như thế nào?

    Chính phủ sử dụng blockchain cho các dịch vụ công như thế nào?

    Sự khác nhau giữa CBDC trực tuyến và CBDC ngoại tuyến

    Sự khác nhau giữa CBDC trực tuyến và CBDC ngoại tuyến

    Cách token hóa tài sản thực (RWA): So sánh giữa Ethereum và Solana

    Cách token hóa tài sản thực (RWA): So sánh giữa Ethereum và Solana

    Sự khác biệt giữa stablecoin thuật toán và stablecoin được thế chấp

    Sự khác biệt giữa stablecoin thuật toán và stablecoin được thế chấp

  • Pháp lý
    • Tất cả
    • Gian lận & Scam
    • Quốc tế
    • Việt Nam
    CFTC giảm tốc xử lý pháp lý trong lĩnh vực tiền mã hóa

    CFTC giảm tốc xử lý pháp lý trong lĩnh vực tiền mã hóa

    83% nhà đầu tư crypto từng là nạn nhân của lừa đảo hoặc hack

    83% nhà đầu tư crypto từng là nạn nhân của lừa đảo hoặc hack

    Solana Policy Institute xuất hiện tại Washington

    Solana Policy Institute xuất hiện tại Washington

    Nigeria chính thức công nhận tiền mã hóa là tài sản

    Nigeria chính thức công nhận tiền mã hóa là tài sản

    Thượng nghị sĩ Kennedy đòi điều tra cha mẹ nhà sáng lập FTX

    Thượng nghị sĩ Kennedy đòi điều tra cha mẹ nhà sáng lập FTX

    Hàn Quốc siết chặt kiểm soát sàn tiền mã hóa nước ngoài

    Hàn Quốc siết chặt kiểm soát sàn tiền mã hóa nước ngoài

    Cảnh báo lừa đảo trát tòa giả mạo, yêu cầu nộp Bitcoin

    Cảnh báo lừa đảo trát tòa giả mạo, yêu cầu nộp Bitcoin

    Tội phạm mạng Nga tăng 30% hàng năm, thiệt hại 3 tỷ USD

    Tội phạm mạng Nga tăng 30% hàng năm, thiệt hại 3 tỷ USD

    Cảnh sát Tây Ban Nha phá đường dây lừa đảo crypto 32 triệu USD

    Cảnh sát Tây Ban Nha phá đường dây lừa đảo crypto 32 triệu USD

  • Ứng dụng
    • Tất cả
    • CBDC
    • Game
    • Kinh tế
    • NFT
    • Tài chính ngân hàng
    Hàn Quốc thử nghiệm CBDC với 100.000 người dùng

    Hàn Quốc thử nghiệm CBDC với 100.000 người dùng

    Tổng thống Ghana coi Solana là chìa khóa cho fintech

    Tổng thống Ghana coi Solana là chìa khóa cho fintech

    Stablecoin: cuộc đua mới của ngân hàng và fintech

    Stablecoin: cuộc đua mới của ngân hàng và fintech

    Mỹ thành lập nhóm nghị sĩ lưỡng đảng về tiền mã hóa

    Nghị sĩ mỹ: stablecoin là chìa khóa củng cố vị thế đồng USD

    Nishikigoi NFT là tên của loài cá koi nổi tiếng

    Dự án NFT hỗ trợ người cao tuổi tại làng Yamakoshi Nhật Bản

    Tất tần tật về hàng hoá được mã hoá (Tokenized Commodities)

    Tất tần tật về hàng hoá được mã hoá (Tokenized Commodities)

    Nhật Bản ra mắt hội đồng chuyên gia để nghiên cứu CBDC

    Nhật Bản ra mắt hội đồng chuyên gia để nghiên cứu CBDC

    Các Ngân hàng Trung ương có thể mất kiểm soát nếu không áp dụng CBDC

    Các Ngân hàng Trung ương có thể mất kiểm soát nếu không áp dụng CBDC

    Tỉnh Phúc Kiến – Trung Quốc xử lý gần 22 tỷ USD giao dịch bằng CBDC

    Tỉnh Phúc Kiến – Trung Quốc xử lý gần 22 tỷ USD giao dịch bằng CBDC

  • DeFi
    Sự trỗi dậy của DeFi: Khám phá cơ hội và thách thức

    Sự trỗi dậy của DeFi: Khám phá cơ hội và thách thức

    Tổng giá trị bị khóa (TVL) là gì và tại sao nó lại quan trọng?

    Tổng giá trị bị khóa (TVL) là gì và tại sao nó lại quan trọng?

    Tương lai của DeFi – Sự phát triển mới nổi

    Tương lai của DeFi – Sự phát triển mới nổi

    Tài chính truyền thống là gì? Tại sao hệ thống tài chính hiện tại đang lung lay?

    Tài chính truyền thống là gì? Tại sao hệ thống tài chính hiện tại đang lung lay?

    SushiSwap (SUSHI) là gì?

    Curve Finance (CRV) là gì?

    Uniswap (UNI) là gì?

    Compound (COMP) là gì?

    Compound (COMP) là gì?

    Tìm hiểu về cho vay tiền điện tử

    Tìm hiểu về cho vay tiền điện tử

  • Góc nhìn
    Kiyosaki: khủng hoảng tài chính lớn nhất lịch sử đã bắt đầu

    Kiyosaki: khủng hoảng tài chính lớn nhất lịch sử đã bắt đầu

    Đồng yên Nhật tăng, tác động lên thị trường toàn cầu

    Đồng yên Nhật tăng, tác động lên thị trường toàn cầu

    Sử dụng AI để giải thích về loài người cho người ngoài hành tinh

    Sử dụng AI để giải thích về loài người cho người ngoài hành tinh

    Ethereum “lép vế” Bitcoin: 3 nguyên nhân chính trong năm 2024

    Ethereum “lép vế” Bitcoin: 3 nguyên nhân chính trong năm 2024

    Cách mạng niềm tin trong kỷ nguyên số: Blockchain tăng cường bảo mật và minh bạch

    Cách mạng niềm tin trong kỷ nguyên số: Blockchain tăng cường bảo mật và minh bạch

    AI Tổng hợp AGI sẽ trở thành hiện thực vào 2027?

    AI Tổng hợp AGI sẽ trở thành hiện thực vào 2027?

    Bitcoin có thể đạt 130.000 USD vào tháng 9/2025

    Bitcoin có thể đạt 130.000 USD vào tháng 9/2025

    Account Abstraction: Cách mạng mới trong quản lý tài sản Web3

    Account Abstraction: Cách mạng mới trong quản lý tài sản Web3

    Game Blockchain: Xu hướng chơi game mới

    Game Blockchain: Xu hướng chơi game mới

  • Đầu tư
    • Tất cả
    • Đầu tư Tài chính
    • Tài chính cá nhân
    • Tài chính doanh nghiệp
    Robert Kiyosaki: Bạc sẽ vượt mặt Bitcoin và vàng

    Robert Kiyosaki: Bạc sẽ vượt mặt Bitcoin và vàng

    XRP giữa ngưỡng $2.30, đối diện rủi ro đảo chiều

    XRP giữa ngưỡng $2.30, đối diện rủi ro đảo chiều

    Bitcoin mất tương quan với vàng, kim loại quý lập đỉnh mới

    Bitcoin mất tương quan với vàng, kim loại quý lập đỉnh mới

    Ripple được cấp phép hoạt động tại Dubai, mở rộng sang Trung Đông

    Ripple được cấp phép hoạt động tại Dubai, mở rộng sang Trung Đông

    Đề xuất “trái phiếu Bitcoin” giải quyết nợ quốc gia Mỹ

    Đề xuất “trái phiếu Bitcoin” giải quyết nợ quốc gia Mỹ

    USD và lợi suất trái phiếu giảm: cứu cánh cho tài sản rủi ro?

    USD và lợi suất trái phiếu giảm: cứu cánh cho tài sản rủi ro?

    Samsung lãi hơn 7 tỷ USD trong quý 2/2024

    Samsung lãi hơn 7 tỷ USD trong quý 2/2024

    Ethena là gì? Mô hình hoạt động của Ethena có phải là Ponzi và rủi ro như UST-LUNA?

    Ethena là gì? Mô hình hoạt động của Ethena có phải là Ponzi và rủi ro như UST-LUNA?

    BlackRock ra mắt quỹ tài sản token hoá

    BlackRock ra mắt quỹ tài sản token hoá

  • Nhân sự blockchain

    Tìm kiếm công việc của bạn trong thế giới tiền điện tử

No Result
View All Result
Diễn Đàn Phổ Cập Blockchain
Trang chủ Tin tức 24H Tin tức AI

Token và giới hạn của mô hình AI hiện nay

bởi Huy Ngo
19/07/2024
trong Tin tức AI, Tin tức 24H
A A
0
Token và giới hạn của mô hình AI hiện nay

Quá trình xử lý ngôn ngữ dựa trên “token” của mô hình AI thế hệ mới đang bộc lộ nhiều hạn chế, đặt ra rào cản lớn cho sự phát triển của lĩnh vực này.

Mô hình AI tạo sinh, bao gồm từ Gemma nhỏ gọn đến GPT-4 tiên tiến, đều dựa trên kiến ​​trúc transformer. Thay vì xử lý văn bản thô như con người, transformer vận hành bằng cách mã hóa dữ liệu thành các đơn vị nhỏ hơn gọi là “token.” Token có thể là từ, âm tiết hoặc thậm chí là từng ký tự riêng lẻ. Quá trình này, được gọi là tokenization, cho phép AI tiếp nhận thông tin hiệu quả hơn, nhưng đồng thời cũng tạo ra nhiều hạn chế.

Một trong những thách thức chính là sự thiếu nhất quán trong cách token được xử lý. Ví dụ, mô hình có thể phân tích “once upon a time” thành “once”, “upon”, “a”, “time”, trong khi “once upon a ” (có dấu cách ở cuối) lại được hiểu là “once”, “upon”, “a”, ” “. Điều này khiến mô hình gặp khó khăn trong việc hiểu ngữ cảnh và ý nghĩa thực sự của câu, dẫn đến kết quả không chính xác.

BÀI VIẾT LIÊN QUAN

Blockchain và AI: động lực thúc đẩy DePIN cán mốc 3.500 tỷ USD vào năm 2028

3,3 tỷ USD token chuẩn bị được mở khóa trong tháng 6

Thái Lan phát hành token để huy động vốn cộng đồng

Solana Name Service ra mắt token SNS

Hơn nữa, việc phân biệt chữ hoa, chữ thường cũng tạo ra sự khác biệt đáng kể. Đối với mô hình, “Hello” và “HELLO” có thể được hiểu là hai khái niệm hoàn toàn khác nhau. Chính sự mơ hồ trong cách thức mã hóa token này đã khiến nhiều mô hình AI thất bại trong các bài kiểm tra đơn giản về chữ hoa.

Theo Sheridan Feucht, nghiên cứu sinh tiến sĩ tại Đại học Northeastern, không có khái niệm “token hoàn hảo.” Bản thân ngôn ngữ vốn dĩ đã chứa đựng nhiều yếu tố phức tạp, và việc xác định đâu là đơn vị ngữ nghĩa tối ưu để mã hóa vẫn là một bài toán nan giải.

Vấn đề càng trở nên trầm trọng hơn khi xét đến các ngôn ngữ khác ngoài tiếng Anh. Nhiều phương pháp mã hóa hiện nay mặc định khoảng trắng là dấu hiệu phân cách từ, nhưng điều này không phù hợp với các ngôn ngữ như tiếng Trung, tiếng Nhật, tiếng Hàn,… Theo một nghiên cứu năm 2023 của Đại học Oxford, việc mã hóa ngôn ngữ không hiệu quả có thể khiến mô hình AI mất gấp đôi thời gian để xử lý một tác vụ so với tiếng Anh.

Người dùng sử dụng các ngôn ngữ “kém hiệu quả về token” này cũng có khả năng phải đối mặt với hiệu suất AI kém hơn và chi phí sử dụng cao hơn do nhiều nhà cung cấp tính phí dựa trên số lượng token.

Nghiên cứu cũng trong cùng năm 2023 của Yennie Jun, nhà nghiên cứu AI tại Google DeepMind, cũng chỉ ra rằng một số ngôn ngữ cần gấp 10 lần số lượng token so với tiếng Anh để truyền tải cùng một ý nghĩa. Điều này cho thấy rõ sự bất bình đẳng về ngôn ngữ trong lĩnh vực AI.

Ngoài ra, tokenization còn được cho là nguyên nhân khiến mô hình AI hiện tại gặp khó khăn trong việc xử lý toán học. Do không thực sự hiểu về số, tokenizer có thể coi “380” là một token, nhưng biểu thị “381” là một cặp (“38” và “1”), phá hủy mối quan hệ giữa các chữ số và dẫn đến sự nhầm lẫn cho transformer.

Việc mã hóa số không nhất quán khiến mô hình khó nắm bắt mối quan hệ giữa các chữ số trong phương trình và công thức toán học.

We will see that a lot of weird behaviors and problems of LLMs actually trace back to tokenization. We'll go through a number of these issues, discuss why tokenization is at fault, and why someone out there ideally finds a way to delete this stage entirely. pic.twitter.com/5haV7FvbBx

— Andrej Karpathy (@karpathy) February 20, 2024

Mặc dù gặp nhiều thách thức, nhưng các nhà khoa học đang tích cực nghiên cứu những giải pháp khả thi. Mô hình không gian trạng thái “byte-level” như MambaByte, có khả năng xử lý trực tiếp dữ liệu thô ở dạng byte, cho thấy tiềm năng vượt trội trong việc xử lý “nhiễu” ngôn ngữ và phân tích văn bản hiệu quả hơn. Tuy nhiên, MambaByte và các mô hình tương tự vẫn đang trong giai đoạn nghiên cứu ban đầu.

Theo Sheridan Feucht, “Việc loại bỏ hoàn toàn tokenization là hướng đi khả thi, nhưng hiện tại điều đó là bất khả thi về mặt tính toán đối với transformer.”

Sự xuất hiện của các kiến trúc mô hình mới có thể là chìa khóa đột phá cho bài toán tokenization. Trước mắt, các nhà nghiên cứu tiếp tục tìm kiếm giải pháp tối ưu hóa tokenization cho các ngôn ngữ khác nhau, hướng đến một tương lai nơi AI có thể thấu hiểu và xử lý ngôn ngữ một cách tự nhiên và hiệu quả.

Tags: AItoken
ShareTweetShare
Huy Ngo

Huy Ngo

BÀI VIẾT LIÊN QUAN

Sở Giao dịch Moscow tại Nga ra mắt hợp đồng tương lai Bitcoin
Tin tức 24H

Sở Giao dịch Moscow tại Nga ra mắt hợp đồng tương lai Bitcoin

06/06/2025
Mỹ truy thu 7,7 triệu USD từ mưu đồ crypto của Triều Tiên
Tin tức Blockchain

Mỹ truy thu 7,7 triệu USD từ mưu đồ crypto của Triều Tiên

06/06/2025
Bưu điện Romania đặt cược vào Bitcoin trong chiến lược số hóa
Tin tức Blockchain

Bưu điện Romania đặt cược vào Bitcoin trong chiến lược số hóa

06/06/2025
Theo dõi
Đăng nhập
Thông báo của
guest
guest
0 Góp ý
Phản hồi nội tuyến
Xem tất cả bình luận

CỘNG ĐỒNG

Facebook Youtube

BÀI MỚI

Sở Giao dịch Moscow tại Nga ra mắt hợp đồng tương lai Bitcoin

Sở Giao dịch Moscow tại Nga ra mắt hợp đồng tương lai Bitcoin

2 ngày ago
Mỹ truy thu 7,7 triệu USD từ mưu đồ crypto của Triều Tiên

Mỹ truy thu 7,7 triệu USD từ mưu đồ crypto của Triều Tiên

2 ngày ago
Bưu điện Romania đặt cược vào Bitcoin trong chiến lược số hóa

Bưu điện Romania đặt cược vào Bitcoin trong chiến lược số hóa

2 ngày ago
Cựu Chủ tịch CFTC cảnh báo Clarity Act có thể làm suy yếu thị trường

Cựu Chủ tịch CFTC cảnh báo Clarity Act có thể làm suy yếu thị trường

2 ngày ago
Ngân hàng Kenya sẵn sàng tham gia thị trường tiền mã hóa

Ngân hàng Kenya sẵn sàng tham gia thị trường tiền mã hóa

2 ngày ago
Tổ chức crypto vận động bảo vệ nhà phát triển phần mềm

Tổ chức crypto vận động bảo vệ nhà phát triển phần mềm

2 ngày ago

VIDEOS

Currently Playing

Stablecoin là gì? Tại sao stablecoin lại quan trọng trong thị trường crypto? | Phổ cập Blockchain

Stablecoin là gì? Tại sao stablecoin lại quan trọng trong thị trường crypto? | Phổ cập Blockchain

00:07:29

NFT là gì? Các bước tạo NFT cho người mới? Kiếm tiền từ NFT? | Phổ cập blockchain

00:03:46

Tiếp nối Blockchain, trí tuệ nhân tạo (AI) có phải là làn sóng đầu tư mới? | Phổ cập Blockchain

00:45:25

CBDC là gì? Tổng quan về CBDC? Tại sao ngân hàng trung ương lại quan trọng? | Phổ cập Blockchain

00:04:38

Triển vọng nào cho Bitcoin. Thị trường liệu có uptrend trong năm 2023? | Phổ cập Blockchain

00:02:14

Nhìn lại năm 2022: Những sự kiện ảnh hưởng đến hệ sinh thái tiền mã hoá | Phổ cập Blockchain

00:15:29

Nhìn lại năm 2022: Những nhân vật ảnh hưởng nhất hệ sinh thái tiền mã hoá | Phổ cập Blockchain

00:16:07

Talkshow 27: Ranh giới giữa tầm ảnh hưởng và sự thao túng giá | Phổ cập Blockchain

01:35:05

Nhân sự tương lại ngành Blockchain Việt Nam | Phổ cập Blockchain

00:43:47

Blockchain đang được ứng dụng ở Việt Nam như thể nào?

00:39:31

Chìa khóa mở lối cơ hội trước các quĩ đầu tư | Phổ cập Blockchain

00:35:11

Talkshow 20: Biến động giá của tài sản truyền thống & Crypto qua các cuộc chiến | Phổ cập Blockchain

01:34:46

Talkshow 19: GameFi Việt Nam – Báo động đỏ

01:24:45

Talkshow18: Làn sóng tài năng Việt trở về từ Silicon Valley - Sức bật mới cho Việt Nam

01:32:59

Talkshow17: Mùa đông Crypto – Chiếc khăn gió ấm

01:40:40

Talkshow 16: Làn sóng số tại Việt Nam và thế giới

01:49:30

Talkshow 14: MemeCoin – Trò đùa tỷ đô #phocapblockchain #PCB #meme

01:29:26

CHUYÊN MỤC

  • Blockchain 2022 (7)
  • Đầu tư (18)
    • Đầu tư Tài chính (3)
    • Tài chính cá nhân (3)
    • Tài chính doanh nghiệp (3)
  • Featured (4)
  • Góc nhìn (189)
  • Kiến thức (290)
    • Kiến thức chuyên sâu (23)
      • Bảo mật (15)
      • Chain (1)
      • Kỹ thuật (2)
      • Mật mã (2)
    • Kiến thức cơ bản (124)
      • Bitcoin (17)
      • Blockchain (51)
      • Coin & Token (36)
      • DeFi (19)
      • Đồng thuận (4)
      • Ethereum (9)
      • Mining (1)
      • Sàn giao dịch (3)
      • Trade (2)
      • Ví (4)
    • Nghiên cứu (9)
      • Case Study (3)
  • Metaverse (18)
  • Nhân sự blockchain (1)
  • Pháp lý (127)
    • Gian lận & Scam (23)
    • Quốc tế (13)
    • Việt Nam (2)
  • Pi (7)
    • Cộng đồng PI Network Việt Nam (1)
    • Cộng đồng PI Node (7)
    • Từ điển PI Network (1)
  • Tâm sự (1)
  • Tin tức 24H (3.354)
    • Bình luận dự án (1)
    • Bình luận sự kiện trong tuần (4)
    • Sự kiện (33)
    • Tin 24H (303)
    • Tin tức AI (415)
    • Tin tức Blockchain (1.157)
  • Uncategorized (30)
  • Ứng dụng (104)
    • CBDC (53)
    • Game (4)
    • Kinh tế (2)
    • NFT (17)
    • Tài chính ngân hàng (6)
  • Contact Us
  • Disclaimer
  • Terms and Conditions
  • Privacy Policy
© 2021 Phổ Cập Blockchain Website.
All Right Reserved.
No Result
View All Result
  • Trang chủ
  • Tin tức 24H
  • Kiến thức
  • Pháp lý
  • Ứng dụng
  • DeFi
  • Góc nhìn
  • Đầu tư
  • Nhân sự blockchain

Welcome Back!

Login to your account below

Forgotten Password?

Retrieve your password

Please enter your username or email address to reset your password.

Log In
  • Steakhouse EURCV Morpho VaultSteakhouse EURCV Morpho Vault(STEAKEURCV)$0.000000-100.00%
  • Kinza Babylon Staked BTCKinza Babylon Staked BTC(KBTC)$83,270.000.00%
  • Stride Staked InjectiveStride Staked Injective(STINJ)$16.46-4.46%
  • Vested XORVested XOR(VXOR)$3,404.231,000.00%
  • FibSwap DEXFibSwap DEX(FIBO)$0.0084659.90%
  • ICPanda DAOICPanda DAO(PANDA)$0.003106-39.39%
  • TruFin Staked APTTruFin Staked APT(TRUAPT)$8.020.00%
  • EquityPayEquityPay(EQPAY)$0.0564755.44%
  • bitcoinBitcoin(BTC)$105,444.000.55%
  • ethereumEthereum(ETH)$2,517.111.23%
  • VNST StablecoinVNST Stablecoin(VNST)$0.0000400.67%
  • tetherTether(USDT)$1.00-0.02%
  • rippleXRP(XRP)$2.211.51%
  • binancecoinBNB(BNB)$650.190.37%
  • Wrapped SOLWrapped SOL(SOL)$143.66-2.32%
  • solanaSolana(SOL)$149.17-1.87%
  • usd-coinUSDC(USDC)$1.00-0.01%
  • dogecoinDogecoin(DOGE)$0.182873-1.14%
  • tronTRON(TRX)$0.2861282.56%
  • cardanoCardano(ADA)$0.66-0.62%
  • staked-etherLido Staked Ether(STETH)$2,517.561.21%
  • wrapped-bitcoinWrapped Bitcoin(WBTC)$105,494.000.80%
  • Gaj FinanceGaj Finance(GAJ)$0.0059271.46%
  • Content BitcoinContent Bitcoin(CTB)$24.482.55%
  • USD OneUSD One(USD1)$1.000.11%
  • HyperliquidHyperliquid(HYPE)$35.244.57%
  • SuiSui(SUI)$3.22-1.68%
  • Wrapped stETHWrapped stETH(WSTETH)$3,027.441.03%
  • UGOLD Inc.UGOLD Inc.(UGOLD)$3,037.58-0.08%
  • ParkcoinParkcoin(KPK)$1.101.76%
  • chainlinkChainlink(LINK)$13.72-1.69%
  • avalanche-2Avalanche(AVAX)$20.49-0.92%
  • leo-tokenLEO Token(LEO)$9.05-0.34%
  • stellarStellar(XLM)$0.2661480.43%
  • bitcoin-cashBitcoin Cash(BCH)$409.890.86%
  • ToncoinToncoin(TON)$3.15-1.47%
  • shiba-inuShiba Inu(SHIB)$0.000013-1.91%
  • USDSUSDS(USDS)$1.00-0.02%
  • hedera-hashgraphHedera(HBAR)$0.168179-0.04%
  • Yay StakeStone EtherYay StakeStone Ether(YAYSTONE)$2,671.07-2.84%
  • wethWETH(WETH)$2,517.361.17%
  • litecoinLitecoin(LTC)$87.33-0.82%
  • Wrapped eETHWrapped eETH(WEETH)$2,690.991.09%
  • polkadotPolkadot(DOT)$4.020.10%
  • moneroMonero(XMR)$329.851.38%
  • Pundi AIFXPundi AIFX(PUNDIAI)$16.000.00%
  • Binance Bridged USDT (BNB Smart Chain)Binance Bridged USDT (BNB Smart Chain)(BSC-USD)$1.00-0.02%
  • PengPeng(PENG)$0.60-13.59%
  • Ethena USDeEthena USDe(USDE)$1.000.01%
  • Bitget TokenBitget Token(BGB)$4.65-0.19%
  • MurasakiMurasaki(MURA)$4.32-12.46%
  • Black PhoenixBlack Phoenix(BPX)$3.351,000.00%
  • PepePepe(PEPE)$0.0000110.13%
  • Coinbase Wrapped BTCCoinbase Wrapped BTC(CBBTC)$105,454.000.49%
  • Pi NetworkPi Network(PI)$0.630.63%
  • WhiteBIT CoinWhiteBIT Coin(WBT)$31.39-0.51%
  • aaveAave(AAVE)$254.460.76%
  • Zypto TokenZypto Token(ZYPTO)$0.037139-3.47%
  • uniswapUniswap(UNI)$6.302.72%
  • daiDai(DAI)$1.000.04%
  • Ethena Staked USDeEthena Staked USDe(SUSDE)$1.180.03%
  • BittensorBittensor(TAO)$379.231.31%
  • okbOKB(OKB)$52.15-0.02%
  • XT.comXT.com(XT)$3.08-1.65%
  • Layer One XLayer One X(L1X)$23.35454.66%
  • AptosAptos(APT)$4.71-0.83%
  • nearNEAR Protocol(NEAR)$2.40-0.27%
  • BlackRock USD Institutional Digital Liquidity FundBlackRock USD Institutional Digital Liquidity Fund(BUIDL)$1.000.00%
  • crypto-com-chainCronos(CRO)$0.0974020.08%
  • internet-computerInternet Computer(ICP)$5.305.54%
  • Jito Staked SOLJito Staked SOL(JITOSOL)$179.96-1.94%
  • OndoOndo(ONDO)$0.83-0.23%
  • ethereum-classicEthereum Classic(ETC)$16.97-1.07%
  • sUSDSsUSDS(SUSDS)$1.050.02%
  • Tokenize XchangeTokenize Xchange(TKX)$30.65-0.25%
  • Haedal ProtocolHaedal Protocol(HAEDAL)$0.120430-25.57%
  • KaspaKaspa(KAS)$0.085399-2.23%
  • BSCEXBSCEX(BSCX)$237.310.49%
  • gatechain-tokenGate(GT)$18.25-1.55%
  • USD1USD1(USD1)$1.00-0.05%
  • MantleMantle(MNT)$0.64-0.82%
  • Official TrumpOfficial Trump(TRUMP)$10.29-0.83%
  • vechainVeChain(VET)$0.023881-1.98%
  • render-tokenRender(RENDER)$3.82-1.72%
  • fantomFantom(FTM)$0.70-1.56%
  • fetch-aiArtificial Superintelligence Alliance(FET)$0.75-1.25%
  • cosmosCosmos Hub(ATOM)$4.25-0.97%
  • EthenaEthena(ENA)$0.3164671.90%
  • FasttokenFasttoken(FTN)$4.40-0.01%
  • POL (ex-MATIC)POL (ex-MATIC)(POL)$0.209258-3.34%
  • Lombard Staked BTCLombard Staked BTC(LBTC)$105,460.000.95%
  • Black AgnusBlack Agnus(FTW)$0.000183423.46%
  • WorldcoinWorldcoin(WLD)$1.10-1.99%
  • STAUSTAU(STAU)$0.17397910.95%
  • filecoinFilecoin(FIL)$2.49-0.09%
  • ArbitrumArbitrum(ARB)$0.342492-0.16%
  • quant-networkQuant(QNT)$114.20-1.34%
  • algorandAlgorand(ALGO)$0.188327-1.76%
  • ORA CoinORA Coin(ORA)$4.885.92%
  • SkySky(SKY)$0.0728973.85%
wpDiscuz
0
0
Rất thích suy nghĩ của bạn, hãy bình luận.x
()
x
| Trả lời