Một *token pixel* là đơn vị cơ bản cho phép các mô hình dựa trên Transformer xử lý thông tin hình ảnh theo cách mà chúng xử lý ngôn ngữ. Thay vì cung cấp cho một mô hình hàng trăm ngàn giá trị RGB thô, một hình ảnh trước tiên được phân chia thành những mảng nhỏ — thường là 16×16 pixel — sau đó được làm phẳng và chiếu vào các nhúng vector dày đặc. Những nhúng này trở thành “tokens” của hình ảnh, tương tự như các token con trong văn bản. Các nghiên cứu gần đây như _Từ Pixels đến Tokens: Mã hóa Byte-Pair trên Các Mô hình Hình ảnh Đã Định lượng_ đẩy ý tưởng này xa hơn bằng cách áp dụng BPE trực tiếp lên dữ liệu hình ảnh, tạo ra một từ vựng học được của các mẫu hình ảnh lặp lại thay vì các mảng lưới cố định. Điều này cung cấp thông tin ưu tiên cấu trúc vào mỗi token, vì vậy ở giai đoạn đầu trong mạng, một token có thể đại diện cho “đường viền” hoặc “kết cấu,” trong khi các lớp sâu hơn kết hợp chúng thành các khái niệm cấp cao hơn như “đèn giao thông” hoặc “gương mặt con người.” Lợi thế là hai chiều: trước tiên, nó giảm đáng kể độ dài chuỗi từ 150,000+ pixel xuống chỉ còn vài trăm token, làm cho việc tự chú ý trở nên khả thi về mặt tính toán; thứ hai, nó đồng bộ hóa định dạng biểu diễn hình ảnh với các token ngôn ngữ, cho phép một Transformer duy nhất suy luận qua các phương thức mà không cần các bộ mã hóa riêng biệt. Trong thực tế, chiến lược token hóa này đã được chứng minh là cải thiện khả năng hiểu đa phương tiện và hiệu quả dữ liệu, giúp các mô hình như Being-VL-0 đạt được hiệu suất mạnh mẽ hơn ngay cả với dữ liệu đào tạo hạn chế.
---
Bạn có muốn tôi cũng cung cấp cho bạn một phiên bản kỹ thuật hơn với toán học, hay giữ cho nó thân thiện như thế này?
Giao dịch KHÔNG phải là một công việc. Đừng mong đợi những khoản lương cố định từ thị trường. Nó là một doanh nghiệp. Liên quan đến sự không chắc chắn, thua lỗ, những giai đoạn chậm và căng thẳng. Thị trường thưởng cho những chủ doanh nghiệp áp dụng chiến lược chấp nhận rủi ro, tuân theo kế hoạch kinh doanh của họ và đưa ra quyết định đúng đắn. Bạn được trả tiền cho những quyết định, không phải giờ làm việc.$BTC $ETH #StrategyBTCPurchase $
Tôi biết những ngày này, thực sự cảm ơn ngài đã tiếp tục phát triển 😎❤
Crypto_Jobs
·
--
Tăng giá
🎉 Chính xác một năm trước, tôi đã gọi đáy ở #XRP khoảng +/- $0.480... [Nhiều lần]
👀 Hôm nay, chúng ta đang giao dịch trên $3.50! Tính toán đi, đó là một cú di chuyển 7x! 🔥
📈 Biểu đồ mới nhất của tôi vẫn nhằm mục tiêu $4.90+ tiếp theo. 🚀
Rất nhiều người tự hỏi làm thế nào mà độ chính xác như vậy có thể xảy ra… Điều họ không thấy là công việc không ngừng nghỉ, sự kiên nhẫn và cống hiến qua những thị trường trung lập hoặc giảm giá, điều này chiếm 70% hành trình hoặc hơn! 💪
Giá crypto có thể bùng nổ chỉ trong một năm, lợi thế thực sự duy nhất là sự kiên nhẫn và niềm tin!
Đối với những ai đã theo dõi trong thời gian dài; hãy tận hưởng cuộc hành trình! 😎