Update xsmall/README.md
Browse files- xsmall/README.md +3 -1
xsmall/README.md
CHANGED
@@ -1 +1,3 @@
|
|
1 |
-
Bản xmall
|
|
|
|
|
|
1 |
+
Bản xmall
|
2 |
+
- 9M backbone network parameters (12 layers, 256 hidden size) plus 6M embedding parameters (24k vocabulary size)
|
3 |
+
- đc train trên 30GB text
|