mms-1b-all/ckb/tokens.txt

<s>
<pad>
</s>
<unk>
|
ە
ی
ا
و
ن
ر
ک
ت
د
ب
ێ
ل
ۆ
س
م
ش
گ
ه
ئ
پ
ز
ڕ
ڵ
خ
چ
ج
ژ
ف
ك
ق
،
ڤ
٠
0
١
ح
1
٢
‎
٩
2
.
٨
٥
5
غ
٤
-
6
4
3
٣
٦
9
a
ھ
8
ع
٧
/
7
c
o
:
"
p
n
t
s
d
h
,
'
i
r
v
u
f
e
ى
[
]
l
m
؛
g
‏
b
x
k
w
%
!
y
j
؟
‌
ـ
+
õ
ء
q
z
ي
ؤ
ث