Spaces:

Flux9665
/

EnglishToucan

Running

App Files Files Community

Flux9665 commited on Jul 25

Commit

f66c1f0

•

1 Parent(s): 813d094

Upload 5 files

Browse files

Files changed (5) hide show

Preprocessing/multilinguality/iso_lookup.json +0 -0
Preprocessing/multilinguality/iso_to_fullname.json +0 -0
Preprocessing/multilinguality/iso_to_long_lat.json +0 -0
Preprocessing/multilinguality/iso_to_memberships.json +0 -0
Preprocessing/multilinguality/supervised_languages.json +473 -0

Preprocessing/multilinguality/iso_lookup.json ADDED Viewed

The diff for this file is too large to render. See raw diff

Preprocessing/multilinguality/iso_to_fullname.json ADDED Viewed

The diff for this file is too large to render. See raw diff

Preprocessing/multilinguality/iso_to_long_lat.json ADDED Viewed

The diff for this file is too large to render. See raw diff

Preprocessing/multilinguality/iso_to_memberships.json ADDED Viewed

The diff for this file is too large to render. See raw diff

Preprocessing/multilinguality/supervised_languages.json ADDED Viewed

	@@ -0,0 +1,473 @@

+[
+  "eng",
+  "deu",
+  "fra",
+  "spa",
+  "cmn",
+  "por",
+  "pol",
+  "ita",
+  "nld",
+  "ell",
+  "fin",
+  "vie",
+  "jpn",
+  "rus",
+  "hun",
+  "asm",
+  "ben",
+  "brx",
+  "dgo",
+  "guj",
+  "hin",
+  "kan",
+  "kas",
+  "knn",
+  "mai",
+  "mal",
+  "mni",
+  "mar",
+  "nep",
+  "ory",
+  "pan",
+  "san",
+  "sat",
+  "snd",
+  "tam",
+  "tel",
+  "urd",
+  "bem",
+  "swh",
+  "amh",
+  "wol",
+  "chv",
+  "iba",
+  "jav",
+  "fon",
+  "hau",
+  "lbb",
+  "kik",
+  "lin",
+  "lug",
+  "luo",
+  "sxb",
+  "yor",
+  "nya",
+  "loz",
+  "toi",
+  "afr",
+  "arb",
+  "ast",
+  "azj",
+  "bel",
+  "bul",
+  "bos",
+  "cat",
+  "ceb",
+  "sdh",
+  "ces",
+  "cym",
+  "dan",
+  "ekk",
+  "pes",
+  "fil",
+  "gle",
+  "glg",
+  "heb",
+  "hrv",
+  "hye",
+  "ind",
+  "ibo",
+  "isl",
+  "kat",
+  "kam",
+  "kea",
+  "kaz",
+  "khm",
+  "kor",
+  "ltz",
+  "lao",
+  "lit",
+  "lvs",
+  "mri",
+  "mkd",
+  "xng",
+  "zsm",
+  "mlt",
+  "oci",
+  "pst",
+  "ron",
+  "slk",
+  "slv",
+  "sna",
+  "som",
+  "srp",
+  "swe",
+  "tgk",
+  "tur",
+  "ukr",
+  "umb",
+  "uzn",
+  "bhd",
+  "kfs",
+  "gbk",
+  "bgc",
+  "xnr",
+  "kfx",
+  "mjl",
+  "bfz",
+  "acf",
+  "bss",
+  "inb",
+  "nca",
+  "quh",
+  "wap",
+  "acr",
+  "bus",
+  "dgr",
+  "maz",
+  "nch",
+  "qul",
+  "tav",
+  "wmw",
+  "acu",
+  "byr",
+  "dik",
+  "iou",
+  "mbb",
+  "ncj",
+  "qvc",
+  "tbc",
+  "xed",
+  "agd",
+  "bzh",
+  "djk",
+  "ipi",
+  "mbc",
+  "ncl",
+  "qve",
+  "tbg",
+  "xon",
+  "agg",
+  "bzj",
+  "dop",
+  "jac",
+  "mbh",
+  "ncu",
+  "qvh",
+  "tbl",
+  "xtd",
+  "agn",
+  "caa",
+  "jic",
+  "mbj",
+  "ndj",
+  "qvm",
+  "tbz",
+  "xtm",
+  "agr",
+  "cab",
+  "emp",
+  "jiv",
+  "mbt",
+  "nfa",
+  "qvn",
+  "tca",
+  "yaa",
+  "agu",
+  "cap",
+  "jvn",
+  "mca",
+  "ngp",
+  "qvs",
+  "tcs",
+  "yad",
+  "aia",
+  "car",
+  "ese",
+  "mcb",
+  "ngu",
+  "qvw",
+  "yal",
+  "cax",
+  "kaq",
+  "mcd",
+  "nhe",
+  "qvz",
+  "tee",
+  "ycn",
+  "ake",
+  "cbc",
+  "far",
+  "mco",
+  "qwh",
+  "yka",
+  "alp",
+  "cbi",
+  "kdc",
+  "mcp",
+  "nhu",
+  "qxh",
+  "ame",
+  "cbr",
+  "gai",
+  "kde",
+  "mcq",
+  "nhw",
+  "qxn",
+  "tew",
+  "yre",
+  "amf",
+  "cbs",
+  "gam",
+  "kdl",
+  "mdy",
+  "nhy",
+  "qxo",
+  "tfr",
+  "yva",
+  "amk",
+  "cbt",
+  "geb",
+  "kek",
+  "med",
+  "nin",
+  "rai",
+  "zaa",
+  "apb",
+  "cbu",
+  "glk",
+  "ken",
+  "mee",
+  "nko",
+  "rgu",
+  "zab",
+  "apr",
+  "cbv",
+  "meq",
+  "tgo",
+  "zac",
+  "arl",
+  "cco",
+  "gng",
+  "kje",
+  "met",
+  "nlg",
+  "rop",
+  "tgp",
+  "zad",
+  "grc",
+  "klv",
+  "mgh",
+  "nnq",
+  "rro",
+  "zai",
+  "ata",
+  "cek",
+  "gub",
+  "kmu",
+  "mib",
+  "noa",
+  "ruf",
+  "tna",
+  "zam",
+  "atb",
+  "cgc",
+  "guh",
+  "kne",
+  "mie",
+  "not",
+  "rug",
+  "tnk",
+  "zao",
+  "atg",
+  "chf",
+  "knf",
+  "mih",
+  "npl",
+  "tnn",
+  "zar",
+  "awb",
+  "chz",
+  "gum",
+  "knj",
+  "mil",
+  "sab",
+  "tnp",
+  "zas",
+  "cjo",
+  "guo",
+  "ksr",
+  "mio",
+  "obo",
+  "seh",
+  "toc",
+  "zav",
+  "azg",
+  "cle",
+  "gux",
+  "kue",
+  "mit",
+  "omw",
+  "sey",
+  "tos",
+  "zaw",
+  "azz",
+  "cme",
+  "gvc",
+  "kvn",
+  "miz",
+  "ood",
+  "sgb",
+  "tpi",
+  "zca",
+  "bao",
+  "cni",
+  "gwi",
+  "kwd",
+  "mkl",
+  "shp",
+  "tpt",
+  "zga",
+  "bba",
+  "cnl",
+  "gym",
+  "kwf",
+  "mkn",
+  "ote",
+  "sja",
+  "trc",
+  "ziw",
+  "bbb",
+  "cnt",
+  "gyr",
+  "kwi",
+  "mop",
+  "otq",
+  "snn",
+  "ttc",
+  "zlm",
+  "cof",
+  "hat",
+  "kyc",
+  "mox",
+  "pab",
+  "snp",
+  "tte",
+  "zos",
+  "bgt",
+  "con",
+  "kyf",
+  "mpm",
+  "pad",
+  "tue",
+  "zpc",
+  "bjr",
+  "cot",
+  "kyg",
+  "mpp",
+  "soy",
+  "tuf",
+  "zpl",
+  "bjv",
+  "cpa",
+  "kyq",
+  "mpx",
+  "pao",
+  "tuo",
+  "zpm",
+  "bjz",
+  "cpb",
+  "hlt",
+  "kyz",
+  "mqb",
+  "pib",
+  "spp",
+  "zpo",
+  "bkd",
+  "cpu",
+  "hns",
+  "lac",
+  "mqj",
+  "pir",
+  "spy",
+  "txq",
+  "zpu",
+  "blz",
+  "crn",
+  "hto",
+  "lat",
+  "msy",
+  "pjt",
+  "sri",
+  "txu",
+  "zpz",
+  "bmr",
+  "cso",
+  "hub",
+  "lex",
+  "mto",
+  "pls",
+  "srm",
+  "udu",
+  "ztq",
+  "bmu",
+  "ctu",
+  "lgl",
+  "muy",
+  "poi",
+  "srn",
+  "zty",
+  "bnp",
+  "cuc",
+  "lid",
+  "mxb",
+  "stp",
+  "upv",
+  "zyp",
+  "boa",
+  "cui",
+  "huu",
+  "mxq",
+  "sus",
+  "ura",
+  "boj",
+  "cuk",
+  "huv",
+  "llg",
+  "mxt",
+  "poy",
+  "suz",
+  "urb",
+  "box",
+  "cwe",
+  "hvn",
+  "prf",
+  "urt",
+  "bpr",
+  "cya",
+  "ign",
+  "lww",
+  "myk",
+  "ptu",
+  "usp",
+  "bps",
+  "daa",
+  "ikk",
+  "maj",
+  "myy",
+  "vid",
+  "bqc",
+  "dah",
+  "nab",
+  "qub",
+  "tac",
+  "bqp",
+  "ded",
+  "imo",
+  "maq",
+  "nas",
+  "quf",
+  "taj",
+  "vmy"
+]