4885 lines
112 KiB
JSON
4885 lines
112 KiB
JSON
{
|
||
"id": "009b7493-f0b2-40f6-97f4-3e75dcf089d2",
|
||
"object": "chat.completion",
|
||
"created": 1779684709,
|
||
"model": "deepseek-v4-pro",
|
||
"choices": [
|
||
{
|
||
"index": 0,
|
||
"message": {
|
||
"role": "assistant",
|
||
"content": "Ecco una descrizione di un formato sicuro per salvare l'header di un checkpoint modello:\n\n## Formato"
|
||
},
|
||
"logprobs": {
|
||
"content": [
|
||
{
|
||
"token": "E",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
69
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "E",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
69
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "ES",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
69,
|
||
83
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "$",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
36
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": "{\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
123,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "What",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
87,
|
||
104,
|
||
97,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "cco",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
99,
|
||
99,
|
||
111
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "cco",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
99,
|
||
99,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "$",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
36
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "che",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
99,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " una",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
117,
|
||
110,
|
||
97
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " una",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
117,
|
||
110,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": " tem",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
},
|
||
{
|
||
"token": "3",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
51
|
||
]
|
||
},
|
||
{
|
||
"token": "4",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
52
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " desc",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
101,
|
||
115,
|
||
99
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " desc",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
101,
|
||
115,
|
||
99
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": " comm",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
99,
|
||
111,
|
||
109,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": " tem",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": ";",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
59
|
||
]
|
||
},
|
||
{
|
||
"token": "<",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60
|
||
]
|
||
},
|
||
{
|
||
"token": " short",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
104,
|
||
111,
|
||
114,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " som",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
111,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "...\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
46,
|
||
46,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " don",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
111,
|
||
110
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "rizione",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
114,
|
||
105,
|
||
122,
|
||
105,
|
||
111,
|
||
110,
|
||
101
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "rizione",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
114,
|
||
105,
|
||
122,
|
||
105,
|
||
111,
|
||
110,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "rit",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
114,
|
||
105,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "che",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
99,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "ari",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
97,
|
||
114,
|
||
105
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "ont",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
111,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "ole",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
111,
|
||
108,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
},
|
||
{
|
||
"token": "3",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
51
|
||
]
|
||
},
|
||
{
|
||
"token": "4",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
52
|
||
]
|
||
},
|
||
{
|
||
"token": "5",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
53
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " di",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
105
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " di",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
105
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": " comm",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
99,
|
||
111,
|
||
109,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": " tem",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " dep",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
101,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": ";",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
59
|
||
]
|
||
},
|
||
{
|
||
"token": "<",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60
|
||
]
|
||
},
|
||
{
|
||
"token": "D",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
68
|
||
]
|
||
},
|
||
{
|
||
"token": " som",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
111,
|
||
109
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " un",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
117,
|
||
110
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " un",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
117,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": " quest",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
113,
|
||
117,
|
||
101,
|
||
115,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " tem",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " free",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
114,
|
||
101,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "3",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
51
|
||
]
|
||
},
|
||
{
|
||
"token": "4",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
52
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " som",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
111,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "...\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
46,
|
||
46,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " ve",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
118,
|
||
101
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " formato",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
111,
|
||
114,
|
||
109,
|
||
97,
|
||
116,
|
||
111
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " formato",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
111,
|
||
114,
|
||
109,
|
||
97,
|
||
116,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": "<",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": "...\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
46,
|
||
46,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " ‘",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
226,
|
||
128,
|
||
152
|
||
]
|
||
},
|
||
{
|
||
"token": " ve",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
118,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "[",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
91
|
||
]
|
||
},
|
||
{
|
||
"token": "`",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
96
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " sic",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
105,
|
||
99
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " sic",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
105,
|
||
99
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": "<",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60
|
||
]
|
||
},
|
||
{
|
||
"token": "E",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
69
|
||
]
|
||
},
|
||
{
|
||
"token": "...\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
46,
|
||
46,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " ‘",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
226,
|
||
128,
|
||
152
|
||
]
|
||
},
|
||
{
|
||
"token": "R",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
82
|
||
]
|
||
},
|
||
{
|
||
"token": "X",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
88
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "uro",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
117,
|
||
114,
|
||
111
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "uro",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
117,
|
||
114,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "here",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "ont",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
111,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": ".,",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " per",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
112,
|
||
101,
|
||
114
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " per",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
112,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
},
|
||
{
|
||
"token": "3",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
51
|
||
]
|
||
},
|
||
{
|
||
"token": "4",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
52
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " sal",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
97,
|
||
108
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " sal",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "che",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
99,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " quest",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
113,
|
||
117,
|
||
101,
|
||
115,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": "<",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60
|
||
]
|
||
},
|
||
{
|
||
"token": "...\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
46,
|
||
46,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " don",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
111,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "L",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
76
|
||
]
|
||
},
|
||
{
|
||
"token": " ‘",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
226,
|
||
128,
|
||
152
|
||
]
|
||
},
|
||
{
|
||
"token": " acc",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
99,
|
||
99
|
||
]
|
||
},
|
||
{
|
||
"token": "`",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
96
|
||
]
|
||
},
|
||
{
|
||
"token": " dif",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
105,
|
||
102
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "vare",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
118,
|
||
97,
|
||
114,
|
||
101
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "vare",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
118,
|
||
97,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "$",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
36
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "ari",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
97,
|
||
114,
|
||
105
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "here",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "text",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
116,
|
||
101,
|
||
120,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
},
|
||
{
|
||
"token": "3",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
51
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " l",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
108
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " l",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": " quest",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
113,
|
||
117,
|
||
101,
|
||
115,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": " fin",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
105,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": "L",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
76
|
||
]
|
||
},
|
||
{
|
||
"token": "\\",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
92
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
39
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "'",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "」",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
227,
|
||
128,
|
||
141
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "$",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
36
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "í",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
195,
|
||
173
|
||
]
|
||
},
|
||
{
|
||
"token": "che",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
99,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "ont",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
111,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "ö",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
195,
|
||
182
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "header",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
104,
|
||
101,
|
||
97,
|
||
100,
|
||
101,
|
||
114
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "header",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
104,
|
||
101,
|
||
97,
|
||
100,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "$",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
36
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": "í",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
195,
|
||
173
|
||
]
|
||
},
|
||
{
|
||
"token": "che",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
99,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "ari",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
97,
|
||
114,
|
||
105
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "here",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "ont",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
111,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " di",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
105
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " di",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
105
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
},
|
||
{
|
||
"token": "3",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
51
|
||
]
|
||
},
|
||
{
|
||
"token": "4",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
52
|
||
]
|
||
},
|
||
{
|
||
"token": "5",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
53
|
||
]
|
||
},
|
||
{
|
||
"token": "-p",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45,
|
||
112
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " un",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
117,
|
||
110
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " un",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
117,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " comm",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
99,
|
||
111,
|
||
109,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": " quest",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
113,
|
||
117,
|
||
101,
|
||
115,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": " fin",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
105,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " dep",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
101,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": "<",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": "...\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
46,
|
||
46,
|
||
10,
|
||
10
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " checkpoint",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
99,
|
||
104,
|
||
101,
|
||
99,
|
||
107,
|
||
112,
|
||
111,
|
||
105,
|
||
110,
|
||
116
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " checkpoint",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
99,
|
||
104,
|
||
101,
|
||
99,
|
||
107,
|
||
112,
|
||
111,
|
||
105,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "che",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
99,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " quest",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
113,
|
||
117,
|
||
101,
|
||
115,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " fin",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
105,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " dep",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
101,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": "...\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
46,
|
||
46,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " ve",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
118,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "[",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
91
|
||
]
|
||
},
|
||
{
|
||
"token": " step",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
116,
|
||
101,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": "`",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
96
|
||
]
|
||
},
|
||
{
|
||
"token": " ret",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
116
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " modello",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
111,
|
||
100,
|
||
101,
|
||
108,
|
||
108,
|
||
111
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " modello",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
111,
|
||
100,
|
||
101,
|
||
108,
|
||
108,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "-p",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": ";\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
59,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": ":\n\n",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
58,
|
||
10,
|
||
10
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": ":\n\n",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
58,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": " anal",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
97,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": ".,",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": " fin",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
105,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "-p",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": ";\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
59,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "##",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
35,
|
||
35
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "##",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
35,
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "$",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
36
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": "{\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
123,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": " ",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32
|
||
]
|
||
},
|
||
{
|
||
"token": "che",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
99,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " Form",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
70,
|
||
111,
|
||
114,
|
||
109
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " Form",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
70,
|
||
111,
|
||
114,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " Ind",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
110,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " Mar",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
77,
|
||
97,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " Res",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
82,
|
||
101,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": " X",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
88
|
||
]
|
||
},
|
||
{
|
||
"token": " .",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "\\x20\\xe2\\x88",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
226,
|
||
136
|
||
]
|
||
},
|
||
{
|
||
"token": " At",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
65,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " Su",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
83,
|
||
117
|
||
]
|
||
},
|
||
{
|
||
"token": " ",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32
|
||
]
|
||
},
|
||
{
|
||
"token": " Sp",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
83,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": " Com",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
67,
|
||
111,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " ",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
32
|
||
]
|
||
},
|
||
{
|
||
"token": " Un",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
85,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " Int",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " Pro",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
80,
|
||
114,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": "\\x20\\xe2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
226
|
||
]
|
||
},
|
||
{
|
||
"token": " Is",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": " Cont",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
67,
|
||
111,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " S",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
83
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "ato",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
97,
|
||
116,
|
||
111
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "ato",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
97,
|
||
116,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "ateg",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
97,
|
||
116,
|
||
101,
|
||
103
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "ari",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
97,
|
||
114,
|
||
105
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "AT",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
65,
|
||
84
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
},
|
||
{
|
||
"token": "3",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
51
|
||
]
|
||
},
|
||
{
|
||
"token": "4",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
52
|
||
]
|
||
},
|
||
{
|
||
"token": "5",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
53
|
||
]
|
||
},
|
||
{
|
||
"token": "6",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
54
|
||
]
|
||
},
|
||
{
|
||
"token": "7",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
55
|
||
]
|
||
},
|
||
{
|
||
"token": "8",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
56
|
||
]
|
||
}
|
||
]
|
||
}
|
||
]
|
||
},
|
||
"finish_reason": "length"
|
||
}
|
||
],
|
||
"usage": {
|
||
"prompt_tokens": 22,
|
||
"completion_tokens": 24,
|
||
"total_tokens": 46,
|
||
"prompt_tokens_details": {
|
||
"cached_tokens": 0
|
||
},
|
||
"prompt_cache_hit_tokens": 0,
|
||
"prompt_cache_miss_tokens": 22
|
||
},
|
||
"system_fingerprint": "fp_9954b31ca7_prod0820_fp8_kvcache_20260402"
|
||
} |