5126 lines
117 KiB
JSON
5126 lines
117 KiB
JSON
{
|
||
"id": "d501a38d-f31d-4439-9040-df22ec1ac58c",
|
||
"object": "chat.completion",
|
||
"created": 1779684730,
|
||
"model": "deepseek-v4-pro",
|
||
"choices": [
|
||
{
|
||
"index": 0,
|
||
"message": {
|
||
"role": "assistant",
|
||
"content": "To test that a file-backed mmap is not repeatedly remapped, you need to verify that the kernel reuses the"
|
||
},
|
||
"logprobs": {
|
||
"content": [
|
||
{
|
||
"token": "To",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
84,
|
||
111
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "To",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
84,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "here",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "AT",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
65,
|
||
84
|
||
]
|
||
},
|
||
{
|
||
"token": "What",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
87,
|
||
104,
|
||
97,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " test",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
101,
|
||
115,
|
||
116
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " test",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
101,
|
||
115,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": " free",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
114,
|
||
101,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " them",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " don",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
111,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " na",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " that",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
97,
|
||
116
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " that",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
97,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " If",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
102
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " a",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
97
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " a",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " old",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
108,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " area",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
114,
|
||
101,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": " free",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
114,
|
||
101,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " results",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
115,
|
||
117,
|
||
108,
|
||
116,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " short",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
104,
|
||
111,
|
||
114,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " don",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
111,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "[",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
91
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " file",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
105,
|
||
108,
|
||
101
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " file",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
105,
|
||
108,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " free",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
114,
|
||
101,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": " fin",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
105,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " family",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
97,
|
||
109,
|
||
105,
|
||
108,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " short",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
104,
|
||
111,
|
||
114,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "`",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
96
|
||
]
|
||
},
|
||
{
|
||
"token": " ret",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " net",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
101,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " low",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
108,
|
||
111,
|
||
119
|
||
]
|
||
},
|
||
{
|
||
"token": " would",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
111,
|
||
117,
|
||
108,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " work",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
111,
|
||
114,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " no",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": " method",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
101,
|
||
116,
|
||
104,
|
||
111,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " km",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " ",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
194,
|
||
160
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "-backed",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
45,
|
||
98,
|
||
97,
|
||
99,
|
||
107,
|
||
101,
|
||
100
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "-backed",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
45,
|
||
98,
|
||
97,
|
||
99,
|
||
107,
|
||
101,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " area",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
114,
|
||
101,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " mm",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
109
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " mm",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " old",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
108,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " US",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
85,
|
||
83
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " area",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
114,
|
||
101,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "ap",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
97,
|
||
112
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "ap",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
97,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "$",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
36
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " area",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
114,
|
||
101,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "í",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
195,
|
||
173
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "ont",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
111,
|
||
110,
|
||
116
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " is",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
105,
|
||
115
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " is",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
105,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " area",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
114,
|
||
101,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": " results",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
115,
|
||
117,
|
||
108,
|
||
116,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
},
|
||
{
|
||
"token": " into",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
105,
|
||
110,
|
||
116,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " don",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
111,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " not",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
111,
|
||
116
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " not",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
111,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": " free",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
114,
|
||
101,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " been",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
98,
|
||
101,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " don",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
111,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " na",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "\\",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
92
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " repeatedly",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
112,
|
||
101,
|
||
97,
|
||
116,
|
||
101,
|
||
100,
|
||
108,
|
||
121
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " repeatedly",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
112,
|
||
101,
|
||
97,
|
||
116,
|
||
101,
|
||
100,
|
||
108,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " been",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
98,
|
||
101,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " na",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": " ‘",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
226,
|
||
128,
|
||
152
|
||
]
|
||
},
|
||
{
|
||
"token": " ve",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
118,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "[",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
91
|
||
]
|
||
},
|
||
{
|
||
"token": "_",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
95
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " rem",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
109
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " rem",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " been",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
98,
|
||
101,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "[",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
91
|
||
]
|
||
},
|
||
{
|
||
"token": "\\",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
92
|
||
]
|
||
},
|
||
{
|
||
"token": "`",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
96
|
||
]
|
||
},
|
||
{
|
||
"token": " ret",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " pe",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
112,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " dem",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
101,
|
||
109
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "apped",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
97,
|
||
112,
|
||
112,
|
||
101,
|
||
100
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "apped",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
97,
|
||
112,
|
||
112,
|
||
101,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "$",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
36
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "ont",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
111,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
44
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": ",",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " old",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
108,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": " free",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
114,
|
||
101,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": ".,",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " you",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
121,
|
||
111,
|
||
117
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " you",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
121,
|
||
111,
|
||
117
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "here",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "<",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60
|
||
]
|
||
},
|
||
{
|
||
"token": " into",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
105,
|
||
110,
|
||
116,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": " short",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
104,
|
||
111,
|
||
114,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": "I",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
73
|
||
]
|
||
},
|
||
{
|
||
"token": " them",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " don",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
111,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " na",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": " ve",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
118,
|
||
101
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " need",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
101,
|
||
101,
|
||
100
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " need",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
101,
|
||
101,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": " world",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
111,
|
||
114,
|
||
108,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " lead",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
108,
|
||
101,
|
||
97,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": ";",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
59
|
||
]
|
||
},
|
||
{
|
||
"token": " short",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
104,
|
||
111,
|
||
114,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": "...\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
46,
|
||
46,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": "I",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
73
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " to",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
111
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " to",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " into",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
105,
|
||
110,
|
||
116,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": " short",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
104,
|
||
111,
|
||
114,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " som",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
111,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " them",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " ve",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
118,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " some",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
111,
|
||
109,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " think",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
105,
|
||
110,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " support",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
117,
|
||
112,
|
||
112,
|
||
111,
|
||
114,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " dem",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " low",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
108,
|
||
111,
|
||
119
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " verify",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
118,
|
||
101,
|
||
114,
|
||
105,
|
||
102,
|
||
121
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " verify",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
118,
|
||
101,
|
||
114,
|
||
105,
|
||
102,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": " lead",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
108,
|
||
101,
|
||
97,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " short",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
104,
|
||
111,
|
||
114,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " don",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
111,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " ve",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
118,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " step",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
116,
|
||
101,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": " think",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
105,
|
||
110,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " mark",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
97,
|
||
114,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " support",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
117,
|
||
112,
|
||
112,
|
||
111,
|
||
114,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " keep",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
101,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": " really",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
97,
|
||
108,
|
||
108,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " dem",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " work",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
111,
|
||
114,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " method",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
101,
|
||
116,
|
||
104,
|
||
111,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": ":\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58,
|
||
10
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " that",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
97,
|
||
116
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " that",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
97,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " area",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
114,
|
||
101,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " short",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
104,
|
||
111,
|
||
114,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " som",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
111,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "[",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
91
|
||
]
|
||
},
|
||
{
|
||
"token": " some",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
111,
|
||
109,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " ret",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " than",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
97,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " dem",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " low",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
108,
|
||
111,
|
||
119
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " the",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " the",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " old",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
108,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " results",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
115,
|
||
117,
|
||
108,
|
||
116,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " acc",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
99,
|
||
99
|
||
]
|
||
},
|
||
{
|
||
"token": "`",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
96
|
||
]
|
||
},
|
||
{
|
||
"token": " some",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
111,
|
||
109,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " ret",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " pe",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
112,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " work",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
111,
|
||
114,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " any",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " no",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": " method",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
101,
|
||
116,
|
||
104,
|
||
111,
|
||
100
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " kernel",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
114,
|
||
110,
|
||
101,
|
||
108
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " kernel",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
114,
|
||
110,
|
||
101,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " old",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
108,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " area",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
114,
|
||
101,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": " results",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
115,
|
||
117,
|
||
108,
|
||
116,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " some",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
111,
|
||
109,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " ret",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " low",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
108,
|
||
111,
|
||
119
|
||
]
|
||
},
|
||
{
|
||
"token": " work",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
111,
|
||
114,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " any",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " no",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": " method",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
101,
|
||
116,
|
||
104,
|
||
111,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " km",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": ":\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58,
|
||
10
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " re",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " re",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " area",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
114,
|
||
101,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": " results",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
115,
|
||
117,
|
||
108,
|
||
116,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "-p",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " don",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
111,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "\\",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
92
|
||
]
|
||
},
|
||
{
|
||
"token": "c",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
99
|
||
]
|
||
},
|
||
{
|
||
"token": " ret",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " keep",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
101,
|
||
112
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "uses",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
117,
|
||
115,
|
||
101,
|
||
115
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "uses",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
117,
|
||
115,
|
||
101,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "í",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
195,
|
||
173
|
||
]
|
||
},
|
||
{
|
||
"token": "che",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
99,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "ont",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
111,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "text",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
116,
|
||
101,
|
||
120,
|
||
116
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " the",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " the",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " old",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
108,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " area",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
114,
|
||
101,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": " free",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
114,
|
||
101,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " results",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
115,
|
||
117,
|
||
108,
|
||
116,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
}
|
||
]
|
||
}
|
||
]
|
||
},
|
||
"finish_reason": "length"
|
||
}
|
||
],
|
||
"usage": {
|
||
"prompt_tokens": 20,
|
||
"completion_tokens": 24,
|
||
"total_tokens": 44,
|
||
"prompt_tokens_details": {
|
||
"cached_tokens": 0
|
||
},
|
||
"prompt_cache_hit_tokens": 0,
|
||
"prompt_cache_miss_tokens": 20
|
||
},
|
||
"system_fingerprint": "fp_9954b31ca7_prod0820_fp8_kvcache_20260402"
|
||
} |