refactor: use csv parser for obsver1 instead of selfbuilt solution
This commit is contained in:
parent
f414d64480
commit
f013ab4263
118
logic/tracks.js
118
logic/tracks.js
|
@ -52,103 +52,37 @@ function detectFormat(body) {
|
||||||
return Number(match[2]);
|
return Number(match[2]);
|
||||||
}
|
}
|
||||||
|
|
||||||
|
if (/^Date;Time/.test(firstLine)) {
|
||||||
|
return 1;
|
||||||
|
}
|
||||||
|
|
||||||
return 'invalid';
|
return 'invalid';
|
||||||
}
|
}
|
||||||
|
|
||||||
function* parseObsver1(body) {
|
function* parseObsver1(body) {
|
||||||
let num = 0;
|
if (body.indexOf('\n') < body.length - 1) {
|
||||||
let start = 0;
|
body = body.replace(/\$/g, '\n');
|
||||||
let end = 0;
|
|
||||||
|
|
||||||
let currentPoint;
|
|
||||||
|
|
||||||
while (end < body.length) {
|
|
||||||
start = end;
|
|
||||||
while (body[end] !== ';' && body[end] !== '$' && end < body.length) {
|
|
||||||
end++;
|
|
||||||
}
|
|
||||||
if (body[end] === '$') {
|
|
||||||
if (currentPoint) {
|
|
||||||
yield currentPoint;
|
|
||||||
}
|
|
||||||
// $ is replacing \n as newlines are not allowed in json strings
|
|
||||||
num = 0;
|
|
||||||
}
|
|
||||||
if (end < body.length) {
|
|
||||||
const token = body.substr(start, end - start);
|
|
||||||
end++;
|
|
||||||
|
|
||||||
if (token.length > 0) {
|
|
||||||
if (num === 0 && token === 'Date') {
|
|
||||||
// we have a header line, ignore it for now, TODO parse it
|
|
||||||
if (end < body.length) {
|
|
||||||
while (body[end] !== ';' && body[end] !== '$' && end < body.length) {
|
|
||||||
end++;
|
|
||||||
}
|
|
||||||
start = end;
|
|
||||||
num = 100;
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
switch (num) {
|
|
||||||
case 0:
|
|
||||||
currentPoint = {
|
|
||||||
date: token,
|
|
||||||
time: '',
|
|
||||||
latitude: '',
|
|
||||||
longitude: '',
|
|
||||||
course: '',
|
|
||||||
speed: '',
|
|
||||||
d1: '',
|
|
||||||
d2: '',
|
|
||||||
flag: '',
|
|
||||||
private: '',
|
|
||||||
};
|
|
||||||
break;
|
|
||||||
|
|
||||||
case 1:
|
|
||||||
currentPoint.time = token;
|
|
||||||
break;
|
|
||||||
|
|
||||||
case 2:
|
|
||||||
currentPoint.latitude = _parseFloat(token);
|
|
||||||
break;
|
|
||||||
|
|
||||||
case 3:
|
|
||||||
currentPoint.longitude = _parseFloat(token);
|
|
||||||
break;
|
|
||||||
|
|
||||||
case 4:
|
|
||||||
currentPoint.course = _parseFloat(token);
|
|
||||||
break;
|
|
||||||
|
|
||||||
case 5:
|
|
||||||
currentPoint.speed = _parseFloat(token);
|
|
||||||
break;
|
|
||||||
|
|
||||||
case 6:
|
|
||||||
currentPoint.d1 = token;
|
|
||||||
break;
|
|
||||||
|
|
||||||
case 7:
|
|
||||||
currentPoint.d2 = token;
|
|
||||||
break;
|
|
||||||
|
|
||||||
case 8:
|
|
||||||
currentPoint.flag = token;
|
|
||||||
break;
|
|
||||||
|
|
||||||
case 9:
|
|
||||||
currentPoint.private = token;
|
|
||||||
break;
|
|
||||||
}
|
|
||||||
|
|
||||||
num++;
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
}
|
||||||
if (currentPoint) {
|
|
||||||
yield currentPoint;
|
for (const record of csvParse(body, {
|
||||||
|
delimiter: ';',
|
||||||
|
encoding: 'utf8',
|
||||||
|
columns: ['date', 'time', 'latitude', 'longitude', 'course', 'speed', 'd1', 'd2', 'flag', 'private'],
|
||||||
|
relax_column_count: true,
|
||||||
|
cast(value, { column }) {
|
||||||
|
if (/latitude|longitude|course|speed/.test(column)) {
|
||||||
|
return _parseFloat(value);
|
||||||
|
} else {
|
||||||
|
return value;
|
||||||
|
}
|
||||||
|
},
|
||||||
|
})) {
|
||||||
|
if (record.date === 'Date') {
|
||||||
|
// ignore header line
|
||||||
|
continue;
|
||||||
|
}
|
||||||
|
|
||||||
|
yield record;
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
|
|
Loading…
Reference in a new issue