【问题标题】:Data not being transformed Node.js Transform streams未转换的数据 Node.js 转换流
【发布时间】:2018-05-25 22:12:39
【问题描述】:

我正在尝试创建一个转换流,它从socket.io 获取数据,将其转换为 JSON,然后将其发送到标准输出。我完全困惑为什么数据似乎没有任何转换就直接通过了。我正在使用through2 库。这是我的代码:

getStreamNames().then(streamNames => {
        const socket = io(SOCKETIO_URL);
        socket.on('connect', () => {
            socket.emit('Subscribe', {subs: streamNames});
        });

        const stream = through2.obj(function (chunk, enc, callback) {
            callback(null, parseString(chunk))
        }).pipe(through2.obj(function (chunk, enc, callback) {
            callback(null, JSON.stringify(chunk));
        })).pipe(process.stdout);

        socket.on('m', data => stream.write(data));

    },
);

getStreamNames 返回一个 promise,它解析为一组流名称(我正在调用外部 socket.io API),parseString 接受从 API 返回的字符串并将其转换为 JSON,以便于管理。

我正在寻找的是我的控制台在我使用 parseString 解析它之后打印出字符串化的 JSON,然后使用 JSON.stringify 使其成为标准输出。实际发生的是数据直接通过流并且没有进行任何转换。

作为参考,来自 API 的数据是一种奇怪的格式,类似于

field1~field2~0x23~fieldn

这就是我需要parseString 方法的原因。

我一定错过了什么。有什么想法吗?

编辑:

解析字符串:

function(value) {
    var valuesArray = value.split("~");
    var valuesArrayLenght = valuesArray.length;
    var mask = valuesArray[valuesArrayLenght - 1];
    var maskInt = parseInt(mask, 16);
    var unpackedCurrent = {};
    var currentField = 0;
    for (var property in this.FIELDS) {
        if (this.FIELDS[property] === 0) {
            unpackedCurrent[property] = valuesArray[currentField];
            currentField++;
        }
        else if (maskInt & this.FIELDS[property]) {
            if (property === 'LASTMARKET') {
                unpackedCurrent[property] = valuesArray[currentField];
            }
            else {
                unpackedCurrent[property] = parseFloat(valuesArray[currentField]);
            }
            currentField++;
        }
    }

    return unpackedCurrent;
};

谢谢

【问题讨论】:

  • 你能告诉parseString方法吗?
  • @MarcosCasagrande 添加了

标签: javascript json node.js nodejs-stream through2


【解决方案1】:

问题是您正在编写的流实际上是process.stdout,因为.pipe 返回最后一个stream.Writable,所以您可以继续链接,在您的情况下,process.stdout

const x = stream.pipe(stream2).pipe(stream3).pipe(process.stdout);
x === process.stdout // true

所以你所做的只是:process.stdout.write(data) 而不通过管道。

您需要做的是将您的第一个through2 流分配给stream 变量,然后将.pipe 分配给该流。

const stream = through2.obj((chunk, enc, callback) => {
    callback(null, parseString(chunk))
});

stream
    .pipe(through2.obj((chunk, enc, callback) => {
        callback(null, JSON.stringify(chunk));
    }))
    .pipe(process.stdout);

socket.on('m', data => stream.write(data));

【讨论】:

猜你喜欢
  • 2021-01-22
  • 2015-10-27
  • 2017-12-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多