C# - 从 TCP 连接读取时会丢弃某些数据包
本文关键字:数据包 TCP 连接 读取 | 更新日期: 2023-09-27 18:35:28
我正在使用 C# 通过 TCP 连接读取持续的数据流(ITCH 数据,即外汇价格),但在运行应用程序更长时间后,有时应用程序会丢弃数据包并且信息丢失。
以下是我用来读取数据的代码片段:
private void ReaderThreadStarter()
{
StreamReader streamReader = new StreamReader(this._networkStream);
while (!_stopping)
{
try
{
if (this._networkStream.DataAvailable)
{
while ((line = streamReader.ReadLine()) != null)
{
lock (_queue.ConcurrentQueue)
{
byte[] data = System.Text.Encoding.ASCII.GetBytes(line);
Log.Info("Data Added in Queue: " + Encoding.ASCII.GetString(data, 0, data.Length));
_queue.WriteToQueue(data);
}
}
}
}
catch (Exception exception)
{
Log.Error(exception);
}
finally
{
SetStopped();
}
}
}
上面的代码段的作用是它从TCP连接读取数据并将其写入并发队列,然后另一个线程使用队列中的数据进行处理。所以基本上是一个简单的生产者 - 消费者问题。
生产者-消费者部分似乎工作正常,因为我在队列中写入的内容被消费者使用。
一种选择是使用嗅探器并确认应用程序正在丢弃数据包,但我在无法使用嗅探器的环境中工作。我相信有丢包的原因是,对于我的一些外汇订单,我从来没有被取消,我的价格会下降,数据提供商告诉我那里的定价是正确的。
我还记录了在保存在队列中之前从TCP端口读取的数据,因此从日志中我假设数据在从连接读取时丢失。
有人可以告诉我我可能在这里做错了什么,或者丢弃数据包的原因是什么。
以下是我的使用者代码的代码片段:
public void ReadQueue()
{
try
{
while (true)
{
{
byte[] data = _queue.ReadFromQueue();
Parse(data);
}
}
}
catch (Exception exception)
{
Log.Error(exception);
}
}
public byte[] ReadFromQueue()
{
try
{
byte[] data;
lock (this) // Enter synchronization block
{
ConcurrentQueue.TryDequeue(out data);
}
return data;
}
catch (Exception exception)
{
Log.Error(exception);
return null;
}
}
有两件事引起了我的注意; 首先是你对DataAvailable
的使用。使用它实际上从来都不是正确的做法。这很有用的主要时间是在同步和异步方法之间进行选择。例如,它不会告诉您是否入站了更多数据,并且可能会给出"误报"(因为您正在用于它不意味着的东西)导致循环过早退出。 DataAvailable
只告诉您数据当前是否在本地缓冲区中可用,这就是它告诉您的全部内容。
我感兴趣的第二件事是data
是二进制还是文本。您正在使用StreamReader
的事实暗示了文本,但是...为什么要将其重新编码回byte[]
?如果它是任意二进制的,那么您不能将其处理为文本 - 这将不起作用。当您通过StreamReader
获取它时,您已经损坏了内容。如果它是基于文本的协议,请不要重新编码它:使用字符串队列(或类似字符串)。
在一个不相关的笔记上...如果队列确实是并发的,则可能不需要同步访问。