10分钟学会Socket通讯,学不会你打我
yuyutoo 2025-05-22 14:39 3 浏览 0 评论
Socket通讯是软硬件直接常用的一种通讯方式,分为TCP和UDP通讯。
在我的职业生涯中,有且仅用过一次UDP通讯。而TCP通讯系统却经常写,正好今天写了一个TCP通讯的软件。总结一下内容
软件使用C#编程原因写的,为了能够使用所有的电脑,采用了NET Framework 4.0。
启动服务端
服务端启动的时候,先写一个Task任务启动一个服务端的链接,注意服务端的ip,最好设置为0.0.0.0,这样所有的客户端都可以通过服务器ip地址链接到服务端。
Task.Factory.StartNew(() =>
{
Socket server = new Socket(AddressFamily.InterNetwork, SocketType.Stream, ProtocolType.Tcp);
EndPoint point = new IPEndPoint(IPAddress.Parse(ip), port);
server.Bind(point);
server.Listen(1000);
while (true)
{
Socket client = server.Accept();
}
}
服务端会启动一个无限循环的while,在这个循环中,通过Accept方法不断的接收链接的客户端。
接收客户端消息
在这个循环里面可以记录一下客户端的信息,并启动另一个Task任务,去接受客户端给服务端发送的消息。
Task.Factory.StartNew(() =>
{
while (true) {
byte[] buffer = new byte[1024];
if (!client.Connected) {
break;
}
int cnt = 0;
try {
cnt = client.Receive(buffer);
if (cnt <= 0)
{
Thread.Sleep(1000);
continue;
}
}
catch (Exception ex) {
break;
}
//因为buffer数组是1024长度,如果实际数据长度小于1024 则会出现0x00的空白数据,需要删除,只保留有效数据
List<byte> lstBuffer = new List<byte>();
for (int i = buffer.Length - 1; i >= 0; i--) {
if (buffer[i] == 0x00 && lstBuffer.Count<=0)
continue;
lstBuffer.Insert(0, buffer[i]);
}
//接收到的消息
Business.queueReceiver.Enqueue(new Tuple<string, byte[]>(pointClient.ToString(), lstBuffer.ToArray<byte>()));
ReceiveCount += 1;
}
});
对于服务端来说,任何一个链接到服务端的客户端,在服务端都应该启动一个Task去实时接收客户端的消息。
而由于客户端有可能会随时关闭或者断开,所以对Receive方法加异常判断,防止因为某一次的接收消息异常造成Task任务过期关闭。
对于服务端,一旦发现客户端的消息没有接收成功,或者判断到客户端已经断开,则可以推出while循环,然后关闭Task任务,结束与客户端的链接。
业务逻辑处理
对于任何项目的Socket通讯软件,都会有相关的通信协议,对照业务相关的通信协议和上面接收的客户端信息对业务逻辑进行处理即可。
业务处理需要,如果数据量比较小,则正常处理即可。
如果业务量大,并发大,数据量大等则需要考虑粘包的问题。
为了后期方面查询问题,需要对所有接收和处理的数据做日志处理,在处理日志时,如果有redis最好,如果没有,建议日志信息写入自己定义的队列中(比如:ConcurrentQueue),不建议直接写入文件或者数据库,这样会造成数据处理的效率缓慢。
为了使业务处理的逻辑不影响正常的客户端和服务端的通讯,建议对业务处理在其他的Task任务中进行处理。这样可以保证客户端和服务端之间接收和发送的通道正常。
对客户端发送消息
对于所有链接到服务端的客户端,都应该对客户端进行记录,并在新的Task任务中,分别对服务端需要发送的信息进行发送。这样就可以保证发送消息的统一性,在一个任务中进行发送,方便数据控制。
由于客户端数量不知道,所以发送的时候,把需要发送的消息放入队列中,然后在队列有消息的时候在进行异步发送。只要发送队列中有消息,则不需要对发送任务进行暂停控制,保证消息及时有效。
Task.Factory.StartNew(() =>
{
while (true)
{
try
{
if (Business.queueSender.IsEmpty)
{
Thread.Sleep(1000);
continue;
}
Business.queueSender.TryDequeue(out Tuple<string, byte[]> tuple);
if (tuple == null)
continue;
Socket client = Business.dicClient[tuple.Item1];
if (!client.Connected)
{
Business.dicClient.TryRemove(tuple.Item1, out Socket outSocket);
continue;
}
List<byte> buffer = new List<byte>();
client_name = tuple.Item1;
buffer.AddRange(tuple.Item2);
client.BeginSend(buffer.ToArray(), 0, buffer.Count, SocketFlags.None, SendCallback, new Object[] { tuple, client, buffer });
Thread.Sleep(1);
}catch (Exception ex) {
}
}
});
业务数据入库
在通讯稳定的情况下,如果没有redis缓存等,建议把需要写入数据库的数据也放入队列中,每隔一段时间进行保存。而不要实时保存,数据库的写入需要更多的IO,放到一个Task任务中进行处理,可以保证数据保存的一致性。
Task.Factory.StartNew(() =>
{
while (true) {
string[] tablenames = Business.dicSaveData.Keys.ToArray();
foreach (string table in tablenames) {
if (Business.dicSaveData[table].IsEmpty) {
continue;
}
var datas= Business.GetDataFromQueue(table);
DataTable dt = DicToTable(table, datas);
DbAccess.BatchAdd(table, dt,DbAccess.log_connectionstring);
}
Thread.Sleep(30000);
}
});
日志处理
所有的消息都需要实施显示在系统上,并供用户查询,定位问题。而在CS软件中,如果对界面控件进行操作,就要进入主线程。主线程的频繁操作或者大数据量处理、显示,会造成系统卡顿。影响整个系统的性能。
日志处理也放到一个Task任务中,并定时清空系统软件的界面显示的数据
对于日志信息,也要进行物理保存。在日志信息达到一定的数量,或者达到一段时间后,可以把日志信息保存到文本中。
Task.Factory.StartNew(() =>
{
List<string> msgs = new List<string>();
while (true) {
if (Business.queueMsg.IsEmpty) {
Thread.Sleep(1000);
continue;
}
while (!Business.queueMsg.IsEmpty) {
if (msgs.Count > 1000) {
break;
}
Business.queueMsg.TryDequeue(out string msg);
if (string.IsNullOrEmpty(msg))
continue;
msgs.Add(msg);
}
try
{
string file = #34;{logdir}/{DateTime.Now.ToString("yyyyMMddHH")}.txt";
string data = string.Join("\r\n", msgs);
using (StreamWriter writer = new StreamWriter(file, true, Encoding.Default))
{
writer.WriteLine(data);
}
msgs.Clear();
}
catch (Exception ex) {
Business.AddFailLogs(#34;写日志失败,错误描述:{ex.Message}");
}
if (Business.queueMsg.Count > 1000) {
Thread.Sleep(10);
continue;
}
Thread.Sleep(10000);
}
});
队列处理
在整个业务逻辑过程中,使用了大量的队列,字典等,需要在软件的界面上显示队列的数量或者字典的详细信息。
说一个碰到的问题:
刚开始写的时候,由于链接的客户端比较少,所以日志的数量比较少,很快就写入数据库了,后来随着客户端的增多,日志的数量翻倍的增加,发现问题后,查询日志竟然找不到。
后来,把日志队列的数量显示在界面上,发现所有的客户端设备上线后,竟然在内存中有5万条日志信息。处理特别缓慢。
客户端测试
在写完服务端后,需要写一个客户端进行所有的协议测试。根据协议文档,在客户端发送相关协议,并收集服务端返回的信息。
客户端测试,可以写单客户端测试,也可以写多客户端测试,通过在软件上定义多个Task任务,分别启动多个客户端进行压力测试和并发测试。
总结
在整个软件的编码过程中,碰到的问题包括
- 大端小端的数据处理问题
- 协议文档对接过程中对于字节的定义和编码问题
- 怎么保证服务端软件持续在线。在前期的测试中,发现有的时候服务端显示正常,但是经常不返回消息,就是因为客户端断开后,服务端的Task关闭了,造成服务端对应的客户端没有反馈。
- 经常需要与各种设备进行协议对接和修改验证。经常需要给设备端查看相关的协议过程,这就是日志的功劳了
- 使用Task作业进行异步编程,可以提高软件的使用效率,防止软件出现未响应的情况。
最后
写了这么多年的软件,写过委托处理、多线程处理、Task作业、并行编程、异步编程。
虽然技术发展的很快,业务处理的性能得到的极大的提升。但是看到现在的大数据处理,感觉还得靠提升硬件性能和网络带宽来提升性能。
说一个有趣的事情:
以前写过一个服务端软件,需要接收1000个客户端软件持续发送的大量数据。当时服务端放到了阿里云上,怎么测试都是不行。后来在登录服务器看了看,CPU一直100%。内存倒是不多。
你猜最后怎么解决的,客户把阿里云的CPU提升到128核,CPU马上降到2%。
技术解决性能问题到最后都要钞能力
相关推荐
- 【Socket】解决UDP丢包问题
-
一、介绍UDP是一种不可靠的、无连接的、基于数据报的传输层协议。相比于TCP就比较简单,像写信一样,直接打包丢过去,就不用管了,而不用TCP这样的反复确认。所以UDP的优势就是速度快,开销小。但是随之...
- 深入学习IO多路复用select/poll/epoll实现原理
-
Linux服务器处理网络请求有三种机制,select、poll、epoll,本文打算深入学习下其实现原理。0.结论...
- 25-1-Python网络编程-基础概念
-
1-网络编程基础概念1-1-基本概念1-2-OSI七层网络模型OSI(开放系统互联)七层网络模型是国际标准化组织(ISO)提出的网络通信分层架构,用于描述计算机网络中数据传输的过程。...
- Java NIO多路复用机制
-
NIO多路复用机制JavaNIO(Non-blockingI/O或NewI/O)是Java提供的用于执行非阻塞I/O操作的API,它极大地增强了Java在处理网络通信和文件系统访问方面的能力。N...
- Python 网络编程完全指南:从零开始掌握 Socket 和网络工具
-
Python网络编程完全指南:从零开始掌握Socket和网络工具在现代应用开发中,网络编程是不可或缺的技能。Python提供了一系列高效的工具和库来处理网络通信、数据传输和协议操作。本指南将从...
- Rust中的UDP编程:高效网络通信的实践指南
-
在实时性要求高、允许少量数据丢失的场景中,UDP(用户数据报协议)凭借其无连接、低延迟的特性成为理想选择。Rust语言凭借内存安全和高性能的特点,为UDP网络编程提供了强大的工具支持。本文将深入探讨如...
- Python 网络编程的基础复习:理解Socket的作用
-
计算机网络的组成部分在逻辑上可以划分为这样的结构五层网络体系应用层:应用层是网络协议的最高层,解决的是具体应用问题...
- 25-2-Python网络编程-TCP 编程示例
-
2-TCP编程示例应用程序通常通过“套接字”(socket)向网络发出请求或者应答网络请求,使主机间或者一台计算机上的进程间可以通信。Python语言提供了两种访问网络服务的功能。...
- linux下C++ socket网络编程——即时通信系统(含源码)
-
一:项目内容本项目使用C++实现一个具备服务器端和客户端即时通信且具有私聊功能的聊天室。目的是学习C++网络开发的基本概念,同时也可以熟悉下Linux下的C++程序编译和简单MakeFile编写二:需...
- Python快速入门教程7:循环语句
-
一、循环语句简介循环语句用于重复执行一段代码块,直到满足特定条件为止。Python支持两种主要的循环结构:for循环和while循环。...
- 10分钟学会Socket通讯,学不会你打我
-
Socket通讯是软硬件直接常用的一种通讯方式,分为TCP和UDP通讯。在我的职业生涯中,有且仅用过一次UDP通讯。而TCP通讯系统却经常写,正好今天写了一个TCP通讯的软件。总结一下内容软件使用C#...
- Python 高级编程之网络编程 Socket(六)
-
一、概述Python网络编程是指使用Python语言编写的网络应用程序。这种编程涉及到网络通信、套接字编程、协议解析等多种方面的知识。...
- linux网络编程Socket之RST详解
-
产生RST的三个条件:1.目的地为某端口的SYN到达,然而该端口上没有正在监听的服务器;2.TCP想取消一个已有的连接;3.TCP接收到一个根本不存在的连接上的分节;现在模拟上面的三种情况:cl...
- Python中实现Socket通讯(附详细代码)
-
套接字(socket)是一种在计算机网络中进行进程间通信的方法,它允许不同主机上的程序通过网络相互通信。套接字是网络编程的基础,几乎所有的网络应用程序都使用某种形式的套接字来实现网络功能。套接字可以用...
你 发表评论:
欢迎- 一周热门
-
-
前端面试:iframe 的优缺点? iframe有那些缺点
-
带斜线的表头制作好了,如何填充内容?这几种方法你更喜欢哪个?
-
漫学笔记之PHP.ini常用的配置信息
-
其实模版网站在开发工作中很重要,推荐几个参考站给大家
-
推荐7个模板代码和其他游戏源码下载的网址
-
[干货] JAVA - JVM - 2 内存两分 [干货]+java+-+jvm+-+2+内存两分吗
-
正在学习使用python搭建自动化测试框架?这个系统包你可能会用到
-
织梦(Dedecms)建站教程 织梦建站详细步骤
-
【开源分享】2024PHP在线客服系统源码(搭建教程+终身使用)
-
2024PHP在线客服系统源码+完全开源 带详细搭建教程
-
- 最近发表
- 标签列表
-
- mybatis plus (70)
- scheduledtask (71)
- css滚动条 (60)
- java学生成绩管理系统 (59)
- 结构体数组 (69)
- databasemetadata (64)
- javastatic (68)
- jsp实用教程 (53)
- fontawesome (57)
- widget开发 (57)
- vb net教程 (62)
- hibernate 教程 (63)
- case语句 (57)
- svn连接 (74)
- directoryindex (69)
- session timeout (58)
- textbox换行 (67)
- extension_dir (64)
- linearlayout (58)
- vba高级教程 (75)
- iframe用法 (58)
- sqlparameter (59)
- trim函数 (59)
- flex布局 (63)
- contextloaderlistener (56)