Я хочу реализовать связь между двумя серверами. На стороне клиента: один поток подготавливает данные и ставит их в очередь. Второй поток извлекает данные из очереди, сериализует их и отправляет на сервер. На стороне сервера: получает данные (байты) и ставит их в очередь. Дальнейшая обработка поставленных в очередь данных не имеет значения.
Только для целей тестирования:
- Я запускаю клиент и сервер на одной машине.
- Я имитирую очередь, инициируя
records
со строкой длиной 70 байт (объект, который я хочу отправить, имеет размер около 70 байт). См. кодClient->StartClient
ниже. - Я отправляю данные итеративно. Данные будут поставлены в очередь очень быстро, поэтому я хочу отправить их, как только они попадут в очередь. Я имитирую его, отправляя его итеративно.
Я использовал WCF как для клиента, так и для сервера для отправки данных, но для отправки 70 МБ (1 миллион записей по 70 байт каждая) потребовалось более 5 минут. Тогда я решил использовать Socket
. Я использовал асинхронный подход, и отправка 70 МБ заняла несколько минут. Насколько я понимаю, при наличии клиента и сервера на одном компьютере отправка 70 МБ НЕ должна занимать несколько минут. Это должно занять максимум несколько секунд, верно? Как мне его ускорить?
P.S. Я знаю, что вы можете сказать «накопить, а затем отправить». Но я хочу иметь возможность отправлять данные, как только они попадут в очередь.
Клиент:
public class StateObject
{
// Client socket.
public Socket workSocket = null;
// Size of receive buffer.
public const int BufferSize = 256;
// Receive buffer.
public byte[] buffer = new byte[BufferSize];
// Received data string.
public StringBuilder sb = new StringBuilder();
}
public class AsynchronousClient
{
// The port number for the remote device.
private const int port = 11000;
// ManualResetEvent instances signal completion.
private static ManualResetEvent connectDone =
new ManualResetEvent(false);
private static ManualResetEvent sendDone =
new ManualResetEvent(false);
private static ManualResetEvent receiveDone =
new ManualResetEvent(false);
// The response from the remote device.
private static String response = String.Empty;
private static void StartClient()
{
// Connect to a remote device.
try
{
IPHostEntry ipHostInfo = Dns.Resolve("MY_HOST");
IPAddress ipAddress = ipHostInfo.AddressList[0];
IPEndPoint remoteEP = new IPEndPoint(ipAddress, port);
// Create a TCP/IP socket.
Socket client = new Socket(AddressFamily.InterNetwork,
SocketType.Stream, ProtocolType.Tcp);
// Connect to the remote endpoint.
client.BeginConnect(remoteEP,
new AsyncCallback(ConnectCallback), client);
connectDone.WaitOne();
//============================================================
var records = new List<string>();
for (int i = 0; i < 1000000; i++)
{
records.Add(new string('a', 70));
}
var serializer = new BinaryFormatter();
var stopWatch = new Stopwatch();
stopWatch.Start();
foreach (var rec in records)
{
using (var ms = new MemoryStream())
{
serializer.Serialize(ms, rec);
var serData = ms.ToArray();
// Send test data to the remote device.
Send(client, serData);
}
}
stopWatch.Stop();
//================================================================
// Release the socket.
client.Shutdown(SocketShutdown.Both);
client.Close();
}
catch (Exception e)
{
Console.WriteLine(e.ToString());
}
}
private static void ConnectCallback(IAsyncResult ar)
{
try
{
// Retrieve the socket from the state object.
Socket client = (Socket)ar.AsyncState;
// Complete the connection.
client.EndConnect(ar);
Console.WriteLine("Socket connected to {0}",
client.RemoteEndPoint.ToString());
// Signal that the connection has been made.
connectDone.Set();
}
catch (Exception e)
{
Console.WriteLine(e.ToString());
}
}
private static void Send(Socket client, byte[] data)
{
// Convert the string data to byte data using ASCII encoding.
byte[] byteData = data;// Encoding.ASCII.GetBytes(data);
// Begin sending the data to the remote device.
client.BeginSend(byteData, 0, byteData.Length, 0,
new AsyncCallback(SendCallback), client);
}
private static void SendCallback(IAsyncResult ar)
{
try
{
// Retrieve the socket from the state object.
Socket client = (Socket)ar.AsyncState;
// Complete sending the data to the remote device.
int bytesSent = client.EndSend(ar);
Console.WriteLine("Sent {0} bytes to server.", bytesSent);
}
catch (Exception e)
{
Console.WriteLine(e.ToString());
}
}
public static int Main(String[] args)
{
StartClient();
return 0;
}
}
Сервер:
public class StateObject
{
// Client socket.
public Socket workSocket = null;
// Size of receive buffer.
public const int BufferSize = 1024;
// Receive buffer.
public byte[] buffer = new byte[BufferSize];
// Received data string.
public StringBuilder sb = new StringBuilder();
}
public class AsynchronousSocketListener
{
// Thread signal.
public static ManualResetEvent allDone = new ManualResetEvent(false);
public AsynchronousSocketListener()
{
}
public static void StartListening()
{
// Data buffer for incoming data.
byte[] bytes = new Byte[1024];
IPHostEntry ipHostInfo = Dns.Resolve(Dns.GetHostName());
IPAddress ipAddress = ipHostInfo.AddressList[0];
IPEndPoint localEndPoint = new IPEndPoint(ipAddress, 11000);
// Create a TCP/IP socket.
Socket listener = new Socket(AddressFamily.InterNetwork,
SocketType.Stream, ProtocolType.Tcp);
// Bind the socket to the local endpoint and listen for incoming connections.
try
{
listener.Bind(localEndPoint);
listener.Listen(100);
while (true)
{
// Set the event to nonsignaled state.
allDone.Reset();
// Start an asynchronous socket to listen for connections.
Console.WriteLine("Waiting for a connection...");
listener.BeginAccept(
new AsyncCallback(AcceptCallback),
listener);
// Wait until a connection is made before continuing.
allDone.WaitOne();
}
}
catch (Exception e)
{
Console.WriteLine(e.ToString());
}
Console.WriteLine("\nPress ENTER to continue...");
Console.Read();
}
public static void AcceptCallback(IAsyncResult ar)
{
// Signal the main thread to continue.
allDone.Set();
// Get the socket that handles the client request.
Socket listener = (Socket)ar.AsyncState;
Socket handler = listener.EndAccept(ar);
// Create the state object.
StateObject state = new StateObject();
state.workSocket = handler;
handler.BeginReceive(state.buffer, 0, StateObject.BufferSize, 0,
new AsyncCallback(ReadCallback), state);
}
public static void ReadCallback(IAsyncResult ar)
{
String content = String.Empty;
// Retrieve the state object and the handler socket
// from the asynchronous state object.
StateObject state = (StateObject)ar.AsyncState;
Socket handler = state.workSocket;
// Read data from the client socket.
int bytesRead = handler.EndReceive(ar);
Console.WriteLine("Read {0} bytes from socket", bytesRead);
handler.BeginReceive(state.buffer, 0, StateObject.BufferSize, 0,
new AsyncCallback(ReadCallback), state);
}
public static int Main(String[] args)
{
StartListening();
return 0;
}
}
sdf
socket.NoDelay = true;
) или изменить размер буфера приема и отправки? - person sisve   schedule 27.08.2015