一、简介Spark Streaming是一个从各种来源获取实时流数据的框架。它支持的流资包括HDFS、Kafka、Flume以及自定义流等。Spark Streaming操作可以从故障中自动恢复，这对于在线数据处理十分重要。Spark Streaming表示使用离散流（DStream）的流数据，该数据流周期性的创建包含最后一个时间窗口中进入的数据的RDD. Spark Streaing可以与单个程
转载
2024-06-30 17:40:19
42阅读
sockets（套接字）编程有三种，流式套接字（SOCK_STREAM），数据报套接字（SOCK_DGRAM），原始套接字（SOCK_RAW）；基于TCP的socket编程是采用的流式套接字(SOCK_STREAM)。基于UDP采用的数据报套接字(SOCK_DGRAM).1.TCP流式套接字的编程步骤在使用之前须链接库函数：工程->设置->Link->输入ws2_32.lib，O
一、介绍本地套接字是IPC， 即本地进程间通信的一种实现方式。出来本地套接字以外，其他技术，如管道、共享信息队列等也是进程间通信的常用方法。但因为本地套接字开发便捷，接受度高，所以普遍适用于同一台主机上进程间通信的各种场景。利用本地套接字可完成可靠字节流和数据报两种协议。PS：可通过netstat命令查看Linux系统内的本地套接字状况。查看所使用的本地套接字描述符：套接字是一种特殊类型的套接字，
转载
2024-06-24 18:48:57
43阅读
Linux进程间通信——使用流套接字前面说到的进程间的通信，所通信的进程都是在同一台计算机上的，而使用socket进行通信的进程可以是同一台计算机的进程，也是可以是通过网络连接起来的不同计算机上的进程。通常我们使用socket进行网络编程，这里将会简单地讲述如何使用socket进行简单的网络编程。一...
转载
2015-04-01 10:13:00
84阅读
2评论
---恢复内容开始--- 套接字是计算机网络数据结构，它体现了上节中所描述的“通信端点”的概念。在任何 类型的通信开始之前，网络应用程序必须创建套接字。可以将它们比作电话插孔，没有它将 无法进行通信。起源 套接字的起源可以追溯到 20 世纪 70 年代，它是加利福尼亚大学的伯克利版本 UNIX（称 为 BSD UNIX）的一部分。因此，有时你可能会听过将套接字称为伯克利套接字或 BSD 套接
转载
2023-12-09 22:13:43
69阅读
共有6种类型套接字I/O模型。blocking（阻塞），select（选择），WSAAsyncSelect（异步选择），WSAEventSelect（事件选择），overlapped（重叠），completionport（完成端口）。
1.select
之所以称select模型，是因为工作原理是利用select函数实现对I/O的管理。
select可用于判断套接字上是否存在数据，或者能否向一个套接
转载
2023-11-19 12:00:18
99阅读
创建一个套接字的时候，该套接字可以有两种状态，一个主动套接字（主动去连接），一个是被动套接字（等待连接）。主动连接的理解起来，应该没什么问题，但是被动的呢？是在一直轮询还是一种中断？在《卷1：套接字编程API》中并没有提到这个。listen()主要做了以下：1.维护了两个队列，已完成连接的队列和未完成链接的队列。之和不超过backlog的数值。2.维护链接的时间RTT。中值为178ms。3.在完成
转载
2023-12-13 21:57:47
81阅读
文章目录套接字(Socket)的概念Socket数据结构数据存储方式IP 点分十进制与二进制的相互转化域名与IP地址相互转化 套接字(Socket)的概念套接字： 是系统内核中的一种数据结构，也是网络间进程之间一种通信机制，同时也是** I/O 文件描述符**。 在利用套接字进行网络通信时，套接字是如何唯一确定网络中的进程的呢？ 在网络中，每一个主机可以通过 IP 地址唯一确定，主机内的进程可以
转载
2023-09-15 22:47:22
230阅读
JavaEE-TCP流套接字编程
原创
2022-08-13 09:21:11
195阅读
套接字 Python 提供了两个级别访问的网络服务。： 低级别的网络服务支持基本的 Socket，它提供了标准的 BSD Sockets API，可以访问底层操作系统Socket接口的全部方法。 高级别的网络服务模块 SocketServer， 它提供了服务器中心类，可以简化网络服务器的开发。 So
原创
2021-08-27 09:39:54
374阅读
网络上的两个程序通过一个双向的通信连接实现数据的交换，建立网络通信连接至少要一对端口号(socket)。Socket的英文原义是“孔”或“插座”，通常也称作"套接字"，用于描述IP地址和端口，是一个通信链的句柄。 套接管：两个管子的接口处用以将两个管口连接在一起的套筒。 socket 承物的凹处；承
转载
2018-01-03 19:20:00
226阅读
2评论
socket编程中listen函数分析
listen函数仅由TCP服务器调用，它做两件事：当socket函数创建一个套接字时，它被假设为一个主动套接字，也就是说，它是一个将调用connect发起连接的客户套接字。listen函数把一个未连接的套接字转换为一个被动套接字，指示内核应该接受指向该套接字的连接请求。根据TCP状态转换图，调用listen导致套接
转载
2023-07-23 16:57:10
148阅读
一、套接字工作流程 生活中的场景就解释了这工作原理。 Socket，然后与端口绑定(bind)，对端口进行监听(listen)，调用accept阻塞，等待客户端连接。在这时如果有个客户端初始化一个Socket，然后连接服务器(connect)，如果连接成功，这时客户端与服务器端的连接就建立了。客户端发送数据请求，服务器端接收请求并处理请求，然后把回应数据发送给客户端，客户端读取
转载
2023-07-05 14:46:46
357阅读
声明：本文来自网络博文的合并，文后有链接。一、listen函数仅由TCP服务器调用它做两件事：1、当socket函数创建一个套接字时，它被假设为一个主动套接字，也就是说，它是一个将调用connect发起连接的客户套接字。listen函数把一个未连接的套接字转换为一个被动套接字，指示内核应该接受指向该套接字的连接请求。根据TCP状态转换图，调用listen导致套接字从CLOSED状态转换到LISTE
转载
2023-07-19 20:30:59
194阅读
一、套接字是什么？ 在Linux中一切皆文件，管道，匿名管道，命名管道，套接字等是各类进程通信所使用的工具，在Python中也可以这样理解，而socket套接字向网络发出请求或者应答网络请求，使主机间或同台计算机上的进程间可以通讯。它们在使用的时候都有‘创建’，‘关闭’，可以将其理解为一个信息暂存的一个地方（工具），我要发消息的时候就打开，放信息，关闭，然后另一个程序通过监听，得知有信息来了，然
转载
2023-07-23 16:56:50
114阅读
网络IPC：套接字接口概述套接字接口实现了通过网络连接的不同计算机之间的进程相互通信的机制。套接字描述符（创建套接字）套接字是通信端点的抽象，为创建套接字，调用socket函数#include<sys/socket.h>
int socket(int domain,int type,int protocol);
/*返回：成功，返回套接字描述符，失败，-1*/参数domain：确定通信
转载
2023-07-12 18:36:59
171阅读
所谓bind，就是指绑定本地接受端口。 指定ip，是为了分辨多ip主机。在有服务端和客户端的UDP中，bind是服务端调用的函数，绑定的是服务端的IP，假设服务端有多个网卡，即会有多个IP，这个时候我们可以选择用bind绑定其中一个IP，那么服务端只接收该IP上某端口的数据。如果bind绑定的是INADDR_ANY，即表示所有发送到
转载
2023-12-21 11:44:26
72阅读
前面说到的进程间的通信，所通信的进程都是在同一台计算机上的，而使用socket进行通信的进程可以是同一台计算机的进程，也是可以是通过网络连接起来的不同计算机上的进程。通常我们使用socket进行网络编程，这里将会简单地讲述如何使用socket进行简单的网络编程。一、什么是socketsocket，即...
转载
2015-03-09 16:53:00
56阅读
前面说到的进程间的通信，所通信的进程都是在同一台计算机上的，而使用socket进行通信的进程可以是同一台计算机的进程，也是可以是通过网络连接起来的不同计算机上的进程。通常我们使用socket进行网络编程，这里将会简单地讲述如何使用socket进行简单的网络编程。
转载
2013-08-29 19:50:00
88阅读
2评论
一、基于TCP的套接字编程实现流程：1. 服务器端流程简介： （1）创建套接字（socket） （2）将套接字绑定到一个本地地址和端口上（bind） &n
转载
2023-06-20 15:33:21
113阅读
