连接池碎碎念 其实所谓的“连接池”，个人观点是一种在工程实践中以空间换时间的优化方案。 我们在实际的开发中，常见的资源表现形式：一种是存储（内存+磁盘存储）资源，还有是IO（磁盘IO+网络IO）资源，另外当然还有操作系统CPU的调度/计算等等。 而在实际中，存储资源相对于IO及计算来说便宜很多，比如说当我们的服务遇到瓶颈的时候，最直接的方案就是升级机器、增加存储，先让线上的服务恢复稳定然
转载
2023-07-12 14:43:47
1328阅读
一、连接池的描述图片如下：二、连接池代码如下： package main;
import (
"time"
"sync"
"errors"
"net"
"fmt"
)
//频繁的创建和关闭连接，对系统会造成很大负担
//所以我们需要一个池子，里面事先创建好固定数量的连接资源，需要时就取，不需要就放回池中。
//但是连接资源有一个特点，我们无法保证连接长时间会有效。
//比如，网络原
转载
2023-10-19 08:35:00
118阅读
前言golang作为常驻进程, 请求第三方服务或者资源(http, mysql, redis等)完毕后, 需要手动关闭连接, 否则连接会一直存在;连接池是用来管理连接的, 请求之前从连接池里获取连接, 请求完毕后再将连接归还给连接池;连接池做了连接的建立, 复用以及回收工作;本文件仅介绍http请求的连接池http.Transport;net/http 的工作流程http请求示例代码func ma
转载
2024-07-02 21:23:55
176阅读
（我自己也碰到过这个问题。做过一段时间爬虫。如果要访问的网页是离散的，大量的。如果不尽早的关闭连接，会导致路由器的连接数大量超标。可能好一点的路由器可承受2万/3万，甚至6万8万的连接数，但是一个网页开起来就有5个左右的连接。当我们爬的网页超过几千个的时候，就会发现网络拥塞了，卡死
转载
2022-02-18 17:58:04
1735阅读
源码展示 这里展示了 net/http 包的两个接口的源码：ListenAndServe、Serve ListenAndServe接口做了以下事情： 设置地址类型 生成侦听器 开启Serve func (srv *Server) ListenAndServe() error { if srv.shu ...
转载
2021-10-28 11:39:00
353阅读
2评论
Golang是一种使用Go语言编程的http client非常方便的一种方法。在Kubernetes（K8S）中，我们经常需要使用http client来与其他服务进行通信。在本文中，我将向你介绍如何在Golang中实现一个http client，并使用这个client来与其他服务进行通信。
首先，让我们来看一下整个实现过程的流程，如下表所示：
| 步骤 | 描述
原创
2024-05-06 10:37:30
65阅读
# 用Golang实现HTTP请求
作为一名开发者，我们经常需要向其他服务发送HTTP请求来获取数据或完成相应的操作。在Golang中，可以使用标准库中的net/http包来实现HTTP请求。接下来，我将介绍如何使用Golang发送HTTP请求，并给出相应的代码示例。
## 实现步骤
下面是实现HTTP请求的整个流程，我们将通过以下步骤完成：
| 步骤 | 描述 |
| ---- | --
原创
2024-05-30 10:34:22
107阅读
# 实现golang http proxy
## 流程步骤
| 步骤 | 动作 |
| ------ | ----- |
| 1 | 创建一个http服务器来接收客户端请求 |
| 2 | 创建一个http客户端来处理代理请求 |
| 3 | 将客户端的请求通过代理发送到目标服务器 |
| 4 | 将目标服务器的响应通过代理发送给客户端 |
## 代码示例
### 步骤1：创建一个htt
原创
2024-05-28 11:13:06
166阅读
# 从零开始实现一个 golang http 服务
## 前言
欢迎你来到golang的世界！本文将带你一步步实现一个简单的golang http服务。首先，我们需要了解整个过程的流程，然后我们会详细讲解每一步需要做什么以及相应的代码示例。
## 流程概述
| 步骤 | 描述 |
|------|------------------
原创
2024-04-24 11:03:33
62阅读
前言 对于 Golang 来说，实现一个简单的 http server 非常容易，只需要短短几行代码。同时有了协程的加持，Go 实现的 http server 能够取得非常优秀的性能。这篇文章将会对 go 标准库 net/http 实现 http 服务的原理进行较为深入的探究，以此来学习了解网络编程的常见范式以及设计思路。HTTP 服务 基于 HTTP 构建的网络应用包括两个端，即客户端 ( Cl
转载
2024-06-18 14:27:33
61阅读
一、前言数据抽取是数据仓库ETL开发的重要环节，对于异构数据源的同步有多种工具，也会遇到各种问题。本文主要总结作者工作中同步mongo数据到hive的方式和经验。 二、mongo to hive方式选择mongo同步数据到hive有多种方式，下面介绍几种常用的方式1、通过datax官网介绍：datax的MongoDBReader 插件利用 MongoDB 的java客户端MongoCli
转载
2023-10-31 17:51:56
59阅读
golang 包：github.com/denisenkom/go-mssqldb@v1.2.0github.com/jmoiron/sqlx@v1.3.5 数据库：sql server express 2014 问题：连接得时候golang报错：TLS Handshake failed: tls: server selected unsupported protocol ve
转载
2023-07-02 20:06:40
213阅读
问题：项目想用SSL来链接kafka，在使用的过程中遇到几个特别的坑 现象： 程序在消费和生产的时候出现错误：2019/04/02 20:02:22 unable to create kafka client: "kafka: client has run out of available brokers to talk to (Is your cluster reachable?)"然后看kaf
转载
2024-04-01 11:29:16
98阅读
Golang整合Doris查询功能封装一、目标实现基于配置查询Doris数据库实现将查询结构封装：[]map[string]interface{}，支持单条/多条结果集支持interface转目标struct，实现结果集解析实现数据分片，便于后续的分批处理二、Doris查询功能数据库配置用于连接数据库，可以抽离到公共配置，便于统一维护管理，减少耦合type DorisDB struct {
Us
转载
2023-12-23 22:14:52
293阅读
服务端package mainimport ( "fmt" "net/http")func Handler(write
原创
2022-07-18 21:14:39
119阅读
服务端http http客户端 http_head http_head自定义超时写法 http_form写法 http_template，模板写法 index.html 用例2： package main import ( "fmt" "html/template" "io" "net/http"
原创
2021-05-11 15:05:44
400阅读
net/http 包的学习笔记
原创
2023-06-20 10:48:57
126阅读
1. 前言http包包含http客户端和服务端的实现,利用Get,Head,Post,以及PostForm实现HTTP或者HTTPS的请求.2. 本文分析内容安排函数结构3. 函数3.1 服务端函数func Handle(pattern string, handler Handler)将handler按照指定的格式注册到DefaultServeMux,ServeMux解释了模式匹配规则
转载
2017-01-17 15:35:09
2753阅读
GET请求不带参数直接请求import ( "fmt" "net/http")func main(){ resp, err := http.Get("https://www.baidu.com/") if err != nil { log.F
原创
2017-10-09 14:31:23
1262阅读
1. http server package main import ( "fmt" "net/http" ) func main() { // 请求url和对应处理函数 http.HandleFunc("/hello", myHandleFunc) // 开启服务 http.ListenAndSe ...
转载
2021-11-01 16:35:00
135阅读
2评论
