解答

1. https://programnotes.cn/golang-1000-question-answer/
2. code,repo in github <git@github.com:yiGmMk/golang-1000-question.git>
3. 代码允许环境:
   • go version go1.15.3 linux/amd64

const

1. [001]iota,有常量如下,second数值是?

   1 2 3 4 5 6

   const ( first = 1 second =iota third fourth )

string

1. [002]strings.ReplaceAll,代码如下,replace的值是?

   1 2 3 4

   origin := " 特斯拉Model X " replace := strings.ReplaceAll(origin, " ", "") fmt.Printf("origin:%s\nreplace:%s\n", origin, replace)

广告屏蔽类

1. AdGuard 广告拦截器

2. uBlock Origin
   屏蔽效果好，支持使用选择器手动添加,屏蔽页面上指定的各种广告

代码查看

1. Octotree - GitHub code tree

影音娱乐

1. Listen 1
   支持通过url导入各平台的歌单

文档

1. 超级复制

2. Redirector 自动跳转,看一些有镜像站的文档,网页很方便

   • edge插件地址https://microsoftedge.microsoft.com/addons/detail/redirector/jdhdjbcalnfbmfdpfggcogaegfcjdcfp?hl=zh-CN

   • golang官方文档自动跳转设置(跳转到golang.google.cn)

     1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23

     { "createdBy": "Redirector v3.5.4", "createdAt": "2021-12-15T10:57:39.405Z", "redirects": [ { "description": "重定向golang官方文档", "exampleUrl": "https://golang.org/", "exampleResult": "https://golang.google.cn/", "error": null, "includePattern": "*golang.org*", "excludePattern": "", "patternDesc": "", "redirectUrl": "$1golang.google.cn$2", "patternType": "W", "processMatches": "noProcessing", "disabled": false, "grouped": false, "appliesTo": [ "main_frame" ] } ] }

3. 彩云小译 翻译网页支持双语阅读

   • 收费
   • 对比阅读

下载

1. IDM Integration Module

• 多线程，不限速，下载超快
• 收费

代码

1. Go Search Extension
   快速搜索go package。

golang.org

1. effective go: https://golang.google.cn/doc/effective_go.html

面试

1. go面试题：https://github.com/lifei6671/interview-go
2. go https://github.com/shomali11/go-interview

其他

1. 国光: https://www.sqlsec.com/
2. Go Questions: https://golang.design/go-questions/

golang blog

1. 曹春晖: https://xargin.com/
2. 兔兔(7天从零实现系列): https://geektutu.com/post/gee.html
3. go by example:https://golangbyexample.com/

golang book

golang 社区

1. GOCN: https://gocn.vip/

使用

1. 状态
   auto,on和off

2. 启用
   export GO111MODULE=on

3. 固定版本号
   在go.mod里使用replace将任意版本的package替换为需要的版本

   1 2 3 4 5 6 7 8

   module programnotes.cn/test go 1.13 require ( gorm.io/driver/mysql v1.1.3 gorm.io/gorm v1.22.2 ) replace gorm.io/gorm => gorm.io/gorm v1.21.15 replace gorm.io/driver/mysql => gorm.io/driver/mysql v1.0.5

   有些没节操的package不遵循规范,小版本改动不兼容导致线上bug,google的grpc就被吐槽过,这里将依赖设置成测试过的稳定版本可以减少依赖的package不兼容变更带来的问题.
   go get -u 解决依赖时可能改动项目中其他的package的版本,固定版本号也可以减少意外的版本变更,例如:这里升级gorm的版本也会改动mysql的版本.

定义

对流量进行按需分发的服务，通过将流量分发到不同的后端服务来扩展应用系统的

服务吞吐能力，并且可以消除系统中的单点故障，提升应用系统的可用性。
主要为HTTP/HTTPS/TCP/UDP/QUICk几种类型的请求设置转发规则。

负载均衡算法

1. 轮询（Round Robin）：第一个请求选择列表中的第一个服务器，按顺序移动列表直到结尾，循环。
2. 最小连接（Least Connections）：优先选择连接数最少的服务器
3. 请求来源（Source）：根据请求源的 IP 的散列（hash）来选择要转发的服务器。

   7层负载均衡与4层负载均衡

   4层

   4层 LB 主要是通过报文中的目的地址和端口，再加上负载均衡设备设置的服务器
   选择方式，决定最终选择的内部服务器。负载能力实现主要基于数据包的传输层信息
   （ ip + port ）进行负载转发。

• 基于域名或URL转发

  7层

  7层 LB 也称为“内容交换”，主要通过报文中真正有意义的应用层内容（证书，
  cookies，http头部信息），会在负载均衡设备上进行证书校验，三次握手等操作，再
  加上负载均衡设备设置的服务器选择方式，决定最终的内服务器。负载能力实现主要基
  于应数据包应用层信息（ domain+port+url 等）进行负载转发。
• 基于内容的路由
• HTTP标头改写、重定向、重写、限速等

参考

• 阿里云:https://help.aliyun.com/document_detail/197202.html?spm=a2c4g.11186623.6.554.66e4773aZkbJZE
• 腾讯云:
• 知乎:https://zhuanlan.zhihu.com/p/32841479

wrk

0. usage
   HTTP benchmarking tool.
   More information: https://github.com/wg/wrk.
1. param

   1 2 3 4 5 6 7 8 9 10 11 12

   Options: -c, --connections <N> Connections to keep open //连接数 -d, --duration <T> Duration of test //测试时间 -t, --threads <N> Number of threads to use //线程数 -s, --script <S> Load Lua script file //lua脚本 -H, --header <H> Add header to request //添加头信息 --latency Print latency statistics --timeout <T> Socket/request timeout -v, --version Print version details //版本信息 Numeric arguments may include a SI unit (1k, 1M, 1G) Time arguments may include a time unit (2s, 2m, 2h)

examples

1. 测试go-zero demo中的check接口

   1	wrk -t10 -c1000 -d30s --latency "http://localhost:8888/check?book=go-zero"

2. 结果

   1 2 3 4 5 6 7 8 9 10 11 12 13

   Running 30s test @ http://localhost:8888/check? book=go-zero 10 threads and 1000 connections Thread Stats Avg Stdev Max +/- Stdev Latency 128.84ms 60.10ms 593.00ms 77.53% Req/Sec 794.67 304.69 1.95k 69.54% Latency Distribution 50% 115.23ms 75% 153.24ms 90% 203.13ms 99% 339.48ms 233390 requests in 30.10s, 29.60MB read Requests/sec: 7754.33 Transfer/sec: 0.98MB

ubuntu下使用

1. 安装

   1 2 3 4 5 6 7 8

   git clone https://github.com/wg/wrk.git // 构建可执行文件 cd wrk make // 软连接 ln -s 绝对路径/wrk /usr/local/bin(任意在PATH中的路径都可以)

https://hub.docker.com/_/mysql?tab=description&page=1&ordering=last_updated

1. 拉取镜像
   docker pull mysql

2. 运行

   1	docker run --name some-mysql -e MYSQL_ROOT_PASSWORD=my-secret-pw -d mysql:tag

   where some-mysql is the name you want to assign to your container, my-secret-pw is the password to be set for the MySQL
   root user and tag is the tag specifying the MySQL version you want. See the list above for relevant tags.

   1	docker run --name docker_mysql -p 3306:3306 -e MYSQL_ROOT_PASSWORD=your_password -d mysql

3. 修改验证密码,修改后才能用root@密码登陆

   1	ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY 'your_password';

4. 创建新用户

   1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21

   mysql8版本执行 grant all privileges on *.* to 'root'@'%' identified by 'root' with grant option; 会报语法错误 ERROR 1064 (42000) 应先创建新用户 create user 'admin'@'%' identified by 'password'; 执行授权 GRANT ALL PRIVILEGES ON *.* TO 'admin'@'%'; (MariaDB: GRANT ALL PRIVILEGES ON *.* TO 'admin'@'%' identified by 'password';) 刷新 flush privileges; 授权远程 ALTER USER 'admin'@'%' IDENTIFIED WITH mysql_native_password BY 'password'; (MariaDB: ALTER USER admin@'%' IDENTIFIED VIA mysql_native_password;) 刷新 flush privileges;

   references: https://blog.csdn.net/java_cai_niao_han/article/details/110442608

准备

基础环境

docker & docker-compose 安装配置

1. 使用轻量服务器预装docker的镜像
   操作系统信息,lsb_release -a

   1 2 3 4 5

   LSB Version: :core-4.1-amd64:core-4.1-noarch Distributor ID: CentOS Description: CentOS Linux release 7.9.2009 (Core) Release: 7.9.2009 Codename: Core

2. yum update,更新预装软件docker等

3. 设置用户组
   将当前用户加入docker用户组

4. 安装docker-compose
   yum安装的版本太老使用安装包安装,可以在github仓库的release页面下载
   下载解压到/usr/local/bin/目录下,增加执行权限,可使用如下命令安装

   1 2 3

   sudo curl -L "https://github.com/docker/compose/releases/download/1.29.2/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose sudo chmod +x /usr/local/bin/docker-compose

5. 设置阿里云容器加速

   • 安装／升级Docker客户端
     推荐安装1.10.0以上版本的Docker客户端，参考文档docker-ce

   • 配置镜像加速器
     针对Docker客户端版本大于 1.10.0 的用户
     您可以通过修改daemon配置文件/etc/docker/daemon.json来使用加速器

     1 2 3 4 5 6 7 8

     sudo mkdir -p /etc/docker sudo tee /etc/docker/daemon.json <<-'EOF' { "registry-mirrors": ["https://6ly480gk.mirror.aliyuncs.com"] } EOF sudo systemctl daemon-reload sudo systemctl restart docker

6. 参考:

   • 安装compose,docker.com: https://docs.docker.com/compose/install/
   • 设置阿里云镜像加速: https://cr.console.aliyun.com/cn-hangzhou/instances/mirrors
   • guid生成: https://www.iamwawa.cn/guid.html

git 安装配置

在centos上使用yum安装的git版本太老,需要自己编译或通过第三方安装如ius

1. 在阿里云提供的镜像上已有阿里云的镜像配置,在执行以下命令安装依赖时自动安装了v2.24.4版本的git:

   1	yum install curl-devel expat-devel gettext-devel openssl-devel zlib-devel asciidoc

2. 配置用户

   使用git config配置用户名,邮箱

   1 2	git config --global user.name "xxx" git config --global user.email "xxx"

3. 配置~/.ssh/config

   1 2 3 4 5

   Host github.com HostName github.com IdentityFile ~/.ssh/id_rsa_git //秘钥位置 PreferredAuthentications publickey User xxxx //这里填用户名

4. ssh配置了key,在非root用户目录下,且以非root用户登录,ssh -T git@github.com报”Permission denied (publickey).”,使用-i指定秘钥后就ok了,是什么问题,没有使用当前目录下的key?
   通过ssh -vT git@github.com调试发现,ssh确实在~/.ssh下寻找了id_rsa的key,不存在,而配置文件config名错误(写成了congfig),
   导致ssh没有去读上面配置的id_rsa_git秘钥,没有找到秘钥就报错了

5. 修改git秘钥的密码[可选]
   ssh-keygen -f id_rsa_git -p

其他工具安装

1. fish安装 yum install fish

issue

1. 通过秘钥ssh到服务器,配置并连接过服务器,更换秘钥后无法连接,报错.
   此时需要通过 ssh-keygen -R 服务器ip 删除记录,更换密钥后需要删除信息，不然无法使用新密钥登录
   -R命令作用:Removes all keys belonging to hostname from a known_hosts file. This option is useful to delete hashed hosts (see the -H option above).

2. centos设置go/bin到PATH
   将export PATH=$PATH:/home/xxxx_user_name_xxxx/go/bin添加到~/.bash_profile不起效,还是每次都要重新source才能使用go安装到bin目录下的可执行程序.
   默认的bash和fish都是这样.

   解决: 将export PATH=$PATH:/home/xxxx_user_name_xxxx/go/bin添加到~/.bashrc后执行

   1	source ~/.bashrc

使用

通过docker和compose可以很方便的部署搭建基础环境,部署应用,在github有个项目awesome-compose包含很多常用环境的样例配置文件,
通过这些样例可以快速搭建环境

ElasticSearch应用(ELK)搭建

1. 基于awesome-compose中elasticsearch-logstash-kibana搭建

workflow

config

1. set editor for git

   • configfile: .gitconfig

   • positon: ~/.git/.gitconfig or ~/.gitconfig

   • add one row: editor = vim

     1 2	[core] editor = vim

using git

stash

1. 通过git stash命令将本地修改暂存至stash中,等同于git stash push

   1 2	git stash git stash push

2. 通过git stash pop命令将stash中的修改恢复至本地

   1 2	git stash appply # 当仅有一个stash时，可以直接用apply git stash pop

3. git stash show 展示暂存的内容

   1 2	git stash show git stash show 1 # 展示第一个stash,每个暂存有序号,默认是0

4. git stash push将修改暂存

references

• github course https://github.com/skills/introduction-to-github

what

1. m3u8

2. ffmpeg

how

1. 通过fiddler等工具拿到m3u8文件,查看文件内容是否规范
   下载时通过文件类型,url过滤快速找出含有m3u8文件的数据,在pc端抓包比较方便.手机端抓包https需要安装证书.

2. 通过ffmpeg下载

   1	ffmpeg.exe -i input.m3u8 -c copy output.mp4

   • -i 指定输入参数,m3u8文件
   • -c copy 指定输出文件

3. 在m3u8文件内的视频文件如果是通过http/https下载需要指定白名单

   1	-protocol_whitelist "file,http,https,tls,tcp"

   把这个参数加上,指定协议白名单即可,完整的命令如下:

   1	ffmpeg.exe -protocol_whitelist "file,http,https,tls,tcp" -i input.m3u8 -c copy output.mp4

   不指定白名单ffmpeg会报错:”Protocol ‘https’ not on whitelist ‘file,crypto’!”