tonglin0325的个人主页

网络分层模型

tonglin0325

1.TCP/IP网络分层模型

TCP/IP通常被认为是一个四层网络通信协议系统：

1.链路层，有时也称作数据链路层或网络接口层，通常包括操作系统中的设备驱动程序和计算机中对应的网络接口卡。它们一起处理与电缆(或其他任何传输媒介)的物理接口细节。
2.网络层，有时也称作互联网层，处理分组在网络中的活动,例如分组的选路。在TCP/IP协议族中，网络层协议包括 **IP协议(网际协议)，ICMP协议(Internet互联网控制报文协议)以及IGMP协议(Internet组管理协议)。
3.传输层，主要为两台主机上的应用程序提供端到端的通信。在 TCP/IP协议族中，有两个互不相同的传输协议：TCP(传输控制协议)**和 **UDP(用户数据报协议)**。
TCP为两台主机提供高可靠性的数据通信。它所做的工作包括把应用程序交给它的数据分成合适的小块交给下面的网络层，确认接收到的分组，设置发送最后确认分组的超时时钟等。由于运输层提供了高可靠性的端到端的通信，因此应用层可以忽略所有这些细节。
而另一方面，UDP则为应用层提供一种非常简单的服务。它只是把称作数据报的分组从一台主机发送到另一台主机，但并不保证该数据报能到达另一端。任何必需的可靠性必须由应用层来提供。
4.应用层，负责处理特定的应用程序细节。几乎各种不同的 TCP/IP实现都会提供下面这些通用的应用程序:

• Telnet 远程登录。
• FTP 文件传输协议。
• SMTP 简单邮件传送协议。
• SNMP 简单网络管理协议。

2.OSI网络分层模型

开放网络互联（OSI，Open Systems Interconnection）模型将网络通信功能分为七层：

1 物理层

物理层是指物理通信介质和通过该介质传输数据的技术。数据通信的核心是通过光纤电缆、铜缆和空气等各种物理通道传输数字和电子信号。物理层包括与信道密切相关的技术和指标的标准，例如蓝牙、NFC 和数据传输速度。2 数据链路层 (ARP)

数据链路层是指用于通过物理层已经存在的网络连接两台计算机的技术。该层管理数据帧，这些数据帧是封装在数据包中的数字信号。数据的流量控制和错误控制通常是数据链路层的重点。以太网是该级别标准的一个示例。数据链路层通常分为两个子层：介质访问控制（MAC）层和逻辑链路控制（LLC）层。
3 网络层 (IP, ICMP, IGMP)

网络层涉及的概念包括跨分散网络或者节点或计算机的多个互连网络进行的路由、转发和寻址。网络层也可以管理流量控制。在整个互联网上，互联网协议 v4（IPv4）和 IPv6 是主要的网络层协议。
4 传输层 (TCP, UDP)

传输层的主要重点是确保数据包以正确的顺序到达，没有丢失或错误，或者在需要时可以无缝恢复。流量控制和错误控制通常是传输层的重点。在这一层，常用的协议包括传输控制协议（TCP）（一种近乎无损、基于连接的协议）和用户数据报协议（UDP）（一种有损的无连接协议）。TCP 通常用于所有数据必须完好无损的情况（例如文件共享），而 UDP 则用于没有必要保留所有数据包的情况（例如视频流式传输）。
5 会话层

会话层负责会话中两个独立应用程序之间的网络协调。会话管理一对一应用程序连接的开始和结束以及同步冲突。网络文件系统（NFS）和服务器消息块（SMB）是会话层的常用协议。
6 表示层

表示层主要关注应用程序发送和使用的数据本身的语法。例如，超文本标记语言（HTML）、JavaScript 对象标记（JSON）和逗号分隔值（CSV）都是描述表示层数据结构的建模语言。
7 应用层

应用层关注应用程序本身的特定类型及其标准化通信方法。例如，浏览器可以使用超文本传输安全协议（HTTPS）进行通信，而 HTTP 和电子邮件客户端可以使用 POP3（邮局协议版本 3）和 SMTP（简单邮件传输协议）进行通信。

参考： 什么是 OSI 模型？

全文 >>

Java排序算法——希尔排序

tonglin0325

 

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
package sort;

import java.util.Arrays;

class Arrays_Shell{
	private int[] arrays;
	private int curNum;

	public Arrays_Shell(int max) {			//建立一个max长度的空数组
		super();
		arrays = new int[max];
		curNum = 0;
	}
	
	public void insert(int value){					//往空的数组里面增加元素
		arrays[curNum] = value;
		curNum++;
	}
	
	public void display(){									//显示数组
		System.out.println(Arrays.toString(arrays));
	}
	
	public void ShellSort(){
		int out,in;
		int temp;
		
		int h = 1;
		while(h <= curNum/3)	//求出最大的增量，5刚开始的增量为4
			h = h*3+1;						//1,4,13,40,121,....
		while(h>0){
			for(out=h;out<curNum;out++){//out从1开始递增，把out前的数两两排序
				temp = arrays[out];
				in = out;
				while(in>h-1 &amp;&amp; arrays[in-h] >= temp){//刚开始in是比较0和h的大小
					arrays[in] = arrays[in-h];
					in -= h;
				}
				arrays[in] = temp;
				//display();
			}
			
			h = (h-1)/3;
		}
		
	}
	
}

public class ShellSort {

	public static void main(String[] args) {
		// TODO 自动生成的方法存根
		int maxSize = 100;
		Arrays_Shell arrays_demo = new Arrays_Shell(maxSize);
		arrays_demo.insert(58);
		arrays_demo.insert(57);
		arrays_demo.insert(56);
		arrays_demo.insert(60);
		arrays_demo.insert(59);
		arrays_demo.display();
		arrays_demo.ShellSort();
		arrays_demo.display();
	}

}

 

arthas使用方法

tonglin0325

arthas是阿里开发的一个java诊断工具，官网

1
2
https://arthas.aliyun.com/zh-cn/

下载地址

1
2
https://github.com/alibaba/arthas/releases

 

启动arthas-boot.jar

选择java程序的pid，注意启动arthas-boot.jar的用户需要和所监控的java进程的用户是同一个，否则会报下面的错误

1
2
3
4
5
6
7
8
9
10
[ERROR] Start arthas failed, exception stack trace:
java.io.IOException: well-known file /tmp/.java_pid29923 is not secure: file should be owned by the current user (which is 0) but is owned by 987
	at sun.tools.attach.LinuxVirtualMachine.checkPermissions(Native Method)
	at sun.tools.attach.LinuxVirtualMachine.<init>(LinuxVirtualMachine.java:117)
	at sun.tools.attach.LinuxAttachProvider.attachVirtualMachine(LinuxAttachProvider.java:78)
	at com.sun.tools.attach.VirtualMachine.attach(VirtualMachine.java:250)
	at com.taobao.arthas.core.Arthas.attachAgent(Arthas.java:102)
	at com.taobao.arthas.core.Arthas.<init>(Arthas.java:27)
	at com.taobao.arthas.core.Arthas.main(Arthas.java:161)

如果切换用户的时候遇到

1
2
This account is currently not available.

则可以使用下面命令来切换

全文 >>

英文写作——冠词的使用(Use 0f Articles)

tonglin0325

1.使用’a’,’an’,’the’和不使用冠词的基本规则：

　　<1>泛指，不可数名词不能有任何冠词

　　<2>泛指，可数，复数名词前不能有冠词

　　<3>泛指，可数，单数名词前加’a’或者’an’

　　<4>特殊的，特定的，或者一类名词中的一个前要加上’the’

 

2.不定冠词’a’,’an’的使用：

　　使用于单数可数名词

 

3.定冠词the的使用：

　　<1>特指的时候，如上文提到电脑，后一句说这台电脑的时候要用the

　　<2>分词短语作定语的时候，如:The computer sitting on his desk

　　<3>独一无二的事物，如：the sun

全文 >>

Datagrip查询开启kerberos的impala

tonglin0325

1.查看impala的版本，版本是2.12.0+cdh5.16.2+0

2.去官网下载impala的jdbc驱动文件：ImpalaJDBC41.jar

3.添加driver，注意要使用Custom JARs

4.使用keytab进行认证

1
2
kinit -kt ~/Downloads/hive.keytab  hive/master@HADOOP.COM

需要在你运行datagrip的机器上配置好kinit的环境，参考：kerberos相关

5.创建一个impala data source

全文 >>

tonglin0325

标签

标签云

AWS Airbnb Android CDH Doris ELK Flink Git Grafana HAProxy HBase Hadoop Hive Hudi InfluxDB JDBC JMeter JVM Java LaTex Linkedin Linux ML ML Infra MPP Maven MySQL Nexus OpenTSDB Paper Play Prometheus Python React Redis RocksDB Scala Solr Spark SpringBoot SpringMVC Thrift YARN antlr arthas avro cassandra clickhouse confluent docker filebeat flume golang google gradle hexo impala jenkins k8s kafka kerberos kudu ldap mac mongo mybatis nginx nlp open-falcon openwrt parquet presto ranger rocketmq scyllaDB twitter zookeeper 刷题 前端 图存储及计算 多线程 广告系统 开发工具 数据结构 杂谈 算法 系统设计 计算机基础 设计模式

文章归档

最近文章