阿里P8親自講解!java分布式需要學什么技術

引言

最近項目上線的頻率頗高,連著幾天加班熬夜,身體有點吃不消精神也有些萎靡,無奈業務方催的緊,工期就在眼前只能硬著頭皮上了。腦子渾渾噩噩的時候,寫的就不能叫代碼,可以直接叫做Bug。我就熬夜寫了一個bug被罵慘了。

TCP 報文段結構

一談到 TCP 協議,大家最先想到的詞就是「面向連接」和「可靠」。沒錯,TCP 協議的設計就是為了能夠在客戶端和服務器之間建立起一個可靠連接。

在講連接過程之前,我們先來看看 TCP 的報文段結構,通過這個結構,我們可以知道 TCP 能夠提供什么信息:

這里有幾點是需要注意的:

  • TCP 協議需要一個四元組(源IP,源端口,目的IP,目的端口)來確定連接,這要和 UDP 協議區分開。多說一句,IP 地址位于 IP 報文段,TCP 報文段是不含 IP 地址信息的。
  • 基本 TCP 頭部的長度是 20 字節,但是由于「選項」的長度是不確定的,所以需要「首部長度」字段明確給出頭部長度。這里要注意的是,首部長度字段的單位是 32bit,也就是 4 字節,所以該字段的最小值是 5。
  • 標橙色的字段(確認序號,接收窗口大小,ECE,ACK)用于「回復」對方,舉個例子,服務器收到對方的數據包后,不單獨發一個數據包來回應,而是稍微等一下,把確認信息附在下一個發往客戶端的數據幀上,也就是捎帶技術。
  • 窗口大小是一個 16 位無符號數,也就是說窗口被限制在了 65535 字節,也就限制了 TCP 的吞吐量性能,這對一些高速以及高延遲的網絡不太友好(可以想想為什么)。所幸 TCP 額外提供了窗口縮放(Window Scale)選項,允許對這個值進行縮放。

下面是 8 個標志位的含義,有的協議比較舊,可能沒有前兩個標志位:

標志位雖然很多,但是如果放到具體場景里來看的話,就很容易理解他們的作用了。

TCP 三次握手

三次握手就是為了在客戶端和服務器間建立連接,這個過程并不復雜,但里面有很多細節需要注意。

這張圖就是握手的過程,可以看到客戶端與服務器之間一共傳遞了三次消息,這三次握手其實就是兩臺機器之間互相確認狀態,我們來一點一點看。

第一次握手

首先是客戶端發起連接,第一個數據包將 SYN 置位(也就是 SYN = 1),表明這個數據包是 SYN 報文段(也被稱為段 1)。這一次發送的目的是告訴服務器,自己的初始序列號是?client_isn,還有一個隱含的信息在圖里沒有表現出來,那就是告知服務端自己想連接的端口號。除了這些,客戶端還會發送一些選項,不過這跟三次握手沒多大關系,暫且按下不表。

段 1 里最需要注意的就是這個client_isn?,也就是初始序列號。「RFC07931」指出:

When new connections are created, an initial sequence number (ISN) generator is employed which selects a new 32 bit ISN. The generator is bound to a (possibly fictitious) 32 bit clock whose low order bit is incremented roughly every 4 microseconds. Thus, the ISN cycles approximately every 4.55 hours.

翻譯過來就是,初始序列號是一個 32 位的(虛擬)計數器,而且這個計數器每 4 微秒加 1,也就是說,ISN 的值每 4.55 小時循環一次。這個舉措是為了防止序列號重疊

但即使這樣還是會有安全隱患——因為初始 ISN 仍然是可預測的,惡意程序可能會分析 ISN ,然后根據先前使用的 ISN?預測后續 TCP 連接的 ISN,然后進行攻擊,一個著名的例子就是「The Mitnick attack2」 。這里摘一段原文:

Mitnick sent SYN request to X-Terminal and received SYN/ACK response. Then he sent RESET response to keep the X-Terminal from being filled up. He repeated this for twenty times. He found there is a pattern between two successive TCP sequence numbers. It turned out that the numbers were not random at all. The latter number was greater than the previous one by 128000.

所以為了讓初始序列號更難預測,現代系統常常使用半隨機的方法選擇初始序列號,詳細的方法就不在這里展開了。

第二次握手

當服務器接收到客戶端的連接請求后,就會向客戶端發送?ACK?表示自己收到了連接請求,而且,服務器還得把自己的初始序列號告訴客戶端,這其實是兩個步驟,但是發送一個數據包就可以完成,用的就是前面說的捎帶技術。圖里的?ACK = client_isn + 1?是指確認號字段的值,要注意和?ACK 標志位區分開。

ACK 字段其實也有不少需要注意的點,不過這個跟滑動窗口一塊講比較直觀,這里就先不提了。

這里重點強調一下,當一個 SYN 報文段到達的時候,服務器會檢查處于 SYN_RCVD 狀態的連接數目是否超過了?tcp_max_syn_backlog?這個參數,如果超過了,服務器就會拒絕連接。當然,這個也會被黑客所利用,「SYN Flood」就是個很好的例子。因為服務器在回復 SYN-ACK 后,會等待客戶端的 ACK ,如果一定時間內沒有收到,認為是丟包了,就重發 SYN-ACK,重復幾次后才會斷開這個連接,linux 可能要一分鐘才會斷開,所以攻擊者如果制造一大批 SYN 請求而不回復,服務器的 SYN 隊列很快就被耗盡,這一段時間里,正常的連接也會得不到響應。

服務器的這種狀態稱為靜默(muted)。為了抵御 SYN Flood 攻擊,服務器可以采用「SYN cookies」,這種思想是,當 SYN 到達時,并不直接為其分配內存,而是把這條連接的信息編碼并保存在 SYN-ACK 報文段的序列號字段,如果客戶端回復了,服務器再從 ACK 字段里解算出 SYN 報文的重要信息(有點黑魔法的感覺了),驗證成功后才為該連接分配內存。這樣,服務器不會響應攻擊者的請求,正常連接則不會受到影響。

但 SYN cookies 本身有一些限制,并不適合作為默認選項,有興趣可以自行 Google。

第三次握手

這是建立 TCP 連接的最后一步,經過前兩次握手,客戶端(服務器)已經知道對方的滑動窗口大小初始序列號等信息了,這不就完了嗎?為什么還要第三次握手?

這是因為服務器雖然把數據包發出去了,但他還不知道客戶端是否收到了這個包,所以服務器需要等待客戶端返回一個 ACK,表明客戶端收到了數據,至此,連接完成。

連接建立后,進入傳輸數據的階段,這里就涉及到很多很多技術,我會另寫文章。

四次揮手

有了三次握手的基礎,四次揮手就比較容易理解了:

四次揮手的過程其實很簡單,就是服務器和客戶端互相發送 FIN 和 ACK 報文段,告知對方要斷開連接。

四次揮手里值得關注的一點就是?TIME_WAIT?狀態,也就是說主動關閉連接的一方,即使收到了對方的 FIN 報文,也還要等待 2MSL?的時間才會徹底關閉這條連接。(這里面的 MSL 指的是最大段生成期,指的是報文段在網絡中被允許存在的最長時間。)可為什么不直接關閉連接呢

一個原因是,第四次揮手的 ACK 報文段不一定到達了服務器,為了不讓服務器一直處于 LAST_ACK 狀態(服務器會重發 FIN,直到收到 ACK),客戶端還得等一會兒,看看是否需要重發。假如真的丟包了,服務器發送 FIN ,這個 FIN 報文到達客戶端時不會超過 2MSL(一來一回最多 2MSL),這時候客戶端這邊的 TCP 還沒關掉,還能重發 ACK。

另一個原因是,經過 2MSL 之后,網絡中與該連接相關的包都已經消失了,不會干擾新連接。我們來看一個例子:假如客戶端向服務器建立了新的連接舊連接中某些延遲的數據堅持到了新連接建立完畢,而且序列號剛好還在滑動窗口內,服務器就誤把它當成新連接的數據包接收,如下圖所示:

2MSL 機制就避免了這種情況。

一線互聯網大廠Java核心面試題庫

image

]

2MSL 機制就避免了這種情況。

一線互聯網大廠Java核心面試題庫

[外鏈圖片轉存中…(img-vDFhnZEy-1622525604100)]

正逢面試跳槽季,給大家整理了大廠問到的一些面試真題,由于文章長度限制,只給大家展示了部分題目,更多Java基礎、異常、集合、并發編程、JVM、Spring全家桶、MyBatis、Redis、數據庫、中間件MQ、Dubbo、Linux、Tomcat、ZooKeeper、Netty等等…已整理上傳在我的騰訊文檔【一線互聯網大廠Java核心面試題庫】點擊即可領取,并會持續更新…感興趣的朋友可以看看支持一波!

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/news/386210.shtml
繁體地址,請注明出處:http://hk.pswp.cn/news/386210.shtml
英文地址,請注明出處:http://en.pswp.cn/news/386210.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

Javascript的this用法

出自:http://www.ruanyifeng.com/blog/2010/04/using_this_keyword_in_javascript.html this是Javascript語言的一個關鍵字。 它代表函數運行時,自動生成的一個內部對象,只能在函數內部使用。比如, function test(){ this.x 1; }…

[New Portal]Windows Azure Web Site (4) Web Site Gallery

《Windows Azure Platform 系列文章目錄》 前言:最近因為工作變動,更新博客的速度變慢了。筆者在這邊感到非常抱歉,以后盡量每周更新一篇Windows Azure的博客給大家。 好了,我們回到本章內容。 Windows Azure通過Web Role和Worker…

阿里P8親自講解!java聲明類的語法格式

前言 前兩天,我收到了螞蟻金服的offer,從朋友的內推開始面試到拿到最后offer經歷了4面技術、一面交叉面和一面HR面。經過了漫長的等待和幾次幾乎折磨的面試之后,終于拿到了offer。 分享第一份Java基礎-中級-高級面試集合 Java基礎&#xff…

java-transaction事件

/*########事務&數據庫連接池&DBUtils ######事務 > Transaction 其實指的一組操作,里面包含許多個單一的邏輯。只要有一個邏輯沒有執行成功,那么都算失敗。 所有的數據都回歸到最初的狀態(回滾) ####為什么要有事務?> 為了確保邏輯的成功…

阿里P8親自講解!java實例變量和類變量

前言 Spring如何解決的循環依賴,是近兩年流行起來的一道Java面試題。其實筆者本人對這類框架源碼題還是持一定的懷疑態度的。如果筆者作為面試官,可能會問一些諸如“如果注入的屬性為null,你會從哪幾個方向去排查”這些場景題。那么既然寫了…

java---連接池的學習

/** ####################################數據庫的連接池學習################################# * * * #####數據庫連接池 >1. 數據庫的連接對象創建工作,比較消耗性能。 >2.一開始現在內存中開辟一塊空間(集合) , 一開…

阿里P8親自講解!成功入職頭條月薪35K

前言 又到一年金九銀十之際。 Java作為目前用戶最多,使用范圍最廣的軟件開發技術之一。 Java的技術體系主要由支撐Java程序運行的虛擬機,提供各開發領域接口支持的Java,Java編程語言及許多第三方Jvav框架構成。 其中,以Java的虛擬器為今天的著…

java----連接池C3p0使用的補充

C3p0數據庫的連接方式是目前市場場最為廣泛的類型之一 本篇主要你演示C3p0使用文件配置和不使用文件配置的兩種操作方式 #######使用文件配置 import java.sql.Connection; import java.sql.PreparedStatement; import java.sql.SQLException;import com.dbutil.zyz.ConnLink; …

阿里P8大佬親自教你!java程序設計第四版pdf

前言 最近有很多朋友去目前主流的大型互聯網公司面試(阿里巴巴、京東、字節跳動、螞蟻金服、滴滴),面試回來之后會發給我一些面試題。有些朋友輕松過關,拿到offer,但是有一些是來詢問我答案的。 我特意整理了一下&am…

阿里P8大佬親自講解!朝陽java培訓

開頭 Spring框架自誕生以來一直備受開發者青睞,有人親切的稱之為:Spring 全家桶。Spring更是避免了重復造輪子的工作并跟隨著互聯網行業的發展做出不斷的更新,很多研發人員把spring看作心目中最好的Java項目,沒有之一。 **可以毫…

分隔符的作用和用法

一、插入分頁符 當文本或圖形等內容填滿一頁時,Word會插入一個自動分頁符并開始新的一頁。如果要在某個特定位置強制分頁,可插入“手動”分頁符,這樣可以確保章節標題總在新的一頁開始。首先,將插入點置于要插入分頁符的位置&…

java----DBUtils知識點補充

dbutils 只是幫我們簡化了CRUD 的代碼, 但是連接的創建以及獲取工作。 不在他的考慮范圍 QueryRunner主要是這個類 import java.sql.SQLException;import org.apache.commons.dbutils.QueryRunner;import com.mchange.v2.c3p0.ComboPooledDataSource;public class D…

大廠offer手到擒來,Java面試真題精選

前言 事務我們都知道是什么,而Spring事務就是在數據庫之上利用AOP提供聲明式事務和編程式事務幫助我們簡化開發,解耦業務邏輯和系統邏輯。但是Spring事務原理是怎樣?事務在方法間是如何傳播的?為什么有時候事務會失效&#xff1f…

大廠也在用的6種數據脫敏方案,醍醐灌頂!

前言 由于作者面試過程中高度緊張,本文中只列出了自己還記得的部分題目。 經歷了漫長一個月的等待,終于在前幾天通過面試官獲悉已被螞蟻金服錄取,這期間的焦慮、痛苦自不必說,知道被錄取的那一刻,一整年的陰霾都一掃…

大牛帶你直擊優秀開源框架靈魂,給大家安排上!

前言 微架構的出現,很好地適應了這個時代對快速發展變化的要求。它不再提倡一體化的項目設計,而是對項目進行有效的“業務區”(可以簡單理解為不同的子系統〉劃分,并利用合理的技術對業務性能做出提升和改善,同時又極大地簡化了配…

大牛用SSM框架實現了支付寶的支付功能,滿滿干貨指導

前言 現在刷抖音經常可以看到一些老外街坊,問他們最想把什么帶回自己的國家,我聽過很多的回答都是:淘寶,支付寶,美食,微信,外賣,高鐵等等。 確實如此,隨著國家的快速發…

java---Listener Filter知識點學習

##Listener > 監聽器 * 能做什么事? > 監聽某一個事件的發生。 狀態的改變。 * 監聽器的內部機制 > 其實就是接口回調. ####接口回調 * 需求: > A在執行循環,當循環到5的時候, 通知B。 > 事先先把一個對象傳遞給 …

頭條三面技術四面HR,就是這么簡單

前言 看日期,今天都是4月了,這春招也差不多進入尾聲了。 近期任有不少朋友都在找工作,很多人開始抱怨,工作可真難找啊!身邊不少朋友問我咋搞呀,秋招都要結束了,工作還沒著落呢…額…這個…今年…

臨時表

tmp_table_size 這個配置限制了內存臨時表的大小,默認值是 16M。 如果臨時表大小超過了 tmp_table_size,那么內存臨時表就會轉成磁盤臨時表 磁盤臨時表使用的引擎默認是 InnoDB,是由參數 internal_tmp_disk_storage_engine 控制的。 轉載于:h…

如何保證Redis與數據庫的雙寫一致性?進階加薪全靠它!

我有話要說,請仔細看完 我發現一個現象,很多開發5年的程序員仍然停留在crud的階段,這是什么原因? 最主要的原因就是基礎很差,尤其對于JVM和并發編程這方面掌握的比較差,而JVM和并發編程就是非常非常重要的…