買以太坊 買以太坊
Ctrl+D 買以太坊
ads

SNO:技術 | IPFS網絡是如何組建的?_FSN

Author:

Time:1900/1/1 0:00:00

回顧

IPFS-InterPlanetaryFileSystem星際文件系統,是一個點對點的分布式文件存儲系統,IPFS的愿景是構建一個全世界的分布式網絡,用來替代傳統中心化的服務器模式,所有的IPFS節點組成一個分布式網絡,每個節點都可以存儲文件,用戶可以從IPFS構建的網絡中以DHT(DistributedHashTable,分布式哈希表)?的方式獲取文件,從而實現了新一代的完全去中心化的網絡,旨在取代現有的萬維網。IPFS功能很豐富,如DHT組網,文件存儲,Bitswap文件交換等功能。

文件存儲和文件交換的技術詳解可以通過之前的推文內容進行了解,今天我們來了解這個文件系統的“地基”——網絡模塊。

IPFS網絡初識

IPFS是一個開源項目,要達到它聲稱的構建一個全世界的分布式網絡的目標,那么他必然要先解決不同國家、不同地區節點的連接問題。

動態 | 日本九州大學初創企業正應用區塊鏈技術 著手開發新的電力交易系統:據日經新聞7月10日消息,由日本九州大學孵化的的人工智能初創企業AIBOD正應用區塊鏈(分布式賬本)技術,著手開發可在個人間進行家庭電力交易的新系統。[2019/7/10]

首先,看一下IPFS網絡部分配置,如下圖所示,紅框內部的Swarm是IPFS監聽的網絡地址,其中支持ipv4和ipv6協議,且默認支持QUIC協議。

*QUIC協議是由google最先提出的,目前已經提交給互聯網工程任務小組,成為了正式的網絡規范,相對于TCP來說QUIC網絡傳輸協議的傳輸速度更快。

IPFS節點啟動之后日志如下圖所示,可以看到IPFS節點監聽了以下網絡地址,其中包括本地的、局域網、廣域網的地址,最后還有/p2p-circuit地址。

聲音 | 江蘇省司法廳:引入區塊鏈等先進技術 推進精準法律援助:據江南時報消息,近日,江蘇省司法行政系統信息化工作會議要求,打造智慧法務,推動全系統工作模式由經驗管理型向智慧引領型轉變。通過區塊鏈技術的融合應用,解決信息共享交換的突出問題,實現“不見面辦理公證”。參照公證做法,引入區塊鏈等先進匹配的技術,提升部門數據交換的效率,推進精準法律援助。[2018/9/17]

問題來了,為什么需要監聽這么多地址?

那是因為IPFS是一個開源項目,為了讓全世界各地的節點連接起來則必須要解決各種網絡情況下節點連接的問題。

監聽本地地址,這樣本地啟動多個IPFS節點,它們之間可以以該地址進行連接,監聽局域網地址,這樣內網內啟動多個IPFS節點,它們之間可以以該局域網地址相互連接,監聽廣域網地址,這樣公網中啟動多個IPFS節點,它們之間可以以該廣域網地址進行連接。

Ran NeuNer:如果人們相信區塊鏈技術 現在是購買的時機:CNBC數字貨幣操盤手Ran NeuNer在CNBC的Fast Money上表示,在未來幾年,比特幣的需求將會超過黃金。他還表示,如果人們相信分布式技術和區塊鏈,那么現在正是購買的好時機。[2018/6/12]

通過上述方式就解決了大部分網絡情況下的IPFS節點的網絡連接問題:

2個節點都在同一主機:通過127.0.0.1地址連接

2個節點在同一個內網內:通過局域網地址連接

2個節點都有公網地址:通過公網地址連接

1個節點在內網,1個節點在公網:內網的節點通過在公網節點的公網地址連接

這里有一個問題,如果2個節點處于兩個不同內網環境,由于存在NAT設備,NAT設備可能是對稱型,對稱型的NAT設備是沒有辦法穿透的,所以IPFS提供了relay的方式解決不同內網環境下節點的連接問題,上面提到的監聽/p2p-circuit地址則是為了解決該問題,對于2個處于不同內網環境不能直接連接的節點,通過配置relay節點中轉從而建立連接。

日本電氣NEC開發出全球最快區塊鏈技術 每秒交易可超10萬筆:據中國科技網今日報道,日本電氣股份有限公司(NEC)及NEC歐洲研究所開發了全球最快的區塊鏈共識算法,可以在參與交易的節點數達到200個左右的大規模連接環境下,達到每秒處理10萬筆以上交易的超高記錄性能。作為一個支撐信用卡在世界范圍內進行交易的系統,每秒處理性能必須達到幾萬筆以上,這項技術促進了這種性能的實現,也加速了區塊鏈在商務領域中的真正應用。[2018/3/12]

至此,IPFS解決了不同網絡環境下的節點之間建立連接的問題,下面我們來看一下IPFS是如何構建大規模的分布式節點網絡,將處于全世界的不同地區的各個節點連接起來的。

IPFS網絡構建

IPFS網絡構建的過程可以看作是兩個階段:

▲?Bootstrap階段

IPFS節點在啟動之前需要配置它的Bootstrap節點,配置文件中相關配置如下圖所示,Bootstrap配置中配置了IPFS節點啟動時需要連接的所有種子節點列表,這些節點地址列表信息是默認的,如果需要搭建IPFS私有網絡可以修改成自己的種子節點列表。默認提供的種子節點都是具有公網地址的節點,IPFS節點啟動的時候首先連接該種子節點,后續通過該種子節點去發現IPFS網絡中更多的節點,從而進行連接,也就是DHT組網階段。

Overstock看好區塊鏈技術 民主投票將迎新生:Overstock旗下子公司Medici Ventures正投資于區塊鏈初創公司,并在最近為波士頓的一家投票技術公司Voatz帶來了220萬美元的融資。通過區塊鏈技術,選民們可以使用生物識別技術進行投票,“基于區塊鏈技術的投票可以是安全、匿名的,且可以提高民主參與度”。[2018/1/10]

▲?DHT組網階段

IPFS節點連接種子節點成功以后則去通過DHT去發現其他節點,關于DHT的詳解可以看這篇文章《Libp2p中DHT和Bitswap詳解》。

發現其他節點之后則嘗試進行連接,連接成功的節點會加入到該節點的節點列表,以便后續可以直接與該節點通信,考慮到全世界的IPFS節點規模很大,不可能每個節點和其他節點保持長連接,所以對每個節點的連接數量做了限制,一般節點連接數量都在1千以下,對于沒有連接的節點需要通信的話,可以通過DHT找到該節點地址,然后連接該節點進行通信,這樣就構成了大規模的分布式節點網絡。

我們可以通過一個示例展示上述過程。下圖是一個常見的網絡拓撲架構,有三個網絡分別連接了Internet,IPFSnode1部署在具有公網ip的服務器上,外部可以直接訪問該節點,IPFSnode2和IPFSnode3都部署在對稱型NAT設備后面,外部不能訪問該節點。

在上面的網絡架構下,處于公網的IPFSnode1作為種子節點,種子節點最先啟動,然后IPFSnode2,node3,node4,node5的種子節點配置成IPFSnode1,分別啟動后首先連接IPFSnode1,連接成功后通過DHT發現其他節點最后分別連接,對于IPFSnode1,它連接的節點地址列表如下圖所示,由于IPFSnode2,node3,node4,node5均處于NAT設備后面,所以IPFSnode1節點列表中這些節點的端口都是NAT設備映射后的端口。

對于IPFSnode3來說,它的節點地址列表中,IPFSnode1的地址是公網地址,由于IPFSnode3和IPFSnode2都處于NAT設備后面,不能直接連接,所以IPFSnode2的地址是relay地址,IPFSnode1節點作為relay節點,IPFSnode3給IPFSnode2發消息時通過IPFSnode1轉發,relay地址格式為:

Relay節點的地址/p2p-circuit/p2p/目標節點id

而IPFSnode3的節點地址列表中,IPFSnode4和IPFSnode5的地址均為局域網地址,這樣就完成了公網節點、處于NAT設備后的局域網節點的組網過程。

總結

以上就是IPFS網絡的組建過程,為了方便描述只是以幾個IPFS節點為例。

實際上IPFS的這種網絡組建方式也能很好地支持超大規模節點的組網,當節點規模很大的時候,設置數十個節點作為種子節點,通過DHT組網就能完成數萬甚至更多節點的組網,此時每個節點的長連接數量保持在數百個,后續節點間通信時,如果還沒有建立連接,可以通過DHT根據節點id查詢該節點的地址信息,然后通過該地址連接該節點最后完成通信過程。

IPFS網絡的這種組建方式也非常值得分布式系統學習和借鑒。

作者簡介

姚文豪來自數據網格實驗室BitXMesh團隊數據平臺架構師

Tags:NODEODESNOFSNLivenodes TokenDecode CoinLOVESNOOPY幣fsn幣前景

火幣APP下載
NFT:我們從新產品 Mirror 看到了內容創作的革命和 Web 3 時代的曙光_ROR

在鏈聞,我們嚴肅又認真的尋找那些有可能「出圈」的區塊鏈及加密貨幣原生產品。「嚴肅又認真」是指,我們所言的「出圈」,并不是像很多人理解的那樣,讓區塊鏈或加密貨幣的話題出現在傳統或所謂的「主流」媒體.

1900/1/1 0:00:00
MEME:一文了解NFT與流動性挖礦的結合_MUCNFT

NFT?的起源和概念 NFT的概念從2017年開始發展起來,一款加密貓游戲,一位名叫Dieter的開發者,一場聲勢浩大的加密牛市,NFT迅速走進了大眾視野.

1900/1/1 0:00:00
加密貨幣:年度報告:2020年區塊鏈生態安全態勢_SOC

年度報告:2020年區塊鏈生態安全態勢 Odaily星球日報 剛剛 11 歐科云鏈發布2021財年年度報告:營收4.53億港元,區塊鏈技術服務業務收益增長15%:北京時間7月26日.

1900/1/1 0:00:00
ARK:又一個L2解決方案將上線,StarkWare推出ZK Rollup擴容解決方案StarkNet_STAR

零知識證明研發機構StarkWare表示,其二層擴容解決方案ZKRollup“StarkNet”目前已經完成基礎構建,即圖靈完備框架Cairo、STARK軟件堆棧和二層擴容引擎StarkEx.

1900/1/1 0:00:00
AND:日本金融巨頭SBI控股和三井住友將推出數字證券交易所_KAN

日本金融公司SBI控股和三井住友金融集團將推出數字證券交易所。 日本金融公司Kanda:對資本流動和貨幣兌換的監管可能會變得困難:12月7日消息,日本金融公司Kanda稱,隨著支付數字化,對資本.

1900/1/1 0:00:00
BTC:ETH礦工為什么抵觸EIP1559?_ETH

圖片來源:coindesk據CoinDesk1月22日報道,8個以太坊礦池和Flexpool站到了同一陣營,一起反對由以太坊開發者們提出的改進提案——EIP1559.

1900/1/1 0:00:00
ads