searchusermenu
  • 发布文章
  • 消息中心
点赞
收藏
评论
分享
原创

分布式一致性:paxos

2023-06-21 07:48:02
4
0

角色

Paxos算法中涉及的主要角色有提议者(Proposer)、接受者(Acceptor)和学习者(Learner)。下面对每个角色进行详细介绍:

  1. 提议者(Proposer):

    • 提议者是发起提案的实体,负责引导算法的执行,并试图达成共识。
    • 提议者选择提案号(Proposal Number),通常是一个唯一标识符,用于区分不同的提案。
    • 提议者向接受者发送准备请求和提案请求,与接受者进行消息交换以达成共识。
    • 在准备阶段,提议者发送准备请求并等待接受者的回复,以获取已接受的最大提案号和对应的值。
    • 在接受阶段,提议者构造提案并发送给接受者,请求接受者接受该提案。
    • 如果提议者收到多数派(超过半数)的接受回复,表示达成共识,并将共识值广播给学习者。
  2. 接受者(Acceptor):

    • 接受者是响应提议者请求的实体,负责接收并处理提议者发送的准备请求和提案请求。
    • 接受者维护自己已接受的最大提案号和对应的值,用于比较和决策是否接受新的提案。
    • 在准备阶段,接受者接收到提议者的准备请求后,比较提案号与自己已接受的最大提案号。
    • 如果接收到的提案号大于自己已接受的最大提案号,接受者会回复准备请求,并告知自己已接受的最大提案号和对应的值。
    • 在接受阶段,接受者接收到提议者的提案请求后,判断提案号是否大于等于自己已接受的最大提案号。
    • 如果是,则接受该提案,并将其作为自己的已接受提案;如果不是,则拒绝该提案。
    • 接受者向提议者发送回复,表示是否接受提案。
  3. 学习者(Learner):

    • 学习者是接收共识值的实体,负责最终确认共识已达成,并执行相应的操作。
    • 学习者从提议者接收达成共识的值,并进行确认。
    • 一旦学习者确认共识值,它可以采取适当的操作,比如将共识值应用到本地状态,以确保系统的一致性。
    • 学习者可以是多个,并且会从不同的提议者接收共识值,以增加系统的可靠性。

这些角色在Paxos算法中相互协作,通过消息交换和投票来达成共识。提议者提出提案并与接受者进行交互,接受者根据自身状态决策是否接受提案,最终通过多数派回复确定共识值。学习者确认共识值,并将其应用到系统中,确保所有参与者达成一致的结果。

基本过程

基本过程是Paxos算法的核心,它由三个阶段组成:准备阶段(Prepare Phase)、接受阶段(Accept Phase)和学习阶段(Learn Phase)。以下是对每个阶段的详细介绍:

  1. 准备阶段(Prepare Phase):

    • 提议者(Proposer)选择一个提案号(通常是一个唯一的标识符),并向多个接受者(Acceptors)发送准备请求。
    • 准备请求包含提案号,表示提议者想要达成一致的提案。
    • 接受者收到准备请求后,比较接收到的提案号与自己已接受的最大提案号。
    • 如果接受者收到的提案号大于自己已接受的最大提案号,则将自己已接受的最大提案号和对应的值回复给提议者。
    • 提议者收集回复,并检查是否收到了多数派(超过半数)的回复。
    • 如果收到多数派的回复,进入接受阶段(Accept Phase);否则,返回准备阶段重新尝试。
  2. 接受阶段(Accept Phase):

    • 提议者构造一个提案,包含提案号和要达成共识的值。
    • 提议者向多个接受者发送提案请求,请求中包含提案号和值。
    • 接受者收到提案请求后,比较接收到的提案号与自己已接受的最大提案号。
    • 如果接收到的提案号大于等于自己已接受的最大提案号,则接受该提案,并将其作为自己的已接受提案。
    • 接受者回复接受请求,表示已接受提案。
    • 提议者等待收集多数派的回复。
    • 如果提议者收到多数派的回复,即接受者已接受了该提案,进入学习阶段(Learn Phase);否则,返回准备阶段重新尝试。
  3. 学习阶段(Learn Phase):

    • 提议者将达成的共识值发送给所有的学习者(Learners)。
    • 学习者接收共识值,并确认共识已达成。
    • 学习者可以采取适当的操作,比如应用共识值到本地状态,以确保系统的一致性。

基本过程中的准备阶段和接受阶段是通过提议者和接受者之间的消息交换来实现的,而学习阶段是通过提议者向学习者广播共识值来实现的。如下图所示:

为了更好地说明Paxos算法的基本过程,以下是一个简化的示例代码,展示了一个使用Paxos算法达成共识的场景。请注意,这个示例是为了更好地理解Paxos算法的基本概念,并不是完整实现。
 
```go
package main
 
import (
"fmt"
"math/rand"
"time"
)
 
type Proposer struct {
ID              int
ProposalNumber  int
AcceptedNumber  int
AcceptedValue   interface{}
PrepareChannel  chan PrepareRequest
AcceptChannel   chan AcceptRequest
ConsensusValue  interface{}
ConsensusNotify chan struct{}
}
 
type Acceptor struct {
ID             int
PromiseNumber  int
AcceptedNumber int
AcceptedValue  interface{}
PrepareChannel chan PrepareRequest
AcceptChannel  chan AcceptRequest
}
 
type PrepareRequest struct {
ProposalNumber int
Responder      chan PrepareResponse
}
 
type PrepareResponse struct {
PromiseNumber int
AcceptedValue interface{}
}
 
type AcceptRequest struct {
ProposalNumber int
ProposalValue  interface{}
Responder      chan bool
}
 
func (proposer *Proposer) Run() {
for {
proposer.ProposalNumber = generateProposalNumber()
promiseResponses := make(map[int]PrepareResponse)
acceptedResponses := 0
 
// Phase 1: Prepare Phase
for i := 0; i < len(proposer.PrepareChannel); i++ {
responder := <-proposer.PrepareChannel
if responder.ProposalNumber > proposer.AcceptedNumber {
proposer.AcceptedNumber = responder.ProposalNumber
proposer.AcceptedValue = responder.AcceptedValue
acceptedResponses++
}
promiseResponses[responder.ProposalNumber] = responder
}
 
// Check if received majority of promises
if acceptedResponses <= len(proposer.PrepareChannel)/2 {
continue
}
 
// Phase 2: Accept Phase
acceptedCount := 0
for i := 0; i < len(proposer.AcceptChannel); i++ {
responder := <-proposer.AcceptChannel
if responder {
acceptedCount++
}
}
 
// Check if received majority of accepts
if acceptedCount <= len(proposer.AcceptChannel)/2 {
continue
}
 
// Consensus reached
proposer.ConsensusValue = proposer.AcceptedValue
close(proposer.ConsensusNotify)
return
}
}
 
func (acceptor *Acceptor) Run() {
for {
select {
case prepareRequest := <-acceptor.PrepareChannel:
if prepareRequest.ProposalNumber > acceptor.PromiseNumber {
acceptor.PromiseNumber = prepareRequest.ProposalNumber
prepareRequest.Responder <- PrepareResponse{
PromiseNumber: acceptor.AcceptedNumber,
AcceptedValue: acceptor.AcceptedValue,
}
} else {
prepareRequest.Responder <- PrepareResponse{
PromiseNumber: -1,
}
}
case acceptRequest := <-acceptor.AcceptChannel:
if acceptRequest.ProposalNumber >= acceptor.PromiseNumber {
acceptor.PromiseNumber = acceptRequest.ProposalNumber
acceptor.AcceptedNumber = acceptRequest.ProposalNumber
acceptor.AcceptedValue = acceptRequest.ProposalValue
acceptRequest.Responder <- true
} else {
acceptRequest.Responder <- false
 
 
}
}
}
}
 
func generateProposalNumber() int {
return rand.Intn(1000)
}
 
func main() {
rand.Seed(time.Now().UnixNano())
 
// Create proposer and acceptor instances
proposer := &Proposer{
ID:              1,
ProposalNumber:  0,
AcceptedNumber:  0,
AcceptedValue:   nil,
PrepareChannel:  make(chan PrepareRequest),
AcceptChannel:   make(chan AcceptRequest),
ConsensusNotify: make(chan struct{}),
}
acceptor1 := &Acceptor{
ID:             1,
PromiseNumber:  0,
AcceptedNumber: 0,
AcceptedValue:  nil,
PrepareChannel: make(chan PrepareRequest),
AcceptChannel:  make(chan AcceptRequest),
}
acceptor2 := &Acceptor{
ID:             2,
PromiseNumber:  0,
AcceptedNumber: 0,
AcceptedValue:  nil,
PrepareChannel: make(chan PrepareRequest),
AcceptChannel:  make(chan AcceptRequest),
}
 
// Run proposer and acceptor processes concurrently
go proposer.Run()
go acceptor1.Run()
go acceptor2.Run()
 
// Simulate the message exchange between proposer and acceptors
go func() {
// Prepare Phase
for _, acceptor := range []*Acceptor{acceptor1, acceptor2} {
responder := make(chan PrepareResponse)
acceptor.PrepareChannel <- PrepareRequest{
ProposalNumber: proposer.ProposalNumber,
Responder:      responder,
}
response := <-responder
if response.PromiseNumber != -1 {
proposer.AcceptChannel <- AcceptRequest{
ProposalNumber: proposer.ProposalNumber,
ProposalValue:  response.AcceptedValue,
Responder:      make(chan bool),
}
}
}
 
// Accept Phase
for _, acceptor := range []*Acceptor{acceptor1, acceptor2} {
<-acceptor.AcceptChannel
}
}()
 
// Wait for consensus value to be reached
<-proposer.ConsensusNotify
 
// Print the consensus value
fmt.Println("Consensus value:", proposer.ConsensusValue)
}
```
 
在上述示例中,我们创建了一个`Proposer`结构和两个`Acceptor`结构,它们分别扮演提议者和接受者的角色。提议者负责生成提案号、发送准备请求和提案请求,而接受者负责接收请求并做出相应的回复。两者之间通过通道进行消息交换。
 
在主函数中,我们启动了提议者和接受者的协程,并模拟了消息交换的过程。最终,当达成共识时,提议者的`ConsensusValue`字段将被设置为达成的共识值。
 
请注意,此示例是一个简化的版本,省略了一些细节和容错机制,仅用于演示Paxos算法的基本概念。在实际的分布式系统中,通常需要更复杂的实现来处理故障恢复、超时、重试等

结论

Paxos算法是一种经典的共识算法,通过准备阶段、承诺阶段和接受阶段的交互,实现了分布式系统中的共识达成。本文详细介绍了Paxos算法的基本概念、过程以及各个角色的作用。了解Paxos算法有助于理解分布式系统中的共识问题及其解决方法,为构建可靠的分布式系统提供指导。

参考文献

[1] Michael J. Fischer, Nancy Lynch, and Michael S. Paterson. Impossibility of distributed consensus with one faulty process. Journal of the ACM, 32(2):374–382, April 1985.

[2] Idit Keidar and Sergio Rajsbaum. On the cost of fault-tolerant consensus when there are no faults—a tutorial. TechnicalReport MIT-LCS-TR-821, Laboratory for Computer Science, Massachusetts Institute Technology, Cambridge, MA, 02139, May 2001. also published in SIGACT News 32(2) (June 2001).

[3] Leslie Lamport. The part-time parliament. ACM Transactions on Computer Systems, 16(2):133–169, May 1998.

0条评论
0 / 1000
t****n
9文章数
0粉丝数
t****n
9 文章 | 0 粉丝
t****n
9文章数
0粉丝数
t****n
9 文章 | 0 粉丝
原创

分布式一致性:paxos

2023-06-21 07:48:02
4
0

角色

Paxos算法中涉及的主要角色有提议者(Proposer)、接受者(Acceptor)和学习者(Learner)。下面对每个角色进行详细介绍:

  1. 提议者(Proposer):

    • 提议者是发起提案的实体,负责引导算法的执行,并试图达成共识。
    • 提议者选择提案号(Proposal Number),通常是一个唯一标识符,用于区分不同的提案。
    • 提议者向接受者发送准备请求和提案请求,与接受者进行消息交换以达成共识。
    • 在准备阶段,提议者发送准备请求并等待接受者的回复,以获取已接受的最大提案号和对应的值。
    • 在接受阶段,提议者构造提案并发送给接受者,请求接受者接受该提案。
    • 如果提议者收到多数派(超过半数)的接受回复,表示达成共识,并将共识值广播给学习者。
  2. 接受者(Acceptor):

    • 接受者是响应提议者请求的实体,负责接收并处理提议者发送的准备请求和提案请求。
    • 接受者维护自己已接受的最大提案号和对应的值,用于比较和决策是否接受新的提案。
    • 在准备阶段,接受者接收到提议者的准备请求后,比较提案号与自己已接受的最大提案号。
    • 如果接收到的提案号大于自己已接受的最大提案号,接受者会回复准备请求,并告知自己已接受的最大提案号和对应的值。
    • 在接受阶段,接受者接收到提议者的提案请求后,判断提案号是否大于等于自己已接受的最大提案号。
    • 如果是,则接受该提案,并将其作为自己的已接受提案;如果不是,则拒绝该提案。
    • 接受者向提议者发送回复,表示是否接受提案。
  3. 学习者(Learner):

    • 学习者是接收共识值的实体,负责最终确认共识已达成,并执行相应的操作。
    • 学习者从提议者接收达成共识的值,并进行确认。
    • 一旦学习者确认共识值,它可以采取适当的操作,比如将共识值应用到本地状态,以确保系统的一致性。
    • 学习者可以是多个,并且会从不同的提议者接收共识值,以增加系统的可靠性。

这些角色在Paxos算法中相互协作,通过消息交换和投票来达成共识。提议者提出提案并与接受者进行交互,接受者根据自身状态决策是否接受提案,最终通过多数派回复确定共识值。学习者确认共识值,并将其应用到系统中,确保所有参与者达成一致的结果。

基本过程

基本过程是Paxos算法的核心,它由三个阶段组成:准备阶段(Prepare Phase)、接受阶段(Accept Phase)和学习阶段(Learn Phase)。以下是对每个阶段的详细介绍:

  1. 准备阶段(Prepare Phase):

    • 提议者(Proposer)选择一个提案号(通常是一个唯一的标识符),并向多个接受者(Acceptors)发送准备请求。
    • 准备请求包含提案号,表示提议者想要达成一致的提案。
    • 接受者收到准备请求后,比较接收到的提案号与自己已接受的最大提案号。
    • 如果接受者收到的提案号大于自己已接受的最大提案号,则将自己已接受的最大提案号和对应的值回复给提议者。
    • 提议者收集回复,并检查是否收到了多数派(超过半数)的回复。
    • 如果收到多数派的回复,进入接受阶段(Accept Phase);否则,返回准备阶段重新尝试。
  2. 接受阶段(Accept Phase):

    • 提议者构造一个提案,包含提案号和要达成共识的值。
    • 提议者向多个接受者发送提案请求,请求中包含提案号和值。
    • 接受者收到提案请求后,比较接收到的提案号与自己已接受的最大提案号。
    • 如果接收到的提案号大于等于自己已接受的最大提案号,则接受该提案,并将其作为自己的已接受提案。
    • 接受者回复接受请求,表示已接受提案。
    • 提议者等待收集多数派的回复。
    • 如果提议者收到多数派的回复,即接受者已接受了该提案,进入学习阶段(Learn Phase);否则,返回准备阶段重新尝试。
  3. 学习阶段(Learn Phase):

    • 提议者将达成的共识值发送给所有的学习者(Learners)。
    • 学习者接收共识值,并确认共识已达成。
    • 学习者可以采取适当的操作,比如应用共识值到本地状态,以确保系统的一致性。

基本过程中的准备阶段和接受阶段是通过提议者和接受者之间的消息交换来实现的,而学习阶段是通过提议者向学习者广播共识值来实现的。如下图所示:

为了更好地说明Paxos算法的基本过程,以下是一个简化的示例代码,展示了一个使用Paxos算法达成共识的场景。请注意,这个示例是为了更好地理解Paxos算法的基本概念,并不是完整实现。
 
```go
package main
 
import (
"fmt"
"math/rand"
"time"
)
 
type Proposer struct {
ID              int
ProposalNumber  int
AcceptedNumber  int
AcceptedValue   interface{}
PrepareChannel  chan PrepareRequest
AcceptChannel   chan AcceptRequest
ConsensusValue  interface{}
ConsensusNotify chan struct{}
}
 
type Acceptor struct {
ID             int
PromiseNumber  int
AcceptedNumber int
AcceptedValue  interface{}
PrepareChannel chan PrepareRequest
AcceptChannel  chan AcceptRequest
}
 
type PrepareRequest struct {
ProposalNumber int
Responder      chan PrepareResponse
}
 
type PrepareResponse struct {
PromiseNumber int
AcceptedValue interface{}
}
 
type AcceptRequest struct {
ProposalNumber int
ProposalValue  interface{}
Responder      chan bool
}
 
func (proposer *Proposer) Run() {
for {
proposer.ProposalNumber = generateProposalNumber()
promiseResponses := make(map[int]PrepareResponse)
acceptedResponses := 0
 
// Phase 1: Prepare Phase
for i := 0; i < len(proposer.PrepareChannel); i++ {
responder := <-proposer.PrepareChannel
if responder.ProposalNumber > proposer.AcceptedNumber {
proposer.AcceptedNumber = responder.ProposalNumber
proposer.AcceptedValue = responder.AcceptedValue
acceptedResponses++
}
promiseResponses[responder.ProposalNumber] = responder
}
 
// Check if received majority of promises
if acceptedResponses <= len(proposer.PrepareChannel)/2 {
continue
}
 
// Phase 2: Accept Phase
acceptedCount := 0
for i := 0; i < len(proposer.AcceptChannel); i++ {
responder := <-proposer.AcceptChannel
if responder {
acceptedCount++
}
}
 
// Check if received majority of accepts
if acceptedCount <= len(proposer.AcceptChannel)/2 {
continue
}
 
// Consensus reached
proposer.ConsensusValue = proposer.AcceptedValue
close(proposer.ConsensusNotify)
return
}
}
 
func (acceptor *Acceptor) Run() {
for {
select {
case prepareRequest := <-acceptor.PrepareChannel:
if prepareRequest.ProposalNumber > acceptor.PromiseNumber {
acceptor.PromiseNumber = prepareRequest.ProposalNumber
prepareRequest.Responder <- PrepareResponse{
PromiseNumber: acceptor.AcceptedNumber,
AcceptedValue: acceptor.AcceptedValue,
}
} else {
prepareRequest.Responder <- PrepareResponse{
PromiseNumber: -1,
}
}
case acceptRequest := <-acceptor.AcceptChannel:
if acceptRequest.ProposalNumber >= acceptor.PromiseNumber {
acceptor.PromiseNumber = acceptRequest.ProposalNumber
acceptor.AcceptedNumber = acceptRequest.ProposalNumber
acceptor.AcceptedValue = acceptRequest.ProposalValue
acceptRequest.Responder <- true
} else {
acceptRequest.Responder <- false
 
 
}
}
}
}
 
func generateProposalNumber() int {
return rand.Intn(1000)
}
 
func main() {
rand.Seed(time.Now().UnixNano())
 
// Create proposer and acceptor instances
proposer := &Proposer{
ID:              1,
ProposalNumber:  0,
AcceptedNumber:  0,
AcceptedValue:   nil,
PrepareChannel:  make(chan PrepareRequest),
AcceptChannel:   make(chan AcceptRequest),
ConsensusNotify: make(chan struct{}),
}
acceptor1 := &Acceptor{
ID:             1,
PromiseNumber:  0,
AcceptedNumber: 0,
AcceptedValue:  nil,
PrepareChannel: make(chan PrepareRequest),
AcceptChannel:  make(chan AcceptRequest),
}
acceptor2 := &Acceptor{
ID:             2,
PromiseNumber:  0,
AcceptedNumber: 0,
AcceptedValue:  nil,
PrepareChannel: make(chan PrepareRequest),
AcceptChannel:  make(chan AcceptRequest),
}
 
// Run proposer and acceptor processes concurrently
go proposer.Run()
go acceptor1.Run()
go acceptor2.Run()
 
// Simulate the message exchange between proposer and acceptors
go func() {
// Prepare Phase
for _, acceptor := range []*Acceptor{acceptor1, acceptor2} {
responder := make(chan PrepareResponse)
acceptor.PrepareChannel <- PrepareRequest{
ProposalNumber: proposer.ProposalNumber,
Responder:      responder,
}
response := <-responder
if response.PromiseNumber != -1 {
proposer.AcceptChannel <- AcceptRequest{
ProposalNumber: proposer.ProposalNumber,
ProposalValue:  response.AcceptedValue,
Responder:      make(chan bool),
}
}
}
 
// Accept Phase
for _, acceptor := range []*Acceptor{acceptor1, acceptor2} {
<-acceptor.AcceptChannel
}
}()
 
// Wait for consensus value to be reached
<-proposer.ConsensusNotify
 
// Print the consensus value
fmt.Println("Consensus value:", proposer.ConsensusValue)
}
```
 
在上述示例中,我们创建了一个`Proposer`结构和两个`Acceptor`结构,它们分别扮演提议者和接受者的角色。提议者负责生成提案号、发送准备请求和提案请求,而接受者负责接收请求并做出相应的回复。两者之间通过通道进行消息交换。
 
在主函数中,我们启动了提议者和接受者的协程,并模拟了消息交换的过程。最终,当达成共识时,提议者的`ConsensusValue`字段将被设置为达成的共识值。
 
请注意,此示例是一个简化的版本,省略了一些细节和容错机制,仅用于演示Paxos算法的基本概念。在实际的分布式系统中,通常需要更复杂的实现来处理故障恢复、超时、重试等

结论

Paxos算法是一种经典的共识算法,通过准备阶段、承诺阶段和接受阶段的交互,实现了分布式系统中的共识达成。本文详细介绍了Paxos算法的基本概念、过程以及各个角色的作用。了解Paxos算法有助于理解分布式系统中的共识问题及其解决方法,为构建可靠的分布式系统提供指导。

参考文献

[1] Michael J. Fischer, Nancy Lynch, and Michael S. Paterson. Impossibility of distributed consensus with one faulty process. Journal of the ACM, 32(2):374–382, April 1985.

[2] Idit Keidar and Sergio Rajsbaum. On the cost of fault-tolerant consensus when there are no faults—a tutorial. TechnicalReport MIT-LCS-TR-821, Laboratory for Computer Science, Massachusetts Institute Technology, Cambridge, MA, 02139, May 2001. also published in SIGACT News 32(2) (June 2001).

[3] Leslie Lamport. The part-time parliament. ACM Transactions on Computer Systems, 16(2):133–169, May 1998.

文章来自个人专栏
机器人遇上AI
9 文章 | 1 订阅
0条评论
0 / 1000
请输入你的评论
0
0