reconnect
This commit is contained in:
committed by
fiatjaf_
parent
a9972245f3
commit
cb8b40bd00
107
pool.go
107
pool.go
@@ -79,20 +79,19 @@ func (pool *SimplePool) subMany(ctx context.Context, urls []string, filters Filt
|
|||||||
ticker := time.NewTicker(seenAlreadyDropTick)
|
ticker := time.NewTicker(seenAlreadyDropTick)
|
||||||
eose := false
|
eose := false
|
||||||
|
|
||||||
|
updateSince := func() {
|
||||||
|
// After reconnection, update the since in the filter so that
|
||||||
|
// old events are not retrieved.
|
||||||
|
now := Now()
|
||||||
|
for i := range filters {
|
||||||
|
filters[i].Since = &now
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
pending := xsync.NewCounter()
|
pending := xsync.NewCounter()
|
||||||
pending.Add(int64(len(urls)))
|
pending.Add(int64(len(urls)))
|
||||||
for _, url := range urls {
|
for _, url := range urls {
|
||||||
go func(nm string) {
|
go func(nm string) {
|
||||||
relay, err := pool.EnsureRelay(nm)
|
|
||||||
if err != nil {
|
|
||||||
return
|
|
||||||
}
|
|
||||||
|
|
||||||
sub, _ := relay.Subscribe(ctx, filters)
|
|
||||||
if sub == nil {
|
|
||||||
return
|
|
||||||
}
|
|
||||||
|
|
||||||
defer func() {
|
defer func() {
|
||||||
pending.Dec()
|
pending.Dec()
|
||||||
if pending.Value() == 0 {
|
if pending.Value() == 0 {
|
||||||
@@ -103,41 +102,65 @@ func (pool *SimplePool) subMany(ctx context.Context, urls []string, filters Filt
|
|||||||
|
|
||||||
for {
|
for {
|
||||||
select {
|
select {
|
||||||
case evt, more := <-sub.Events:
|
|
||||||
if !more {
|
|
||||||
return
|
|
||||||
}
|
|
||||||
if unique {
|
|
||||||
if _, seen := seenAlready.LoadOrStore(evt.ID, evt.CreatedAt); seen {
|
|
||||||
continue
|
|
||||||
}
|
|
||||||
}
|
|
||||||
select {
|
|
||||||
case events <- IncomingEvent{Event: evt, Relay: relay}:
|
|
||||||
case <-ctx.Done():
|
|
||||||
}
|
|
||||||
case <-sub.EndOfStoredEvents:
|
|
||||||
eose = true
|
|
||||||
case <-ticker.C:
|
|
||||||
if eose {
|
|
||||||
del := map[string]struct{}{}
|
|
||||||
old := Timestamp(time.Now().Add(-seenAlreadyDropTick).Unix())
|
|
||||||
seenAlready.Range(func(id string, value Timestamp) bool {
|
|
||||||
if value < old {
|
|
||||||
del[id] = struct{}{}
|
|
||||||
}
|
|
||||||
return true
|
|
||||||
})
|
|
||||||
for k := range del {
|
|
||||||
seenAlready.Delete(k)
|
|
||||||
}
|
|
||||||
}
|
|
||||||
case reason := <-sub.ClosedReason:
|
|
||||||
log.Printf("CLOSED from %s: '%s'\n", nm, reason)
|
|
||||||
return
|
|
||||||
case <-ctx.Done():
|
case <-ctx.Done():
|
||||||
return
|
return
|
||||||
|
default:
|
||||||
}
|
}
|
||||||
|
|
||||||
|
relay, err := pool.EnsureRelay(nm)
|
||||||
|
if err != nil {
|
||||||
|
time.Sleep(3 * time.Second)
|
||||||
|
updateSince()
|
||||||
|
continue
|
||||||
|
}
|
||||||
|
|
||||||
|
sub, err := relay.Subscribe(ctx, filters)
|
||||||
|
if err != nil {
|
||||||
|
time.Sleep(3 * time.Second)
|
||||||
|
updateSince()
|
||||||
|
continue
|
||||||
|
}
|
||||||
|
|
||||||
|
loop:
|
||||||
|
for {
|
||||||
|
select {
|
||||||
|
case evt, more := <-sub.Events:
|
||||||
|
if !more {
|
||||||
|
break loop
|
||||||
|
}
|
||||||
|
if unique {
|
||||||
|
if _, seen := seenAlready.LoadOrStore(evt.ID, evt.CreatedAt); seen {
|
||||||
|
continue
|
||||||
|
}
|
||||||
|
}
|
||||||
|
select {
|
||||||
|
case events <- IncomingEvent{Event: evt, Relay: relay}:
|
||||||
|
case <-ctx.Done():
|
||||||
|
}
|
||||||
|
case <-sub.EndOfStoredEvents:
|
||||||
|
eose = true
|
||||||
|
case <-ticker.C:
|
||||||
|
if eose {
|
||||||
|
del := map[string]struct{}{}
|
||||||
|
old := Timestamp(time.Now().Add(-seenAlreadyDropTick).Unix())
|
||||||
|
seenAlready.Range(func(id string, value Timestamp) bool {
|
||||||
|
if value < old {
|
||||||
|
del[id] = struct{}{}
|
||||||
|
}
|
||||||
|
return true
|
||||||
|
})
|
||||||
|
for k := range del {
|
||||||
|
seenAlready.Delete(k)
|
||||||
|
}
|
||||||
|
}
|
||||||
|
case reason := <-sub.ClosedReason:
|
||||||
|
log.Printf("CLOSED from %s: '%s'\n", nm, reason)
|
||||||
|
return
|
||||||
|
case <-ctx.Done():
|
||||||
|
return
|
||||||
|
}
|
||||||
|
}
|
||||||
|
updateSince()
|
||||||
}
|
}
|
||||||
}(NormalizeURL(url))
|
}(NormalizeURL(url))
|
||||||
}
|
}
|
||||||
|
|||||||
Reference in New Issue
Block a user