Przyspiesz swoje interfejsy API

Feb 21 2023
Tworzenie nowych obiektów może być stosunkowo kosztowną operacją, zwłaszcza jeśli wiąże się z przydzielaniem pamięci na stercie, więc ponowne użycie obiektów może pomóc zmniejszyć narzut i poprawić wydajność. Utrzymując pulę wstępnie przydzielonych obiektów i ponownie wykorzystując je w razie potrzeby, możemy uniknąć narzutu związanego z alokacją i cofaniem alokacji pamięci (garbage collector zwalnia nieużywane zmienne w pamięci).

Tworzenie nowych obiektów może być stosunkowo kosztowną operacją, zwłaszcza jeśli wiąże się z przydzielaniem pamięci na stercie, więc ponowne użycie obiektów może pomóc zmniejszyć narzut i poprawić wydajność. Utrzymując pulę wstępnie przydzielonych obiektów i ponownie wykorzystując je w razie potrzeby, możemy uniknąć narzutu związanego z alokacją i cofaniem alokacji pamięci (garbage collector zwalnia nieużywane zmienne w pamięci).

Może to być szczególnie przydatne w przypadku interfejsów API, które muszą obsługiwać dużą liczbę żądań, w których tworzenie i niszczenie obiektów na każde żądanie może być znaczącym wąskim gardłem. Używając ponownie obiektów, możemy zmniejszyć ilość wymaganego czasu procesora i pamięci, co może prowadzić do lepszej wydajności i możliwości obsługi większej liczby żądań.

Aby to osiągnąć, możemy użyć sync.Poolpakietu w Go, aby zaimplementować łączenie obiektów. Jest sync.Poolto wbudowany pakiet Go, który zapewnia bezpieczny dla wątków mechanizm przechowywania i pobierania obiektów z puli.
Może bezpośrednio przejść do kodu ..!!

Opiekunowie:-


package handlers

import (
 "encoding/json"
 "net/http"
 "sync"
)

type Request struct {
 Name    string `json:"name"`
 Id      string `json:"id"`
 Country string `json:"country"`
 Age     int    `json:"age"`
}

type ObjectPool struct {
 ReqPool *sync.Pool
}

var objPool ObjectPool

func init() {
 // init object pool
 objPool.ReqPool = &sync.Pool{
  New: func() interface{} {
   return new(Request)
  },
 }

}


func HandlerWithoutSyncPool() http.Handler {
 return http.HandlerFunc(func(w http.ResponseWriter, r *http.Request) {
  req :=new(Request)
  err := json.NewDecoder(r.Body).Decode(&req)
  if err != nil {
   w.WriteHeader(http.StatusBadRequest)
   return
  }
  w.WriteHeader(http.StatusOK)
  err = json.NewEncoder(w).Encode(req)
  if err != nil {
   w.WriteHeader(http.StatusInternalServerError)
   return
  }

 })
}

func HandlerWithSyncPool() http.Handler {
 return http.HandlerFunc(func(w http.ResponseWriter, r *http.Request) {
  req := objPool.ReqPool.Get().(*Request)

 //to make sure it return object to pool
  defer objPool.ReqPool.Put(req)

  err := json.NewDecoder(r.Body).Decode(&req)
  if err != nil {
   w.WriteHeader(http.StatusBadRequest)
   return
  }

  w.WriteHeader(http.StatusOK)
  
 })
}

Uwaga:-wyniki różnią się w zależności od typu obiektu, który łączymy

package handlers

import (
 "bytes"
 "encoding/json"
 "net/http"
 "net/http/httptest"
 "testing"
)

var tests = []struct {
 req Request
}{
 {
  req: Request{Name: "test", Country: "testCountry", Id: "id1", Age: 10},
 },
}


func BenchmarkHandlerWithSyncPool(b *testing.B) {

 for _, test := range tests {
  data, _ := json.Marshal(test)

  b.RunParallel(func(pb *testing.PB) {

   for pb.Next() {
    _, _ = http.Post("http://127.0.0.1:8888/withpool", "application/json", bytes.NewBuffer(data))
   }
  })

 }

}

func BenchmarkHandlerWithoutSyncPool(b *testing.B) {
 for _, test := range tests {

  data, _ := json.Marshal(test)

  b.RunParallel(func(pb *testing.PB) {

   for pb.Next() {
    _, _ = http.Post("http://127.0.0.1:8888/withoutpool", "application/json", bytes.NewBuffer(data))
   }
  })
 }

}


go test -bench=BenchmarkHandlerWithoutSyncPool -benchtime=5s -cpu=1
goos: darwin
goarch: amd64
pkg: testsyncpool/handlers
cpu: Intel(R) Core(TM) i9-9880H CPU @ 2.30GHz
BenchmarkHandlerWithoutSyncPool     23067    1004690 ns/op

      
                

go test -bench=BenchmarkHandlerWithSyncPool -benchtime=5s -cpu=1 
goos: darwin
goarch: amd64
pkg: testsyncpool/handlers
cpu: Intel(R) Core(TM) i9-9880H CPU @ 2.30GHz
BenchmarkHandlerWithSyncPool     77290      76521 ns/op

      
                

package main

import (
 "log"
 "net/http"
 "net/http/pprof"
 "testsyncpool/handlers"
)

func main() {
 r := http.NewServeMux()
 //r.Handle("/withoutpool", handlers.HandlerWithoutSyncPool())

 r.Handle("/withpool", handlers.HandlerWithSyncPool())

 // Register pprof handlers
 r.HandleFunc("/debug/pprof/", pprof.Index)
 r.HandleFunc("/debug/pprof/cmdline", pprof.Cmdline)
 r.HandleFunc("/debug/pprof/profile", pprof.Profile)
 r.HandleFunc("/debug/pprof/symbol", pprof.Symbol)
 r.HandleFunc("/debug/pprof/trace", pprof.Trace)
 err := http.ListenAndServe(":8888", r)
 if err != nil {
  log.Fatal(err)
 }
}

Prosimy o dodawanie komentarzy/sugestii/błędów itp.…