Indépendant HttpBench for D, ou les tests de TechEmpower mentent-ils?

Un framework simple pour tester les serveurs HTTP, inspiré du Simple Web Benchmark ( il existe un graphe pour de nombreux autres langages ), mais axé sur les frameworks et bibliothèques dlang .



Il mesure le RPS réalisable (requêtes par seconde) dans un script en clair.



Les tests ont été collectés ou modifiés à partir de divers endroits (y compris TechEmpower ).



Il utilise un conteneur docker pour créer et héberger des services et peut s'exécuter localement ou utiliser un testeur de charge à partir d'un hôte distant.



Le générateur de charge est la valeur par défaut WRK statistiques et demande à partir du réservoir, mais bon aussi pris en charge ( il suffit d' utiliser la clé --tool).



Les tests peuvent être exécutés sans docker, il vous suffit d'installer des compilateurs pour les langues testées et le générateur de démarrage wrk / hey (mais uniquement testé sous linux).



Remarque pour les tests io_uring:



  • Les tests nécessitent au moins un noyau Linux 5.7.
  • Il peut également y avoir des problèmes avec les limites de mémoire verrouillée définies par l'utilisateur (ulimit -l) lors de l'exécution avec un utilisateur normal.
  • , Kernel 5.7.16. . : #189, #8.




:



  • singleCore — / ( ).
  • multiCore






  • make build
  • make shell

    : .




, ( ):



make all        # runs all tests
make single     # runs tests limited to single CPU core usage
make multi      # runs tests limited to multiple CPU cores usage


_suite/runner.d CLI-.



  • _suite/runner.d list — -
  • _suite/runner.d bench
  • _suite/runner.d responses
  • _suite/runner.d versions — Markdown

    _suite/runner.d -h CLI .


:



_suite/runner.d bench --type singleCore dlang rust #     dlang  rust 




(. ), CLI .



:



  • , , .
  • - _suite/runner.d bench --type singleCore -r foo@192.168.0.3 --host 192.168.0.2 dlang


-r --remote , ssh. --host , CLI IP , , .



ssh , ssh ( ).



(hey) .



, , .



/



Techempower .



, .



  • (.. ..)
  • HTTP-


, , , , , .



C



. HTTP-, eventloop .



epoll io_uring. raw.



dlang



arsd-official



. http :



  • process — , .
  • threads — threadpool
  • hybrid — Linux , .


singeCore, ( ) eventloop, (.. CGI) .



. — .



during



  • raw — , , ( , ,… — )

    TBD — / io_uring, epoll Linux-.


epoll



, , . , — , during/raw



eventcore



, vibe-d. epoll linux (iocp kqueue windows MacOS).



, http , , .



  • callbacks — .
  • fibers —


hunt





lighttp



code.dlang.org, .



, .



mecca



Weka.



.



: druntime, . . , .



photon



code.dlang.org, , syscalls glibc epoll eventloop , .



nodejs http-parser ( , pico) .



vibe-core



, eventcore .



- , TCPConnection , .



, http .



vibe-d



- dlang, .



dotnet



ASP.Net Core.



, ( , , ...). .. , .



golang



fasthttp .



HTTP , .



rust



Actix :



  • actix-web —
  • actix-raw —




Single core results ()



: AMD Ryzen 7 3700X 8-Core, kernel 5.8.10

: Intel® Core(TM) i5-5300U CPU @ 2.30GHz, kernel 5.8.9

: 1Gbps through cheap gigabit switch

: for i in 8 64 128 256; do _suite/runner.d bench --type singleCore --tool wrk -b 2 -d 120 -c $i -r tomas@10.0.0.2; done





go go1.15.1
ldc2 1.23.0
rust 1.48.0-nightly
dotnet 5.0.100-rc.1.20452.10


D'un traducteur . Les versions complètes des tableaux avec les résultats peuvent être visualisées dans l'original . Mais tout n'est évidemment pas mélangé là-haut, alors j'ai fait plus de graphiques visuels sur le nombre de requêtes traitées en 2 minutes (req, rps proportionnellement) pour deux catégories - des frameworks à part entière sans réglages et tout le reste, y compris les bibliothèques de base. Et deux résultats - pour 8 travailleurs et pour 256 pour montrer l'évolutivité.







Et oui, les tests de TechEmpower, mélangeant des versions modifiées avec les versions habituelles, embellissent à certains endroits.




All Articles