0:00 / 0:00

Python i Django: Testy wydajnościowe

Techniki Zaawansowane

3 godz. 43 min · Python · Full-stack i Programowanie

Grzegorz SzymborskiProgramista

Czego się nauczysz

Stworzenie struktury aplikacji w oparciu o najlepsze praktyki
Wiele sposobów na przyspieszenie aplikacji
Wyszukiwanie pełnotekstowe oparte na postgresie
Techniki ułatwiające testowanie
Zagrożenia wynikające z race condition
Przykłady wzięte z prawdziwych projektów

Porozmawiajmy o architekturze

Jeżeli na samym początku nie przygotujemy dobrze projektu, to gdy wrócimy do niego po dłuższym czasie - czekają nas kłopoty. Jeżeli uda się nam go uruchomić, to rozeznanie się w nim będzie udręką. Prowadzący pokaże Ci jak wyglądają jego produkcyjne aplikacje, na co zwraca uwagę i co pomaga mu trzymać porządek.

Testy są super!

Biblioteka pytest posiada wiele ciekawych funkcjonalności. Parametryzowanie testów, fixture i uproszczona składnia pozwalają nam skupić na testowaniu tego, co kluczowe, wydzielając mniej istotne fragmenty kodu. To wszystko sprawia, że w pewnym momencie łatwiej będzie Ci pisać testy, niż ręcznie sprawdzać poprawność działania apki.

Przyspieszmy stronę

Jeżeli aplikacja, którą stworzysz, osiągnie dużą popularność, może się okazać, że przytłoczona dużym ruchem zacznie spowalniać... lub całkowicie przestanie odpowiadać. Opiszemy różne techniki służące temu, by temu zaradzić - od metod select i prefetch related, aż po cache. Na deser przeprowadzimy na stronie test obciążeniowy za pomocą narzędzia locust.

Wyszukiwanie danych

Django i Postgres to świetne połączenie. Framework ten posiada wbudowaną obsługę wyszukiwania pełnotekstowego oferowanego przez tę bazę. Warto wiedzieć, kiedy jej użyć, a kiedy wystarczy zwykłe icontains.

Django ORM

ORM w Django ułatwia mnóstwo operacji. A czasem nie dość to, że ułatwia... to jeszcze przyspiesza! Chcemy zainspirować Cię czterema metodami: annotate, aggregate, bulkupdate i bulkcreate. Gdy pojawią się one w naszym kodzie, zaczniemy doceniać uroki frameworka Django.

Dla kogo jest ten kurs?

Kurs jest stworzony dla osób, które znają już podstawy Django i wiedzą, jak pisać proste strony. Znają modele, widoki, oraz niestraszny im jest Python. Zalecana jest również podstawowa znajomość dowolnej relacyjnej bazy danych. W kursie przedstawiamy niekiedy narzędzia i praktyczne przykłady, jak można ich użyć, ale w celu zaimplementowania konkretnego rozwiązania w projekcie wymagana będzie umiejętność czytania dokumentacji.

0:00Wreszcie przyszedł czas na wykres i na coś

0:03co jakoś daje nam znać o tym czy wszelkie nasze wysiłki te próby kiedy

0:10próbowaliśmy optymalizować naszą aplikację czy przyniosły jakiś rezultat.

0:15Pokażę wam swoje ulubione narzędzie do testowania wydajności nowego aplikacji.

0:19Nazywa się Locus i posiada bardzo fajny i prosty dash board

0:25i pozwala nam na atakowanie naszej strony wieloma gestami

0:30na sekundę żeby zobaczyć jak zachowuje się czas odpowiedzi w zależności od tego ile

0:36osób jest na smartfonie zainstaluje bibliotekę korzystając z dokumentacji.

0:43Stosujemy ją standardowo przez Pippa.

1:04Do poprawnego działania musimy jeszcze w katalogu głównym z

1:08którego będziemy uruchamiać Lock ustaw stworzyć plik Lotus File kropka.

1:16Wzór tego pliku można sobie podejrzeć na stronie z dokumentacją Skopje.

1:21Ten fragment go trochę upraszcza ponieważ.

1:27Nie potrzebujemy dwóch zapytań.

1:29Zrobimy sobie tylko jedno pod.

1:33Stronę z listą artykułów którą kierowaliśmy nieco wcześniej

1:37i tak przygotowujemy daną konfigurację uruchamiamy za pomocą komendy Locus

1:43i wskazujemy host name pod którym działa nasza strona.

1:47Będzie to adres lokalne na porcie 8000.

1:54Otwieramy teraz adres który został wskazany co prawda w

1:57tej host najmu na coś locus na mnie chciał podać ale podał nam port 80 89 i ten port.

2:06Powinniśmy spróbować się dostać pod adresem 127 001.

2:12Naszym oczom ukazuje się formularz niezbyt skomplikowany w którym

2:17w pierwszym polu podajemy do ilu użytkowników ma dobić locus.

2:22Ile maksymalnie ma wygenerować a w drugim ma określamy tempo przyrostu użytkowników.

2:30Ilu użytkowników ma być dodawane na sekundę.

2:34Ustalimy sobie użytkowników docelową i żeby przybywało ich po pięciu na sekundę.

2:41Zabrakło mi http:.

2:49Po dodaniu jeszcze raz ponownie wpisem stu

2:53użytkowników i pięciu użytkowników na sekundę.

2:58Widzimy że zaczynają nam.

3:01Przerasta cię request.

3:04Mam tutaj średni czas do 95 questów mamy

3:08średni czas w ogóle minimalny maksymalny i dalsze informacje.

3:15Natomiast to co jest bardzo ciekawe co

3:17daje nam od razu pogląd na to jak działa aplikacja to są to są wykresy.

3:22Pierwszym okresem jest liczba questów na sekundę i tu

3:26doskonale widać ile i questów na sekundę jest w stanie obsłużyć nasza aplikacja.

3:31Weźmy pod uwagę że ja uruchamiają ją na serwerze deweloperskim na RAM serwer

3:36na włączonym do Bugu i na włączonym 2 w barze dlatego nie będzie to optymalne.

3:42Nie są to optymalne warunki dla działania aplikacji i przy włączonym USG i przy

3:47wielu wątkach i wielu procesach byłoby na pewno z tym lepiej.

3:51Ale widzimy że czas odpowiedzi jest dosłownie kilkadziesiąt milisekund.

3:55To jest bardzo mało.

3:56I gdybyśmy na naszym produkcyjnym serwerze masie produkcyjnej aplikacji przy takim

4:01ruchu osiągali takie czasy to znaczy że już jest dobrze.

4:07Możemy spróbować bardziej odważnie z

4:10tysiącem użytkowników możemy generować ich na sekundę 40.

4:17I sprawdzać jak się zachowuje wtedy strona.

4:20Warto jest obserwować zasoby komputera sprawdzić czy pierwszy kończy się ram czy

4:23pierwszy kończy się procesor ponieważ to daje nam pewien sygnał.

4:29Gdzie leży problem co warto zwiększyć.

4:31Czy warto zwiększyć ilość RAMu lepiej

4:33przenieść się na nowy procesor i to już widzimy na przykład że przy takim ruchu.

4:42Czas odpowiedzi dramatycznie wzrasta.

4:48Liczba questów na sekundę spada ponieważ koszty trwają dużo dłużej.

4:54Tak bardzo często.

4:58Taki stan rzeczy jeżeli widzimy że czas

5:01odpowiedzi zaczyna wzrastać prowadzi do tego że serwer się zawiesza i przestaje

5:05już zupełnie odpowiadać to widzimy że wszystko się unormowania PO.

5:14No cóż na włączonym serwerze deweloperskim jest to dość nieprzewidywalne.

5:23Jeżeli wejdziemy w dalsze zakładki to możemy obserwować

5:28błędy które aplikacja przy dużym obciążeniu zwraca statusu i treści.

5:34Natomiast.

5:36Aplikacji tej to bardzo polecam używać Jeżeli planujecie

5:40puszczać kampanie marketingowe jeżeli chcecie udostępniać swoją stronę gdzieś

5:44gdzie jednocześnie wejdzie na nią bardzo dużo użytkowników.

5:48Jeżeli planujecie w ogóle robić duże strony z dużym obciążeniem.

5:55Jeżeli chcecie być pewni że wszystko będzie działało poprawnie.

6:00W konfiguracji roku możecie zamiast prostych gestów tworzyć posty.

6:08Możecie logować się możecie działać jako

6:10użytkownik i pozwala on wam naprawdę na wiele rzeczy.