artykuły

Rzecz o miejscach testowych w grach na przykładzie Far Cry 3

Testy w grach? Robisz to źle! :)

163
5 lipca 2014, 12:32 Łukasz Marek

Testowanie sprzętu w grach to ciężki kawałek chleba. Różne metody, różne miejsca testowe, tony sprzętu, a osiągi każdej karty graficznej i każdego procesora trzeba mierzyć w porównywalnych warunkach. Dzisiaj piszemy o praktycznej stronie testów wydajności – o tym, jak redakcja PCLab.pl dobiera miejsca testowe. Ponadto pokażemy te miejsca. Wytkniemy też kilka błędów oraz źle dobranych procedur na stronach konkurencji. Gotowi na ostrą jazdę bez trzymanki?

Spis treści

Teoria idealnego miejsca testowego

Czym charakteryzuje się idealne miejsce testowe w grze? Spełnione muszą zostać (w dużym skrócie) co najmniej trzy warunki:

  • Jest reprezentatywne dla danej gry. Gry wyścigowej typu F1 2012 czy GRID Autosport nie testujemy w garażu podczas wybierania koloru samochodu (jakkolwiek wymagająca dla sprzętu byłaby ta sekwencja), ale podczas wyścigu. Analogicznie: nie testujemy strzelanki w trakcie przerywnika filmowego, w którym postać rozmawia z inną. Reasumując: gry testujemy tam, gdzie wydajność faktycznie jest potrzebna.
  • Jest wymagające. Ważne jest, by znaleźć wymagające miejsce. Nie pokazujemy, że zabawę w danej grze w 60 kl./s umożliwia już GTX 750 Ti, jeśli wiemy, że w innym miejscu znacznie mocniejsza karta, taka jak GTX 770, nie zdoła wyświetlić więcej niż 30 kl./s.
  • Zapewnia powtarzalność wyniku. Nawet najlepsze miejsce, które spełnia dwa pierwsze warunki, czasem zwyczajnie nie nadaje się do testowania sprzętu ze względu na słabą powtarzalność wyników. Jeśli ich rozrzut w obrębie jednej konfiguracji wynosi więcej niż 2–3%, to test zwyczajnie nadaje się tylko do kosza.

Problem? Niektóre redakcje pokazują swoje miejsca testowe, co w połączeniu z wynikami na wykresach pozwala łatwo wywnioskować, które testy nie nadają się do publikacji. Przykłady? Podamy te, które zapamiętaliśmy lub po prostu najszybciej znaleźliśmy.

Miejsca „procesorowe” i „graficzne”

Tu większość redakcji jest zgodna: do testu karty graficznej dobieramy możliwie szybki procesor, który nie ograniczy wyników, a do testu procesora dobieramy najszybszą kartę. Niestety, nie ma już zgody, jeśli chodzi o miejsca testowe, czego efektem często są zupełnie „płaskie” wykresy z wynikami procesorów itp.

O tym, jak odróżnić miejsce „procesorowe” od miejsca „graficznego”, pisaliśmy w artykule poświęconym podobnym zagadnieniom. Obszerniej przedstawiliśmy tę kwestię w artykule o metodach testowania procesorów w grach. Dalsze strony to tak naprawdę praktyka do teorii opisanej w przytoczonych publikacjach.

Strona:
shakal84Zobacz profil
Poziom ostrzeżenia: 0%
shakal842014.07.05, 12:41
-56#1
pierwszy :D
.Mad.Zobacz profil
Poziom ostrzeżenia: 0%
.Mad.2014.07.05, 12:55
-32#2
;o
3dmarkZobacz profil
Poziom ostrzeżenia: 0%
3dmark2014.07.05, 12:56
38#3
Chyba nikt już nie ma wątpliwości że łączenie Radeona z jednak wolnymi CPU AMD nie ma sensu.
raf3dZobacz profil
Poziom ostrzeżenia: 0%
raf3d2014.07.05, 13:02
35#4
Temat bardzo ciekawy i dobrze ujęty ale nie liczcie na to że w ten sposób większość zrozumie skąd wynikają pewne różnice. Dla większości liczą się przekonania lub 'religia'
cyferluuZobacz profil
Poziom ostrzeżenia: 0%
cyferluu2014.07.05, 13:02
11#5
Ciekawa lektura. Ja testy kart graficznych czy procesorów traktuje tylko i wyłącznie jako ciekawostki i zamierzam je tak traktować.Właśnie rozrzut wyników różnych konfiguracji sprawia, że zupełnie się nimi nie sugeruję dobierając sprzęt, bo klient zawsze powie 'za drogo'

Moglibyście nagrać własne miejsca testowe i dawać linki przy testach. Pozwoliłoby to na przeprowadzenie takiego samego testu z użyciem własnego sprzętu i wtedy można jakoś odnieść się do waszych wyników (czyli konfiga HI end)
Bruno@HomeZobacz profil
Poziom ostrzeżenia: 0%
Bruno@Home2014.07.05, 13:05
-26#6
cyt. 'W pierwszym dniu dostępności Far Cry 3, dokładnie godzinę i piętnaście minut po tym, jak opublikowaliśmy swój test, rozmawialiśmy z przedstawicielem PR AMD w Polsce, który nas przekonywał, że w wynikach procesorów tej firmy na pewno jest błąd, a przedstawione przez nas osiągi są w tej grze niespotykane. '


Nie ma to jak przytaczać własnej interpretacji pytania, które jak zakładam padło w formie czy taka wydajność występuje w całej grze, co by reprezentowała regułę, a nie wyjątek, który (teraz słowo klucz) może zostać usunięty lub poprawiony w kolejnym patchu.

Ba gdybając dalej zakładam, że tester to opisujący jest z założenia obiektywny, wcale nie sceptyczny wobec AMD (link poniżej) i dlatego też wcale nie kładzie nacisku na selekcjonowanie miejsc zgodnych ze swoimi przekonaniami. ;-)

http://blog.pclab.pl/chaostheory/Mantle.Je....sceptyczny,261
http://pclab.pl/art58492-6.html
reddyZobacz profil
Poziom ostrzeżenia: 0%
reddy2014.07.05, 13:06
3dmark @ 2014.07.05 12:56  Post: 763942
Chyba nikt już nie ma wątpliwości że łączenie Radeona z jednak wolnymi CPU AMD nie ma sensu.

pokazałbym Ci kilku, którzy sens widzą i jeszcze się awanturują...
tracer123Zobacz profil
Poziom ostrzeżenia: 0%
tracer1232014.07.05, 13:07
Miejsce graficzne i procesorowe, a gdzie jest zwykłe (gpu+cpu) miejsce ?

focusZobacz profil
Poziom ostrzeżenia: 0%
focus2014.07.05, 13:08
Bruno@Home @ 2014.07.05 13:05  Post: 763946
cyt. 'W pierwszym dniu dostępności Far Cry 3, dokładnie godzinę i piętnaście minut po tym, jak opublikowaliśmy swój test, rozmawialiśmy z przedstawicielem PR AMD w Polsce, który nas przekonywał, że w wynikach procesorów tej firmy na pewno jest błąd, a przedstawione przez nas osiągi są w tej grze niespotykane. '

Nie ma to jak przytaczać własnej interpretacji pytania, które jak zakładam padło w formie czy taka wydajność występuje w całej grze, co by reprezentowała regułę, a nie wyjątek, który (teraz słowo klucz) może zostać usunięty lub poprawiony w kolejnym patchu.

Ba gdybając dalej zakładam, że tester to opisujący jest z założenia obiektywny, wcale nie sceptyczny wobec AMD (link poniżej) i dlatego też wcale nie kładzie nacisku na selekcjonowanie miejsc zgodnych ze swoimi przekonaniami. ;-)

http://blog.pclab.pl/chaostheory/Mantle.Je....sceptyczny,261

I ten rzekomo sceptyczny wobec AMD autor napisał te artykuły:
http://pclab.pl/art55953.html
http://pclab.pl/art55886.html
http://pclab.pl/art55928.html
http://pclab.pl/art55237.html
http://pclab.pl/art55381.html
http://pclab.pl/art55272.html
Bruno, skończ proszę wreszcie te wycieczki osobiste.
focusZobacz profil
Poziom ostrzeżenia: 0%
focus2014.07.05, 13:09
tracer123 @ 2014.07.05 13:07  Post: 763948
Miejsce graficzne i procesorowe, a gdzie jest zwykłe (gpu+cpu) miejsce ?


Polecam lekturę podlinkowanych na pierwszej stronie artykułów. Miejsca procesorowe z założenia są też zależnymi od układu graficznego. W końcu to gry z grafiką 3D.
Funkcja komentowania została wyłączona. Do dyskusji zapraszamy na forum.
1