Testerzy woli Google wolą Bing

W konkursie na wyszukiwarkę błędów, Google wyszedł poza Bing, jednocześnie zdobywając wyższe ogólne pochwały niż nowa wyszukiwarka Microsoftu. Ponad 1100 osób w ponad 50 krajach wzięło udział w konkursie (PDF), który odbył się w Southborough w hrabstwie uTest w stanie Massachusetts.

uTest organizuje kwartalne konkursy crowdsourcingu, prawdopodobnie w celu zwiększenia popularności firmy testującej oprogramowanie i dzieli wyniki z dostawców. Testerów oceniano na podstawie "innowacyjności" błędów, ich zrozumienia problemów i jakości ich raportów. Nagrody sięgały od 400 $ za pierwszą nagrodę do 50 $ za piąte miejsce.

Podczas gdy Google zdobywał najwyższe oceny, prawie jedna trzecia testujących była mile zaskoczona przez Bing, a 10% stwierdziło, że zrobi to jako główna wyszukiwarka, mając testowałem również Google i Yahoo. Mimo to pozostałe 90 procent stwierdziło, że będzie trzymać się Google'a, ceniąc sobie przede wszystkim dokładność wyszukiwania.

Testerzy znaleźli najmniej błędów w Yahoo, z zaledwie 70 problemami, chociaż mniej uczestników skupiło się na tej odlatującej wyszukiwarce w porównaniu do dwa pozostałe główne wyszukiwarki. Testerzy znaleźli 130 błędów w Google, 8 procent zostało sklasyfikowanych jako "showstoppers", podczas gdy 321 błędów zostało odkrytych w Bing, 14 procent z nich to showstoppers.

Nie jest jasne, jak uTest definiuje błędy, ale dotyczą one technicznych, funkcjonalnych i problemy z interfejsem użytkownika. Ponieważ znane błędy nie kwalifikują się, domyślam się, że Google dostaje tu przepustkę, ponieważ mogą pojawić się dobrze zgłoszone problemy, które nie pojawią się w wynikach konkursu. Dla porównania, Bing ma mniej niż cztery miesiące, więc jest mnóstwo miejsca na nowe problemy.

Bardziej interesująca jest ankieta, którą uTest zamówił od swoich testerów po konkursie. Tu również były pieniądze - 400 USD trafi do każdego, kto prześle raport z najlepszą opinią.

Google zdominował te ankiety, jako najlepszy wybór pod względem dokładności, trafności w czasie rzeczywistym i szybkości ładowania strony. We wszystkich kategoriach Bing zajęła drugie miejsce, a Yahoo trzecie. Niewielki odsetek testerów wypróbował także Google Caffeine i generalnie był pod wrażeniem. Jeden z testerów powiedział, że wyniki wróciły dwa razy szybciej niż istniejący silnik Google.

Jeśli wyniki ankiety są w ogóle reprezentatywne dla wszystkich użytkowników, jest to cios dla Microsoftu, który próbował wprowadzić na rynek Bing jako lepszy wynik wyszukiwania. Firma Microsoft może jednak uznać, że przegrywa tę bitwę, zamiast korzystać z nowych, krzykliwych funkcji, takich jak wyszukiwanie wizualne.