Komentarz do raportu Henryk Banaszak Zakład Statystyki, Demografii i Socjologii Matematycznej przetargów na badania sondażowe z roku 2014.

Prezentacja na temat: "Komentarz do raportu Henryk Banaszak Zakład Statystyki, Demografii i Socjologii Matematycznej przetargów na badania sondażowe z roku 2014."— Zapis prezentacji:

1 Komentarz do raportu Henryk Banaszak Zakład Statystyki, Demografii i Socjologii Matematycznej przetargów na badania sondażowe z roku 2014

2 Źródłem patologii przergowej są błędne przeświadczenia zamawiających sondaż Agencja badawcza potrafi odpowiedzieć na pytania zamawiającego Agencja badawcza potrafi dopasować „metodologię” do potrzeb zamawiającego Zamawiający, który nie potrafi określić „metodologii” dopasowanej do własnych potrzeb potrafi ocenić „metodologie” oferowane przez potencjalnych wykonawców Cena jest racjonalnym kryterium wyboru wykonawcy sondażu Istnieją tanie sondaże dobrej jakości, szybko i dobrze wykonane W sondażu z wykorzystaniem ogólnopolskiej imiennej próby adresowej można osiągnąć response rate powyżej 50% płacąc za 1 wywiad nie więcej niż 100 PLN Dobry sondaż można zaprojektować, zamówić, skontrolować i opracować bez udziału specjalisty od badań sondażowych oraz statystyka Tym, za co płaci się w badaniu sondażowym jest liczba zapisów wywiadów dostarczonych zamawiającemu przez agencję badawczą

3 Sondaż jest przedsięwzięciem kosztownym Koszt zł Koszt % 1. Prace poprzedzające projekt (dane i badania zrealizowane wcześniej) 1500 1-2 2. Przygotowanie projektu: dokładność oszacowań, podział budżetu, harmonogram 7500 5-10 3. Przygotowanie kwestionariusza (testy, pilotaże)6000 5-7 4. Dobór próby, koszt operatu, optymalizacja dojazdów4000 3-5 5. Przygotowanie i przeprowadzenie przetargu1500 1-2 6. Realizacja badania w terenie 7. Nadzór nad realizacją (kontrola zewnętrzna ankieterów)9000 8-10 8. Analiza danych3500 2-5 9. Dokumentacja badania1500 1-2 10. Raport z badania3500 2-5 razem40000 40% Podział budżet typowego badania ogółnopolskiego średniej welkości 100 między wszystkie jego etapy oprócz realizacji w terenie

4 Projektowanie sondażu – harmonogram Etap Czas (tygodnie) 1. Prace poprzedzające projekt 1-2 2. Przygotowanie projektu 2-3 3. Przygotowanie (testy) kwestionariusza 3-4 4. Dobór próby 1 5. Przygotowanie i przeprowadzenie przetargu 2 (przygotowanie) 4 (przeprowadzenie) 6. Realizacja badania w terenie 4-5 7. Nadzór nad realizacją 1 8. Analiza danych 1 9. Dokumentacja badania 1 10. Raport z badania 2 Razem 20-26 Harmonogram typowego badania ogółnopolskiego średniej welkości o budżecie 100 tys. zł

5 Poprawne wymagania wobec próby Poprawny projekt Poprawbe wymagania wobec realizacji Komentarz Obraz uzyskany z monitoringu jest zbyt optymistyczny, gdyż zastosowane w nim kryteria oceny przetargów były bardzo – wobec zamawiających - pobłażliwe. Rzeczywistość jest znacznie gorsza, niż to raport pokazuje. Komentarz Obraz uzyskany z monitoringu jest zbyt optymistyczny, gdyż zastosowane w nim kryteria oceny przetargów były bardzo – wobec zamawiających - pobłażliwe. Rzeczywistość jest znacznie gorsza, niż to raport pokazuje.

6 Co trzeba zmienić w prawie i w praktyce zamawiania sondażu Oddzielić projektowanie badań sondażowych od zadań administracji publicznej Powierzyć projektowanie badań sondażowych zespołom kompetentnych specjalistów wśród których co najmniej jeden będzie kompetentny statystycznie Przyjąć, że zamawiający sondaż odpowiada za całą „metodologię” badania, to znaczy: - Sformułowanie celu sondażu, - Kwestionariusz (dobór wskaźników) - Dobór próby (warstwowanie, alokacja, wiązkowanie) - Wymagania jakościowe realizacji Przyjąć, że zamawiający sondaż odpowiada za całą „metodologię” badania, to znaczy: - Sformułowanie celu sondażu, - Kwestionariusz (dobór wskaźników) - Dobór próby (warstwowanie, alokacja, wiązkowanie) - Wymagania jakościowe realizacji Przy wyborze wykonawcy jako podstawowe kryterium stosować relację między jakością i kosztem Zaprojektować i uruchomić system dokształcania „sondażowego” pracowników administracji publicznej aby nie wydawali środków publicznych na badania bezwartościowe, niepotrzebne lub niemożliwe do poprawnej realizacji Przyjąć zasadę, że jakość wykonania sondażu podlega zewnętrznej kontroli a jej wyniki decydują o wysokości wynagrodzenia wykonawcy

7 Dziękuję za uwagę