Wątek: Betatesty i zbyt mały feedback

Strona: 1 z 2

1 z 36: pajper

Drodzy Eltenowicze.
Nie ukrywam, że przysłowiowy sen z powiek spędza mi kwestia betatestów Eltena. Elten 2.4 powoli się zbliża, ale feedback testerski jest, moim zdaniem, zbyt mały, by mieć pewność o stabilności nadchodzącej wersji.
Z drugiej strony za wszelką cenę chcę uniknąć sytuacji z czasów betatestów Eltena 2.3, gdy prawie wszyscy korzystali z wersji beta, co spowodowało znaczne problemy przy występowaniu błędów.

Ostatnią wersję beta zainstalowało 31 osób, a z nich zaledwie 17 kiedykolwiek wypowiedziało się w wątkach testerskich (polskich, angielskich bądź rosyjskich). Podobna frekwencja dotyczy kilku wcześniejszych wersji, choć widać spory spadek zainteresowania, dla przykładu betę 10 lub nowszą zainstalowało 122 użytkowników, betę 25 lub nowszą 72 użytkowników, zaś betę 35 lub nowszą 35 użytkowników.
Wciąż 28 użytkowników (dane z ostatniego tygodnia) korzysta z wersji beta 35 (wydanie 17 kwietnia) lub starszej. Dla porównania obecny numer wersji beta to 40.

Zdaję sobie sprawę z faktu, że główną przyczyną takiego stanu rzeczy jest dość czasochłonny proces aktualizacji. Boję się jednak, że automatyzacja aktualizacji wersji beta oznaczałaby powtórkę sytuacji z Eltena 2.3, a miewaliśmy i w gałęzi beta wersje, które nie dawały się na przykład uruchomić.
I w tej chwili, nie ukrywam, jestem w kropce. Uważam, że zarówno zgłoszeń błędów, jak zdań na temat wprowadzanych nowości jest zbyt mało, a nie wiem, jak skłonić większą ilość osób do testowania nowości.
Uznałem więc, że zapytam was: jak to widzicie?
#StandWithUkraine Shoot for the Moon. Even if you miss, you'll land among the stars.
21.05.2020 20:07

2 z 36: balteam

Na pewno nie powinno być tak jak było wcześniej, czyli aktualizacje automatyczne. Znowu ktoś wpadnie w rozpacz i zacznie narzekać, że jak to w becie mi dane całe poszły.
Nie mam pomysłu czym można ludzi zachęcić poza tym, że od razu nowe funkcje mają dostępne. Odznaczenia jakieś dla beta testerów chyba są, no i nawet jak nie ma, to raczej nikt tylko dla nich nie zacznie instalować i sprawdzać.
Zapraszam osoby posiadające piesy, lub chcące je posiadać, do dołączenia do grupy o psach przewodnikach.
21.05.2020 20:10

3 z 36: lukasz1993258

Dawidzie. co do zdawania raportów, błędów i td, to ja się staram wmiare możliwości zgłaszać wynalezione przezemnie błędy, chociaż ostatnio to raczej nanie żadziej się natkne.

21.05.2020 20:10

4 z 36: Paulinux

Ja też am tak, że jak wszystko działa dobrze, too nie śmiecę, a nie proszę nie liczyć, bo napisałam prywatnie.
ENTJ
21.05.2020 20:12

5 z 36: pajper

@paulinux @lukasz Te podane przeze mnie 14 osób nie wypowiedziało się nigdy.
Znaczy chodzi o to, że zainstalowali betę i nigdy nie przyszedł od nich na forum żaden, ani jeden wpis. Siłą rzeczy od was tych wpisów jest sporo.
Nie podawałem tego w przedziale czasu czy do konkretnej wersji, a w całym trwaniu programu testów Eltena 2.4.
#StandWithUkraine Shoot for the Moon. Even if you miss, you'll land among the stars.
21.05.2020 20:14

6 z 36: lukasz1993258

Ja tak samo nie mam pomysłu, jak przekonać kolejnych użytkowników, a znam przynajmiej pare użytkowników, kturzy używają starszych wersji, wtym jedną, która chyba używa do dnia dziszejszej stabilki.
a gdy ją prubowałem skłonić do tego, aby przeszła na bete, i tutaj sugerowałem się chociaż by szybkimi akcjami, no to niestety szła wzaparte.
nie wiem, skąt się coś takiego bierze, bo potem, jak przyjdzie co do czego, to jest narzekanie, że to, lub tanto nie działa.

21.05.2020 20:14

7 z 36: denis333

Ale ty chłopie masz problemy. A ja tłukę od początku, o zamkniętej, ukrytej grupie betatestów, z którymi był byś w stałym kontakcie, i to od ich feetbacków, zależało by uczestnictwo w betatestach.
taka grupa testerska była by znakomitym remedium na wymienione przez ciebie problemy. osobiście biję się w pierś i przyznaję, że ostatnio nie korzystam z wersji beta, gdyż zwyczajnie nie mam czasu na użeranie się z ewentualnymi błędami kolejnego programu. A na dogłębne testy ostatnio raczej nie mmożna u mnie liczyć.
Dawid. Zrób nabór, przedstaw wytyczne, i potem już ustalajcie wewnętrznie w zamkniętej grupie co następuje. Tak będzie najlepiej.

21.05.2020 20:25

8 z 36: tomecki

Tu chyba nawet nie chodzi o przekonywanie nowych do bety tylko o to aby ci, co betę mają, rzeczywiście to testowali. Podejrzewam, że próżny trud. Niektórzy chcą mieć betę aby mieć jak najwcześniej funkcje różne i w sumie ok. Stety lub niestety Elten ma dość mało użytkowników i chyba nie ma co liczyć na dużą ilość zetelnych testerów.

21.05.2020 20:27

9 z 36: balteam

I co to zmieni Denis? Teraz masz wszystkich ludzi włącznie z tymi, którzy czasami coś napiszą, a jak zrobi się grupę zamkniętą z wytycznymi to będzie mniej aktywnych ludzi niż jest teraz, czyli będzie mniej zgłoszeń.
Zapraszam osoby posiadające piesy, lub chcące je posiadać, do dołączenia do grupy o psach przewodnikach.
21.05.2020 20:27

10 z 36: denis333

Tomecki. Ale oddana, zamknięta grupa żetelnych testerów będzie znacznie lepsza od tych kilkudziesięciu osób, które w sumie zainstalują betę co by sobie na nowe popatrzeć, bez zbędnej ingerencji w to, co się dzieje. A beta chyba nie jest do korzystania, tylko do testowania.

21.05.2020 20:28

11 z 36: denis333

Balteam. Zasada prosta. Nie zgłaszasz feetbacków, to wypad. Niestety tak się prowadzi żetelne testy. W gronie zaufanych ludzi. A nie że przyjdzie sobie gość jeden z drugim bez jakiegokolwiek zaangażowania, bo on chce sobie sprawdzić nowe funkcje. A właśnie przez takich gagatków chociażby proces aktualizacyjny do kolejnej bety jest nieco utrudniony. A gdyby była zamknięta grupa stale zaangażowanych w projekt, problemu by nie było. Inaczej: Z betatestami powinno być jak z moderacją. Skoro jst się w tej zamkniętej grupie, to wiadomo, że musi być jakiś angaż.

21.05.2020 20:31

12 z 36: balteam

Pytanie nierozstrzygnięte pozostaje czy jak zrobisz betęzamkniętą nawet z aktualizacją automatyczną, to czy będziesz mieć więcej zgłoszeń, bo osobiście nie sądzę, po prostu będzie łatwiej betę pobrać i tyle.
Tak zawsze kilka osób, raz na jakiś czas poza tymi standardowymi, jakiś błąd wychwyci i zgłosi.

Zapraszam osoby posiadające piesy, lub chcące je posiadać, do dołączenia do grupy o psach przewodnikach.
21.05.2020 20:43

13 z 36: denis333

Ale zawsze taką zamkniętą grupą można łatwiej zarządzać. Powtarzam, że lepiej mieć pięciu wybranych zaangażowanych testerów, których można w miarę możliwości organizować, niż te kilkadziesiąt osób, z których większość pobiera betę od tak. Z ciekawości.

21.05.2020 20:57

14 z 36: balteam

Możliwe, tylko co ty chcesz tu organizować? Tylko automatyczne aktualizacje, a tak czy mamy 20 osób i aktywnych 10 czy tylko 10, ale wszystkich aktywnych, szczerze, w tym przypadku nie widzę różnicy, zwłaszcza, że z tych 10 nieaktywnych, coś tam ktoś napisze. Inaczej mówiąc, lepiej mieć 10 aktywnych i 20 nieaktywnych, niż tylko aktywnych, bo ich wydajność nie wzrośnie, chyba, żę serio automatyczna coś zmieni, ale u mnie tylko tyle zmieni, że pobiorę ją szybciej, a nie będę więcej grzebać w programie niż do tej pory.
Zapraszam osoby posiadające piesy, lub chcące je posiadać, do dołączenia do grupy o psach przewodnikach.
21.05.2020 21:00

15 z 36: DJGraco

Ja bez czytania całego wątku powiem, że jak coś zauważam to zgłaszam. Chyba w każdym wątku dot jakiejś bety wypowiedziałem się co najmniej raz.

21.05.2020 21:04

16 z 36: daszekmdn

Mało? WG mnie to jest dużo, i nawet więcej niż kiedyś w wątku Elten2 betatesty,gdzie było 500 postów przez rok. Tutaj mamy ile od wakacji? 1216, więc jest zdecydowanie więcej wpisów niż w poprzednich gałęziach beta. Pamiętajmy też, że tam nie można było postów edytować w tamtym czasie ;)

22.05.2020 11:35

17 z 36: pajper

@daszekmdn Mamy kilku naprawdę aktywnych testerów, za co jestem wdzięczny. A dyskusje prowadzone są merytorycznie i sensownie. To są duże zalety tej grupy.
Ale Feedback jest zbyt mały, by mieć pewność, że 24 sierpnia coś się nie posypie doszczętnie.

Ktoś zauważył, że Elten u każdego działa inaczej, względy RGSS, polityki projektu i dość specyficznego podejścia do pewnych spraw, chociażby obecnie dodatku do NVDA.
I bez odpowiedniej ilości testerów, nigdy nie uda się potwierdzić, że to rzeczywiście działa.
#StandWithUkraine Shoot for the Moon. Even if you miss, you'll land among the stars.
22.05.2020 11:37

18 z 36: daszekmdn

Ale ludzi nie da się tak o po prostu zachęcić. Znam wiele osób, które siedzą na stabilce, bo nie chcą mieć doczynienia z powstającymi błędami, gdyż korzystająz programu raczej nie mając czasu na feetback.
Ja sam długo opierałem się przystąpieniu do bet tym razem, bo mało czasu miałem, no ale jestem.
Nie da się ludzi zmusić, bo nic to nie da, a zachęcić nie ma jak.
Chociaż? Odznaczenie betatester w radzie starszych mogłoby kilku przyciągnąć he he. Ale nadawane ręcznie za zaangarzowanie.

22.05.2020 11:40

19 z 36: pajper

To jest podwójny problem. Bo zbyt wielu testerów też nie chcemy. W betach różne rzeczy się sypały, sypią i sypać będą. I ostatnie czego nam trzeba, to jeszcze niezadowoleni z tego powodu userzy.
Rozważałem jeszcze jedną opcję, ale... dość niebezpieczną.

Zrobić jak w NVDA, Windowsie, Debianie i wielu innych projektach: gałąź szybką i wolną. To nawet nie byłoby trudne.
Wszystkie nowe wersje wrzucać do gałęzi szybkiej. Kiedy pozostaną tam określoną liczbę dni i nikt nie zgłosi problemu średniego lub poważnego, jakoś to zautomatyzować, wersja automatycznie trafia na gałąź wolną.
Ryzyko? Są dwa.
Po pierwsze z kolei nadmiar testerów, a po drugie...
Jeśli obecni testerzy przejdą na gałąź wolną, straci to rację bytu, bo nikt nie będzie testował tej szybkiej, a w rezultacie niczym nie będzie się to różniło, jak gdyby wszyscy dostawali bety świeżynki.
#StandWithUkraine Shoot for the Moon. Even if you miss, you'll land among the stars.
22.05.2020 11:44

20 z 36: balteam

No to równie dobrze możesz częściej dawać stabilki i chyba na to samo wyjdzie?
Czy wtedy masz dwie gałęzie i jeszcze stabilkę? Jak tak to za małonas.
Zapraszam osoby posiadające piesy, lub chcące je posiadać, do dołączenia do grupy o psach przewodnikach.
22.05.2020 12:56