Büyük fizikçi Richard Feynman, p-hacking sorununu gösteren bir hikaye anlattı. Bu, herkesin anlaması gereken temel bir ilkedir. Her zaman aklımda kalmış. Aşağıya yapıştırdım. ⬇️ Şimdi başka bir ilke veya fikre dönüyorum; bir şeyin gerçekleştiğinden sonra gerçekleşme olasılığını veya olasılığını hesaplamanın anlamı yok. Birçok bilim insanı bunu bile takdir etmiyor. Aslında, bu konuda ilk tartışmam Princeton'da yüksek lisans öğrencisiyken oldu ve psikoloji bölümünde bir adam fare yarışı yapıyordu. Yani, onun T şeklinde bir şeyi var, fareler sağa, sola ve benzeri şeylere gidiyor. Psikologların genel bir ilkesi, bu testlerde olanların tesadüfen gerçekleşme olasılığının düşük olmasını sağlamak, hatta yirmide birin altından daha az olmasını sağlamak. Bu da yasalarının yirmide birinin muhtemelen yanlış olduğu anlamına gelir. Ama olasılıkları hesaplamanın istatistiksel yolları, örneğin fareler rastgele sağa sola giderse yazı tura atmak gibi, kolayca hesaplanabilir. Bu adam, fareler hep sağa gidiyorsa, hatırlamıyorum bir şeyi gösterecek bir deney tasarlamıştı. Tam olarak hatırlamıyorum. Çok sayıda test yapmak zorundaydı, çünkü tabii ki yanlışlıkla sağa gidebilirlerdi, bu yüzden oranı yirmide bire indirmek için birkaçını yapmak zorundaydı. Ve bunu yapmak zor, o da işini yaptı. Sonra bunun işe yaramadığını fark etti. Sağa, sola gittiler ve böyle devam etti. Ve sonra, en dikkat çekici şekilde, önce sağa, sonra sola, sonra sağa, sonra sola dönüşümlü olarak gittiklerini fark etti. Sonra bana koştu ve dedi ki, "Dönüşümlü olma olasılığını hesapla, böylece yirmide birden az olup olmadığını göreyim." Ben dedim, "Muhtemelen yirmide birden azdır ama sayılmaz." "Neden?" dedi. Ben de, "Çünkü olaydan sonra hesaplama yapmak mantıklı değil. Görüyorsun, tuhaflığı buldun ve bu yüzden tuhaf vakayı seçtin." Örneğin, bu akşam en dikkat çekici deneyimi yaşadım. Buraya girerken ANZ 912 plakasını gördüm. Lütfen bana hesaplayın, Washington eyaletindeki tüm plakalar arasında ANZ 912'yi görme ihtimalimi hesaplayın. Eh, bu saçma bir şey. Ve aynı şekilde, yapması gereken şey şu: Fare yönlerinin değişmesi, farelerin dönüşümlü olma ihtimalini gösteriyor. Bu hipotezi test etmek istiyorsa, yirmide bir, ipucunu veren aynı verilerden yapamaz. Tekrar deney yapmalı, sonra dönüşümlü yapıp yapmadıklarını görmeli. Yaptı ve işe yaramadı.

Plaka örneği 💋🤌