Shopify SimGym

SimGym scheint gegen einen veralteten Snapshot statt den aktuellen Live-Zustand der Seite zu testen, was dazu führte, dass ein Großteil der Befunde im zweiten Durchlauf bereits gefixte Probleme aus dem ersten Durchlauf waren — reiner Doppelaufwand bei der Verifikation. Die Meldungen beschreiben durchweg nur Symptome und keine Ursache, sodass jeder Befund erst manuell nachrecherchiert werden muss, was in der Praxis oft länger dauert als der eigentliche Fix. Am schwerwiegendsten ist, dass SimGym nicht zwischen echten Bugs und Test-Infrastruktur-Artefakten unterscheidet: mehrere gemeldete "Fehler" entpuppten sich als Session- beziehungsweise Cookie-Kontamination zwischen einzelnen Testläufen und nicht als tatsächliche Probleme der Website, was ohne eigene Nachprüfung leicht zu blindem Fixen nicht existierender Fehler geführt hätte.

What a waste of time and money. No actionable feedback, whoever came up with this concept and built it should be ashamed.

的確なアドバイス（改善点）を出してくれたと思うところもある反面、不具合のような形で書き出された部分を確認したところ動作になんの問題もなかったという点が複数あった。 具体的には、「フッターのリンクを複数ユーザーがクリックしてもページが切り替わらない為、改善をしてください」という旨のレポートが出ていたが、実際に動作確認をしたところ正しいリンク先へ問題なく遷移している。ということがあった。

Very useful for identifying credible solutions to website flow, product analysis. Overall, very pleased with the problem-solving solutions provided. All suggestions have been valid so far.

Provides some useful actionable information, but the support documentation is non-existent (the app points you to shopify for support, which points you back to the app...). I can't figure out how credits are distributed (monthly?) or if you can buy more ad-hoc. There's no information on what the difference is when specifying different target areas for a simulation (i.e. if I select to focus on cart and home page, does that mean I'm getting less quantitative or qualitative data?), there's no way to export simulation results, and there's no way to customize simulation shoppers (I had several searching for products I don't carry, and the recommendations were entirely unhelpful for providing alternative products. This was basically a waste of a credit since I can't provide information regarding my average shopper and ideal shopper). It's a cool concept, but kinda poorly executed.