Menulis Autotests Secara Efektif - Tes subkutan

Inti dari masalah

• Tes UI lambat. Tidak ada jalan keluar dari ini. Mereka dapat dijalankan secara paralel, diajukan dan dilakukan sedikit lebih cepat, tetapi mereka akan tetap lambat.
• Tes UI tidak stabil. Sebagian karena mereka lambat. Dan juga karena browser Web dan antarmuka pengguna tidak diciptakan untuk dikendalikan oleh komputer (tren ini sedang berubah, tetapi bukan fakta bahwa ini bagus).
• UI- — . . ( , , , «» - , ).
• , , , UI- . . ID XPath . , «» - - . , , — - , .
• Seseorang akan mengatakan bahwa beberapa fungsi tidak dapat diuji jika tidak. Saya akan mengatakan bahwa jika ada fungsionalitas yang dapat diuji hanya dengan tes UI (dengan pengecualian dari logika UI itu sendiri), ini bisa menjadi pertanda baik masalah arsitektur dalam produk.

Solusi alternatif

public class LoginFormTest {

    SelenideMainPage sut = SelenideMainPage.INSTANCE;
    private static final String APPLICATION_URL = "http://localhost:4567/index";

    @BeforeClass
    public static void setUpClass() {
        final String[] args = {};
        Main.main(args);
        Configuration.browser = "firefox";
    }

    @Before
    public void setUp() {
        open(APPLICATION_URL);
    }

    @After
    public void tearDown() {
        close();
    }

    @Test
    public void shouldBeAbleToAddNewUser() {
        sut.setUserName("MyCoolNewUser");
        sut.clickSubmit();
        Assert.assertEquals("Status: user MyCoolNewUser was created", sut.getStatus());
        Assert.assertTrue(sut.getUsers().contains("Name: MyCoolNewUser"));
    }

    @Test
    public void shouldNotBeAbleToAddEmptyUseName() {
        final int numberOfUsersBeforeTheTest = sut.getUsers().size();
        sut.clickSubmit();
        Assert.assertEquals("Status: Login cannot be empty", sut.getStatus());
        Assert.assertEquals(numberOfUsersBeforeTheTest, sut.getUsers().size());
    }
}

public class UserApplication {

    private static IUserRepository repository = new InMemoryUserRepository();
    private static UserService service = new UserService(); {
        service.setUserRepository(repository);
    }

    public Map<String, Object> getUsersList() {
        return getUsersList("N/A");
    }

    public Map<String, Object> addUser(final String username) {
        final String status = service.addUser(username);
        final Map<String, Object> model = getUsersList(status);
        return model;
    }

    private Map<String, Object> getUsersList(String status) {
        final Map<String, Object> model = new HashMap<>();
        model.put("status", status);
        model.put("users", service.getUserInfoList());
        return model;
    }
}

public class UserApplicationTest {

    private UserApplication sut;

    @Before
    public void setUp() {
       sut = new UserApplication();
    }

    @Test
    public void shouldBeAbleToAddNewUser() {
        final Map<String, Object> myCoolNewUser = sut.addUser("MyCoolNewUser");
        Assert.assertEquals("user MyCoolNewUser was created", myCoolNewUser.get("status"));
        Assert.assertTrue(((List) myCoolNewUser.get("users")).contains("Name: MyCoolNewUser"));
    }

    @Test
    public void shouldNotBeAbleToAddEmptyUseName() {
        final Map<String, Object> usersBeforeTest = sut.getUsersList();
        final int numberOfUsersBeforeTheTest = ((List) usersBeforeTest.get("users")).size();
        final Map<String, Object> myCoolNewUser = sut.addUser("");
        Assert.assertEquals("Login cannot be empty", myCoolNewUser.get("status"));
        Assert.assertEquals(numberOfUsersBeforeTheTest, ((List) myCoolNewUser.get("users")).size());
    }
}

git checkout subctests

Kami kehilangan sedikit cakupan, tetapi kecepatan tes meningkat 600 kali !!!

• Tambahkan satu tes UI untuk memeriksa kode lem, atau
• Jika kami tidak mengharapkan perubahan yang sering pada kode lem - biarkan tanpa autotest, atau
• Jika kita memiliki semacam pengujian "manual", ada kemungkinan besar bahwa masalah dengan kode lem akan diperhatikan oleh tester, atau
• Datang dengan sesuatu yang lain (penyebaran Canary yang sama)

Akhirnya

• Autotests fungsional tidak perlu ditulis pada tingkat UI atau REST / SOAP API. Penggunaan "tes subkutan" dalam banyak situasi akan menguji fungsi yang sama dengan kecepatan dan stabilitas yang lebih besar.
• Salah satu kelemahan dari pendekatan ini adalah hilangnya cakupan tertentu.
• Salah satu cara untuk menghindari kehilangan cakupan adalah " Model Tes Fitur "
• Tetapi bahkan dengan hilangnya cakupan, peningkatan kecepatan dan stabilitas adalah signifikan.