TR201917988A2 - Test senaryolarini gerçekleşti̇ren bi̇r test si̇stemi̇ - Google Patents

Abstract

Buluş, tercihen bir cihazın fonksiyonel ve performans açısından test edilebilmesi için kullanılan, önceden ve/veya anlık olarak belirlenebilen test senaryolarını bir robotik kol yardımı ile cihaza uygulayan, cihazın tepkilerini doğrulayan ve test sonuçlarını raporlayan adaptif bir test sistemi (1) ile ilgilidir.

Description

TARIFNAME TEST SENARYOLARI NI GERÇEKLESTIREN BIR TEST SISTEMI Teknik Alan Bulus, tercihen bir cihazin fonksiyonel ve performans açisindan test edilebilmesi için kullanilan, önceden ve/veya anlik olarak belirlenebilen test senaryolarini bir robotik kol yardimi ile cihaza uygulayan, cihazin tepkilerini dogrulayan ve test sonuçlarini raporlayan adaptif bir test sistemi ile ilgilidir. Önceki Teknik Üretim sonrasi piyasada kullanilacak cihazlarin velveya sistemlerin belirli testlerden geçirilerek fonksiyonel gerekliliklerini yerine getirip getirmediginin kontrol edilmesi, hatta performans açisindan hangi seviyede oldugunun belirlenmesi gerekmektedir. Bu islemler için çogunlukla test senaryolarini olusturarak belirledigi test senaryosunu uygulayan ve yorumlar yapan test uzmanlari bulunmaktadir. Test uzmanlari senaryolari manuel olarak gerçeklestirmekte ve sonuçlari degerlendirmektedir. Fakat test uzmanlarinin gerçeklestirdigi testler çogunlukla zaman almakta ve tekrar eden islemlerden olusmasindan kaynakli olarak uzmanlarin hata yapma olasiligini yükseltmektedir. Önceki teknikte test uzmanlari haricinde mekanik yapida olan test robotlari da kullanilmaktadir. Söz konusu test robotlari kapi mentesesi gibi mekanik üretimin stres ve ömür testini kosmaktadir. Ilgili testlerde kullanilan robotlar akilli özellikler barindirmayan sadece mekanik bir alt yapiya sahip robotlardir.

Günümüzde kullanilan bir diger test yöntemi ise belirli Cihaz ve/Veya sistemlere özel olarak tasarlanan otomasyon sistemleridir. Söz konusu otomasyon sistemleri çogunlukla cep telefonu, tablet gibi dokunmatik özellikte olan ürünler için test islemlerini gerçeklestirmektedir. Fakat söz konusu otomasyon sistemleri de belirli ürünler için kullanilmakta, farkli ürün ya da sistemler için kullanilmamaktadir. Önceki teknikte yer almakta olan EP1710549 sayili Avrupa patent dokümaninda motorlarin test edilmesi için kullanilan bir yöntemden bahsedilmektedir. Söz konusu bulusta motorun frenlerinin önceden tanimlanan bir torkla test edilmesi saglanmakta ve ardindan motorun konumu baslangiç konumu ile karsilastirilmaktadir. Test belirli zaman araliklarinda kosulmakta ve sonuçlar karsilastirma yapilmasi amaci ile saklanmaktadir.

Sonuç olarak günümüzde her tipteki cihaz ve/veya sistem için önceden belirlenen test senaryolarinin otomatik olarak kosuldugu, test senaryolari üzerinde degisikliklerin yapildigi ya da yeniden test senaryolarinin olusturuldugu ve test edilecek cihaz ve/veya sistemin konumu degisse bile ayni testi kosmaya devam eden çözümlere ihtiyaç duyulmaktadir.

Bulusun Kisa Açiklamasi Bu bulusun amaci, bir cihazin üretim sonrasinda fonksiyonel olarak ve performans açisindan yeterli olup olmadigina karar verebilmek adina robotik kol, görüntü isleme ve ses isleme kullanarak test senaryolarini cihaz üzerinde uygulayan, sonuçlar elde eden ve sonuçlari kontrol ederek raporlayan bir test sistemi gerçeklestirmektir.

Bulusun baska amaci, önceden belirlenen test senaryolarini ve/veya kullanici tarafindan bir ara yüz üzerinden olusturulan anlik test senaryolarini ve/veya mevcutta var olan ancak anlik olarak üzerinde degisiklik yaptigi test senaryolarini uygulayan bir kOntrol sistemi gerçeklestirmektir.

Bulusun diger amaci, test edilecek cihazin konumun degisimine bagli olarak yeni konumu cihazin üzerinde yer alan bir referansi kullanarak yeniden algilayan ve test senaryosunu yeni konuma bagli olarak güneelleyerek kosan bir kontrol sistemi gerçeklestirmektir.

Bulusun diger amaci, tek bir Cihaz tipine bagli kalmayarak, test edilecek farkli Cihazlarin özelliklerinin (fiziksel yapisi, isleyis biçimi Vb.) kisa sürede tanimlanmasina ve test senaryolarinin bu tanimlari kullanarak olusturulmasina imkan veren bir test sistemi gerçeklestirmektir.

Bulusun Ayrintili Açiklamasi Bu bulusun amacina ulasmak için gerçeklestirilen “Test Senaryolarini Gerçeklestiren Bir Test Sistemi” ekli sekilde gösterilmis olup; bu sekilden: Sekil 1. Bulus konusu test senaryolarini gerçeklestiren bir test sisteminin sematik görünüsüdür.

Sekilde yer alan parçalar tek tek numaralandirilmis olup bu numaralarin karsiliklari asagida verilmistir: 1. Testsistemi 2. Test elemani 3. Tepki izleme elemani 4. Isleme elEmani . Arayüz 6. Islemci -bir cihaz ve/veya bir sistem üzerinde test islemlerini gerçeklestiren en az bir test elemani (2), -gerçeklestirilen testleri ve test edilen cihaz ve/veya sistemin tepkilerini görsel ve/veya ses içerikli olarak yakalayan en az bir tepki izleme elemani (3}, -tepki izleme elemani (3) ile alinan görsel ve/Veya ses içeriginin islendigi en az bir isleme elemani (4), -kosulacak test senaryolarinin hazirlanacagi ve test senaryolarinin uygulanacagi, test edilecek cihaz ve/veya sistemlerin belirlendigi ve/veya test edilecek cihaz ve/veya sistemler için test edilecek unsurlarin ve test edilecek unsurlara ait konumlarin tanimlandigi en az bir ara yüz (5) ve -kullaniciya ara yüzü (5) sunmak üzere yapilandirilan, seçilen test cihazina ve/veya sisteme ait test edilecek unsurlarin normal tepkilerini içermek ve/veya dis sistemler üzerinde temin etmek üzere yapilandirilan, test senaryolari dogrultusunda test elemanini (2) hareket ettirmek, test elemaninin (2] hareketleri dogrultusunda cihaz ve/veya sistem tepkilerine ait sonuçlari isleme elemanindan (4) almak ve dogrulugunu kontrol etmek üzere yapilandirilan en az bir islemci (6] içermektedir.

Bulus konusu test sisteminde (1) test elemani (2) islemci (6) tarafindan kontrol edilen bir rObOtIk koldur. Test elemani (2) islemci (6) üzerinde bulunan test senaryolarina bagli olarak test edilecek cihaz ve/veya sistem üzerinde basma, dokunma, çevirme basta olmak üzere insan olan bir test uzmaninin yapacagi islemleri yapmaktadir.

Bulusun tercih edilen uygulamasinda tepki izleme elemani (3) test edilen cihazin ve/Veya sistemin kola (2) göre ilk konumunu bir referans isareti ile belirlemektedir. Bu sayede test edilecek cihazin test elemanina (2) göre bir konum degisikligi olmasi durumunda islemci (6) konum degisikligi olduguna karar vermektedir. Tepki izleme elemaninin (3) test edilecek cihaz ve/veya sisteinin yerinin degistigine karar verebilmesi için cihazin ve/Veya sisteinin tepki izleine elemaninin (3) çalisma alani içerisinde olmalidir.

Tercih edilen uygulamada tepki izleme elemani (3) bir kameradir. Tepki izleme elemani (3) test elemaninin (2) hareketi sonucu cihaz velveya sistemden gelen tepkileri görsel olarak yakalamakta ve islenerek anlamlandirilmasi için isleme elemanina (4) iletmektedir. Tepki izleme elemani (3) tercih edilen diger uygulamada ses verilerini toplayan bir mikrofondur. Tepki izleme elemani (3) test elemaninin (2) hareketi sonucu cihaz ve/veya sistemden gelen tepkileri isleme elemanina (4) ileterek ses islemesinin gerçeklestirilmesini saglamaktadir. Bulusta kamera olan tepki izleme elemani (3) ile mikrofon olan tepki izleme elemani (3) birlikte kullanilmaktadir.

Bulusun tercih edilen uygulamasinda isleme elemani (4) tepki izleme eleinani (3) ile toplanan, test senaryolarinin test elemani (2) ile uyguladigi test adimlari sonucunda cihaz ve/veya sistemin verdigi ses ve/veya görüntü içeren verileri isleyerek islemci (6) için anlamli hale getirmektedir. Bu sayede islemci (6), isleme elemaninin (4) hazirladigi anlamlandirilmis tepkileri, sahip oldugu ve/veya dis ortamdan elde ettigi cihaz ve/Veya sistemin vermesi gereken tepkilerle ile karsilastirarak cihaz ve/veya sistemin fonksiyonel ve performans açisindan degerlendirmesini yapabilmektedi r.

Bulus konusu test sisteminde (1) ara yüz (5) islemci (6) tarafindan sunulmaktadir.

Kullanici ara yüz (5) üzerinden test edilecek cihaz ve/veya sistem üzerinde uygulanmasini istedigi test adimlarini helirlemektedir. Ara yüz (5) üzerinde test adimlari belirlenmesi ile test edilmek istenen cihaz ve/veya üzerinde uygulanacak test senaryolari olusturulmaktadir, Kullanici ara yüz (5) üzerinde test girme, test olusturma, test üretme, var olan test adimlari seçme, var olan test senaryolari arasinda seçim yapma islemlerinden en az birini gerçeklestirmektedir. Bu sayede kullanici ara yüzü (5) kullanarak test edilmek istenen cihaz ve/veya sistem üzerinde kosulmasi istenen test senaryolarini helirlemektedir.

Bulusun tercih edilen uygulamasinda ara yüz (5) üzerinde test edilecek cihaz ve/veya sistem belirlenmektedir. Ara yüz (5) üzerinden ayrica test edilecek cihaz ve/veya sistem için test edilecek unsurlar, test edilecek unsulara ait konumlar ve test sonrasi unsurlarin vermesi gereken tepkilerden en az biri tanimlanabilmektedir. Bu sayede islemcinin (6) bilgisine sahip olmadigi ya da dis ortamlardan cihaz ve/veya sistem ile bilgiye ulasilamadigi durumda kullanici manuel olarak kosulacak test senaryosunu, test edilecek cihaz ve/veya sistemdeki test edilecek unsurlari ve konumlarini tanimlayabilmektedir.

Bulus konusu test sisteminde (l) islemci (6), tercihen ara yüz (5) üzerinden kullanici ile paylasilacak ve test edilecek cihaz ve/veya sistem üzerinde uygulanacak test adimlarini ve/veya test senaryolarini içermektedir. Bu sayede test elemaninin (2) hareketi ile cihaz ve/veya sistemde kosulmasi istenen test adimlarini içeren test senaryolari ara yüz (5) yardimi ile islemci (6) üzerinde belirlenmektedir. Bulusun tercih edilen uygulamasinda islemci (6) sahip oldugu test adimlarini ve/veya önceden olusturulmus test adimlarini içeren test senaryolarini ara yüz (5) üzerinden kullanici ile paylasmaktadir. Islemci (6) kullanicinin ara yüz (5) üzerinden yaptigi seçimleri saklamakta, gerektiginde dis ortamlar ile paylasmaktadir. islemci (6) üzerinde bulunan test senaryolari; tek/çift konumlu dügme (button), devirmeli anahtar (toggle switch), çevirmeli dügme (knob) olabilen unsurlarin kullanimi, analiz edilen içerigin her türlü geri beslemesinin degerlendirilebilmesi, test edilen Cihaz ve/veya sisteme ait bir ekranda çikan yazilarin ya da beklenen bir görselin olusmasinin algilanmasi, tus isik durumunun islenmesi ve ses analiz için saglanan fonksiyonlarin kullanilmasi için test betik dilindedir.

Bulusun tercih edilen uygulamasinda islemci (6), test edilecek cihaz ve/veya sistemlere, test edilecek unsurlara, unsurlarin cihaz ve/veya sistem üzerindeki konumlarina ve unsurlarin verecegi tepkilere ait bilgilere sahiptir. Bu sayede ara yüz (5) üzerinden test edilecek cihaz ve/Veya sistemin ve kosulacak test senaryosunun belirlenmesi Ile Islemci (6) robotik kol (2) olan test elemanini (2) hareket ettirmekte, tepki izleme eleinani (3) görüntü ve ses verilerini toplamakta, isleme elemani (4) ise verileri islemeye baslamaktadir. Islemci (6) ayrica test edilecek cihaz ve/Veya Sistemin unsurlarinin konumlarinin belirlenmesi için test elemanin (2) hareketini esas almaktadir. Test elemanin (2) elle tutularak yönlendirilmesi ve/veya bir kumanda kullanilarak hareket ettirilmesi ile test edilecek unsur, islemci (6) üzerinde tanimlanabilmektedir.

Bulusun tercih edilen diger uygulamasinda islemci (6) ara yüz (5) üzerinden girilen Cihaz ve/veya sistem bilgilerine bagli olarak dis ortamlar ile iletisim kurarak test edilecek unsurlara, konumlarina ve verecegi tepkilere iliskin verilere ulasmak ve test asamasinda kullanmak üzere yapilandirilmaktadir.

Bulusta islemci (6) belirlenen test senaryosuna bagli olarak test elemanini (2) hareket ettirrnekte ve isleme eleinanindan (5) aldigi anlamli tepki verilerini sahip Oldugu dogru tepki verileri ile ya da dis ortam üzerinden elde ettigi dogru tepki verileri ile karsilastirmaktadir. Bu sayede islemci (6) tarafindan test edilen cihaz ve/veya Sistemin verdigi tepkilerin dogrulugu kontrol edilebilmektedir. Bulusun tercih edilen uygulamasinda test edilecek her cihaz ve/veya sistemin sahip oldugu unsurlarin verecegi tepkiler islemci (6) üzerinde kayit altindadir. Bu sayede islemci (6) isleme elemanindan (4} aldigi tepki sonuçlarini sahip oldugu, olmasi gereken dogru tepki sonuçlari ile karsilastirarak cihaz ve/veya sistemin fonksiyonel ve performans açisindan degerlendirmesini yapmaktaj ayrica kullaniciya raporlamaktadir.

Bulus konusu test sisteminde (1) islemci (6) ara yüz (5) üzerinden konusma dilinde test içeriginin girilmesi ile girilen test içeriginin kosulacak test adimina dönüstürmek için yapilandirilmaktadir. Bu sayede islemci (6) kullanicinin konusma dilinde girdigi test içerigini test adimina ve/veya test senaryolarina dönüstürerek test elemani (2) ile uygulanabilmesini saglamaktadir.

Bulus konusu test sisteminde (l), islemci (6) sahip oldugu ya da ara yüz (5) üzerinden belirlenen test içerigini; test edilecek unsurlarin konum bilgileri dogrultusunda test elemanini (2) hareket ettirerek cihaz ve/veya sistem üzerinde uygulamaktadir. Islemci (6) test islemi esnasinda tepki izleme elemanini (3) kullanarak referans isareti ile belirledigi ilk konumunda bir degisiklik olup olmadigini kontrol etmektedir. Islemci (6) ilk konumda bir degisiklik oldugunu tespit ettigi durumda testin devam etmesi için test edilecek unsularin konumlarini güncellemektedir. Bu sayede islemci (6) test edilecek cihaz ve/Veya sistemin konumunda bir degisiklik olmasi durumunda bile test islemine devam edebilmektedir. islemcinin (6) konum degisikligini algilayabilmesi için test unsurunun tepki izleme elemaninin (3) görüntüleme açisinda olmasi gerekmektedir.

Bulus konusu test sistemi (1) robotik kol olan test elemaninin (2) test senaryosu içerigine bagli olarak hareket etinesi ve cihaz ve/veya sistem üzerinde test islemlerini gerçeklestirmesi sayesinde fonksiyonellik kontrolü ve performans ölçümü yapabilmektedir. Test elemani (2] test senaryosunda belirlenmis içerige bagli olarak hareket etmekte dügme, ekran olabilen test unsuruna basma, çevirme gibi insan olan bir test uzmaninin gerçeklestirilecegi bütün islemleri test unsurlarina uygulamaktadir. Test elemani (2) ile uygulanan test adimlari tepki izleme elemani (3) tarafindan görsel ve ses içerikli olarak yakalanmakta ve islemcide (6) analiz edilmek üzere isleme elemani (4) tarafindan anlamlandirilmaktadir. Bu sayede islemci (6) sahip oldugu dogru test tepkileri ile test asamasinda toplanan tepkileri karsilastirarak fonksiyonellik kontrolü ve performans ölçümü yapmakta ve istege bagli olarak kullanici için raporlamaktadir. Bunun yaninda test edilecek cihaz ve/veya sistemin üzerinde bulunan bir referans isareti (fiducial marker) ile test öncesinde konum bilgisi islemcide (6) tepki izleme elemani (3) kullanilarak kayit altina alinmaktadir. Bu sayede test edilecek cihaz ve/veya sistemin yerinde bir degisiklik olmasi durumunda islemci yeni konum bilgilerine bagli olarak test içeriginin konum bilgilerini güncellemektedir. Bulus konusu test sisteminde (l) ayrica ara yüz (5) üzerinden konusma dili olarak girilen test içerigi islemci ile test adimlarina dönüstürülmekte, test adimlari test senaryolarinda kullanilabilmektedir. Bu sayede herhangi bir kod yazmaya veya test adimi olusturmak için kullanilacak bir dile vakif olmayan bir kullanici normal, günlük konusma dili ile test adimlari olusturabilmektedir.

Bulus konusu test sistemi (1) kolay adapte edilebilir ve konfigürasyonu yapilabilir bir test otomasyon sistemidir. Bu sayede birbirinden farkli özelliklere sahip cihaz ve/Veya sistemler kolay ve hizli bir sekilde test edilebilmektedir. Bunun haricinde test sistemi (1) insan olan test uzmanlarinin yapmasi söz konusu hatalari yapmadan, neredeyse sonsuz kez ayni testi uygulayabilmektedir. Bu sayede üretim cihaz ve/veya sistemlerin üretim sürecindeki kalite seviyesi yükseltilmektedir. Bulus konusu sistemde (1) test asamasi haricinde sonuçlarin yorumlamasi asamasinda da insan faktörü ortadan kaldirilmaktadir. Bu sayede yorumlarda da insan hatasi olmamaktadir.

Bulus konusu test sistemi (1) mevcut test senaryolarini bir test mühendisi gibi görerek, duyarak, tus, ekran gibi test unsurlari ile etkilesime geçerek ve bunlarin dogrulamasini yaparak raporlamaktadir. Bu sayede bir cihazin ve/veya sistemin üretim sonrasi fonksiyonel ve performans yeterliligi degerlendirilmekte ve önceki teknikte test uzmanlari tarafindan gerçeklestirilen test islemlerinde olusan hata olasiligi ortadan kaldirilmaktadir.

Bu temel kavramlar etrafinda, bulus konusu test senaryolarini gerçeklestiren bir test sistemi (1) için çok çesitli uygulamalarin gelistirilmesi mümkün olup, bulus burada açiklanan örneklerle sinirlandirilamaz, esas olarak istemlerde belirtildigi

Claims (16)

ISTEMLER

1. Bir cihaz ve/veya bir sistem üzerinde test islemlerini gerçeklestiren en az bir test elemani (2), -gerçeklestirilen testleri ve test edilen cihaz ve/veya sistemin tepkilerini görsel ve/Veya ses içerikli olarak yakalayan en az bir tepki izleme elemani (3), -tepki izleme elemani (3) ile alinan görsel ve/veya ses içeriginin islendigi en az bir isleme elemani (4) içeren, -kosulacak test senaryolarinin hazirlanacagi ve test senaryolarinin uygulanacagi, test edilecek Cihaz ve/veya sistemlerin belirlendigi ve/veya test edilecek cihaz ve/veya sistemler için test edilecek unsurlarin ve test edilecek unsurlara ait konumlarin tanimlandigi en az bir ara yüz (5) ve -kullaniciya ara yüzü (5) sunmak üzere yapilandirilan, seçilen test cihazina velveya sisteme ait test edilecek unsurlarin normal tepkilerini içermek ve/veya dis sistemler üzerinde temin etmek üzere yapilandirilan, test senaryolari dogrultusunda test elemanini (2) hareket ettirmekI test elemaninin (2) hareketleri dogrultusunda cihaz ve/veya sistem tepkilerine ait sonuçlari isleme elemanindan (4) almak ve dogrulugunu kontrol etmek üzere yapilandirilan en az bir islemci (6] ile karakterize edilen bir test sistemi (1).

2. Islemci (6) üzerinde bulunan test senaryolarina bagli olarak test edilecek cihaz ve/veya sistem üzerinde basma, dokunma, çevirme basta olmak üzere insan olan bir test uzmaninin yapacagi islemleri yapan test elemani (2) ile karakterize edilen Istem lideki gibi bir test sistemi (1).

3. Test edilen cihazin ve/Veya sistemin kola (2) göre ilk konumunu bir referans isareti ile belirleyen tepki izleme elemani (3) ile karakterize edilen Istem 1 veya 2`deki gibi bir test sistemi (1).

4. Test edilecek cihazin test elemanina (2) göre bir konum degisikligi olmasi durumunda konum degisikligi olduguna karar veren islemci (6) ile karakterize edilen Istem 3tteki gibi bir test sistemi (1).

5. Test elemaninin (2) hareketi ile cihaz ve/veya sistemden gelen tepkileri görsel olarak yakalayan ve islenerek anlamlandirilmasi için isleme elemanina (4) ileten tepki izleme elemani (3) ile karakterize edilen yukaridaki istemlerden herhangi birindeki gibi bir test sistemi (1).

6. Test elemaninin (2) hareketi ile cihaz ve/Veya sistemden gelen tepkileri isleme elemanina (4) ileterek ses islemesinin gerçeklestirilmesini saglayan tepki Izleme elemani (3) ile karakterize edilen yukaridaki isteinlerden herhangi birindeki gibi bir test sistemi (1).

7. Tepki izleme elemani (3) ile toplanan, test senaryolarinin test elemani (2) ile uyguladigi test adimlari sonucunda cihaz ve/veya sistemin verdigi ses ve/veya görüntü içeren verileri isleyerek islemci (6) için anlamli hale getiren isleme elemani (4) ile karakterize edilen yukaridaki istemlerden herhangi birindeki gibi bir test sistemi (1).

8. Test girme, test olusturma, test üretme, var olan test adimlari seçme; var olan test senaryolari arasinda seçim yapma islemlerinden en az birini gerçeklestirildigi ara yüz (5) ile karakterize edilen yukaridaki istemlerden herhangi birindeki gibi bir test sistemi (1).

9. Test edilecek cihaz velveya sistem için test edilecek unsurlarin, test edilecek unsulara ait konumlarin ve test sonrasi unsurlarin vermesi gereken tepkilerden en az birinin tanimlandigi ara yüz (5) ile karakterize edilen yukaridaki istemlerden herhangi birindeki gibi bir test sistemi (1).

10. Ara yüz (5) üzerinden kullanici ile paylasilacak ve test edilecek cihaz ve/veya sistem üzerinde uygulanacak test adimlarini ve/veya test senaryolarini içeren Islemci (6) ile karakterize edilen yukaridaki istemlerden herhangi birindeki gibi bir test sistemi (1).

11. Test edilecek cihaz ve/veya sistemlere, test edilecek unsurlara, unsurlarin cihaz ve/veya sistem üzerindeki konumlarina ve unsurlarin verecegi tepkilere ait bilgilere sahip olan islemci (6) ile karakterize edilen yukaridaki istemlerden herhangi birindeki gibi bir test sistemi (1).

12. Test elemanin (2) elle tutularak yönlendirilmesi ve/veya bir kumanda kullanilarak hareket ettirilmesi ile test edilecek unsurun tanimlandigi islemci (6) ile karakterize edilen yukaridaki istemlerden herhangi birindeki gibi bir test

13. Ara yüz (5) üzerinden girilen Cihaz ve/Veya sistem bilgilerine bagli olarak dis ortamlar ile iletisim kurarak test edilecek unsurlara, konumlarina ve verecegi tepkilere iliskin verilere ulasmak ve test asamasinda kullanmak üzere yapilandirilan islemci (6) ile karakterize edilen yukaridaki istemlerden herhangi birindeki gibi bir test sistemi (1).

14. Ara yüz (5) üzerinden konusma dilinde test içeriginin girilmesi ile girilen test içeriginin kosulacak test adimina dönüstürmek için yapilandirilan islemci (6) ile karakterize Edilen yukaridaki istemlerden herhangi birindeki gibi bir test

15. Test islemi esnasinda tepki izleme elemanini (3) kullanarak referans isareti ile belirledigi ilk konumunda bir degisiklik olup olmadigini kontrol eden islemci (6] ile karakterize edilen istem 3 ila 147ten herhangi birindeki gibi bir test

16. Ilk konumda bir degisiklik oldugunu tespit ettigi durumda testin devam etmesi için test edilecek unsularin konumlarini güncelleyen islemci (6) ile karakterize edilen Istem 15”teki gibi bir test sistemi (1).