[发明专利]自动评价方法、自动评价系统及存储自动评价程序的存储媒体

说明书

技术领域

本发明涉及根据键输入等输入项目、和对该输入项目的输出画面等的参照输出结果，能够自动评价目标系统上工作的程序的自动评价方法、自动评价系统及存储自动评价程序的存储媒体。

背景技术

近年来，微型计算机被装入家用电器等各种装置中并被广泛利用。微型计算机为了与被装入方的规格及外围设备相对应而工作，将应用程序写入内置ROM(只读存储器)中。此外，液晶显示装置(以下记为LCD)也与家用电器等各种装置相结合。因此，当用户向微型计算机中输入键输入等输入项目时，通过应用程序向LCD输出对该输入项目的输出画面。因而，当识别微型计算机的应用程序的动作时，微型计算机必须识别对应于被装入方的装置的规格的多项输入项目的输出结果。

因此，在微型计算机的开发中，应用程序的开发也和硬件的开发一样重要。为了开发应用程序，利用了电路中模拟(以下记为ICE：In Circuit Emulation)。ICE能在目标板上模拟应用程序的动作。如上所述，应用程序的动作确认中，必须确认的输入项目很多。因此，利用ICE，操作者直接输入输入项目时，不但需要长时间进行输入，而且操作者可能产生输入错误。此外，操作者通过画面输出输入项目和模拟结果进行确认时，需要很长时间，而且操作者可能产生确认错误。另外，在评价该动作确认的应用程序时，为了提高评价制度，会反复进行对同一输入项目的评价。因而，为了高精度和有效地进行应用程序的动作确认，利用了自动评价系统，能够反复自动输入许多输入项目，并能自动评价对该输入项目的输出结果。

在上述自动评价系统中，利用模拟装置的模拟结果，能够自动评价在目标系统上动作的应用程序。为此，需要具有自动评价系统和模拟装置能够共同存取的存储器，由此使自动评价系统和模拟装置间的存取成为可能。此时，模拟装置对输入项目进行模拟，并进行输出该模拟结果的通常的处理。因此，不需要在应用程序中附加任何自动评价的步骤。

在上述自动评价系统中，需要预先制作输入项目文件，并制作与该输入项目对应的参考数据。然后，依次将输入项目向模拟器传送，参照反映了模拟的结果的显示画面(显示存储器)，接收结果数据，将该结果与预先制作的参考数据进行比较，来进行自动评价。

但是，在实际的输入数据中，有时即使实际上没有输入键输入，也会重写显示画面。即，有一种闪烁光标，或在画面上移动的字符，这是一种键输入以外的输入项目。这样，在目标程序上动作的应用程序随意地重写画面内容的情况下，当自动模拟系统在随便某个时间对其读取时，不能正确地进行自动评价。因此，为了到达可靠性高的评价，自动评价系统需要确定模拟的结果，在画面重写完成的时间读取显示画面数据。

本发明鉴于上述情况，通过在模拟器中构筑一种确定模拟结果、监视更新画面的一定的周期，并将其通知自动评价装置的机制，来提供能实现可靠性高的自动评价的自动评价方法、自动评价系统及存储自动评价程序的存储媒体。

发明的公开

为了解决上述课题，权利要求1记载的自动评价方法，通过参照对任意的输入项目模拟的结果和输出画面，自动评价在目标系统上动作的程序，

进行上述模拟，获得反映该结果的输出画面的数据更新所确定的时间，根据该时间参照上述输出画面；

通过将该参照结果与预先制作的参考数据进行比较，进行自动评价。

根据该自动评价方法，能够只在在任何状态下模拟结果都确定的时间，取入模拟的结果数据。因此，能够得到稳定的参照数据，从而能进行可靠性高的评价。

权利要求2记载的自动评价方法，是在权利要求1所述的自动评价方法中，上述输出画面的数据更新所确定的时间，通过监视预先定义的规定时间的经过而决定。而权利要求3记载的自动评价方法，是在权利要求1所述的自动评价方法中，上述输出画面的数据更新所确定的时间，通过运算各规定时间的各模拟结果的逻辑和，由最终制作的数据而决定。权利要求4记载的自动评价方法，是在权利要求1所述的自动评价方法中，上述输出画面的数据更新所确定的时间，由在上述目标系统上动作的程序通过显示重写结束项目来通知。

根据这些自动评价方法，能够检知画面重写结束的时间，由此自动评价系统能够通知模拟的结果确定的信息，能参照该输出画面实现可靠性高的评价。

权利要求5记载的自动评价方法，是在权利要求1至4的任一项所述的自动评价方法中，在参照上述输出画面时，停止上述模拟。

根据该自动评价方法，在参照输出画面时，因为停止模拟，所以不会因模拟使输出画面的数据被更新。因此，能够确实地参照数据确定的输出画面。