Secondary tabs

    目标:
    • 了解与员工和家庭合作评估项目的重要性。
    • 了解利用项目评估数据改善儿童和家庭项目成果的重要性。
    • To learn about the importance of modeling continuous quality improvement so that staff focus on program goals and outcomes.

    学习

    学习

    Program Evaluation

    在本课中,您将了解项目评估的重要性,作为确定哪些服务对儿童和家庭有效以及项目哪些方面需要改进的来源。所有员工和家属都可以参加项目评估。项目评估通常每年完成一次,以确定项目是否有效地达到其目标。项目评估的结果通常与项目的所有利益相关者共享:家庭、员工,在某些情况下还包括社区。在军队儿童和青年项目中,这些报告也会与军队领导层或上级司令部共享。

    The management team works with staff and families to collect relevant data, analyze it, and use the findings to make changes that will improve overall program quality. They also use this information to create a formal report or description of the program for those outside the program who are interested partners (families, advisory board members, funders, inspection teams, accrediting bodies, etc.). Program leaders will want to use both formative and summative evaluation methods when organizing the program evaluation process.

    形成性评价

    形成性评价是在课程的日常运作中用来检查正在进行的过程并帮助改进课程的。形成性评估检查日常的成功和不足。通常在项目刚开始或新政策刚实施时使用。形成性评估提供了一个快速反馈回路,以影响项目决策并做出必要的更改。

    形成性的例子:T&Cs项目的Tori决定为自己制定一个新的时间表,每天早上她观察两个幼儿教室的零食时间,并在每个老师的员工邮箱里留下一个简短的笔记,总结她的观察结果。两个幼儿室在吃零食的时候都开始了一项新的活动,老师们希望托里观察零食几次,以反馈零食的效果。两周后,托里与幼儿教师会面,讨论她的观察结果,并帮助他们确定新的常规是否对孩子和工作人员有效。

    总结性评价

    总结性评估通常在课程结束时或课程存在一段时间后进行。总结性评估通常与项目之外的人(咨询委员会、机构间委员会、资助者)共享,以提供有关项目有效性的数据。)

    Summative Example: Each July, Maria, the program manager writes an evaluation report. In it, she summarizes child and youth data, parent event data, child and parent satisfaction data, and the overall program budget report. This report also highlights progress on the program's goals (e.g., increase the number of volunteers in the after-school program). In many ways, a summative evaluation report may be of interest to anyone affiliated with the program, but is also of importance to individuals outside the program.

    Although a summative evaluation report may only be written and shared once per year, the information that is used to create the report is collected across the year at many different points and includes the input of many different stakeholders (e.g., staff, parents, coaches, advisory board members).

    评价工作可由下列人员进行:内部的或评估可由以下人员进行:外部的该计划(例如,付费顾问、具有儿童保育计划管理专业知识的大学教授、认证评估员或具有进行计划评估专业知识的州授权代表)。采办项目经理通常负责进行总结性采办项目评估,或与外部采办项目评估人员协调和合作;但是,T&C可应经理的要求提供协助(例如,帮助收集一些相关数据)。

    规划项目评估

    在计划项目评估时,主要问题是“评估的目的是什么?”

    • Do you want to demonstrate why the program needs more after-care staff?
    • Is the purpose to show children's growth and development?
    • 进行评估是为了收集其他人对项目的反馈吗?

    对于不同的利益相关者,评估的目的可能不同,并将推动评估将回答的问题类型:

    • 我们(领导班子和员工)在做我们所说的吗?
    • 这个项目对孩子和他们的家庭有什么影响?
    • 是否所有的家庭都感到受欢迎并成为项目社区的一部分?
    • 项目是否符合国防部认证要求?

    在儿童保育和青年方案评估中,通常有三个主要考虑领域:

    1. 节目质量
    2. 项目成果(针对儿童和青年)
    3. 消费者和利益相关者对项目的满意度

    参与评估的人员必须了解评估的目的以及如何报告他们的答复。规划和设计评估包括创建一个矩阵,其中组织了评估的主要方面。如果评估没有仔细设计,那么结果可能不准确,也没有必要报告。“探索”部分中的资源将帮助您更深入地了解课程评估过程,包括基于您要回答的问题,哪些文档或数据可能是最合适的,以及可以提供有关课程的其他数据的不同课堂或课程质量评估工具(如环境评级量表)这个计划。

    用于回答评估问题的数据可通过在线调查、焦点小组、一对一访谈、使用课堂或课程质量评估工具以及文件审查(例如,教师书面教案、儿童进度报告或评估数据、预算摘要、课程供应单)收集。

    Sharing and Using Program Evaluation Data

    在做造型的或总结性评价is important to plan how the results will be reported and used. Parents will want to know if their time and attention to responding to survey questions results in higher quality after-school programming for their children. Program managers must decide the best way to share the evaluation results with those who participated in the data collection. Results may be posted on the program's website, in the newsletter, and in other places where parents may access it. Hard copies may be made available to staff and advisory board members. It is important for the program manager to also discuss the program evaluation findings with stakeholders. Discussions may take place during a regularly scheduled staff meeting or advisory board meeting. The use of the evaluation results to improve the program should be clear to the stakeholders. Staff and other relevant stakeholders should be made aware about how progress will be monitored.

    一些项目被要求在机构间理事会会议期间或与其他团体共享项目评估数据。例如,如果善后护理人员和项目经理从一个组织(如扶轮社)申请并获得一笔特别补助金,以获得一大笔钱来加强善后护理项目期间提供的科学活动,那么工作人员和项目经理就有责任评估活动和学生的能力了解并报告资金的使用情况。同样,选择最相关的评估问题对于规划评估、数据收集方法和时间表至关重要。评估报告应与资助者一起撰写、分享和讨论。狗万app怎么下载

    观看下面的视频,了解T&C和项目经理如何使用项目评估来记录成功和指导未来改进的变化。

    项目管理:项目评估

    项目评估提供了重要的信息,可用于记录成功案例和指导未来改进的变化。

    Model an Approach to Continuous Quality Improvement

    员工向项目经理和T&C寻求领导。作为领导团队,他们注重持续的质量改进观。致力于有意识地改善对儿童、青年和家庭的服务的项目表明了学习新知识和技能的开放性。他们对质量有明确的认识和承诺。他们知道高质量的项目应该为儿童、青年和家庭提供什么。他们知道哪些项目做得好,哪些可以做得更好。这种意识建立在观察、数据收集和使用有效可靠的项目评估工具的基础上。狗万app怎么下载

    学习部分末尾提供了一个示例持续质量改进计划(参见ISBE持续质量改进计划-ECERS-R)。本样本计划基于使用修订版幼儿环境评定量表(ECERS-R)的学前教育项目观察。这个示例程序选择了关注于改善在ECERS-R量表上低于“5”的程序环境的所有方面。计划中列出了需要改进的具体领域。样本计划包括时间表、活动和专业发展以及负责人。编写持续质量改进计划是万博体育全站app领导团队让员工分享他们如何共同努力为儿童及其家庭提供更高质量服务的愿景的一种方式。

    您的服务机构、许可机构或认证机构可能有特定的格式,他们希望以这种格式接收您的持续项目改进计划(这是项目评估的一个方面)。在“学习”部分的最后,我们提供了一个额外的空白示例,说明俄亥俄州如何要求儿童保育和青少年计划根据其所在州的质量评级和改进系统来构建其持续改进计划。尽管每个机构、州或服务机构在信息格式化或传递方式上可能略有不同,但它们通常都在寻找相同类型的信息。

    1. 你的课程目标是什么?
      1. 你是如何得出这些目标的?换句话说,这个项目的当前状态是什么?你是怎么知道的?您使用了哪些工具、文档或数据来了解您的程序目前是如何运行的?
    2. 帮助实现这些目标的具体行动项目是什么?
      1. 哪些活动或专业发展培训将帮助您实现这些目标?
    3. 你需要什么资源?
    4. 谁负责列出的特定行动项目?对于许多目标,可能有多人负责,因为直接护理人员可能负责在他们的课堂上实施新的实践,而T&C则负责提供与这种新实践相关的培训,以及观察和指导,以确保其正确实施。
    5. 具体行动项目的实施时间表是什么?
    6. 你怎么知道你的目标实现了?
      1. 你需要预测工具,文件和数据,你将需要监测进展,朝着你的目标。这可能类似于用于确定开始目标的信息形式。例如,在Learn ISBE示例中,该计划可能会在4个月内重新管理ECERS-R,以查看他们在已确定领域的得分现在是否高于5。然而,它们可能不同。例如,如果您根据家庭调查的反馈制定了提供更多家庭教育研讨会的目标,则可以将参加研讨会的家庭数量作为监控进度的一个数据点。

    Continuous quality improvement entails:

    • 终身学习的承诺狗万app怎么下载
    • Program changes that result in better quality care-giving
    • 自我反省
    • 共同领导
    • 嵌入式作业支持

    当T&C和项目经理一致地表达并展示对持续质量改进的承诺时,他们为所有员工提供了一个模型,让他们在自己内部达到卓越。领导团队时刻准备着庆祝项目的成功,同时也在为实现下一个目标而努力。

    探索

    探索

    有各种各样的项目评估,可通过网站和出版商。您将需要浏览这些资源,以熟悉课程评估问题、文档、数据和摘要,并与员工和家人共享。许多州都有一个质量评级和改进系统(QRIS)来改善儿童保育服务。在一些州,托儿所的QRIS评级可能与资金、许可证等有关。您可能需要进行网络搜索,看看您所在的州是否有QRIS评级系统。

    有关QRI、课程认证和课后课程评估工具的更多信息,请访问以下链接:https://www.naeyc.org/our-work/public-policy-advocacy/research-and-evaluationandhttp://www.naeyc.org/files/naeyc/file/positions/CAPEexpand.pdf.

    您的服务部门可能会为项目经理和T&C提供在线培训,以了解如何在儿童和青少年项目中规划持续质量改进。

    应用

    应用

    您所服务的家庭是任何项目评估的主要利益相关者。有些项目每年至少进行一次书面调查(可以是纸质调查或电子调查)。一些项目经理喜欢在孩子离开项目时与家长面谈(离职面谈),以了解项目如何改进其使命,在孩子、员工和家庭中创建一个关爱社区。

    首先,试着写下你将在家庭反馈调查中包含的问题或提示。想了解一些想法,你可以看看以下两个家庭调查样本,它们来自于《为幼儿专业人士赢得成功的方法:与家庭合作》(Schweikert,2012)一书。

    Next, try writing a brief continuous improvement plan based off these surveys. Imagine that when reviewing the survey results (in the second example with the 1-5 scale), you notice that many families seem to consistently rate items 9 and 10 on the survey (i.e., “I feel informed about how my child is doing in the program,” and “I know about program activities or events.”) at a 3 or below. What would you do with this information? What goal(s) would you set, and specific action items would you write? What resources might you need to address this? Who are the responsible people? What is your timeline? And, finally, how will you access if you have moved forward in meeting this goal?

    词汇表

    期限 说明
    Continuous quality improvement 一种旨在改善提供服务的制度,强调未来的结果

    演示

    演示
    Assessment:

    第一季度

    对还是错?项目经理不与家长分享项目评估结果。

    第2季度

    A continuous quality improvement plan consists of…

    第三季度

    When planning a program evaluation, the main question to ask yourself is...

    参考资料和资源:

    Carran,D.T.(2009年)。幼儿计划评估。J.M.Taylor、J.R.McGowan和T.Linder(编辑),《幼儿特殊教育项目管理员指南》(第307-335页)。巴尔的摩:保罗H布鲁克斯出版公司。

    伊利诺伊州教育委员会幼儿部幼儿环境评价量表(ECERS-R)持续质量改进计划检索自https://www.isbe.net/Documents/cqip-ecers-sample-plan.pdf

    Schweikert,G.(2012年)。幼儿专业人士的必胜之道:与家庭合作。明尼苏达州圣保罗:红叶出版社。