DAN

Welcome to this year’s DTC Jumpstart Webinar! We are excited to be here with you. Before we get started, I want to share that this slide deck, along with the script, will be made available to you all and posted on our Assessment Team’s Test Administration Resources webpage (in the DTC Webinars section near the bottom).  We are also recording this session, as we heard from several DTCs who could not make the event and wanted to benefit from having the content. The recording will be made available once it is accessible in the same location.

1

DANWe have finally entered the 21st century and have shifted to Zoom. I expect that there is great facility with Zoom’s features given the 18 months of practice that we have had using such tools, but I want to make sure that we at least touch on a few critical functions. First, you will not have access to all of these features, but the most important ones for your use are the mute button, the stop video button, and the chat feature. You may also want to rename yourself. It would be helpful for us if you put your district along with your name, especially for the new DTCs. You may also wish to identify your personal pronouns. 

2

DAN

The Assessment Team is at full capacity! We welcomed Sody Fearn, our new K‐2 Balanced Assessment Specialist, and Crys Plattner, our Administrative Specialist, to the team over the summer. You will hear from them today as they review their programs. Carla performs mostly internal work now that Crys has joined the team, helping us with contracts, website updates, preparations for meetings and travel (not expected to be a huge burden this year, hah), and crisis alert responses. Crys is taking over the work that Renee House used to do for us, helping manage manual revisions, managing test improprieties, coordinating DTC and Assessment Advisory Committee meetings and materials, and serving as our new Smartsheet wizard. Ben Wolcott is our Team Lead this year and runs all things ELPA. Ben is also Oregon’s representative on the ELPA21 Governing Board. Noelle Gorbett manages our science assessment and has also taken the reins on our work in developing the SEED Survey pilot. Tony runs our ELA and social sciences assessment programs. Andy Byerley, who could not join us today, manages our math assessments. Andy is also leading our internal work on supporting district equitable grading practices. Caitlin Gonzales is leaning into our accessibility work and running the Oregon Extended Assessments, while also continuing to work on our Alternate ELPA that is under development in partnership with ELPA21. Sody Fearn is in charge of our Kindergarten Assessment and supporting district formative assessment practices across grades K‐2. She is managing an engagement process with 

3

education and community partners this year in lieu of an assessment. My name is Dan Farley and I am the Director of Assessment at ODE. 

3

Dan 

Our work is replete with jargonese, including acronyms that we will use as if everyone understands them. We’ve listed those present in this discussion here for your reference. I would encourage new DTCs to take a screenshot so they can refer to these throughout the presentation. We will also try to name what each signifies as we proceed.

4

DAN

The Assessment Team will make updated DTC training modules, as well as our final Test Administration Manual, by October 1, 2021. We will also share a proficiency quiz with DTCs at that time. Please complete the quiz prior to our November trainings. There are three training options provided, two afternoon and one morning. Please sign on for whichever one matches your schedule. We will record one training and make it available to our ESD Partners in the hopefully unlikely event that you cannot attend any of the offered synchronous trainings.  Our DTC webinars will be held on the second Wednesday of each month from December through May.

5

Dan

We have 40 new DTCs who requested to be assigned to a mentor and only 6 veteran DTCs who have offered to serve as mentors. I do not think it’s sustainable to have our mentors work with 7 or 8 mentees at once. If you are a veteran member, please reach out to me to get on our mentor list! We need at least 12 more veterans to reduce the ratio to 2:1. If we cannot get that system moving, I will develop a plan to connect with new DTCs regularly through the fall to make sure that you are all brought along with us and have clarity in your work!

If you have not done so already, particularly for new DTCs, please sign up to receive our weekly Assessment and Accountability newsletters, providing updated information regarding assessment, accountability, reporting and OSAS online tools. The Assessment Team’s test administration, training materials, and communications pages may also be useful enough for you to bookmark.

Karen, Peter, and Amy are your key partners as you develop understanding about Oregon’s State Assessment System. Please contact Karen and Peter for all questions regarding accountability and reporting, as well as questions about assessment in Region 3, and contact Amy with questions regarding assessment in Regions 1 and 2. 

6

Dan 

These next two slides will serve as a preview of the topics we will provide updates around today. We will finish the discussion by opening up for a questions and answer period. We’ll elaborate on each topic in its own slide.

7

Dan 

8

Dan

The message here is that federal and state assessment requirements are in place, with the exceptions of the Kindergarten Assessment and the assessment of Essential Skills.

9

Dan 

The test windows you see here are published on the test administration webpage and can also be found in the TAM. The ELPA summative is open form January through mid‐April. You can see that the high school window for ELA, math, and science general and alternate assessments begins in January, while the Grades 3‐8 assessments open in March. The SEED Survey, which Noelle will discuss next, is optional and runs concurrently with the summative assessments. Finally, we want you to be aware that the NAEP is requiring districts who accept Title 1A funds in state‐level math and reading, is planned for administration and schools that are selected will be officially notified in mid‐September. Even years will continue this trend.

Though not included on this table, the ELPA Screener is available almost year‐round, which was necessary to support our unique screening opportunity. 

With that said, I will turn the mike over to Noelle, who will provide a SEED and Alt‐SEED Survey update!

10

NoelleThe SEED and Alt‐SEED Survey will continue as a pilot in the 2021‐2022 school year. Customizable participation allows a district to fully participate, select schools, grades, or other groups of students to participate or not participate at all. Of course, ODE would like all students in grades 3‐11 to participate. Qualified Trainers and Qualified Assessors will continue to input student data for their students in Grades 3‐8 and 11 on the Alt‐SEED.

ODE has made a few adjustments to this year’s SEED survey including the addition of new items to ask students about their opportunity to learn about Native Americans in Oregon. 

Surveys for 9th and 10th grade are now available and with that addition, the number of items in the 11th grade survey has been reduced. Now, students in 9th grade will see ELA focused Opportunity to Learn and self efficacy questions, 10th grade will see math, and 11th

grade will see science questions.

ODE is making progress on the commitment to offer the survey in additional languages. This year, the SEED Survey will be also be available in Russian within the TDS. Russian copies of the survey items will be added to our SEED Survey webpage in the coming weeks. 

11

We encourage you to go to the SEED Survey web page to find more information about the SEED and Alt SEED Surveys including purpose and overview, blueprints, communication toolkit, and survey items. 

[Please copy link into chat]https://www.oregon.gov/ode/educator‐resources/assessment/Pages/Student_Educational_Equity_Development_Survey.aspx

Tony now will give an update on Oregon’s interim assessment and Tools for Teachers resources.

11

Tony

The Oregon Interim Assessment System for ELA, mathematics, and science is free to educators statewide. This includes the instructional and formative assessment resources in Tools for Teachers for ELA and mathematics. As a reminder the Interim Assessment system provides the same Accessibility Supports as the OSAS Summative Assessments and all student data is reported in the Centralized Reporting System through the OSAS portal.

Interim Assessment Blocks or IABs are available in all content areas and target a wide range of connected standards. For both ELA and mathematics Focused Interim Assessment Blocks or Focused IABs are available. These FIABs target a smaller scope targets, usually 1 or 2 and a more precise set of associated standards.

The Science Interim Assessment Blocks are in the form of single task items focused on a single science standard. Later this year there will be an update to the science interim assessment bank which will include shorter focused items of 1‐2 student interactions. 

For implementation of the interim assessments at the local level, first complete our Interim Assessment Training module, Module 8, which provides a comprehensive overview of the training requirements. 

12

In addition, the Assessment Team has developed a comprehensive training series to support the interim assessments in science, mathematics, and language arts, as well as Tools for Teachers resources in ELA and math, which we call the Interim Professional Development Materials. 

[Provide this link]https://www.oregon.gov/ode/educator‐resources/assessment/Pages/Interim_Assessments.aspx 

DanI also wanted to share that we have good reason to be confident that ODE will be able to provide statewide access to these interim resources at no additional cost to districts in the coming years, barring any unforeseen budgetary reductions. That is good news for districts who have been concerned about learning this system and committing to it without knowing if it will be funded in future years. Now, I will turn it over to Caitlin, who will discuss two important updates regarding accessibility!

12

CaitlinNearly every school year, our team fields questions about the use of manipulatives on our summative math assessment. 

For 2021‐22, Oregon has been able to make certain math manipulatives available as non‐embedded designated supports to all students for whom the need is deemed helpful. DTCs and TAs should read Table 2.4 and Appendix F of the Oregon Accessibility Manual for all details as well as images of allowed manipulatives. Again, not all manipulatives are allowable and the use of non‐allowed manipulatives can lead to testing improprieties. Training specific to this enhancement will be included in Module 5 of the annual DTC Training Modules.

Please reach out to Caitlin Gonzales or Andy Byerley for questions. 

13

CaitlinThe Oregon Department of Education has expanded the use of Text‐to‐Speech for the English language arts Performance Task as a designated support. 

Text‐to‐Speech in the ELA PT for stimuli refers to the reading sources embedded in the ELA PT associated with Claim 4 Research and Claim 2 Writing (full write/writing extended response). Again, this expansion of Text‐to‐Speech use only applies to the reading sources associated with the performance task.

Text‐to‐Speech in the ELA CAT for stimuli refers to the reading passages associated with Claim 1 Reading. This support is still only select‐able as an accommodation for students whose need is documented in an IEP or 504 plan. 

 Undocumented use of Text‐to‐Speech for reading passages associated with Claim 1 Reading will result in a test invalidation. Activation of Text‐to‐Speech can be set up in the TIDE system.

For further question please refer to the 2021‐22 Module 5 training presentation when posted or contact either Caitlin Gonzales or Tony Bertrand. 

14

I am handing it back to Dan now, who will review our targeting up policy. 

14

Dan[reviewed slide content only]

15

Tony

We are finalizing our test blueprints for ELA and mathematics for 2021‐22 right now. The US Department of Education made a unique allowance for this past year in the throes of the pandemic that allowed us to remove the PT in the interest of protecting all instructional time, but that allowance does not extend to future years. The PT gives a strong signal regarding the value of writing and describing mathematical reasoning in Oregon’s education systems and also allows us to fully represent our challenging content standards. 

The summative ELA and mathematics general assessments will include the performance task at all grades for this coming year. ODE will not include narrative writing in the OSAS ELA summative assessment. This shift in assessment design allows the multiple genres of narrative writing to be assessed at the local level.

We are developing test blueprints that incorporate the most efficient and effective version of our CAT that we can define. Compared to the 2018‐19 ELA and Mathematics summative assessments, the number of CAT items has been reduced by 40% on the shortened 2021 ‐22 ELA and Mathematics summative assessments. The shortened tests maximize efficiency while maintaining test blueprint adherence. Target Reports will continue to serve as an important resource in understanding longitudinal learning trends.

16

More specific blueprint information will be posted on the ELA Assessment and Math Assessment webpages by October 29, 2021 and communicated to DTCs once available.

We do not expect any changes to either the science or Oregon Extended Assessments. Ben will now walk us through some changes to the OSAS Portal and a transition to the Centralized Reporting System.

16

Ben

Last spring, we announced that the state testing portal would be undergoing a redesign.That change is now live. You can see on this screenshot that the look and feel of the testing portal have been streamlined and modernized. While there are multiple ways to get to important content on the portal, we have highlighted some useful menu items in this screenshot.

Users: Takes you to the appropriate page for your role, where you can find links, or “cards,” for the applications you want to access.

Resources: This is a searchable collection of all the resources on the state portal. These resources would include user guides, translated test directions, or vendor‐developed family resources. You can use filters to find exactly the resources you are looking for.

Contact us: Use this link to find contact information for your Regional ESD partner or the OSAS Helpdesk.

17

Ben

In the spring of 2021, ODE announced that the Online Reporting System, or ORS, would be replaced with the Centralized Reporting System, or CRS. This change has now occurred, and CRS is live. You can currently access both reporting systems via the state testing portal, but be aware that ORS will retire at the end of October. Historical data from ORS were preserved in the CRS system; no data will be lost when ORS goes offline. The change is intended to support more efficient user interactions and we hope that you find the CRS easier to navigate and utilize. Sody will now provide an update regarding the Kindergarten Assessment.

18

SodyThe State Board of Education extended the suspension of the Kindergarten Assessment (KA) through the 2021‐22 school year due to both the pandemic and concerns related to its design and implementation. ODE and the Early Learning Division, also known as ELD, are committed to engaging education and community partners in the 2021‐22 school year to determine how the KA should be redesigned for future administrations. To support these engagements, we are canvassing other state practices in kindergarten entry assessments to borrow from the practices and/or systems that might be most beneficial for Oregon’s students. Please look for invitations to join one of our engagements in the next few weeks. We are also interested in reducing test redundancy wherever feasible. Your voice matters, so we hope you join us! I’ll now pass it back to Dan.

19

Dan

A reminder for districts that they must report results for students who participated in spring 2021 testing to families, pursuant to OAR 581‐022‐2270. Student data are not available in the OSAS Portal, but are available within the ODE district secure website. ODE will be publicly reporting data from the spring 2021 test administration, pursuant to the agreement that was effected as part of our amended state summative assessment waiver request last year. We’ll focus our reporting on the SEED Survey pilot data and information. State level participation rates ranged from approximately 35% in Grade 3 to 11% in Grade 11, which presents almost uniform data use limitations. We will thus commit to providing clear guidance regarding how the data should and should not be used. We will focus attention and our communications on the variance that was demonstrated across the state, identifying the ranges of scores that were possible at a district. Where we are required to report district percent proficient data, it will always be paired directly with participation rates, with a note elaborating that the data should not be used if participation rates are below an 80% threshold. This threshold was recommended by Oregon’s Technical Advisory Committee unanimously during our June 2021 meeting. 

Ben will now begin the review of our legislative updates!

20

Ben

You may have heard about the recent passage of Access to Linguistic Inclusion, known as HB 2056. This law will have a significant impact on the educational landscape in Oregon, and we are working on detailed guidance to help districts understand those changes. For the purposes of today’s webinar, however, we want to emphasize that ALI has no impact on testing, nor on Oregon’s adopted content standards. Our statewide English Language Arts assessment remains the same as in prior years, taking into account the blueprint updates you heard about in an earlier slide. Oregon districts will not be required to address new or different content standards in any content area as a result of ALI. I’ll pass it back to Dan, who will review Senate Bill 744.

21

Dan

The Oregon Legislative Assembly passed SB 744 which directs the Oregon Department of Education to review state requirements for high school diploma options, as well as to review state requirements related to demonstrations of proficiency in Essential Skills. 

• Allowing for this review, students will not be required to show proficiency in Essential Skills as a condition of receiving a high school diploma during the 2021‐2022, 2022‐2023, and 2023‐2024 school years.

Note: SB 774 applies to the assessment of Essential Skills requirements for receiving a Regular or Modified Diploma and does not suspend the local performance assessment requirements for students in grades 3 through 8 and at least once in high school. Though not related directly to assessment, it is important to note that the education plan, education profile, and extended application graduation requirements remain in place, as well.

For additional information or questions regarding SB 744, please contact ODE.SenateBill744@ode.state.or.us.

22

DanWe have the RFP at the final stage of review within our procurement process right now. It should be published soon and the process of selecting a vendor will proceed after proposals are received. We do not yet know what vendor will be selected. We will update information at our Nationally‐Normed College Entrance Practice Test webpage, to which you can refer for information. Whatever assessment is selected will be free for participating 10th graders in 2021‐22, yes. We will not be able to reimburse 

[Post this link] https://www.oregon.gov/ode/educator‐resources/assessment/Pages/Nationally_Normed_College_Entrance_Practice_Test.aspx

23

Dan

ODE is proud to announce that recruitment is open for a Fall PLC for school teams to dive into their current grading practices and how they might make them more equitable. Throughout distance learning in 2020‐21, many districts approached ODE for support in the area of grading, and this is the first opportunity for teams to engage. This announcement has been in the AA Update and will continue to be until registration closes, but we want to announce it again here to make sure DTCs were aware of the opportunity and can communicate it to school leaders within your district. For more information, please email ODE’s Equitable Grading Practices team at ode.equitablegrading@ode.state.or.us [paste in chat]

Recruitment flyer: https://drive.google.com/file/d/1i3CGaDzvNMxNlrlDb2wZr0_zNZ8cAj2X/view?usp=sharingRegistration: https://forms.gle/Q46tGTLKuNuWNxMB9 

24

DANHere is a list of publication, training, and testing dates for the coming year. 

25

Dan[reviewed slide content only]

26

Dan[ran Q/A session]

27

Dan[reviewed slide content only]

28