직접적인 증거는 카지노이 배운 내용을 보여줍니다. 간접적 인 증거는 교수진이 직접 정보를 해석하고 개선을 안내하는 데 도움이 될 수 있습니다. 예를 들어, 카지노이 세계 지리에 대한 지식이 우수하지만 나중에 객관식 세계 지리 테스트 (직접 증거)에 실패한다는 설문 조사 (학습의 간접적 증거)에 대해 자체보고하는 경우 유용한 정보입니다. 간접적 인 증거 자체는 카지노의 지식에 대한 직접적인 증거 없이는 의미가 없습니다.프로그램은 카지노의 카지노을 더 나은 그림을 얻기 위해 학생 학습의 직간접 증거를 수집 할 수 있습니다.

직접 및 간접 조치.

• 카지노 조치는 두 개의 광범위한 클래스로 나뉩니다 : 직접 및 간접 조치.
  • 직접 조치카지노이 학습을 시연하고 채점 장치로 측정하는 사람들입니다.
  • 간접 조치카지노이 일반적으로 설문 조사의 형태로 자신의 태도, 인식 또는 학습에 대한 감정을보고하는 사람들을 포함합니다.간접 조치카지노과 관련이 있지만 결과와 직접 연결할 수없는 데이터도 포함합니다 (예 : 직업/대학원 배치 요금, 출판 수, GPA, 코스 등급).
  • 직접 측정은 기본 카지노의 기본 형태로 선호되지만 일부 목표는보다 간접적 인 방법으로 만 측정 할 수 있습니다..

방법 선택

• 카지노이 특정 학생 학습 결과를 시연하도록 허용.
• 결과의 교수진 및 의도 된 사용자에게 신뢰할 수 카지노.
• 의사 결정의 기초로 사용할 수있는 유용하고 의미 있고 실행 가능한 정보를 제공합니다.수량은not목표. 교수진은 결과에 따라 필요에 따라 프로그램을 기꺼이 논의하고 변경해야합니다.

“바퀴를 재창조하지 마십시오.”

• 가능할 때마다 기존 증거를 사용하거나 수정하십시오. 평가는 일반적으로 과정에서 이미 일어나고 있습니다. 재고 프로그램에 대한 카지노 학습 및 인식의 증거가 이미 존재하는지. 에이학생 토토 카지노 평가(ASL) 계획 개발재고를 수행 할 때 유용한 도구입니다.
• 코스 가축 카지노는 종종 학습을 카지노하는 가장 효율적이고 진정한 방법입니다.
  • 징계, 다른 부서 또는 기타 기관의 교수진이 이미 사용중인 카지노 과제 및/또는 채점 장치를 고려하십시오.
  • 카지노 작업을 가능한 한 예상 학습보다 진정으로 유지하기 위해 노력하십시오.
• 여러 직접 조치이든 직접 및 간접 측정의 조합 여부에 관계없이 가능한 한 학습의 지표를 여러 개 이상 사용하십시오..

의미 론적 문제에주의하십시오.

• 포용적이고 문화적으로 민감한 언어 사용.
• 카지노 질문을 간단하고 간단하게 유지하십시오.
• 관련 문제에 초점을 맞추지 않는 참가자 응답을 초래하는 선도 또는 "이중 배럴"질문을 피하십시오.

가능하면 파일럿 테스트.

• 질문 해석과 관련된 혼란이 발견되도록 시험, 카지노 과제, 설문 조사 및 인터뷰 질문을 시범 시험을 시도하는 것이 가장 좋습니다. 인지 인터뷰 기술은 파일럿 테스트 중에 피드백을 얻는 데 유용 할 수 있습니다.

카지노 측정 기간을 가능한 한 짧게 유지.

• 너무 오래 지속되는 카지노 작업, 설문 조사 또는 포커스 그룹/인터뷰는 효과를 잃고 성취도 또는 비 응답 또는 불완전한 응답 속도를 부정확하게 만들 수 있습니다.
• 프로그램의 자원과 교수진이 카지노 활동에 기꺼이 투자 할 시간을 고려할 때 카지노를 수행 할 수 있는지 확인하십시오.

카지노 학습의 직접적인 측정의 예

• 코스 가축 테스트, 과제 또는 프로젝트
• 절정 경험 : 캡 스톤 프로젝트, 선임 논문, 선임 전시 또는 공연
• 포트폴리오 카지노
• 라이센스, 인증 또는 전문 시험
• 부서, 부서, 학교 또는 대학의 교수진이 맹목적인 에세이 질문
• 포괄적 인 시니어 프로젝트, 전시 및 공연에 대한 내부 및 외부 심사 리 검토
• 고용주 또는 인턴쉽 감독자의 카지노 공연에 대한 직접 평가
• 카지노 간행물 또는 회의 프레젠테이션의 교수 평가

NCA 고등 교육 기관에 관한 NCA Cecilia Lopez의 적응 : 개선 기회 : 카지노 학습을 평가하기위한 컨설턴트-평가자의 조언, 1996 년 3 월

카지노 학습의 간접 측정

• 동문, 고용주 및 카지노 설문 조사
• 졸업생 및 포커스 그룹의 인터뷰 출구
• 강사, 프로그램 코디네이터, 기숙사 지도자 및 카지노과 직접 연락하는 다른 사람들의 인터뷰
• 대학원 후속 연구
• 보유 및 양도 연구
• 학위까지의 기간
• SAT / ACT 점수
• 졸업률 및 양도율
• 작업 배치 데이터
• 카지노의 행동 관찰 및 녹음

소스 :

(1)University of Hawaii- 데이터/증거를 수집 할 방법을 선택하십시오
(2) 효과적인 협력 및 실습의 간접 조치 목록

교수진이 징계에서 수용 할 수 있고 모범적 인 학생 일에 대한 합의에 도달하기 위해 협력 할 때 카지노은 프로그램의 교수로부터보다 일관된 채점과 피드백을받습니다.

	혜택	​​단점
임베디드 테스트 또는 퀴즈	카지노은 테스트/퀴즈가 코스 등급의 일부이기 때문에 잘 수행하도록 동기를 부여했습니다. 학습의 증거는 정상적인 작업 부하의 일부로 생성됩니다. 교수진은 지역 시험이 커리큘럼에 맞게 조정되고 의도 된 결과로 인해 커리큘럼을 기꺼이 변경하려고합니다.	캠퍼스 또는 프로그램은 테스트 신뢰성, 유효성 및 카지노를 담당합니다. 교수진은 카지노이 아닌 경우에도 학생이 득점에 의해 평가되고 있다고 생각할 수 있습니다.
임베디드 할당	카지노은 과제가 코스 등급의 일부이기 때문에 잘 수행하도록 동기를 부여했습니다. 교수진은 카지노 과정에서 활발한 참가자이기 때문에 결과를 사용할 가능성이 높습니다. 가능한 자료의 온라인 제출 및 검토. 데이터 수집은 카지노에게 눈에 띄지 않습니다.	교수진은 카지노 점수가 아닌 경우에도 카지노 점수에 의해 평가되고 있다고 생각할 수 있습니다. 교수 시간은 개발 및 조정, 과제를 카지노하기위한 루 브릭을 만들고 실제로 과제를 카지노하는 데 필요한 교수 시간입니다.

포트폴리오를 유지하는 카지노이 카지노이 더 반사적이되고 배우는 동기를 높일 수 있습니다.

혜택	단점
시간이 지남에 따라 카지노 성취 및/또는 개발에 대한 포괄적이고 전체적인 견해를 제공합니다. 카지노은 포트폴리오의 인공물을 수집하고 반영함에 따라 성장을 볼 수 있습니다. 카지노은 대학원 또는 고용을 신청할 때 포트폴리오에서 끌어들일 수 있습니다. 가능한 자료의 온라인 제출 및 검토.	필요한 자원의 양 : 카지노과 교직원 모두에게 비용이 많이 들고 시간이 많이 걸립니다. 카지노은 과정을 심각하게 받아들이지 않을 수 있습니다 (수집, 반사 등) 양도 카지노을 위해 숙박시켜야합니다 (종단 또는 개발 포트폴리오가 사용될 때).

혜택	​​단점
국가 비교가 이루어질 수 카지노. 신뢰성과 타당성은 테스트 개발자가 모니터링합니다. 외부 조직은 시험 관리 및 카지노를 처리합니다.	카지노이 낮은 점수를 받으면 교과 과정을 변경하지 않을 수 있습니다 ( "테스트에 가르치는 것을 꺼려합니다").. 테스트는 프로그램의 의도 된 커리큘럼 및 결과와 일치하지 않을 수 카지노. 테스트 결과의 정보는 의사 결정에 사용하기에는 너무 넓습니다

.

혜택	단점
"부가 가치"또는 성장 정보를 제공합니다.	학습이 예상되므로, 증가 된 학습이 실제로 프로그래밍 방식의 예상의 엄격함을 충족시키는 지 식별하는 과제가 남아 카지노. 카지노을 두 번 이상 평가하기위한 워크로드 증가. 다른 시간에 진정으로 비교할 수있는 사후 테스트 설계가 어렵습니다. 결과를 올바르게 분석하려면 통계 학자가 필요할 수 카지노.

혜택	단점
49260_49333 교수진은 업계에서 기대하는 것에 대한 업데이트 된 정보를받습니다.	카지노 전반에 걸쳐 표준화 부족이 결과 요약을 어렵게 만들 수 있습니다.

설문 조사는 가장 일반적으로 사용되는 간접 카지노 방법입니다. 설문 조사는 태도, 신념, 경험, 가치, 요구, 인구 통계 학적 정보, 인식 등에 관한 정보를 수집하는 데 유용한 도구입니다.

설문 조사시기

평가 도구로서 목표가 목표 인구의 인식에 관한 비교적 빠른 결론을 도출하는 것이 목표 일 때 설문 조사를 사용해야합니다. 설문 조사는 짧은 시간에 많은 사람들에게 도달 할 수 있으며 일반적으로 분석하기 쉬운 데이터를 생성 할 수 있습니다. 대학 및 프로그램은 평가 팀의 설문 조사에서 분리 된 데이터를 얻을 수 있습니다. 연락을 통해 프로그램의 카지노에 대한 대학/프로그램 특정 질문을 추가 할 수도 있습니다assessment@ksu.edu.

• 수석 꽁 머니 카지노
• 동문 설문꽁 머니 카지노
• 메이저 카지노 사이트

혜택	단점
비교적 저렴한 비용으로 대규모 그룹에 관리 할 수 ​​카지노. 응답 분석은 일반적으로 빠르고 간단합니다. 신뢰할 수있는 상업 설문 조사를 구매할 수 카지노.	낮은 응답 속도는 일반적입니다. 자기 효능 보고서를 통해 카지노의 인식은 실제 능력과 다를 수 있습니다. 신뢰할 수 있고 유효한 질문을 설계하기가 어려울 수 카지노. 설문 조사 결과와 학습 결과 달성을 연결하려고 할 때주의가 필요합니다.

포커스 그룹은 소수의 개인 그룹이 함께 조립되어 특정 제품, 프로그램, 서비스, 개념 등에 대한 피드백과 통찰력을 얻기 위해 간접적 인 카지노 방법입니다. 포커스 그룹에서는 참가자가 다른 그룹 구성원과 자유롭게 대화 할 수있는 대화식 환경에서 질문이 있습니다..

포커스 그룹을 사용할 때

포커스 그룹은 사람들 간의 그룹 토론이나 상호 작용이 개별 인터뷰 나 설문 조사 항목을 통해 확인되지 않을 통찰력을 가져올 때 가장 잘 사용됩니다. 또한, 포커스 그룹은 리치 데이터가 필요할 때 유용하고 개별 인터뷰를 수행 할 수있는 자원이 충분하지 않습니다.

혜택	단점
풍부하고 심층적 인 정보를 제공하고 맞춤 후속 질문을 허용합니다. 그룹 동적이 더 많은 정보를 촉발시킬 수 카지노. 그룹은 부품의 합보다 더 많을 수 카지노. "이야기"및 목소리는 의도 된 사용자 그룹에 대한 강력한 증거가 될 수 카지노.	훈련 된 촉진자가 필요합니다. 전사, 분석 및보고는 시간이 많이 걸립니다.

인터뷰는 연구 과목에 대한 직접적인 의문을 제기 할 수있는 일대일 데이터 수집 이벤트입니다. 인터뷰는 직접 또는 전화를 통해 수행 될 수 카지노.

인터뷰를 사용할 때

인터뷰는 개인의 인식에 대한 심층적 인 통찰력을 얻고, 참가자와의 개인적인 접촉을 확립하고, 사전 조사 결과에 대한 후속 조치를 취하는 것이 목적이 가장 잘 사용됩니다..

혜택	단점
풍부하고 심층적 인 정보를 제공하고 맞춤형 후속 질문을 허용합니다. "이야기"와 목소리는 의도 한 사용자 그룹에 대한 강력한 증거가 될 수 카지노.	훈련 된 면접관이 필요합니다. 전사, 분석 및보고는 시간이 많이 걸립니다.

Rubrics는 학생의 성과를 득점하는 데 도움이되는 가이드입니다. 루 브릭은 코스 작업 및 과제에 대한 피드백을 작성, 점수, 채점 또는 피드백을 제공 할 때 강사가 사용하고 카지노이 품질 작업 개발을 안내합니다. 이러한 공연 안내서는 학습 및 성과 기대에 관한 학생과 강사 간의 일반적인 이해를 제공하는 데 도움이 될 수 있습니다. 루 브릭은 또한 평가, 프로그램 평가 및 학생 학습 개선을 위해 수집 된 학생 작업을 평가하는 데 사용될 수 있습니다.

루 카지노을 사용하는 이유는 무엇입니까?

• 루 브릭은 카지노를위한 공통 프레임 워크와 언어를 만듭니다.
• 복잡한 제품 또는 행동을 효율적으로 검사 할 수 카지노.
• 잘 훈련 된 검토자가 동일한 기준과 표준을 적용합니다.
• Rubrics는 규범 참조가 아닌 기준 참조됩니다. 평가자는 "학생이 루 브릭의 레벨 5에 대한 기준을 충족 했습니까?" "이 학생이 다른 카지노에 비해 얼마나 잘 했습니까?"
• 루 카지노을 사용하는 것은 교수진 간의 실질적인 대화로 이어질 수 있습니다.
• 교수진이 루 카지노을 개발하기 위해 협력 할 때 공유 된 기대치와 채점 관행을 촉진합니다.

루 카지노은 네 가지 기본 부분으로 구성됩니다. 가장 간단한 형태로 루 카지노에는 다음이 포함됩니다.

1. 작업 설명. 카지노이 과제를 위해받는 지침으로 평가되는 결과.
2. 카지노할 특성(행) . 시연 할 기술, 지식 및/또는 행동.
3. 숙달 수준/스케일(열) . 숙달 수준을 설명하는 데 사용되는 레이블은 재치 있고 명확해야합니다. 일반적으로 사용되는 레이블은 다음과 같습니다.
   • 회의, 접근, 회의, 초과
   • 모범적이고, 능숙하고, 한계, 허용 할 수없는
   • 고급, 중간 하이, 중간, 초보자
   • 1, 2, 3, 4
4. 각 수준의 숙달/스케일에서 각 특성에 대한 설명(셀) .

루 카지노 개발

1 단계 : 카지노하고 싶은 것을 식별

2 단계 : 정격 특성을 정의합니다 (행)원하는 기술, 지식 및/또는 행동을 지정합니다.

• • 과제에 대한 숙달/숙련도를 보여주는 데 필요한 특성과 카지노 학습 결과에 가장 중요한 특성을 포함합니다.

3 단계 : 숙달 레벨 (열)을 식별합니다.

• 성취의 특성을 차별화하기가 어렵 기 때문에 더 이상 4 명을 목표로합니다.
• 이 수준을 달성 할 수는 거의 없지만 항상 과제에 대한 예상 엄격한 범주를 넘어서 범주를 허용합니다.
• 숙달 수준은 과제의 등급을 직접 반영하지 않습니다.

4 단계 : 각 특성에 대한 각 수준의 숙달 수준 (세포).

• • 회의에 대한 예상되는 엄격함에 대해 설명하십시오. 이것은 두 번째에서 가장 높은 범주에서 식별됩니다.
  • 일반적인 기대를 넘어서 이러한 특성을 사용할 수있는 최상의 작업을 설명하십시오. 이것은 최상위 범주를 설명합니다.
  • 허용 할 수없는 제품을 설명하십시오. 이것은 가장 낮은 범주를 설명합니다.
  • 중간 범주에 대한 중간 수준 제품에 대한 설명 개발.

중요 : 각 설명과 각 특성은 상호 배타적이어야하며 다른 교수진이 카지노의 업무를 안정적으로 평가할 수 있도록 충분히 정의되어야합니다.

5 단계 : 명확성, 엄격함, 점수 신뢰성을 위해 루 카지노을 테스트합니다.

• • 동료 및 카지노과 토론하십시오.피드백 검토 및 수정.
  • 스코어링의 일관성과 사용 효율성을 식별하기 위해 카지노 작업 샘플을 평가합니다.

팁 : 교수진은 종종 학생 작업이 통과 할 수있는 것으로 간주되는 데 필요한 최소 점수를 설정하는 것이 유용하다고 생각합니다. 예를 들어, 교수진은 4 점 척도 (4 = 예시, 3 = 능숙, 2 = 한계, 1 = 허용 할 수없는)의 "1"또는 "2"가 최소 품질 기대치를 충족시키지 않기로 결정할 수 있습니다. 카지노의 90%가 3 점 이상을 득점해야하므로 성공 기준을 설정할 수 있습니다. 평가 연구 결과가 부족한 경우 조치를 취해야합니다.

중요 : 프로그램 평가를위한 루 브릭을 개발할 때 동료의 도움을 받으십시오. Rubrics는 프로그램의 교직원과 카지노에게 혜택을주는 공동 기대치와 일관된 채점 관행을 촉진합니다.

6 단계 : 평가 작업을 할당 할 때 루 브릭 제공 카지노이이를 사용하여 업무를 안내 할 수 있습니다.

Manoa의 하와이 대학교에서 적응

프로그램 평가 목적으로 루 브릭을 사용할 때 교직원은 카지노 작업에 루 브릭을 적용합니다 (예 : 보고서, 구두 프리젠 테이션, 설계 프로젝트). 신뢰할 수있는 점수를 얻으려면 각 교직원은 루 브릭을 같은 방식으로 해석해야합니다. 교수진을 훈련시키는 과정을 루 브릭을 적용하는 과정을 "표준"이라고합니다. 교수진에서 점수가 정확하고 일관되도록 교수진을 교정하는 방법입니다. 아래는이 과정을 수행하는 평가 코디네이터의 지침입니다.

교정 세션을위한 제안 된 자료 :

• 루 카지노의 사본
• 각 수준의 숙달을 보여주는 카지노 작업 사본. 제안 : 6 개의 예제 조각이 있습니다 (2 낮음, 2 개의 중간, 2 높음)
• 스코어 시트

득점자가 카지노 조각을 평가할 때 득점자가 퍼지도록하는 객실에서 득점 세션을 유지합니다

프로세스 :

1. 활동의 목적을 설명하고, 개별 카지노이나 교수가 아닌 스코어링 장치 (Rubric)를 평가하고 기밀성 및 개인 정보 보호에 대한 존중을 포함하여 윤리적 지침을 설명하는 것이 목적을 강조합니다..
2. 스코어링 루 카지노과 그 범주를 설명하십시오. 그것이 어떻게 개발되었는지 설명하십시오.
3. Analytic : 독자는 분석 루 브릭의 각 차원을 별도로 카지노해야하며 각 점수 (수준)가 얼마나 자주 사용되는지에 대한 걱정없이 기준을 적용해야한다고 설명합니다. 전체론 : 독자들은 전체 작품을 가장 잘 설명하는 점수 또는 숙달 수준을 지정해야한다고 설명합니다.
4. 각 득점자에게 다양한 수준의 성능의 예인 여러 카지노 제품의 사본을 제공하십시오. 각 득점자에게 각 제품 각 제품에 독립적으로 루 브릭을 적용하여 개별 스코어링 시트에 등급을 작성하도록 요청하십시오.
5. 모든 사람이 완료되면 모든 사람의 등급을 수집하여 모든 사람이 계약 정도를 볼 수 있도록 표시하십시오. 또는 촉진자는 카지노 범주가 발표 될 때 카지노자에게 손을 올리도록 요청하여 모든 사람에게 합의 범위를 매우 명확하게하고 일상적으로 비정상적으로 높거나 낮은 등급을 제공하는 카지노자를 식별했습니다..
6. 등급에 대한 토론에서 그룹을 안내합니다. 판단을 설명하기 위해 다른 등급을 부여한 사람들을 초대함으로써 검사되는 각 제품에 대해 가장 적절한 등급에 대한 합의에 도달하려고 시도하십시오. 그룹이 루 카지노을 개정하여 사용을 명확히 할 수 있지만 그룹이 루 카지노과 학습 결과에서 표류하는 것을 피할 수 있습니다..
7. 그룹이 루 카지노의 적용 방식에 익숙해지면 등급이 시작됩니다. 스코어 시트를 사용하여 등급을 기록하는 방법을 설명하고 절차를 설명하십시오. 리뷰어가 득점을 시작합니다.
8. 점수를 신속하게 요약 할 수 있다면, 읽기 끝에 그룹에 요약을 제시하십시오. 5 가지 질문에 대한 토론으로 회의를 끝낼 수 카지노.
   • 결과가 충분히 신뢰할 수 있습니까?
   • 결과는 무엇을 의미합니까? 우리는 카지노의 학습 정도에 만족합니까?
   • 누가 결과를 알아야합니까?
   • 커리큘럼, 교육학 또는 카지노 지원 서비스 결과의 의미는 무엇입니까?
   • 카지노 루 브릭을 어떻게 개선 할 수 있습니까?

Manoa의 하와이 대학교에서 적응

코스에서 루 카지노 사용에 대한 아이디어

• 카지노이 당신의 기대와 그들이 어떻게 등급이 매출 될 것인지 알 수 있도록 과제와 함께 루 브릭을 나눠줍니다.
• 카지노 작업을 채점하기 위해 루 브릭을 사용하고 등급이 매겨지면서 루 브릭을 반환하십시오. 각 섹션 또는 끝에 추가 의견을 포함시킵니다.
• 과제 또는 그룹 프로젝트를 위해 카지노과 루 브릭을 개발하십시오. 카지노은 모니터 자신과 동료가 개발에 도움이되는 합의 된 기준을 사용하여 모니터링 할 수 있습니다. 많은 교수진은 카지노이 교직원이 자신에게 부과하는 것보다 더 높은 표준을 창출 할 것임을 알게됩니다..
• 카지노이 자신의 제품을 만들기 전에 제품을 샘플링하기 위해 루 브릭을 적용하도록합니다. 교수진은 카지노 이이 작업을 수행 할 때 매우 정확하다고보고하며,이 과정은 개발중인 자체 프로젝트를 평가하는 데 도움이 될 것입니다. 초안 문서를 평가, 편집 및 개선하는 기능은 중요한 기술입니다.
• 카지노이 종이 초안을 교환하고 루 브릭을 사용하여 동료 피드백을 제공하도록합니다. 그런 다음 카지노에게 최종 드래프트를 제출하기 전에 며칠을 수정하십시오. 또한 최종 용지로 드래프트와 피어 스코어 루 브릭을 돌려야 할 수도 있습니다.
• 카지노은 제품과의 자기 평가로 루 브릭과 손을 사용하여 제품을 자체 평가하도록합니다. 그런 다음 교직원과 카지노은 자기 및 교직원과 생성 된 평가를 비교할 수 있습니다.

루 카지노 개발을위한 팁

• 기존 루 카지노을 찾고 조정하십시오! 상황에 맞는 루 카지노을 찾는 것은 드문 일이지만, 다른 사람들에게 잘 작동 한 이미 존재하는 루 카지노을 조정하고 많은 시간을 절약 할 수 있습니다. 귀하의 프로그램의 교수진은 이미 좋은 것일 수 있습니다.
• 루 브릭 평가. a) 루 브릭은 평가중인 결과와 관련이 있습니까? (그렇다면 성공!) b) 외부를 다루는 것이 있습니까? (그렇다면 삭제) c) 루 브릭은 유용하고 실행 가능하며 관리 가능하며 실용적입니까? (그렇다면 루 브릭을 사용하는 여러 가지 방법을 찾으십시오 : 프로그램 평가, 과제 채점, 동료 검토, 카지노 자체 평가.)
• 척도 또는 레벨에서 각 지점을 보여주는 카지노 작업 샘플을 수집하십시오. 루 브릭은 앵커/벤치 마크/예시가 가능할 때까지 카지노이나 동료에게 의미가 없습니다.
• 수정을 기대합니다.
• 좋은 루 브릭이 있으면 카지노 루 브릭 컬렉션을 통해 공유하십시오!assessment@ksu.edu

Manoa의 하와이 대학교에서 적응