2016 scoring spectrum

พนเอก มารวย สงทานนทร [email protected]

14 พฤษภาคม 2559

เกรนน า

การใหคะแนน เปนเครองมอหนงในการวนจฉย ทระบจดแขงและ

โอกาสพฒนา เพอชวยใหผสมครมงเนนทรพยากรทจ าเปน ในการ

พฒนาสระดบทสงขน

ระบบการใหคะแนนทงกระบวนการและผลลพธ มปจจยตาง ๆ

มาเกยวของ และการใหคะแนนน ไมไดใหแบบมหรอไมม แตเปน

การใหคะแนนแบบตอเนองของแตละปจจย จาก 0 ถง 100 %

จงไดทดลองใสสแบบ spectrum ของแสง ในแตละระดบของ

คะแนนทไดจากปจจยพจารณาตาง ๆ เพอใหงายตอการสงเกต

Band 1 Band 2 Band 3 Band 4 Band 5 Band 6

0-5 % 10-25% 30-45% 50-65% 70-85% 90-100%

No Evident or

Not Reported

BASIC

REQUIREMENTS

BASIC

REQUIREMENTS

OVERALL

REQUIREMENTS

MULTIPLE

REQUIREMENTS

MULTIPLE

REQUIREMENTS

• Basic Requirements (สแสด และสเหลอง) มคะแนน 10-45%

• Overall Requirements (สเขยว) มคะแนน 50-65%

• Multiple Requirements (สน าเงน และสคราม) มคะแนน 70-100%

• ในการพจารณา ใหเรมตนท Band 4 (Overall) กอน แลวจงคอยเพมหรอลดคะแนน

จากการอานรายงานผสมคร วาไดตอบสนองเกณฑอยในชวงคะแนนใด และโอกาส

พฒนาใน band ทสงกวา จะเปนจดแขงใน band ทต ากวาได เพราะขนอยกบวฒภาวะ

จดแขงและโอกาสพฒนา

จดแขง (strengths) ในกรณของกระบวนการ คอ ADLI และ

ผลลพธ คอ LeTCI ทองคกรท าไดตามเกณฑทก าหนด ซงเปนการ

บอกกลาววา ผสมครท าอะไรไดดแลว ควรธ ารงรกษาไว ไมให

คะแนนลดลง

โอกาสพฒนา (opportunities for improvement) ในกรณทองคกรท า

ไดไมครอบคลม หรอ ไมครบถวนตามเกณฑทก าหนด เปนการบอก

ผสมครวา สมควรท าอะไรเพมเตม จงจะไดคะแนนสงขน

การใหคะแนนกระบวนการและผลลพธ

กระบวนการ (Process) หมายถงแนวทางทองคกรใชและปรบปรง

ตามความตองการของหวขอ ในหมวด 1 ถง 6 ซงมสปจจยทใชในการ

ประเมนคอ แนวทาง การปฏบต การเรยนร และการบรณาการ

(Approach, Deployment, Learning, and Integration - ADLI)

ผลลพธ (Results) หมายถงผลและผลลพธทประสบความส าเรจของ

องคกร อยในขอก าหนดในหวขอ 7.1-7.5 (หมวด 7) ปจจยทใชในการ

ประเมนผลลพธคอ ระดบ แนวโนม การเปรยบเทยบ และการบรณาการ

(Levels, Trends, Comparisons, and Integration - LeTCI)

"ขอก าหนดขนพนฐาน" (basic requirements)

หมายถงแนวคดทเปนแกนของเกณฑ ทแสดงอยในรปค าถาม

ของชอหวขอ

เพยงการตอบสนองขอก าหนดขนพนฐานของหวขอ อาจสงผลให

ไดคะแนนท 10-45% ขนอยกบระดบของการพฒนา ความ

สอดคลองของระบบพนฐาน และขอบเขตของการใชงานของระบบ

เหลานน

BASIC REQUIREMENTS: The most central concept of a Criteria

item

"ขอก าหนดโดยรวม" (overall requirements)

หมายถงคณสมบตทส าคญของหวขอ (Item) นน ๆ ในค าถามแรก

(ค าถามน า ตวหนา) ของประเดนพจารณา

การตอบสนองขอก าหนดโดยรวม อาจสงผลใหไดคะแนนท 50%,

55%, 60% หรอ 65% ขนอยกบวฒภาวะของระบบโดยรวม

ขอบเขตของการใชงาน การประเมนผลอยางเปนระบบ การ

ปรบปรง นวตกรรม และการบรณาการระบบเหลานน

"ขอก าหนดยอย" (multiple requirements)

หมายถงรายละเอยดของหวขอ (Item) ตามทแสดงอยในค าถาม

ยอย ๆ ของแตละประเดนพจารณา

ขอก าหนดแรกในรปแบบตวหนา (first requirement expressed in

boldface) ในชดของขอก าหนดยอย เปนขอก าหนดทส าคญทสดใน

กลมนน

ค าอธบายศพทการใหคะแนน (Defining Scoring Terms)

Processes (ADLI)

A D L I

A = Approach แนวทางทองคกรใช อยางเปนระบบ (systematic

= well ordered, repeatable, use of data & information for

learning) และมประสทธผล (effectiveness = (1) aligned with

the organization’s needs & (2) outcome of the measure)

(systematic + effective)


0-5 % 10-25% 30-45% 50-65% 70-85% 90-100%

No APPROACH BASIC

REQUIREMENTS

BASIC

REQUIREMENTS

OVERALL

REQUIREMENTS

MULTIPLE

REQUIREMENTS

MULTIPLE

REQUIREMENTS

No

SYSTEMATIC,

ANECDOTAL

Beginning

SYSTEMATIC

EFFECTIVE,

SYSTEMATIC

EFFECTIVE,

SYSTEMATIC

EFFECTIVE,

SYSTEMATIC

Fully

EFFECTIVE,

SYSTEMATIC

SYSTEMATIC. Well-ordered, repeatable, and exhibiting the use of data and information so that learning is

possible.

EFFECTIVE. How well a process or a measure addresses its intended purpose. Effectiveness requires

(1) evaluating how well the process is aligned with the organization’s needs and how well it is deployed or

(2) Evaluating the outcome of the measure as an indicator of process or product performance.

A D L I

D = Deployment อธบายการปฏบตทมความทวถง (breadth)

และทกระดบ (depth) ของหนวยงานทเกยวของ มหลกฐานบง

ถงการน าไปปฏบตในหนวยอนขององคกรดวย

(breadth and depth)


0-5 % 10-25% 30-45% 50-65% 70-85% 90-100%

Little or no

DEPLOYMENT

BASIC

REQUIREMENTS

BASIC

REQUIREMENTS

OVERALL

REQUIREMENTS

MULTIPLE

REQUIREMENTS

MULTIPLE

REQUIREMENTS

little or no

evident

early stages in

most areas

some areas in

early stages

well DEPLOYED,

may vary in

some areas

well DEPLOYED,

with no

significant gaps

fully DEPLOYED

without

significant

weakness or gap

Few = 5-15%

Some = 15-30%

Many = 30-50%

Most = 50-80%

Nearly All = 80-90%

All = 100%

A D L I

L = Learning อธบายความร ทกษะใหมทไดจากการประเมน

การศกษา ทดลอง และนวตกรรม (innovation) มวงจรการ

พฒนาทเปนระบบและใชขอเทจจรง (PDCA) มการแลกเปลยน

เรยนร (sharing) มการเทยบเคยง และฝงตวอยในกระบวนการ

ท างาน

(PDCA + innovation + sharing)


0-5 % 10-25% 30-45% 50-65% 70-85% 90-100%

No LEARNING BASIC

REQUIREMENTS

BASIC

REQUIREMENTS

OVERALL

REQUIREMENTS

MULTIPLE

REQUIREMENTS

MULTIPLE

REQUIREMENTS

no evident,

reacting to

problems

early stages to

general

improvement

beginning to

evaluation and

improvement

(PDCA)

fact-based,

evaluation and

improvement

(PDCA) +

INNOVATION

fact-based,

evaluation and

improvement

(PDCA) +

INNOVATION +

sharing

fact-based,

evaluation and

improvement

(PDCA) +

INNOVATION +

sharing

throughout

organization

A D L I

I = Integration อธบายถงความสอดคลอง (alignment) ของ

แผน กระบวนการ ขาวสาร การจดสรรงบประมาณ การ

ปฏบตการ ผลลพธ และการวเคราะหทชวยใหองคกรบรรล

เปาหมาย (organizational needs) และมการประสานกนของ

หลายหนวยงาน รวมถงการเกยวเนองกบกระบวนการหวขออน

ดวย (other process Items)

(alignment of organizational needs & other process Items)


0-5 % 10-25% 30-45% 50-65% 70-85% 90-100%

No ALIGNMENT BASIC

REQUIREMENTS

BASIC

REQUIREMENTS

OVERALL

REQUIREMENTS

MULTIPLE

REQUIREMENTS

MULTIPLE

REQUIREMENTS

individual areas

or work units

operate

independently

ALIGNED with

other areas

through joint

problem solving

early stages of

ALIGNMENT

with basic

organizational

needs + other

process items

ALIGNED with

overall

organizational

needs + other

process items

INTEGRATED

current and

future

organizational

needs + other

process items

well

INTEGRATED

current and

future

organizational

needs + other

process items

Results (LeTCI)

Le T C I

ระดบผลด าเนนการ (Levels)

ผลลพธลาสด

แสดงอตราสวนทเหมาะสม

เทยบกบผลในอดต การคาดการณ และเปาหมาย (ต ากวา ดกวา

เปนเลศ)


0-5 % 10-25% 30-45% 50-65% 70-85% 90-100%

no or poor

RESULTS

BASIC

REQUIREMENTS

BASIC

REQUIREMENTS

OVERALL

REQUIREMENTS

MULTIPLE

REQUIREMENTS

MULTIPLE

REQUIREMENTS

few RESULTS

responsive to

BASIC

REQUIREMENTS

Good LEVELS

responsive to

BASIC

REQUIREMENTS

Good LEVELS

responsive to

OVERALL

REQUIREMENTS

Good-to-

excellent

LEVELS

responsive to

MULTIPLE

REQUIREMENTS

Excellent

LEVELS fully

responsive to

MULTIPLE

REQUIREMENTS

Good = better than average for relevant competitors, above industry average or median

Very Good = in top quartile of relevant competitors

Excellent = at or near top of relevant competitors, top 5%, best benchmark, better than best competitor

Le T C I

แนวโนม (Trends)

ทศทางและอตราการปรบปรง (เปนทนาพอใจ ไมเปลยนแปลง

ไมเปนทนาพอใจ)

จ านวนจดอางอง (อยางนอย 3 จด)

ความครอบคลมในทกภาคสวน (มค าอธบายรป)


0-5 % 10-25% 30-45% 50-65% 70-85% 90-100%

not reported or

mainly adverse

BASIC

REQUIREMENTS

BASIC

REQUIREMENTS

OVERALL

REQUIREMENTS

MULTIPLE

REQUIREMENTS

MULTIPLE

REQUIREMENTS

Some TREND

reported, with

some adverse

Some TREND

reported, most

beneficial

Beneficial

TRENDS

Beneficial

TRENDS

sustained over

time in most

areas

Beneficial

TRENDS

sustained over

time in all areas

Le T C I

การเปรยบเทยบ (Comparisons)

มความสมพนธ : กบคแขง การเทยบเคยง หรอผน าใน

อตสาหกรรมนน (ในผลลพธทส าคญ ไมจ าเปนตองมทกรป)

มความสม าเสมอ


0-5 % 10-25% 30-45% 50-65% 70-85% 90-100%

not reported BASIC

REQUIREMENTS

BASIC

REQUIREMENTS

OVERALL

REQUIREMENTS

MULTIPLE

REQUIREMENTS

MULTIPLE

REQUIREMENTS

Little or no

comparative

information

Early stages of

obtaining

comparative

information

Some good

LEVELS against

relevant

comparisons

and/or

BENCHMARKS

Many to most

very good

TRENDS and

LEVELS against

relevant

comparisons

and/or

BENCHMARKS

Industry and

BENCHMARK

leadership in

many areas

Le T C I

บรณาการ (Integration)

สมพนธกบขอก าหนดของเกณฑ

แยกตามกลมทจดไว (Segmentation) (ลกคา ผลตภณฑ บรการ

ตลาด กระบวนการ แผนปฏบตการ ในลกษณะองคกร และใน

หวขอกระบวนงาน)

สนบสนนแผนปฏบตการขององคกร

ผลคาดการณในอนาคต


0-5 % 10-25% 30-45% 50-65% 70-85% 90-100%

not reported BASIC

REQUIREMENTS

BASIC

REQUIREMENTS

OVERALL

REQUIREMENTS

MULTIPLE

REQUIREMENTS

MULTIPLE

REQUIREMENTS

few areas of

importance to

accomplishment

organization’s

MISSION

many areas of

importance to

accomplishment

organization’s

MISSION

most KEY

CUSTOMER,

market, and

PROCESS

Requirements

(Segmentation)

most KEY

CUSTOMER,

market,

PROCESS

(Segmentation)

+ ACTION PLAN

requirements

PROJECTIONS

reported for

most KEY

CUSTOMER,

market,

PROCESS

(Segmentation)

+ ACTION PLAN

requirements

การใหคะแนนทเหมาะสมทสด (best scoring fit)

การใหคะแนนควรพจารณาปจจยทงหมด

เพอการใหคะแนนทเหมาะทสด เปนสงส าคญทจะตองพจารณา

เกณฑการใหคะแนนแบบองครวม (holistically)

เรมจาก Band 4 แลวพจารณาทก ๆ ปจจยทวเคราะหไว วา

สมควรอยใน band นหรอไม ถาไม ควรจะเพมหรอจะลด band

โดยอาศยจากค าอธบายปจจยทใชพจารณาทงหมด ไมใชปจจย

ใดปจจยหนงเทานน

การใหคะแนนอยางคงเสนคงวา

เพอบรรลการใหคะแนนทสอดคลองกน หากขอก าหนดอย

มากกวาหนงระดบ ต าแหนงของขอก าหนดแรก เปนตวก าหนด

ระดบคะแนนทผสมครไดรบ ตามล าดบขนคอ

ขอก าหนดพนฐาน = ขนพนฐาน

ขอก าหนดโดยรวม = ขนโดยรวม + ขนพนฐาน

ขอก าหนดยอย = ขนยอย + ขนโดยรวม+ ขนพนฐาน

สรป

เพอชวยบรรเทาปญหาการใหคะแนน จะมงเนนความสนใจไปท

การเลอนตามล าดบชนของ ขอก าหนดพนฐาน ขอก าหนดโดยรวม

และขอก าหนดยอย (from basic to overall to multiple

requirements)

วตถประสงคของการล าดบชนนคอ ใหมงเนนไปทปจจยทส าคญ

ทสด (most important factors) ของแตละผสมคร เพอมงสใน

ระดบสงขนตอไป และไมท าใหกระบวนการตรวจประเมน เปนการ

ตรวจสอบรายการปฏบต (checklist)

Confucius

The End

Business

2016 scoring spectrum