Ajutor la Tele2, tarife, intrebari

Evaluări ale experților și metode de măsurare.

Evaluarea experților este o măsurare cantitativă și/sau calitativă a indicatorului corespunzător.

Metode de obținere a evaluărilor cantitative ale experților

Cuantificare directă

Expertul specifică o anumită valoare numerică sau un interval al parametrului necesar.

Metoda punctului de mijloc.

Este folosit cu un număr mare de opțiuni alternative.

În primul rând, sunt selectate cele mai (A) și cele mai puțin (L) alternative preferate. Urmează o opțiune intermediară - M, a cărei evaluare împarte segmentul A - Z în jumătate.

Metode de obținere a evaluărilor experților de calitate

Clasificarea experților (determinarea apartenenței la un grup, soi, categorie - soi de ceai)

Clasificarea alternativelor este ordonarea alternativelor comparate în funcție de gradul de preferință al unui anumit atribut.

Metoda curbelor experți este utilizată pentru obținerea de prognoze pe baza unei analize a dinamicii indicatorilor care caracterizează obiectul experimentului (grafic, extrapolare). Pentru a preveni erorile în timpul extrapolării, pe baza opiniei generalizate a experților, punctele în care ar trebui să fie așteptate schimbări în tendința de dezvoltare a indicatorului sunt determinate pe grafic.

Instrumentele metodelor de mai sus sunt scale calitative și cantitative.

19. Metode de evaluare a calităților experților și formarea comisiilor de experți.

Metoda tribunalului.

Procedura este similară cu o ședință de judecată. Unii dintre experți sunt acuzați, unii sunt apărați, iar unii sunt juriul care dă verdictul final. Evaluările experților sunt subiective, așa că problema cheie este selecția experților.

Evaluarea calităților expertului.

Expert- un specialist, un profesionist, ale cărui aprecieri și judecăți decidentul le consideră utile să le țină seama în procesul decizional.

Formarea componenței comisiei de experți depinde de:

O situație specifică de luare a deciziilor;

Capacitatea organizatorilor examenului de a atrage la muncă specialiști înalt calificați;

Oportunități pentru specialiști de a lua parte la lucrările comisiei de experți.

Nu există o metodologie unificată general acceptată pentru evaluarea calităților unui expert.

Te poți baza pe:

Cunoștințe profesionale;

Experiența și eficacitatea activităților în cadrul comisiilor de experți.

Metode de evaluare a calităților unui expert:

A priori– nu utilizați informații despre rezultatele participării expertului la examinările anterioare (autoevaluare, evaluare reciprocă, metoda listei de experți, metoda documentării (chestionar)).

A posteriori– utilizați informații despre rezultatele participării expertului la examinările anterioare (metoda comparării în pereche a obiectelor cel mai preferată de un anumit expert, metoda abaterii de la evaluarea grupului rezultat).

Test– implică un test special.

Testul trebuie să fie special conceput pentru obiecte specifice de evaluare expert

Valorile adevărate ale parametrilor estimați (răspunsurile corecte) nu ar trebui să fie cunoscute de expert

Ar trebui elaborată o scală pentru a determina acuratețea evaluărilor date de expert

Probabilitatea de a ghici aleatoriu estimarea corectă ar trebui să fie foarte mică.

Utilizarea metodelor de testare face posibilă evaluarea unei calități profesionale atât de importante a unui expert precum reproductibilitatea evaluărilor experților. Se efectuează o serie de teste similare și se evaluează rezultatele obținute. Stabilitatea evaluărilor indică competența profesională a expertului.

Metode experte - metode de evaluare efectuate de un grup de experți în condiții de incertitudine sau risc.

Metode experte sunt utilizate pentru determinarea nomenclaturii indicatorilor de calitate, a coeficienților lor de greutate, pentru măsurarea indicatorilor de calitate și evaluarea acestora prin metoda organoleptică. Evaluarea indicatorilor de calitate prin metode de măsurare, înregistrare și calcul este utilizată pentru a determina indicatori de calitate complecși ai diferitelor niveluri ale ierarhiei.

Conceput pentru evaluarea de către experți a mărfurilor în cazurile în care alte metode enumerate anterior sunt inaplicabile sau neeconomice.

Metodele experților se bazează pe luarea unor decizii euristice, pe baza cărora se află cunoștințele și experiența acumulate de experții într-un anumit domeniu în trecut.

Metodele experte au anumite avantaje și dezavantaje.

Avantajele sunt că permit luarea deciziilor atunci când metodele obiective nu sunt receptive. Alte avantaje includ recuperabilitatea lor. Domeniul de aplicare al acestor metode nu este doar evaluarea calității mărfurilor, ci și studiul operațiunilor ciclului tehnologic, luarea deciziilor, managementul, prognoza.

Metodele experte utilizate de experți calificați permit evaluarea precisă a mărfurilor. Experimentele efectuate indică faptul că, cu metodologia corectă de evaluare a experților, eroarea rezultatelor este de 5-10%, ceea ce este acceptabil pentru metodele de măsurare. Rezultatele evaluărilor experților obținute experimental în diferite grupuri de experți au arătat capacitatea lor de restaurare destul de ridicată.

Dezavantajele metodelor experte includ subiectivitatea, aplicarea limitată și costurile ridicate ale implementării lor.

Subiectivismul metodelor expertului este o consecință a faptului că evaluarea expertului este efectuată de fiecare expert individual și reprezintă, în opinia lui E.P. Raikhman și G.G. Azgaldov, „nimic mai mult decât reacția sa psihologică la caracteristicile fizice și chimice ale produsului. .” Cu toate acestea, trebuie avut în vedere faptul că o evaluare de specialitate constă în opiniile mai multor experți, fiecare dintre aceștia nu este doar un specialist într-un anumit domeniu de cunoaștere, ci și un consumator. Prin urmare, evaluarea experților reflectă într-o anumită măsură opiniile consumatorilor, ceea ce este imposibil de realizat cu alte metode.

Datorită unei cantități semnificative de subiectivitate, metodele experte au anumite limitări. utilizarea lor este rațională în două cazuri: în primul rând, când obiectivele stabilite experților nu pot fi rezolvate prin alte metode; în al doilea rând, atunci când metodele alternative disponibile dau rezultate mai puțin precise și fiabile sau sunt asociate cu costuri mai mari.

Pentru a elimina acest dezavantaj, metodele experte la efectuarea examinării mărfurilor sunt combinate cu alte metode. Cel mai adesea, metodele experte și organoleptice sunt utilizate împreună. Mai mult, la elaborarea scalelor de notare organoleptică, alegerea unei game de indicatori de calitate și determinarea coeficienților de greutate, metodele experte sunt indispensabile.

Metodele experților sunt împărțite în trei subgrupe: 1) metode de chestionare de grup a experților; 2) metode matematice şi statistice de prelucrare a evaluărilor experţilor; 3) metode de evaluare de experti a indicatorilor de calitate.

Fiecare grup de metode expert este la rândul său împărțit în tipuri și soiuri. Clasificarea metodelor experte este prezentată în Fig. 1.3.

Orez. 1.3. V

Metode de chestionare de grup a experților - metode bazate pe efectuarea unei anchete a unui grup de experți cu analiza și prelucrarea ulterioară a informațiilor primite de la aceștia.

Scopul acestor metode este de a obține raționamentul experților de grup pentru a lua decizii finale.

Baza alegerii este necesitatea de a lua decizii complexe într-o situație de incertitudine sau de a întocmi o prognoză bazată științific, care necesită participarea unui grup de specialiști independenți și competenți într-un domeniu îngust sau mai multe domenii de cunoaștere (de exemplu, cunoașterea unui grup omogen de produse sau a tuturor produselor alimentare).

Principalele avantaje ale evaluării experților de grup constă în posibilitatea unei analize cuprinzătoare a aspectelor cantitative și calitative ale problemelor de determinare și/sau prognozare a caracteristicilor individuale ale mărfurilor sau ale totalității acestora. Interacțiunea dintre experți permite o creștere semnificativă a cantității totale de informații deținute de un grup de experți în comparație cu informațiile oricărui membru al grupului. În plus, numărul factorilor luați în considerare în timpul evaluării grupului și care influențează eficacitatea deciziei luate este mai mare decât suma factorilor luați în considerare de un expert. Cu o evaluare de grup, există mai puține erori în luarea deciziilor de bază și a indicatorilor care nu sunt semnificativi pentru rezolvarea problemei. Prin urmare, un avantaj important al evaluării de grup este capacitatea de a obține un rezultat generalizat.

Dezavantajele evaluărilor de grup includ: dificultatea de a obține evaluări fiabile și consistente; primirea de răspunsuri diferite la aceeași întrebare cu o mare diferență de opinii datorită competențelor diferite ale experților; primirea de răspunsuri fără ambiguitate nu garantează validitatea și fiabilitatea acestora, iar acest lucru nu poate fi verificat în timpul unei examinări; o cantitate mai mare de informații incorecte de la un grup de experți decât de la un expert individual poate duce la erori semnificative în rezultatele finale; posibilitatea confruntării, atunci când experții individuali, din incertitudine sau din alte motive, pot fi de acord cu opinia majorității.

În ciuda acestor neajunsuri, s-a stabilit experimental că, dacă sunt îndeplinite anumite cerințe, evaluarea de grup este mai fiabilă decât evaluarea individuală. Aceste cerințe includ: o distribuție acceptabilă a notelor; fiabilitatea grupului; pregătirea examenului.

Eficacitatea examinării depinde de acuratețea și fiabilitatea rezultatelor obținute, adică de metodele utilizate și de calificările expertului. Alegerea unui expert este o sarcină dificilă; cel mai adesea, sunt luate în considerare mai multe proprietăți personale: competență - profesională și calimetrică, interesul expertului pentru rezultatele examenului, atitudinea față de subiect, obiectivitatea. Trăsături precum apetitul pentru risc și alte caracteristici psihologice aproape că nu sunt luate în considerare.

O abordare sistematică a evaluării calității unui expert nu a fost încă dezvoltată; metodele de evaluare existente sunt împărțite în cinci grupe:

Euristică;

Statistice - aprecieri care se obțin în urma analizării aprecierilor experților cu determinarea abaterilor de la valorile medii;

Test - aprecieri obtinute ca urmare a sarcinilor de testare efectuate de experti;

Documentar - evaluări ale competenței obținute în urma analizei datelor documentare individuale din examenele efectuate de un expert;

Combinat - estimări obținute în timpul analizei datelor obținute prin combinarea metodelor enumerate.

Euristică evaluările includ autoevaluarea și evaluarea făcută de o echipă de experți. Stima de sine este cel mai adesea subiectivă; Pentru a reduce subiectivitatea, o scară de puncte este utilizată pentru proprietățile individuale ale expertului. Autoevaluarea se efectuează în consecință în funcție de tipurile de bunuri și indicatorii de calitate, de exemplu, estetica produselor; expertul se autoevaluează printr-un chestionar. Chestionarul include frecvența de familiarizare cu literatura modernă autohtonă și străină, cu mostre de produse moderne și cu rezultatele anchetelor sociologice.

Ca tip de autoevaluare se folosește metoda de evaluare bazată pe raționament și familiarizare cu produsele care sunt analizate. Evaluarea se realizează cu ajutorul unui chestionar pentru determinarea coeficientului de competență.

Prin utilizarea rezultatele testului este posibil să se evalueze proprietăți atât de importante ale unui expert precum competența calimetrică și profesională, obiectivitatea. Competența calimetrică la efectuarea evaluării organoleptice constă în intervievarea repetă a experților pentru determinarea de mai multe ori a coeficienților de greutate și determinarea fiabilității evaluărilor.

Competența profesională este testată sub forma controlului capacității de a utiliza diferite tipuri de scale de evaluare - ordine, rapoarte, intervale, precum și capacitatea de a distinge un număr semnificativ de caracteristici, gradații atunci când se evaluează proprietățile produsului care este analizate.

Cu participarea experților la evaluarea și discuția colectivă, se observă fenomenul de conformitate, adică expertul intră sub influența concluziilor altor experți, ceea ce afectează negativ formarea unei evaluări obiective a expertului. Prin urmare, capacitatea de a adera la opinia cuiva și de a-și apăra concluziile are o importanță pozitivă în timpul examinării printr-o metodă colectivă și al formării unei evaluări obiective.

Metode experte evaluările calității se bazează pe utilizarea judecății experților. Ele sunt utilizate atunci când este imposibil sau impractic sau neeconomic să se utilizeze metode de măsurare sau de calcul. Acest lucru se întâmplă atunci când există o lipsă de informații, necesitatea de a folosi și dezvolta mijloace tehnice speciale, la evaluarea indicatorilor de calitate estetică și altele asemenea. Metodele expertizate pot fi combinate cu alte metode sau utilizate ca tip independent în timpul evaluării calității documentației de reglementare pentru produse și produse, stabilirea nomenclaturii indicatorilor și a coeficienților de greutate ai acestora, la selectarea probelor de bază și a indicatorilor de calitate, în timpul determinării și măsurarea indicatorilor de calitate prin metoda organoleptică, în timp de evaluare a indicatorilor de calitate unici și complecși determinati prin metoda de măsurare sau de calcul.

Baza evaluării calității expertului este utilitatea socială obiectivă a produsului, care reflectă modernitatea acestuia. Opinia despre calitatea produselor exprimată de un expert calificat răspunde nevoilor publice și coincide cu opinia consumatorului de masă.

Cu toate acestea, atunci când alege un produs, consumatorul ia o poziție conservatoare și acceptă noile produse cu prudență, iar uneori nu le percepe deloc. Opinia expertului asupra calitatii produsului sintetizeaza totalitatea opiniilor consumatorilor de produs. Cercetările au arătat că evaluările înregistrate ale calității produselor de către experți coincid cu evaluările calității produsului care au fost primite în timpul unui sondaj de masă pentru consumatori. Determinarea acurateței cercetării de specialitate pentru conformitatea cu metodologia de examinare a arătat că aceasta este de 5-10%.

În ceea ce privește calitatea produselor și proprietățile lor de consum, metodele experte sunt utilizate în următoarele cazuri:

Determinarea nomenclaturii indicatorilor în timpul examinării;

Selectarea criteriilor de evaluare a unui produs sau produs și plasarea indicatorilor după principiul ierarhiei;

Determinarea coeficienților de ponderare a indicatorilor de calitate pentru a determina nivelul de calitate a unui produs sau produs;

Studiul indicatorilor prin metoda organoleptică folosind metode de exprimare cantitativă a acestora;

Evaluarea indicatorilor de calitate folosind metode de măsurare, înregistrare și calcul pentru a determina indicatori de calitate complecși ai diferitelor niveluri ale ierarhiei.

Cele mai frecvent utilizate metode experte sunt:

Expert lider (singuri);

comisioane;

combinate.

Metoda expertului de conducere face posibilă efectuarea rapidă a unei examinări, reducerea timpului pentru procedura de aprobare și discuție și prelucrarea statistică a datelor de către membrii grupului. Cu toate acestea, rezultatele unei examinări efectuate de un expert depind de nivelul de cunoștințe profesionale, de personalitate și de nivelul său de competență.

Metoda comisiei de experți presupune participarea unui grup de specialiști care efectuează analize și evaluare. Această metodă vă permite să obțineți rezultate fiabile, obiective, dar necesită o investiție semnificativă de timp în pregătirea și organizarea examenului. Numărul de experți care formează comisia depinde de acuratețea și fiabilitatea cerute a rezultatelor examinării. Comisia de experți este formată din două grupuri - de lucru și de experți. Grupul de lucru pregătește, organizează și efectuează evaluarea de specialitate a calității produsului și analiza ulterioară a rezultatelor acestuia. Grupul de lucru include un organizator, un consultant care are cunoștințe profesionale despre produs și lucrătorii tehnici îl evaluează. Un grup de experți poate consta din mai multe subgrupuri, fiecare fiind specializat în rezolvarea problemelor relevante - determinarea gamei de indicatori, evaluarea grupurilor individuale de indicatori etc.

Metoda combinată, care se bazează pe utilizarea secvențială a muncii unui expert de conducere și a unei comisii mici de experți, este utilizată în unele cazuri.

Nu există metode experte în Clasificarea generală. Cu toate acestea, clasificarea este utilizată în funcție de raportul dintre cantitatea de date obținute printr-o metodă expertă sau analitică, metoda de obținere a informațiilor de la un expert și alți factori.

În funcție de metoda de obținere a informațiilor de la un expert, se disting următoarele metode:

Colectiv;

Individual.

Cu metoda colectivă, lucrătorul tehnic efectuează un sondaj asupra întregului grup de experți simultan, cu metoda individuală - fiecare expert separat. Pentru a obține rezultate fiabile, este necesar să se stabilească clar și corect scopul și obiectivele pentru expert; cu metoda grupului, acest lucru este dificil, dar posibil cu un grup format constant. În metoda individuală, se folosesc interviuri, chestionare de interviu, chestionare și chestionare mixte. Sondajele pot fi efectuate personal sau prin corespondență. În metoda față în față, expertul își exprimă judecata persoanei care efectuează sondajul. În timpul unui sondaj de absent, nu există niciun contact între ei, iar expertul completează chestionarul sau cardul de sondaj.

În timpul interviului, lucrătorul tehnic face o notă sub forma unei conversații, care parcurge programul și o anumită listă de întrebări. În timpul unui interviu-chestionar, lista de întrebări este mai specifică, direcționată, iar succesiunea întrebărilor este strict definită. Chestionarul se completează în prezența unui expert.

Chestionarul diferă prin faptul că expertul completează chestionarul în mod independent, având o notă explicativă despre cum să-l completeze. Un sondaj mixt presupune o explicație preliminară din partea expertului cu privire la completarea chestionarului cu clarificarea sarcinii.

În ceea ce privește conținutul informațional, metodele de interviu au cel mai mare potențial, interviurile - chestionare, chestionare. Cea mai mare independență de judecată este caracteristică metodei anchetei.

Pentru a rezolva situații complexe de incertitudine sau în timpul formării unei previziuni științifice și tehnice, examinarea necesită participarea unui grup de specialiști erudici, cunoscători în multe domenii ale cunoașterii. Principalul avantaj al evaluării participative este posibilitatea unei analize cuprinzătoare a aspectelor cantitative și calitative ale problemelor. Există probleme care nu pot fi rezolvate fără participarea specialiștilor. Se presupune că opinia unui grup de experți este mai de încredere decât opinia unui individ, adică două grupuri de experți la fel de competenți au mai multe șanse să găsească o soluție obiectivă.

Combinarea operațiunilor de pregătire și desfășurare a anchetelor de experți, precum și a operațiunilor tehnice, a făcut posibilă crearea mai multor metode experte care au primit cea mai mare recunoaștere și distribuție. Acestea includ Delphi, PATTERN și metode combinate.

metoda Delphi (în unele surse - Delphi) - o metodă de chestionare a experților, bazată pe proceduri implementate secvențial care au ca scop formarea unei opinii de grup asupra procedurilor cu informații insuficiente.

Metoda Delphi a fost dezvoltată la compania americană de cercetare RAND Corporation de V. Helmer, N. Dolkey și T. Gordon. A fost folosit pentru prognoza militară științifică și tehnică a viitorului. Termenul Delphi provine de la numele unui oraș din Grecia unde oracolele locuiau la templul zeului Apollo.

Caracteristicile metodei Delphi sunt: ​​refuzul de a lucra împreună între experți; anonimatul evaluărilor; feedback reglabil; răspuns de grup.

Refuzul de la munca în comun a experților și anonimatul se realizează prin faptul că fiecare expert își exprimă opinia în chestionar, fără discuții de grup. Sunt utilizate și alte metode tehnice de interogare individuală, de exemplu, răspunsurile la întrebări sunt introduse de către experți într-un computer. Acest lucru vă permite să reduceți discrepanța dintre evaluările individuale și să obțineți un răspuns de grup care să reflecte corect opinia fiecărui expert.

Anonimul sondajului face posibilă reducerea influenței autoritare conformiste a experților individuali dominanti; feedback-ul reglementat reduce influența intereselor individuale și de grup. Introducerea feedback-ului mărește și criteriul de obiectivitate și de fiabilitate a evaluărilor.

Atunci când se utilizează această metodă în scopul evaluării de către experți a calității bunurilor de larg consum, următoarele dezavantaje se dovedesc a fi: complexitatea intervievării experților și a completării chestionarelor, evaluarea intensivă a forței de muncă datorită unui număr mare de indicatori de calitate (uneori până la 20-40) și completarea mai multor chestionare (3-10), înregistrări de greoaie a explicațiilor din lipsa contactului direct între organizator și experți.

Metoda este promițătoare pentru obținerea unei evaluări de experți de grup și a unei analize aprofundate a evenimentelor în situații de incertitudine.

Metoda PATTERN - o metodă de chestionare a experților, bazată pe construirea unei structuri ierarhice - un arbore de obiective - și decizia asupra acestor obiective după o discuție deschisă.

Denumirea metodei constă din primele litere ale cuvintelor englezești care înseamnă „Ajutând planificarea prin cuantificarea datelor tehnice”.

Metoda a fost dezvoltată de compania americană Honkuell pentru a evalua proiecte pentru noi sisteme de arme. Metoda are analogi: PROFILE, în Franța - metoda KPI, PROPLEN și altele asemenea.

Metoda PATTERN presupune mai multe etape.

Etapa I - enunțarea problemei principale care trebuie rezolvată și împărțirea acesteia într-un număr de probleme secundare de ordinul întâi, al doilea etc., care sunt apoi împărțite în sarcini mai restrânse. Împărțirea continuă până când se obțin elemente simple care pot fi evaluate de experți.

Ca rezultat al acestei împărțiri, se obține o structură ierarhică de probleme și sarcini primare, secundare interconectate, numită arbore de obiective.

Etapa II - determinarea, cu ajutorul experților, a coeficienților de pondere (sau semnificație) fiecărei sarcini în raport cu scopul principal, în timp ce experții iau o decizie în urma unei discuții deschise în grupul de experți.

O astfel de discuție deschisă, alături de un factor pozitiv - interacțiunea experților care se străduiesc să ia o decizie pozitivă - are și consecințe negative din cauza conformismului, adică denaturarea opiniei reale a experților din cauza sugestiei sau adaptării la opinia majorității. .

Etapa a III-a - utilizarea unui computer pentru a procesa datele primite și a le analiza. Avantajele metodei PATTERN sunt simplificarea procedurii expertizei. Dezavantaje: lipsa justificării numărului optim de membri ai grupului de experți, precum și a metodelor de selectare a specialiștilor competenți în grupul de experți; prelucrarea rezultatelor sondajului fără a lua în considerare diferențele ca experți individuali; absența barierelor în calea conformității experților; dezvoltarea insuficientă și incertitudinea principiilor pentru construirea unui arbore de obiective.

Deoarece metodele Delphi și PATTERN au deficiențe semnificative și nu îndeplinesc pe deplin obiectivele evaluării inter pares, Oe. L. Raikhman și G. G. Azgaldov au propus o metodă combinată în care au fost utilizate trăsăturile pozitive ale altor metode experte și au fost eliminate dezavantajele acestora.

Metoda combinata - o metodă bazată pe o combinație de evaluări individuale și colective ale experților.

Avantajele metodei combinate sunt flexibilitatea suficientă, care vă permite să eliminați erorile la intervievarea experților și să creșteți fiabilitatea rezultatelor examinării, o definire clară a strategiei prin clasificarea sarcinilor după gradul de importanță și operațiuni pentru implementarea lor și reproductibilitate ridicată. a rezultatelor.

Dezavantajele metodei includ funcționarea sa extinsă, care necesită o investiție semnificativă de timp și bani. Cu toate acestea, acest dezavantaj este compensat de fiabilitatea sporită și recuperarea rezultatelor.

Pentru a evalua calitatea mărfurilor, metoda combinată are un algoritm general de operații expert:

1. Etapa pregătitoare:

Formarea unui grup de lucru;

Formarea unui grup de experți;

Clasificarea produselor și a consumatorilor;

Construirea unei diagrame structurale a indicatorilor de calitate.

2. Etapa obținerii evaluărilor individuale ale experților:

Alegerea unei proceduri de atribuire a evaluărilor de către experți;

Alegerea unei metode de obținere a informațiilor de la un expert și pregătirea documentelor necesare anchetei;

Sondaj de experți.

3. Etapa obținerii expertizelor colective:

Generalizări ale evaluărilor individuale ale experților;

Determinarea coerenței evaluărilor individuale ale experților;

Determinarea obiectivităţii expertizelor colective.

Pentru fiecare etapă există sarcini corespunzătoare. În timpul etapei pregătitoare, sunt rezolvate sarcini precum determinarea funcțiilor și structurii grupului de lucru, componența sa cantitativă și responsabilitățile membrilor individuali. Sunt determinate și dezvoltate principiile pentru formarea unui grup de experți: privind numărul de experți, pregătirea profesională a acestora etc.

În a doua etapă se determină tehnica de intervievare a experților, se evaluează prezența contactului între experți, modalitatea de transmitere a informațiilor și forma evaluărilor experților. Experții pot determina evaluări pe cont propriu sau după ce au discutat cu alți experți sau au consultat experți anonimi. Evaluările sunt justificate, cuantificate și dihotomice, unde răspunsurile sunt date sub formă de „da”, „nu” sau 0-1.

Utilizarea rațională a informațiilor primite de la experți este posibilă dacă acestea sunt convertite într-o formă convenabilă pentru analiză, pregătire și luare a deciziilor. Posibilitățile de conversie a informațiilor în forme adecvate depind de caracteristicile specifice ale obiectului, de caracterul complet al datelor despre acesta, de fiabilitate, de nivelul de luare a deciziilor, precum și de criteriul adoptat, în funcție de problema studiată.

Un element comun multor metode experte este factorul de ponderare.

Factorul de pondere este o caracteristică cantitativă a gradului de semnificație a unui anumit indicator pentru evaluarea calității.

Determinarea coeficienților de greutate pentru indicatorii de calitate se realizează prin metoda expertului. Coeficienții de greutate sunt proiectați pentru a crește fiabilitatea evaluării de către experți a calității mărfurilor.

Fiecare indicator ocupă un anumit loc în nomenclatorul indicatorilor de calitate din punct de vedere al importanței. Experții clasifică indicatorii după gradul de importanță pe baza cunoștințelor și aptitudinilor profesionale. În plus, orice expert calificat urmărește să evalueze indicatorii de calitate ai produsului examinat din perspectiva consumatorului de masă.

Dacă un expert are capacitatea de a compara și de a evalua posibile opțiuni de acțiune, oferindu-le fiecăruia un anumit număr, atunci el are un anumit sistem sau o scară de preferințe. Utilizarea corectă a scalelor este esențială pentru a asigura acuratețea evaluărilor experților. Se disting următoarele tipuri de scale: nominal, ordinal, interval, rapoarte. Dar scara de ordine are cele mai mari avantaje față de altele datorită simplității relative a evaluării de către experți a indicatorilor de calitate în funcție de gradul de semnificație. Caracteristicile scalelor sunt prezentate în tabel. 1.1.

Scala nominală de nume folosit pentru a distinge un obiect de altul. Obiectele trebuie numerotate, dar numerele indică obiectul, nu caracteristica cantitativă a acestuia. Acesta este un tip mai simplu de măsurare în care numerele sau simbolurile sunt folosite doar pentru a clasifica obiecte. Cântarul poate fi folosit pentru codificarea digitală a proprietăților individuale în chestionare și pentru determinarea coeficienților de greutate.

Scară ordinală (ranguri) - o metodă de evaluare în care parametrii, indicatorii sau obiectele care sunt evaluate sunt aranjați în ordinea creșterii sau scăderii indicatorului parametrului (indicatorului) sau proprietăților obiectului. Un exemplu clasic de evaluare folosind o scară ordinală este evaluarea durității mineralelor folosind scara Pug (scala de duritate relativă constă din 10 standarde de duritate, cu duritatea talcului luată ca 1 și diamant - 10). Această metodă poate fi folosită pentru a determina intensitatea culorii făinii, aroma sucurilor de fructe, buchetul de vinuri și consistența brânzeturilor. Scala ordinală are avantaje atunci când este utilizată pentru determinarea coeficienților de greutate, deoarece simplifică procesul de ordonare a indicatorilor de calitate în funcție de importanță pentru consumatori.

Masa 1.1. Tipuri de cântare și caracteristicile acestora

Tipul de scară	Definiţia scale	Relații specificate pe scară
Nominal	Un tip simplu de măsurare în care numerele sau simbolurile sunt folosite doar pentru a clasifica obiecte.	Echivalență (=)
Ordinal (ranguri)	Obiectele unei clase sunt într-o relație corespunzătoare cu 3 obiecte din altă clasă (mai mult decât, mai multe avantaje, mai puternice etc.). Dacă [A]>[B] pentru unele obiecte din clasele A și B, atunci există o scară parțial ordonată.	Echivalența (=). Mai mare decât (>).
Interval	O scară ordinală, care este împărțită în distanțe cunoscute între oricare două numere de pe scară, punctul zero al scalei și unitatea de măsură sunt alese în mod arbitrar.	Echivalență (=) Mai mare decât (>). Raportul dintre oricare două intervale este cunoscut.
Relații	Scala de interval folosind punctul zero adevărat, raportul dintre oricare două puncte este independent de unitatea de măsură.	Echivalența (=). Mai mare decât (>). Raportul dintre oricare două intervale este definit. Relația dintre oricare două puncte este definită.

La determinarea coeficienților de pondere ai indicatorilor de calitate, experții evaluează mai întâi pe cei mai importanți dintre acești indicatori (în opinia lor) și îi atribuie un anumit număr, de exemplu 1. Toți indicatorii suplimentari sunt evaluați în ordine descrescătoare sau crescătoare după gradul de importanță.

După aceasta, se face media datelor tuturor experților pentru fiecare indicator.

În practica de evaluare a calității mărfurilor, este adesea folosită o metodă de determinare a coeficienților de greutate, numită „metoda cantității fixe”. Esența sa constă în faptul că experții atribuie un coeficient de pondere pentru indicatorii incluși în indicatorul de nivel superior, iar suma acestor coeficienți trebuie să fie egală cu un număr prestabilit.

„Metoda sumei fixe” este recomandabil să fie utilizată numai cu un număr mic de indicatori.

Experiența practică arată că atunci când se evaluează în mod expert calitatea mărfurilor, este recomandabil să se folosească următoarea procedură pentru determinarea coeficienților de greutate.

1. Clasamentul preliminar de către experți a indicatorilor unui grup omogen. Locul 1 este atribuit celui mai important indicator, 2 următor cel mai important și așa mai departe. Dacă indicatorii sunt egali ca importanță, atunci li se atribuie aceleași ranguri. Numărul de indicatori dintr-un grup omogen ar trebui să fie de 4 sau mai mult. Dacă numărul este mai mic, clasarea nu este efectuată.

2. Determinarea de către experți a coeficienților de pondere a indicatorului. Un indicator de rangul 1 i se atribuie un coeficient de pondere de 10. Coeficientul de pondere al următorului indicator cel mai important este determinat ca proporție a importanței primului indicator. La determinarea celui de-al treilea și următorii indicatori se ia în considerare importanța acestora în comparație cu cei anteriori. Ca urmare a acestor acțiuni secvențiale, expertul determină coeficienții de pondere ai indicatorilor de calitate individuali și apoi complecși.

3. Familiarizarea experților cu valorile coeficienților de greutate (justificări ale acestora) atribuite de alți experți.

Justificarea coeficienților de greutate este o operație foarte intensivă în muncă, de aceea este utilizată cu un număr limitat de indicatori (aproximativ 10-15). În caz contrar, experții sunt rugați să furnizeze justificarea doar pentru unii indicatori la discreția lor.

4. Medierea valorilor coeficienților de greutate determinate de toți experții. Efectuat de lucrători tehnici prin calcularea mediei aritmetice sau a mediei ponderate.În acest din urmă caz, se ia în considerare o evaluare cuprinzătoare a calității expertului.

Dezavantajele scalei sunt inexactitatea estimărilor de clasare din cauza lipsei ecuațiilor de interval, imposibilitatea calculării chiar și a mediei aritmetice.

Scala intervalului. Aceasta este o metodă de evaluare în care caracteristica esențială este diferența dintre valorile parametrilor evaluați, care poate fi exprimată prin numărul de unități prevăzute pe această scală. Folosind o astfel de scară, obiectele sunt clasate, iar în anumite unități se determină cât de mult este un obiect mai mare decât altul. Un exemplu de scară de interval este scara Celsius, care este împărțită în 100 de intervale egale și este utilizată pentru a caracteriza proprietățile produsului care sunt asociate cu condițiile de temperatură, de exemplu, rezistența la îngheț a pielii sintetice, temperatura minimă a congelatorului în frigider.

Scala de relații vă permite să atingeți cel mai înalt nivel de măsurare. Aceasta este o metodă de evaluare care utilizează o unitate de măsură, este utilizată pentru majoritatea parametrilor care reprezintă mărimi fizice: dimensiune, greutate, densitate, forță, tensiune, frecvență și altele asemenea. Rezultatele măsurătorilor la scară au proprietățile numerelor care pot fi supuse prelucrării statistice. Un exemplu de astfel de scară este scala de temperatură Kelvin, care începe de la zero absolut.

La compararea scalelor de interval și raport, s-a stabilit că acesta din urmă produce rezultate mai precise. În plus, scorurile pe scară de intervale pot fi utilizate pentru a calcula medii ponderate, ale căror calcule sunt tipice pentru sondajele experimentale. Scala raportului poate sta la baza metodei expertului; scala de comandă poate fi folosită cu o justificare suficientă.

În practica evaluării experților se folosesc două tipuri principale de scale: dimensionale și adimensionale. Datele de la scale adimensionale sunt exprimate în fracțiuni de unitate, procent și puncte.

Metodele matematice și statistice de prelucrare a evaluărilor experților sunt metode menite să crească fiabilitatea rezultatelor evaluării calității mărfurilor de către experți.

Acestea sunt împărțite în patru subgrupe: clasare, evaluare directă, preferințe secvențiale și comparații perechi.

Variind - o metodă bazată pe aranjarea obiectelor de examinare în ordine crescătoare sau descrescătoare.

Conceput pentru a rezolva multe probleme practice atunci când obiectele care determină rezultatele finale nu pot fi măsurate direct. În plus, obiectele individuale caracterizate prin naturi diferite sunt incompatibile, deoarece nu au o măsură comună de comparație. Baza clasamentului este nevoia de a organiza orice obiect în timp și spațiu, precum și în conformitate cu calitatea care se măsoară fără a face măsurători precise. Și în sfârșit, într-o situație în care calitatea care este măsurată nu poate fi măsurată, în principiu, din motive practice și teoretice.

Procedura de clasare constă în așezarea de către un expert a obiectelor în cea mai rațională ordine și atribuirea lor de un anumit rang sub forma unui număr natural. În acest caz, cel mai important obiect primește rangul 1, iar rangul n - cel mai puțin important. Rezultatul este o scară de ordine în care numărul de ranguri este egal cu numărul de obiecte.Dacă două obiecte au aceleași ranguri, atunci li se atribuie așa-numitele ranguri standardizate, care sunt calculate ca media sumei locurilor. a obiectelor cu aceleaşi ranguri.

De exemplu, șase obiecte li se atribuie următoarele ranguri:

Obiectele 2 și 5 au împărțit locurile 2 și 3. rangul lor standardizat va fi egal cu

(2 + 3) /2 = 2,5.

Obiectele 3, 4 și 6 au împărțit locurile 4, 5 și 6, iar rangul lor standardizat este 5:

(4 4-5 + b)/3 = 5. Rezultatul este următorul clasament:

Metoda de clasare este rar folosită în forma sa pură. Cel mai adesea este combinată cu metoda de evaluare directă sau cu modificările acesteia (clasare după sumă de evaluări, metodă combinată etc.).

Metoda de evaluare directă este că intervalul de modificare a oricărei variabile cantitative este împărțit în mai multe intervale, fiecăruia fiindu-i atribuit un anumit scor, de exemplu de la 0 la 10. Scala de evaluare poate fi pozitivă și negativă, de exemplu, de la +3 la -3 .Expertul trebuie să includă fiecare obiect într-un anumit interval în funcție de valoarea acestuia. Numărul de intervale în care este împărțit întreaga gamă de modificări de calitate poate fi diferit pentru diferiți experți. Experților individuali li se permite să evalueze factori calitativ diferiți cu același număr.

În unele cazuri, este mai convenabil să selectați factorul cel mai preferat prin evaluarea și apoi clasarea.

Estimările de rang total pot fi normalizate, acest lucru ne permite să stabilim o legătură mai strânsă între evaluările pe care experții le-au oferit obiectelor individuale. În acest scop, evaluările pentru toate obiectele sunt însumate și ulterior fiecare dintre ele este împărțit la suma rezultată. Scorurile normalizate calculate în acest fel pot fi clasate din nou.

Atunci când efectuează o examinare de către mai mulți experți, aceștia se străduiesc să obțină o evaluare medie pentru fiecare obiect. În acest scop, evaluările normalizate ale fiecărui obiect sunt însumate, suma rezultată este împărțită la numărul de experți. A doua modalitate de a determina relația dintre evaluările factorilor este că celui mai important factor i se acordă un scor (se stabilește ponderea) peste un anumit număr de 1 sau 10, următorii factori sunt evaluați ca o pondere a factorului cel mai important. Avantajul metodei este că simplifică procesul de selectare a evaluărilor, deoarece nu trebuie să comparați întreaga serie de fiecare dată, ci doar să luați în considerare valoarea primei și a celei mai importante evaluări anterioare. Scorurile sunt mediate prin calcularea mediei aritmetice.

Metoda avantajului secvenţial - bazat pe compararea unui obiect individual cu suma obiectelor ulterioare pentru a stabili importanța acestuia. utilizate în măsurarea nivelului de calitate și evaluarea activităților organizațiilor științifice. Metoda are un astfel de avantaj principal în comparație cu alte metode, ceea ce face posibilă compararea și măsurarea factorilor diferiți calitativ.

Metoda a fost dezvoltată de V. Churchman și G. Ackoff și este destinată să facă comparații supuse anumitor toleranțe.

Ordinea în care sunt prezentate rezultatele sau modul în care sunt grupate nu afectează beneficiile.

Procedura pentru comparații secvențiale este următoarea. Expertului i se prezintă o serie de obiecte (indicatori, factori, rezultate) care trebuie evaluate în funcție de importanța (semnificația) lor relativă și face un clasament. Cel mai important obiect i se atribuie un punctaj de 1, obiectelor rămase li se acordă scoruri sub 1 la 0 în ordinea importanței lor relative. Expertul determină apoi dacă un element cu nota 1 este mai important decât suma celor din urmă factori. Dacă importanța unui obiect este mare, atunci acesta crește scorul astfel încât acesta să fie mai mare decât suma tuturor celorlalte.

Dacă valoarea unui obiect este mai mică decât suma tuturor celorlalte, acesta ajustează estimările.

Astfel, procedura utilizată este testarea sistematică a estimărilor comparându-le succesiv.

Este indicat să folosiți metoda preferințelor secvențiale dacă numărul de obiecte comparate nu depășește 7. Cu un număr mai mare de obiecte, acestea trebuie împărțite în subgrupe care includ 6 obiecte. În cazurile în care acest lucru nu este posibil, ar trebui utilizată metoda de comparare pereche.

Metoda de comparare pereche - pe baza compararii obiectelor de examinare in perechi pentru a stabili cele mai importante din fiecare pereche.

Este folosit pentru a identifica avantaje dintr-un număr semnificativ de factori, probleme și indicatori. Experții pot face pur și simplu comparații afirmând superioritatea unui factor față de altul. Este posibil să utilizați o scală specială de preferințe, în care fiecare grad de avantaj are propriul său rating specific.

Metoda comparațiilor perechi poate fi folosită și pentru a stabili rangurile totale de factori.

Pentru a facilita procedura, sunt compilate matrice de ecuații pereche în care toate obiectele (factorii) sunt scrise de două ori în aceeași ordine: în rândul de sus și coloana din stânga. Fiecare expert trebuie să marcheze intersecția rândului și coloanei pentru cei doi factori comparați. În funcție de care factor este cel mai important, acest scor va fi egal cu 1 sau, respectiv, 0. În diagonala principală a unei astfel de matrice sunt plasate liniuțe sau zerouri (Tabelul 1.2).

Masa 1.2.

Fiecare pereche de factori poate fi comparată o dată sau de două ori. Există diverse opțiuni pentru compararea parțială în perechi: alegerea unui obiect preferat din perechile pre-grupate; compararea parțială în perechi a unui grup de obiecte cu toate celelalte, în timp ce factorii rămași sunt comparați cu alții; stabilirea rangurilor totale de factori.

Metoda de comparare pereche este uneori combinată cu o clasare preliminară a obiectelor, iar compararea pereche este folosită pentru a clarifica avantajele obiectelor individuale. În acest caz, se construiește o matrice suplimentară, care indică proporția cazurilor în care un factor se dovedește a fi mai semnificativ decât altul, în numărul total de estimări primite.

Metode de evaluare de către experți a indicatorilor de calitate a produselor- acestea sunt metode de determinare a valorilor reale ale indicatorilor de calitate unici și complecși.

Conceput pentru a determina valorile indicatorului de calitate prin calcul sau euristic în cazurile în care utilizarea metodelor de măsurare este imposibilă sau neeconomică din cauza costurilor excesive ale utilizării acestora sau a timpilor lungi de testare. De exemplu, la determinarea gustului și mirosului produselor alimentare se folosesc numai metode organoleptice. Metodele de măsurare nu oferă estimări precise și fiabile, în ciuda costurilor crescute.

Pentru evaluarea diferențială și cuprinzătoare a probelor care diferă semnificativ în calitate, se recomandă determinarea valorii unui singur indicator P după cum urmează:

unde P;5 este baza (valoarea de referință).

O altă metodă, mai precisă, se bazează pe studiul indicatorilor pentru a determina tipurile de dependență și, adică, pentru a dezvolta formule pentru calcularea estimărilor indicatorilor:

Evaluarea indicatorilor unici de calitate începe cu determinarea intervalelor admisibile ale modificării lor (P; - P;) P; - cea mai bună valoare a indicatorului, depășirea căreia este impracticabilă sau imposibilă. Principiile de atribuire a valorii maxime admisibile a unui indicator depind de scopul evaluării calității și este necesar ca acest principiu să fie același pentru toți indicatorii.

Obțineți o fiabilitate sporită a evaluărilor experților prin împărțirea operațiunilor complexe în operațiuni simple, care constituie o procedură în mai multe etape pentru evaluarea valorilor acceptabile ale unui indicator. Trecerea la fiecare nivel următor se realizează după luarea deciziilor convenite la nivelul anterior.

Procedura expertă pentru determinarea valorilor acceptabile ale indicatorilor de calitate constă dintr-o serie de operațiuni:

emiterea de chestionare și note explicative către experți, care enumeră indicatorii de calitate și descriu principiile de selectare a valorilor acceptabile ale indicatorilor;

experți completând chestionare și indicând modele de produse specifice ale căror valori le consideră a fi maxime admisibile;

familiarizarea fiecărui expert cu evaluările indicate de alți experți și discutarea acestora;

desfășurarea celei de-a doua (uneori a treia și a patra) rundă de întrebări;

Media rezultatelor evaluării.

Dacă există o diferență semnificativă de opinie, se organizează un tur suplimentar de vot. Valoarea indicatorului este considerată maximă dacă pentru aceasta sunt exprimate cel puțin 70% din voturi. Dacă această condiție nu este îndeplinită, media a 50% dintre cele mai mari valori rimax este luată ca valoare maximă admisă, iar media a 50% dintre cele mai mari valori este luată ca valoare minimă admisă. sunt utilizate de experți la determinarea evaluărilor indicatorilor de calitate K.

Să determine de către experți tipul de dependențe (i) între valorile indicatorilor G; iar estimările lor pentru K folosesc adesea „metoda principală a punctelor”. Necesitatea utilizării acestuia se datorează faptului că împărțirea procedurii de evaluare în mai multe etape simplifică munca expertului și îi permite să dea estimări asupra unor puncte caracteristice, pe baza cărora este posibil să construiască un model al valorii reale.

„Metoda punctului principal” În funcție de numărul lor, are mai multe soiuri.

„Metoda celor trei puncte principale” - bazată pe separarea valorilor indicatorilor G; pentru valori maxime, minime, medii și determinarea valorilor estimărilor P; in aceste puncte. Intervalul de scară dintre punctele maxime și minime este prestabilit (scale 0-1 sau 0-10). Sarcina expertului include, de asemenea, determinarea tendinței de dependență în intervalul dintre punctele principale și construirea unui grafic. După aceasta, de la dependența grafică puteți trece la formula analitică pentru calcularea estimărilor indicatorului de calitate Ki. „Metoda celor trei puncte principale” vă permite să dezvoltați doar un model de evaluare aproximativă.

„Metoda celor șapte puncte principale” este o metodă de evaluare pe o scară de șapte puncte pentru evaluarea indicatorilor, ale căror valori sunt determinate experimental sau prin calcul, precum și printr-o metodă organoleptică.

Scala de șapte puncte este uniformă, adică la trecerea de la o clasă de calitate la alta, scorul se modifică cu un punct. Aceste scale sunt utilizate pe scară largă, în special în evaluarea organoleptică. Pentru a obține rezultate mai precise, ar trebui să treceți la determinarea tipului de relație dintre note și scoruri.

Pentru a facilita munca expertului, cinci grafice sunt furnizate în nota explicativă a chestionarului. Expertul selectează curba (sau combinația de curbe) care reflectă cel mai bine, în opinia sa, natura dependenței Și Apoi fiecărei clase de calitate i se atribuie un scor în conformitate cu natura dependenței și cu valorile indicatorilor de calitate. În acest caz, este recomandabil să folosiți numere în intervalul 0-10, multipli de 0,5, clasa „de cea mai înaltă calitate” primind un scor de 10.

Astfel, graficul construit de expert caracterizează relația dintre valorile absolute ale indicatorilor Pi și estimările acestora de K;, iar pentru indicatorii evaluați prin metode organoleptice, dintre clasele de calitate și estimările acestora.

În concluzie, rezultatele obținute sunt discutate, prelucrate și analizate. Pentru indicatorii care sunt determinați prin metode de măsurare și calcul, este recomandabil să oferiți o descriere analitică a curbelor, care vă permite să calculați o estimare pentru orice valoare a indicatorilor.

Utilizarea „metodei punctului principal” face posibilă gruparea și clasificarea indicatorilor după tipul de dependență.

Determinarea indicatorilor de calitate complecși se realizează prin două tipuri de metode:

metode de evaluare cuprinzătoare a calității mostrelor de produse;

metode de construire a modelelor de indicatori de calitate complecşi.

Metodele de evaluare cuprinzătoare a calității au două varietăți - metoda expresă și metodele de trecere prin niveluri fără pregătire și cu pregătire.

Metode exprese pentru evaluarea cuprinzătoare a calității mostrelor de produse se bazează pe determinarea unui indicator de calitate complex prin analiza valorilor indicatorilor individuali individuali și a aspectului fără evaluare preliminară și luând în considerare factorii de ponderare.

La utilizarea acestor metode, este necesar să se țină cont de faptul că numărul maxim de indicatori care trebuie evaluați, chiar și pentru un expert înalt calificat, este de 7-9 indicatori situați la același nivel de ierarhie, care formează un grup destul de omogen. În plus, experții trebuie să ia în considerare importanța indicatorilor individuali care utilizează coeficienți de ponderare, relația dintre aceștia și, de asemenea, să ia în considerare calitatea produsului ca sistem.

Metodă de deplasare prin niveluri fără pregătire este un ansamblu de operațiuni care se desfășoară secvenţial, cu o creștere treptată a nivelului. În acest caz, analiza începe de la nivelul inferior al arborelui indicator. Luând în considerare valorile indicatorilor de nivel inferior, expertul oferă o evaluare a indicatorilor de nivel superior. Aceste operațiuni se repetă cu niveluri crescătoare până la atingerea nivelului superior - o evaluare cuprinzătoare (generalizată) a calității.

Metoda de trecere prin niveluri cu pregătire se bazează pe determinarea prealabilă de către experți a coeficienților de ponderare a indicatorilor de calitate și evaluările acestora. Atunci când atribuie evaluări complexe, expertul cunoaște valorile medii ale coeficienților de greutate și estimările indicatorilor individuali. Procedura pentru determinarea indicatorilor complecși este similară cu procedura pentru metoda de deplasare prin niveluri fără pregătire.

Formalizarea procesului de evaluare inter pares constă în găsirea relației dintre valorile indicatorilor de calitate G; (sau estimările acestora K) și un indicator de calitate de un nivel superior, adică în determinarea tipului de funcție de decizie pe care o folosesc experții atunci când atribuie indicatori complexi. În același timp, funcția decisivă, ca orice model, simplifică obiectul de studiu, deoarece nu sunt luați în considerare toți indicatorii și conexiunile dintre ei.

Datele inițiale pentru determinarea tipului de funcție pot fi rezultatele evaluării calității diferitelor eșantioane folosind metode exprese sau metode de trecere prin niveluri. Apoi, evaluările atribuite de experți sunt rezumate într-o matrice comună, fiecare rând fiind un set de evaluări ale indicatorilor individuali ai eșantionului și evaluări complexe ale experților. Pe baza acesteia, pot fi dezvoltați algoritmi de mașină și pot fi compilate programe pentru a găsi funcții decisive folosind un computer.

Calitatea înaltă a muncii experților care participă la sondaj are o influență decisivă asupra obținerii de rezultate exacte și de încredere.

Calitatea experților este determinată de următoarele grupe de proprietăți: competență, interes pentru rezultatele examinării, eficiență și obiectivitate (imparțialitate).

Competenta expert ar trebui să se aplice obiectului examinării (competența profesională) și metodologiei de evaluare (competența calimetrică).

Competențe profesionale include cunoașterea etapelor tehnologice ale producției de produs, valoarea indicatorilor de calitate ai diferitelor sale tipuri și perspectivele de dezvoltare a produsului. cerinţele consumatorilor, condiţiile şi natura consumului.

Competență calimetrică oferă expertului o înțelegere clară a abordării de evaluare a calității produsului ca măsură a modului în care acesta satisface nevoile consumatorilor; cunoașterea metodelor de evaluare a calității, în special a metodelor experte; capacitatea de a utiliza diverse scale qualimetrice cu un număr mare de gradații.

Interes rezultatele examinării ale expertului depind de mulți factori: gradul de încărcare a lucrării principale, cu care examinarea este de obicei combinată; posibilități de utilizare a rezultatelor obținute; scopuri de examinare; natura concluziilor care pot fi trase pe baza rezultatelor examinării; caracteristicile individuale ale expertului.

Eficienţă expertul include calmul, mobilitatea și elasticitatea atenției, permițându-vă să treceți rapid de la evaluarea unui indicator de calitate la evaluarea altuia; contact, adică capacitatea de a lucra cu oamenii atunci când rezolvă probleme într-o situație conflictuală; motivarea aprecierilor efectuate.

Obiectivitate (imparțialitate)-- capacitatea de a lua în considerare doar acele informații care determină satisfacerea nevoilor unui produs dat. Prejudecățile expertului constă în supraestimarea sau subestimarea obiectului examinării din motive care nu țin de calitate, de exemplu, din cauza incapacității de a rezista opiniei majorității celorlalți experți din cauza incertitudinii cu privire la propriul drept (manifestarea conformismului).

Metodele de evaluare a calității experților sunt împărțite în cinci grupuri:

· euristic (subiectiv);

· statistice;

· Test;

· film documentar;

· combinate .

Fiecare dintre aceste grupuri este împărțită în tipuri (estime private) și metode de obținere a acestora.

Evaluări euristice (subiective). – evaluări atribuite de o persoană și bazate pe presupunerea reflectării corecte a calității expertului prin evaluarea altora sau autoevaluare.

Se disting următoarele tipuri de evaluări euristice:

· Stimă de sine;

· evaluare reciprocă;

· evaluarea raționamentului și familiarității cu obiectul examinării;

· evaluarea expertilor de catre grupul de lucru.

Stimă de sine - tipul și metoda de evaluare euristică a competenței de către însuși expert. S-a stabilit că, cu cât valoarea medie a stimei de sine a membrilor grupului este mai mare, cu atât este mai mare fiabilitatea evaluării medii a experților. În același timp, trebuie avut în vedere faptul că stima de sine se caracterizează printr-o subiectivitate semnificativă, iar acest lucru implică anumite dezavantaje. Stima de sine depinde de caracteristicile psihologice ale experților (prezența stimei de sine ridicate sau scăzute, uneori nerezonabil), gradul de satisfacție de sine și înțelegerea scalei de evaluare. Aceasta explică discrepanța dintre rezultatele autoevaluării și evaluarea reciprocă.

Pentru a reduce subiectivitatea, autoevaluarea se realizează într-o manieră diferențiată, ceea ce crește acuratețea rezultatelor. În acest scop, indicatorul stimei de sine este definit în funcție de doi coeficienți: familiaritatea și argumentația. Pentru evaluarea de către expert a mărfurilor, se recomandă să se determine autoevaluarea expertului ținând cont de cunoașterea și familiaritatea acestuia cu produsele evaluate prin completarea „Chestionar de autoevaluare”. Expertul constată regularitatea citirii surselor de informații enumerate în chestionar și gradul de familiaritate cu produsele evaluate.

Stimă de sine ( K ca m j) se calculează folosind formula

K ca m j= ΣM i K ij ,

unde M i– ponderea indicatorilor de conștientizare și familiaritate; K ij– o evaluare în funcție de gradul de conștientizare și familiaritate.

Din moment ce Σ M i= 1,00 și 0 ≤ K ij≤ 10, apoi 0 ≤ K ca m j ≤ 10.

Ținând cont de specificul produselor evaluate, ponderea indicatorilor individuali (M i) poate fi ajustat de un grup de experți.

Evaluarea reciprocă- tipul și metoda evaluării euristice, definite ca media evaluărilor atribuite de alți experți. Această evaluare are scopul de a reduce subiectivitatea evaluării competenței fiecărui expert. S-a stabilit că există o legătură strânsă între competența expertului și evaluarea medie a acestuia primită de la colegi. Esența acestui tip de evaluare este că fiecare expert oferă o evaluare tuturor celorlalți experți, iar apoi se calculează rezultatul mediu.

În funcție de numărul de experți din grup, se aplică două proceduri diferite:

· când numărul experților dintr-un grup este mai mic de 15 persoane, fiecare expert îi evaluează pe toți ceilalți;

· dacă numărul de experți este de 15 persoane sau mai mult, se completează un chestionar special, în care experții sunt împărțiți în trei grupuri în funcție de calificarea lor – calificări peste medie, medie și sub medie, precum și pe ranguri în cadrul subgrupelor (6 fiecare – 8 persoane fiecare). Apoi experții fiecărui subgrup sunt clasați. Locul 1 – cel mai calificat expert, 2 – următorul în calificare, etc. Fiecărui expert evaluat i se atribuie un scor numeric de la 10 puncte (cel mai calificat) la 0 (complet necalificat) cu o precizie de 0,5 puncte.

Dezavantajele evaluării reciproce sunt următoarele:

· experții s-ar putea să nu se cunoască bine între ei;

· rezultatele evaluării pot fi influențate de gusturile sau antipatiile reciproce;

· experții, de regulă, tind să evite evaluările ultra-înalte și ultra-scăzute;

· ambiguitate în percepția conceptului de „calitate expert”.

· aplicați evaluarea inter pares numai în acele grupuri în care majoritatea experților se cunosc bine. Dacă unii dintre experții evaluați nu sunt familiarizați, se recomandă să puneți o liniuță în coloana corespunzătoare;

· Efectuează sondaje anonime;

· explicați că rezultatele chestionarului vor fi folosite doar pentru ajustarea evaluărilor produselor;

· familiarizarea experților cu diagrama structurală a proprietăților și evaluările parțiale ale acestora.

Evaluarea raționamentului și familiarității cu obiectul examinării - tipul și metoda de evaluare euristică a gradului de specializare a unui expert și factorii care influențează competența acestuia. Evaluarea euristică a competenței, bazată pe gradul de specializare și familiaritate, este extrem de eficientă și de încredere, cu condiția ca metodele de cuantificare a fiecăruia dintre acești factori sub formă de chestionare de evaluare să fie elaborate cu atenție. În acest caz, sunt evaluați doar acei factori care nu pot fi caracterizați decât subiectiv sub formă de autoevaluare; expertul evaluează cantitativ gradul de specializare a acestuia într-un anumit tip de produs și forma de familiarizare cu acesta. Apoi, folosind un chestionar special (similar unui chestionar de autoevaluare), determină coeficientul de argumentare al cunoștințelor sale și dă o evaluare a gradului de familiaritate cu problema studiată. Coeficientul de competență se calculează ca medie aritmetică a coeficienților de argumentare și familiaritate.

Evaluarea experților de către grupul de lucru – un tip și o metodă de evaluare euristică menite să caracterizeze cantitativ interesul unui expert pentru evaluarea expertului și atenția sa în timpul anchetei. Evaluarea este făcută de analiști specialiști care efectuează un sondaj de experți. În același timp, ei evaluează atitudinea experților față de examinarea care se desfășoară și activitatea lor în discutarea evaluărilor. Este recomandabil să se evalueze grupul de lucru pe o scară de 10 puncte.

Estimări statistice – aprecieri obținute ca urmare a prelucrării judecăților experților cu privire la obiectul evaluării.

Aceste estimări sunt folosite pentru a reduce, pe cât posibil, erorile rezultate din evaluările experților. Necesitatea lor se datorează faptului că, spre deosebire de măsurătorile care utilizează dispozitive tehnice bazate pe compararea cantităților necunoscute cu cele cunoscute, prin metode experte nu există adesea o cantitate cunoscută (sau eșantion sau standard al unui produs), a cărui valoare este luată. ca real, adică maximul apropiat de cel adevărat.

Acuratețea rezultatului poate fi influențată de organizarea și metodologia evaluării; calitatea construcției unei diagrame structurale a indicatorilor de calitate, numărul de indicatori de calitate, metodele de determinare a evaluărilor, natura relației dintre experți etc.

Astfel, acuratețea evaluării experților este influențată de mulți factori obiectivi (în funcție de metodologia de evaluare) și subiectivi (în funcție de expert), rezultând erori de evaluare care au componente sistematice și aleatorii.

eroare sistematica - o parte a erorii repetată în mod constant. Motivul principal pentru apariția acesteia este informația insuficientă sau incorectă în rândul experților. Ea poate fi redusă prin familiarizarea expertului cu informațiile necesare înainte de începerea examinării sau prin desfășurarea de briefing-uri, precum și de discuții, în timpul cărora expertul primește informații suplimentare de la analiști specialiști sau alți experți. În plus, deoarece eroarea sistematică a expertului este aleatorie pentru un grup de experți, media evaluărilor grupului face posibilă creșterea acurateței evaluării calității. Eroarea sistematică poate fi evaluată prin gradul de abatere de la opinia medie a grupului de experți.

Eroare aleatorie depinde de caracteristicile psihologice și fiziologice ale expertului (calmarea, încrederea în corectitudine, atenție, alte calități personale) și scade cu repetarea repetată a aprecierilor. Valoarea acestuia poate fi determinată de reproductibilitatea rezultatelor.

Se disting următoarele tipuri de estimări statistice:

· evaluare bazată pe abaterea de la opinia medie a grupului de experți;

· evaluarea obiectivității expertului.

Scor bazat pe abaterea de la opinia medie a grupului de experți– o evaluare bazată pe premisa că valoarea reală a evaluării grupului de experți este evaluarea medie a grupului de experți. Prin urmare, cu cât abaterea unei evaluări individuale de expertiză este mai mică de la cea de grup, cu atât calitatea expertului care a efectuat această evaluare este recunoscută mai mare.

Evaluările individuale ale experților pot fi de două tipuri:

· clasarea de către expert a valorilor estimate (în ordine descrescătoare sau crescătoare);

· determinarea de către un expert a valorilor numerice ale cantităților evaluate (de exemplu, la determinarea coeficienților de ponderare a indicatorilor de calitate, experții atribuie anumite valori numerice fiecărui coeficient).

Evaluarea abaterii de la opinia medie a grupului de experți poate fi exprimată printr-un set de abateri absolute (D і) , calculată ca diferență între scorul mediu al grupului ( X s.d) și evaluarea individuală ( X i):

D i = X c .g – X i. .

Cu cât este mai mare D i , cu atât este mai mare abaterea opiniei individuale a expertului de la opinia medie a grupului de experți.

Evaluarea obiectivității (imparțialității) expertului – evaluarea conformității expertului cu principiul obiectivității, a capacității sale de a evalua în mod imparțial mostre specifice de bunuri. Această caracteristică foarte importantă a calității unui expert afectează în mod semnificativ acuratețea rezultatelor evaluării unui expert de grup. Nu au fost elaborate metode statistice de evaluare directă a obiectivității experților, așa că în practică se mulțumesc cu o evaluare indirectă bazată pe abaterea de la opinia medie a experților.

Rezultatele testului – evaluări prin testarea caracteristicilor psihologice și fiziologice ale experților. Aceste evaluări au scopul de a evalua obiectivitatea, competența qualimetrică și profesională a expertului. Avantajul acestor evaluări este capacitatea de a evalua calitățile personale ale unui expert, pentru care alte metode și tipuri de evaluări sunt inacceptabile. Dezavantajul lor este că rezultatele obținute în timpul testării nu pot fi comparate cu datele obținute prin nicio metodă obiectivă.

Atunci când se efectuează evaluări ale testelor, testelor se aplică următoarele cerințe:

· înțelegerea de către expertul subiect a formulării problemei test și a condițiilor pe care trebuie să le îndeplinească soluția acesteia;

· probabilitatea de a ghici aleatoriu soluția problemei ar trebui să fie aproape de zero;

· problema testului trebuie să aibă o soluție exactă;

· justificarea proximității sarcinii de testare și a acelor probleme reale pe care un expert trebuie să le rezolve atunci când evaluează calitatea produsului.

Tipurile de evaluări ale testelor sunt:

· evaluarea reproductibilității rezultatelor;

· competența calimetrică a expertului;

· obiectivitate în ajustarea evaluărilor dumneavoastră.

Evaluarea reproductibilității rezultatelor – evaluarea gradului de apropiere a expertizelor individuale efectuate la anumite intervale. Este de obicei folosit în cazurile în care calitatea experților este evaluată în mai multe runde, iar evaluările aceluiași autor în runde diferite sunt comparate. Cel mai adesea, evaluarea reproductibilității rezultatelor este utilizată în analiza organoleptică a produselor alimentare.

Trebuie avut în vedere faptul că intervalul de timp dintre runde ar trebui să fie scurt pentru a exclude influența posibilelor informații noi care îi schimbă raționamentul, dar în același timp suficient pentru ca expertul să uite datele de evaluare în runda anterioară.

Dacă se realizează o clasare a indicatorilor de calitate, atunci evaluarea reproductibilității rezultatelor este calculată folosind formula

Unde – j al-lea expert; Rj– rang coeficienți de corelație pentru j-al-lea expert, determinat prin formula

Unde d ij– diferența dintre rangurile atribuite eu- indicator de calitate mu j- expert în prima și a doua rundă a sondajului; n– numărul de obiecte de clasare.

Dacă experții calculează valorile numerice ale coeficienților de greutate, atunci evaluarea reproductibilității rezultatelor este calculată folosind formula

Unde – rata de reproductibilitate j al-lea expert; ρ j– distanta fata de opinia medie a grupului pt j-al-lea expert, calculat prin formula

unde M ij* si m ij ** – valorile i-al-lea coeficient de greutate atribuit j- expert în primul și respectiv al doilea tur.

Coeficientul de reproductibilitate al rezultatelor unui expert poate varia de la 0 la 10. Se recomandă ca experții cu reproductibilitatea rezultatelor de 6 sau mai mare să fie admiși la examinarea calității produsului.

Evaluarea competenței calimetrice a expertului – evaluarea cunoștințelor teoretice despre metodele de evaluare a calității și a capacității de a le aplica. O evaluare a pregătirii teoretice a unui expert poate fi efectuată prin controlul cunoștințelor orale sau scrise, folosind teste într-un domeniu specific de cunoștințe. Situația este ceva mai complicată cu testarea de calificare, care este împărțită în trei tipuri:

· capacitatea de a utiliza diferite tipuri de scale de evaluare;

· capacitatea de a determina probabilităţi subiective;

· capacitatea de a distinge un număr suficient de gradații ale proprietății care se evaluează.

Abilitatea de a utiliza diferite tipuri de scale de evaluare. O scară este o serie ordonată de semne corespunzătoare relației dintre valorile succesive ale mărimilor măsurate. În calimetrie, o scară este un mijloc de comparare și determinare adecvată a valorilor numerice ale proprietăților și calităților individuale ale diferitelor obiecte. Se folosesc practic următoarele tipuri de scale qualimetrice: o scară de nume, o scară de ordine, o scară de interval, o scară de raport și o scară de valori absolute.

Scala de nume utilizat în cazurile în care mai multe dimensiuni necunoscute trebuie să fie comparate cu una și să se determine care dintre ele sunt egale cu dimensiunea aleasă ca bază pentru comparație și care nu. După scara numelor, mărimile sunt clasificate pe baza echivalenței, identității, egalității. Această măsurare este cea mai simplă, dar cea mai puțin informativă. În acest caz, nu se stabilește care dintre dimensiunile inegale este mai mare sau mai mică decât dimensiunea luată ca fiind cea de bază, adică. nu se stabileşte ordinea mărimilor crescătoare sau descrescătoare. Măsurarea constă numai în determinarea identităţii (egalităţii) sau a diferenţei (inegalităţii) de o anumită mărime dintr-o valoare predeterminată. Prin urmare, relațiile definitorii dintre dimensiunile măsurate sunt: ​​egale sau inegale, adică. în simboluri = sau ≠.

Expresia matematică a esenței măsurătorilor pe o scară de nume poate fi scrisă după cum urmează:

Р i = Р j sau Р i ≠ Р j ,

unde P i– mărimea cu care sunt comparate (dimensiunea de bază); R j – j a-a mărime a dimensiunilor comparate ( j= 1,2,3, … , n); n– numărul de mărimi care se compară.

Când se compară și se măsoară dimensiunile în funcție de o scară de nume, de exemplu, controlul și evaluarea calității a ceva se efectuează conform unui principiu alternativ: trece - nu; potrivit - nepotrivit; corespunde - nu corespunde etc.

Scala de comandă– aceasta este o serie secvențială de valori care oferă o idee sistematică a celor mai simple relații dintre valorile dimensiunilor comparabile ale proprietăților, caracteristicilor sau calităților obiectelor evaluate în ansamblu.

Când se compară toate mărimile măsurate în perechi, se determină care dimensiune este mai mare sau mai mică decât cealaltă, care este mai bună sau mai proastă decât cealaltă. Dacă există dimensiuni identice, atunci se determină și acest raport. În continuare, rapoartele de mărime stabilite sunt ordonate în ordinea creșterii și/sau descrescătoarei (scăderii) valorilor lor. Valorile în sine rămân incerte. Seria de valori obținute ca urmare a clasamentului este o scară de ordine a secvenței crescătoare sau descrescătoare.

Folosind scalele de ordine, valorile mărimii pot fi clasificate (evaluate) nu numai după criteriul „la fel sau nu”, ci și prin raportul dintre ceea ce este „mai mult sau mai puțin” decât altul sau „ce este mai bun și ce este mai rău” decât altul.

Expresia matematică a relațiilor dintre dimensiunile comparabile în perechi este:

R i= P j sau P i≠ P j sau P i> P j sau P i < Rj.

Ca rezultat al comparării dimensiunilor P iși P j determinați care dimensiune este mai mare sau mai mică decât alta, precum și care dimensiuni au aceleași valori, adică pe scara de ordine se determină următoarele relații: egal cu (=), nu egal cu (≠), mai mare decât (>), mai mic decât (<).

Dezavantajul măsurătorilor folosind scale de ordine este că rezultatele obținute sub forma unei serii clasificate sunt cele mai puțin informative. În special, cu o astfel de măsurare nu există nicio modalitate de a determina cât de mult o dimensiune este mai mare sau mai mică decât alta, mai bună sau mai proastă decât alta. Cu toate acestea, principalul avantaj al măsurătorilor folosind scale de comandă este că, cu ajutorul lor, cantitățile nemăsurate instrumental pot fi încă evaluate (măsurate) cantitativ. Cele măsurate pe scale de comandă includ proprietăți ale obiectelor precum gustul, mirosul, atractivitatea, estetica, confortul etc. La scara de comandă se fac adesea evaluări generale ale experților asupra calității mai multor obiecte comparate.

Scala intervalului utilizat în cazurile în care nu este posibil să se măsoare dimensiunile cantităților observate în sine, dar este posibil (sau este nevoie) să se măsoare doar diferențele (diferențele) dintre dimensiunile cognoscibile prin comparație.

Diferențele dintre dimensiunile comparate sunt înregistrate pe scara de măsurare a intervalelor. Această formă de afișare a cantităților măsurate este mai avansată, întrucât pe scara intervalului există unități de măsură condiționate, dar bine definite, ceea ce face posibilă caracterizarea cantitativă (numerică) a raportului dimensiunilor studiate.

Notația matematică pentru compararea a două dimensiuni omogene între ele pe baza diferenței lor are forma:

ΔР i,j= P i- R j.

Folosind scara intervalului, se determină următoarele rapoarte de dimensiune: egal cu (=), diferit de (≠), mai mare decât (>), mai mic decât (<), сумма (+), разница (– ).

Un exemplu clasic de măsurători pe scară de interval este măsurarea temperaturii pe scara Celsius. Folosind o scară de interval, este imposibil să se determine de câte ori o dimensiune este mai mare sau mai mică decât alta.

Scala de relații– aceasta este o scară de măsurare pe care se numără (determină) valoarea numerică a unei cantități qi ca raport matematic al mărimii măsurate P i la o altă dimensiune cunoscută, luată ca unitate de măsură [P].

Orice măsurătoare pe o scară de raport implică compararea unei dimensiuni necunoscute cu una cunoscută și exprimarea primei până la a doua într-un raport multiplu sau fracționar.

Notația matematică a unei măsurători pe o scară de raport are forma:

Unde i = 1, 2, 3, … , n– acesta este numărul mărimii care se măsoară.

Scala raportului este o scară de interval în care este definit elementul zero - originea, precum și dimensiunea (scara) unității de măsură [P].

În funcție de scara raportului, astfel de valori ale dimensiunilor măsurate sunt determinate ca: egal (=), nu egal (≠), mai mare (>), mai mic (<), сумма (+), разница (– ), înmulțire (×), împărțire (:). În consecință, multe operații logice și toate operațiile aritmetice pot fi efectuate cu valorile relative ale dimensiunilor măsurate.

Scala raportului este cea mai potrivită pentru măsurarea majorității indicatorilor de calitate, în special pentru caracteristici numerice precum dimensiunile geometrice ale obiectelor, densitatea, rezistența, tensiunea și altele.

Scara absolută utilizat în cazurile în care o cantitate este măsurată direct. De exemplu, numărul de defecte dintr-un produs este calculat direct. Numărul de unități de produse de producție etc. În astfel de măsurători, valorile cantitative absolute ale ceea ce se măsoară sunt marcate pe scara de măsurare. O astfel de scară de valori absolute are aceleași proprietăți ca și o scară de rapoarte, singura diferență fiind că valorile indicate pe această scală au mai degrabă valori absolute decât relative.

Rezultatele măsurătorilor pe o scară de valori absolute au cea mai mare fiabilitate, conținut de informații și sensibilitate la măsurători inexacte.

Se numesc scale de intervale, rapoarte și valori absolute metric,întrucât în ​​construcția lor se folosesc măsuri, adică dimensiuni acceptate ca unități de măsură.

Caracteristicile, parametrii sau caracteristicile proprietăților obiectelor, măsurate pe o scară de denumire sau pe o scară de ordine, nu sunt cantitative, ci calitate, adică incerte în adevărata lor amploare și în amploarea diferențelor dintre ele. Mărimea determinată de oricare dintre scalele metrice este o valoare cantitativă, iar aceste scale în sine sunt cantitativ.

Scalele qualimetrice, relațiile lor definitorii, tipurile de caracteristici de calitate pe care le măsoară, precum și câteva exemple de ceea ce se măsoară sunt date în Tabel. 4.1.

Fiecare dintre scalele qualimetrice are propriul său sens și propria sa zonă de aplicare și, prin urmare, cel mai adesea nu sunt interschimbabile atunci când se rezolvă o anumită problemă de expert. Capacitatea de a determina probabilitățile subiective este capacitatea unui expert de a evalua probabilitatea ca anumite evenimente să apară. Experții care nu au această abilitate nu ar trebui să fie implicați în expertiza legată de prognoză.

Capacitatea de a determina probabilități subiective la efectuarea anumitor tipuri de aprecieri. De exemplu, la determinarea coeficienților de pondere a anumitor evenimente, un expert trebuie să utilizeze uneori conceptul de subiectivitate a probabilității apariției lor. Ei recurg adesea la teste speciale care pot fi folosite pentru a evalua capacitatea unui expert candidat de a determina cu exactitate probabilitățile subiective.

Capacitatea de a distinge un număr suficient de gradații ale proprietății care se evaluează– capacitatea expertului de a percepe diferențele în intensitatea manifestării fiecărei proprietăți. Această abilitate se datorează în mare măsură sensibilității expertului la cele mai nesemnificative modificări ale proprietăților și indicatorilor obiectelor examinate. De exemplu, în timpul analizei organoleptice, testerii sunt testați pentru capacitatea lor de a identifica diferențele de gusturi, mirosuri, nuanțe de culoare etc. Acuratețea evaluărilor experților individuale și de grup depinde, de asemenea, de capacitatea expertului de a distinge între gradările proprietății evaluate. , prin urmare testele de testare pentru a identifica această abilitate ar trebui să ajute la selectarea pentru grupul de experți specialiști de înaltă calitate.

Tabelul 4.1. Tipuri de scale calimetrice

V1: Calitatea ca factor de succes al unei întreprinderi într-o economie de piață

V1: Recomandări ale standardelor internaționale ISO 9000 pentru asigurarea calității

Un expert este un specialist (profesionist), ale cărui aprecieri și judecăți decidentul le consideră utile să le ia în considerare atunci când ia decizii.

Să dăm câteva explicații. Desigur, opiniile unui terapeut începător și ale unui cardiolog de renume mondial nu sunt comparabile în ceea ce privește nivelul de evaluare a stării pacientului și recomandările pentru tratamentul acestuia într-o situație destul de complexă. Însă, dacă un pacient are nevoie de ajutor de urgență, iar un specialist de înalt nivel profesional nu poate fi invitat dintr-un motiv sau altul, atunci decizia va fi luată de oricine se află în apropiere, chiar dacă este mai puțin calificat. În această situație, el este cel care se dovedește a fi expert.

Astfel, formarea componenței comisiei de experți depinde de:

· situație specifică de luare a deciziilor;

· capacitatea organizatorilor examenului de a atrage specialişti de înaltă calificare pentru muncă;

· oportunități pentru specialiști de a participa la lucrările comisiei de experți.

De asemenea, trebuie menționat că în prezent nu există o metodologie unificată general acceptată pentru evaluarea calităților unui expert, prin urmare, opiniile despre nivelul profesional al unui specialist diferă adesea semnificativ. În practică reală, decidentul fie se străduiește să își formeze o opinie despre nivelul profesional al expertului candidat, fie îl încredințează celor cărora li se încredințează organizarea examenului. Prin urmare, în absența capacităților și experienței în organizarea și desfășurarea examenelor, este logic să apelăm la serviciile centrelor independente de examinare, centrelor de informare și analitice etc., ale căror principale sarcini sunt să analizeze situația, să evalueze obiectele examinarea, pregătirea și evaluarea soluțiilor alternative.

Atunci când se evaluează calitățile unui expert, este necesar să se țină cont de cunoștințele sale profesionale, experiența și eficacitatea muncii în cadrul comisiilor de experți. Există multe modalități de a evalua calitățile unui expert, fiecare dintre acestea putând fi folosită cu succes într-un anumit caz. Ele sunt împărțite în trei grupuri principale:

· a priori;

· a posteriori;

· Test.

Metodele a priori sunt numite metode de evaluare a calităților unui expert care nu folosesc informații despre rezultatele participării sale la examenele anterioare.

Metodele a posteriori sunt numite metode de evaluare a calităților unui expert pe baza informațiilor despre rezultatele participării sale la examenele anterioare.

Metodele de testare sunt metode de evaluare a calităților unui expert care presupun efectuarea unui test special.

Metode a priori de evaluare a unui expert. Acest grup include, în primul rând, cele mai comune metode de autoevaluare, a căror esență este că expertul însuși își evaluează calitățile. Se pot folosi următoarele metode:

· stima de sine pe una dintre scalele de puncte (3, 5, 10 sau 100 de puncte);

· autoevaluare folosind scale verbal-numerice, care, alături de valorile numerice ale gradațiilor, cuprind descrierea calitativă a acestora;

· autoevaluare pe scară verbală, în care expertul dă o evaluare verbală a cunoştinţelor şi experienţei sale, folosind gradaţii calitative ale unei scale preelaborate;

· autoevaluarea prin metoda diferențială, în care expertul își evaluează calitățile folosind două criterii private principale: un criteriu care îi caracterizează familiaritatea cu principalele surse de informare din acest domeniu (de exemplu, periodice speciale interne și străine, informații despre brevete, în -informații despre casă etc.); etc.) și un criteriu care caracterizează familiaritatea cu obiectul examinării (de exemplu, cunoașterea specificului industriei, o întreprindere specifică, familiaritatea cu mostrele de produse etc.).

În acest caz, autoevaluarea cuprinzătoare a expertului este calculată folosind formula:

LA k = ( LAși + ß LA h) / 2,

Unde LA k - autoevaluarea cuprinzătoare a expertului, LAși - coeficientul de conștientizare (în fracțiuni de unitate), LA z este coeficientul de familiaritate cu problema, ß este coeficientul de ponderare.

Problemele de măsurare a indicatorilor și a tipurilor de scale vor fi discutate mai detaliat în subiectul următor.

Acuratețea metodelor de autoevaluare este oarecum controversată. Pe de o parte, nimeni mai bun decât expertul însuși nu reprezintă totalitatea cunoștințelor și experienței pe care le deține. Pe de altă parte, o persoană face cea mai mare greșeală atunci când își evaluează propriile capacități.

Un alt grup de metode a priori de evaluare a calităților unui expert include metode de evaluare reciprocă, a căror utilizare presupune că experții se evaluează reciproc. Cea mai comună dintre acestea este metoda listei de experți. Procedura de utilizare a acestuia este următoarea. Fiecare expert întocmește o listă de specialiști pe care îi consideră competenți în acest domeniu. Apoi, pe baza acestor liste, se calculează coeficientul de competență al expertului - raportul dintre numărul de liste în care este prezent un anumit specialist și numărul total de liste compilate.

Metodele a priori de evaluare a calităților unui expert includ și cea mai comună metodă documentară sau chestionar. În ea, pentru aprecierea anumitor calități ale unui specialist, se propune folosirea unor caracteristici obiective care au dovezi documentare, de exemplu, precum: experiența de muncă, gradul universitar, titlul academic, postul ocupat, numărul de publicații, indicele de citare etc. Trebuie avut în vedere faptul că, doar pe baza acestor factori obiectivi, este imposibil să se evalueze în mod adecvat caracterul adecvat și utilitatea participării unui expert la lucrările unui anumit grup de experți.

Metode de estimare a posteriori. Aceste metode presupun utilizarea rezultatelor participării sale la anchetele anterioare atunci când se evaluează calitățile unui expert. Cu ajutorul lor, într-o anumită măsură, pot fi identificate calități precum conformismul, oportunismul și competența expertului. În special, pentru a evalua nivelul de competență al unui specialist, se poate folosi metoda comparațiilor perechi. Esența ei constă în faptul că expertului i se prezintă secvenţial perechi de obiecte de evaluare comparate și selectează din fiecare pereche obiectul cel mai preferat din punctul său de vedere. După ce toate perechile sunt prezentate, analiștii au informații despre preferințele comparative ale expertului cu privire la obiectele evaluate. În acest caz, poate apărea o situație când, într-o comparație directă, primul obiect este preferabil celui de-al doilea, al doilea este preferabil celui de-al treilea, dar, în același timp, al treilea obiect se dovedește a fi preferabil primului. , adică apare o contradicție evidentă. În practica reală, astfel de contradicții (desigur, în lanțuri mai lungi de comparație) nu se întâmplă atât de rar. Desigur, cu cât sunt mai puține contradicții în evaluările unui expert, cu atât competența sa este mai justificată.

Metoda a posteriori presupune și evaluarea fiabilității judecăților expertului. Ca criteriu de evaluare a unei astfel de fiabilități, se utilizează coeficientul de fiabilitate - frecvența relativă a cazurilor în care expertul a atribuit cea mai mare probabilitate evenimentelor confirmate ulterior. Atunci când se utilizează această metodă, se calculează și valoarea medie a coeficientului de fiabilitate al comisiei de experți și se compară coeficienții individuali ai experților.

O altă metodă de evaluare a posteriori este metoda abaterii de la estimarea grupului rezultat.Această metodă se bazează pe calcularea coeficientului de abatere - Co.

LAoi = Do oi / D max,

Unde To oi- coeficientul de abatere al judecăților celui de-al i-lea expert, Do oi- abaterea evaluării individuale a expertului I de la evaluarea rezultată, D max - abaterea maximă posibilă a aprecierii expertului de la evaluarea rezultată.

Metode de testare pentru evaluarea calităților unui expert. Esența lor este executarea de către expertul în subiect a unei sarcini pregătite anterior. Aceste metode sunt destul de cunoscute, deoarece sunt utilizate pe scară largă pentru a determina aptitudinea profesională a specialiştilor din diverse domenii de activitate. Avantajul acestor metode este că permit nu numai să se stabilească dacă un expert are un anumit nivel profesional, ci și să identifice abilitățile și experiența necesare pentru participarea productivă la lucrările comisiei de experți. Cu toate acestea, este necesar să ne amintim că efectuarea experimentelor de testare necesită respectarea următoarelor reguli importante:

· testul trebuie dezvoltat special pentru obiecte specifice de expertiză;

· valorile adevărate ale parametrilor evaluați (răspunsuri corecte) trebuie cunoscute grupului analitic care efectuează testul, dar necunoscute expertului testat;

· ar trebui elaborată o scală pentru a determina acuratețea evaluărilor făcute de un expert;

· probabilitatea de a ghici accidental estimarea adevărată ar trebui să fie foarte mică.

Utilizarea metodelor de testare face posibilă evaluarea unei calități profesionale atât de importante a unui expert precum reproductibilitatea evaluărilor experților. Pentru a face acest lucru, se efectuează mai multe experimente de testare, aproape de condițiile examinării reale. În acest caz, intervalul de timp dintre ele ar trebui să fie suficient pentru ca subiectul să aibă timp să uite rezultatele celui precedent. Apoi estimările obținute sunt comparate între ele. Evaluări mai stabile (reproductibile) ale experților indică atât o mai mare competență profesională, cât și o mai mare adecvare pentru participarea la comisia de experți.

Metode de evaluare de către experți a indicatorilor de calitate a produselor - acestea sunt metode de determinare a valorilor reale ale indicatorilor de calitate unici și complecși.

Conceput pentru a determina valorile indicatorilor de calitate prin calcul sau euristic în cazurile în care utilizarea metodelor de măsurare este imposibilă sau neeconomică din cauza costurilor excesive ale utilizării acestora sau a timpilor lungi de testare. De exemplu, la determinarea gustului și mirosului produselor alimentare se folosesc numai metode organoleptice. Metodele de măsurare nu oferă estimări precise și de încredere, în ciuda costurilor crescute.

Pentru evaluarea diferențială și cuprinzătoare a probelor care diferă semnificativ în calitate, se recomandă determinarea valorii unui singur indicator P după cum urmează:

K. = R. / R. 5,

unde R. 5 este baza (valoarea de referință).

O altă metodă, mai precisă, se bazează pe studiul indicatorilor pentru a determina tipurile de dependență f, adică pentru a dezvolta formule pentru calcularea estimărilor indicatorilor:

K = f (P/P 5).

Evaluarea indicatorilor individuali de calitate începe cu determinarea intervalelor admisibile de modificare a acestora (R. max : - P™"). p. max este cea mai bună valoare a indicatorului, depășind care este imposibil sau imposibil. Principiile de atribuire a valorii maxime admisibile a indicatorului (P. max) depind de scopurile evaluării calității și aceasta este necesar ca acest principiu să fie același pentru toți indicatorii.

Creșterea fiabilității evaluărilor experților se realizează prin împărțirea operațiunilor complexe în operațiuni simple, care constituie o procedură în mai multe etape pentru evaluarea valorilor acceptabile ale unui indicator. Trecerea la fiecare etapă ulterioară are loc după elaborarea deciziilor convenite la cea anterioară.

Procedura expertă pentru determinarea valorilor acceptabile ale indicatorilor de calitate constă dintr-o serie de operațiuni:

emiterea unor note explicative către experți prin chestionar, care să enumere indicatorii de calitate și să descrie principiile de selectare a valorilor acceptabile ale indicatorilor;

experți completând chestionare și indicând modele de produse specifice ale căror valori le consideră a fi maxime admisibile;

familiarizarea fiecărui expert cu evaluările atribuite de alți experți și discutarea acestora;

desfășurarea celei de-a doua (uneori a treia și a patra) rundă de întrebări;

medierea rezultatelor evaluării.

Dacă există o diferență semnificativă de opinie, se organizează un tur suplimentar de vot.

Pentru a determina de către experți tipul de dependențe (f) între valorile indicatorilor R. și estimările lor K., se folosește adesea „metoda punctului principal”. Necesitatea utilizării sale se datorează faptului că împărțirea procedurii de evaluare în mai multe etape simplifică munca expertului și îi permite să dea estimări la unele puncte caracteristice, pe baza cărora este posibilă construirea unui model al valorii dorite.

„Metoda punctului principal”În funcție de numărul lor, are mai multe soiuri.

„Metoda celor trei puncte principale”- o metodă bazată pe împărțirea valorilor indicatorilor R. în valori maxime, minime și medii și determinarea valorilor estimărilor K. în aceste puncte. Intervalul de scară dintre punctele maxim și minim este setat în prealabil (scala O-ch-l sau 0ch-10). Sarcina expertului include, de asemenea, determinarea tendinței de dependență în intervalul dintre punctele principale și construirea unui grafic. După aceasta, de la dependența grafică puteți trece la formula analitică pentru calcularea estimărilor indicatorului de calitate K. „Metoda celor trei puncte principale” vă permite să dezvoltați doar un model aproximativ pentru evaluarea K.

„Metoda celor șapte puncte principale”- o metodă de evaluare pe o scară de șapte puncte pentru evaluarea indicatorilor, ale căror valori sunt determinate experimental sau prin calcul, precum și prin metoda organoleptică.

Scala de șapte puncte este uniformă, adică atunci când treceți de la o clasă de calitate la alta, scorul se modifică cu un punct. Aceste scale sunt utilizate pe scară largă, în special în evaluarea organoleptică. Pentru a obține rezultate mai precise, ar trebui să treceți la determinarea tipului de relație dintre note și scoruri.

Pentru a facilita munca expertului, cinci grafice sunt furnizate în nota explicativă a chestionarului. Expertul selectează curba (sau combinația de curbe) care reflectă cel mai bine, în opinia sa, natura dependenței f. Apoi fiecărei clase de calitate i se atribuie un scor în conformitate cu natura dependenței și cu valorile indicatorilor de calitate. În acest caz, este recomandabil să folosiți numere în intervalul 0-10, multipli de 0,5, clasa „de cea mai înaltă calitate” primind un scor de 10.

Astfel, graficul construit de expert caracterizează relația dintre valorile absolute ale indicatorilor P și estimările lor K, iar pentru indicatorii evaluați prin metode organoleptice, dintre clasele de calitate și estimările acestora.

În concluzie, rezultatele obținute sunt discutate, prelucrate și analizate. Pentru indicatorii determinați prin metode de măsurare și calcul, este de dorit să oferiți o descriere analitică a curbelor, care vă permite să calculați o estimare pentru orice valoare a indicatorilor.

Utilizarea „metodei punctului principal” face posibilă gruparea și clasificarea indicatorilor după tipul de dependență.

Determinarea indicatorilor de calitate complecși se realizează prin două tipuri de metode:

metode de evaluare cuprinzătoare a calității mostrelor de produse;

metode de construire a modelelor de indicatori de calitate complecşi.

Metodele de evaluare cuprinzătoare a calității au două varietăți - metoda expresă și metodele de trecere prin niveluri fără pregătire și cu pregătire.

Metode exprese pentru evaluarea cuprinzătoare a calității mostrelor de produse se bazează pe determinarea unui indicator de calitate complex prin analiza valorilor indicatorilor individuali individuali și a aspectului fără evaluare preliminară și luând în considerare factorii de ponderare.

La utilizarea acestor metode, este necesar să se țină cont de faptul că numărul maxim de indicatori care trebuie evaluați, chiar și pentru un expert înalt calificat, este de 7-9 indicatori situați la același nivel de ierarhie și alcătuind un grup destul de omogen. În plus, experții trebuie să ia în considerare importanța indicatorilor individuali care utilizează coeficienți de ponderare, relația dintre aceștia și, de asemenea, să ia în considerare calitatea produsului ca sistem.

Metodă de deplasare prin niveluri fără pregătire este un complex de operații desfășurate secvențial, cu o creștere treptată a nivelului. În acest caz, analiza începe de la nivelul inferior al arborelui indicator. Luând în considerare valorile indicatorilor de nivel inferior, expertul oferă o evaluare a indicatorilor de nivel superior. Aceste operațiuni se repetă cu niveluri crescătoare până la atingerea nivelului superior - o evaluare cuprinzătoare (generalizată) a calității.

Metoda de trecere prin niveluri cu pregătire se bazează pe determinarea prealabilă de către experți a coeficienților de ponderare a indicatorilor de calitate și evaluările acestora. Atunci când atribuie evaluări complexe, expertul cunoaște valorile medii ale coeficienților de greutate și estimările indicatorilor individuali. Procedura de determinare a indicatorilor complecși este similară cu procedură folosind metoda de deplasare prin niveluri fără pregătire.

Formalizarea procesului de evaluare inter pares constă în găsirea relației dintre valorile indicatorilor de calitate ai lui R. (sau evaluările acestora ale lui K.) și indicatorul de calitate al nivelului de bază, adică în determinarea tipului de funcție de decizie pe care o folosesc experții la atribuirea unor indicatori complexi. În același timp, funcția decisivă, ca orice model, simplifică obiectul de studiu, deoarece nu sunt luați în considerare toți indicatorii și conexiunile dintre ei.

Datele inițiale pentru determinarea tipului de funcție pot fi rezultatele evaluării calității diferitelor eșantioane folosind metode exprese sau metode de trecere prin niveluri. Apoi, evaluările atribuite de experți sunt rezumate într-o matrice comună, fiecare rând al căreia reprezintă un set de evaluări ale indicatorilor individuali ai eșantionului și evaluări complexe ale experților. Pe baza acesteia, pot fi dezvoltați algoritmi de mașină și pot fi compilate programe pentru a găsi funcții decisive folosind un computer.

Cursul 13. TIPURI DE EXAMENE