Raport Evaluarea de Impact a DMI 4.3 - 25.11 (1)

168
Raport de Evaluare Versiune finală - Noiembrie 2014 Evaluarea de impact a DMI 4.3. “Sprijinirea dezvoltării microîntreprinderilor”

description

raport de evaluare

Transcript of Raport Evaluarea de Impact a DMI 4.3 - 25.11 (1)

Evaluarea de impact a DMI 4.3. Sprijinirea dezvoltrii microntreprinderilor

Contract Nr. 76/03.03.2014

Raport de Evaluare

Versiune final - Noiembrie 2014

Evaluarea de impact a DMI 4.3. Sprijinirea dezvoltrii microntreprinderilorContract Nr. 76/03.03.2014

Raport de Evaluare - versiunea finalNoiembrie 2014

Echipa care a elaborat proiectul :

Marioara IORDAN

Expert tehnic cheie cu rol de coordonator de proiect

Andrea GRAMILLANO

Expert tehnic cheie cu rol evaluare program

Franceso SALVAGNINI

Expert tehnic cheie cu rol evaluare program

Persoan de contact (din partea consoriului): Andrea Floria, Director de proiect

Nr.DataDescriereAciune

118.11.2014Raport de Evaluare - versiune final Pentru aprobare1 - 113

Cuprins7ACRONIME I GLOSAR

REZUMAT7INTRODUCERE18SECIUNEA I - Activitatea 2.1 Efectuarea recenziei literaturii de specialitate201. Prezentare general a contextului201.1. MODELUL LOGIC AL DMI 4.3 N CADRUL POR201.2. ANALIZA SWOT PENTRU DEZVOLTAREA MICRONTREPRINDERILOR231.3. PROVOCRILE I NEVOILE MICRONTREPRINDERILOR29SECIUNEA II - Activitatea 2.2 Conceperea metodologiei de evaluare, analiza i interpretarea datelor322. Identificarea de metode de evaluare322.1. EVALUAREA IMPACTULUI322.2. GRUPUL DE CONTROL I INSTRUMENTE DE EVALUARE CONTRAFACTUAL332.2.a. Diferena Diferenelor (DID)352.2.b. Design-ul Discontinuitii Regresiei (RDD)352.2.c. Scorul de Propensiune (PSM - Propensity Score Matching)362.3. LIMITRI I INFLUENRI ALE ESTIMRILOR372.3.a. Influenarea seleciei372.3.b Influenarea auto-seleciei392.3.c. Efecte Eterogene de Tratament392.4. CONCEPEREA STRATEGIEI DE ESTIMARE PRIVIND RISCURILE I INFLUENELE403.Surse de date i baze de date433.1. PROCESUL PARCURS DE LA SURSELE DE DATE PN LA SETUL DE DATE433.2. EANTIONUL503.3. OBSERVAII SUPLIMENTARE544. Analiza i interpretarea datelor564.1 STRATEGIA DE ESTIMARE564.2. CRETEREA OCUPRII FOREI DE MUNC I A CIFREI DE AFACERI LA NIVELUL APELULUI DE PROIECTE NR. 1, PRIN METODA APLICAREA SCORULUI DE PROPENSIUNE (PROPENSITY SCORE MATCHING)614.2.a. Selecia variabilelor explicative624.2.b. Estimarea regresiei logistice654.2.c Estimri ale efectului mediu n perioada 2008-2012/2013724.3. ANALIZA CRETERII GRADULUI DE OCUPARE N CADRUL APELULUI NR. 1 N PERIOADA 2008-2012 PRIN APLICAREA DESIGNULUI DISCONTINUITII REGRESIEI (RDD)774.4. IMPACTUL VALORII GRANTULUI ASUPRA VARIAIEI OCUPRII FOREI DE MUNC PENTRU BENEFICIARII APELULUI DE PROIECTE NR. 1824.5. PROIECTE REZILIATE I FINALIZATE N CADRUL PRIMULUI APEL DE PROIECTE854.6. O COMPARAIE A IMPACTULUI APELULUI 1 I 2 ASUPRA VARIAEI OCUPRII FOREI DE MUNC N PERIODA 2010-201289SECIUNEA III - 2.3 Aplicarea metodelor complementare pentru analiz calitativ a rezultatelor945. Rezultatele analizei calitative945.1. INTERVIURI CU AUTORITATEA DE MANAGEMENT945.2. INTERVIURI CU AGENIILE DE DEZVOLTARE REGIONAL975.3. INTERVIURI CU REPREZENTANI AI FORURILOR ECONOMICE DIN ROMNIA985.4. INTERVIURI I STUDII DE CAZ CU BENEFICIARII995.5. PANEL DE EXPERI I BENCHMARKING1006. Concluzii i recomandri1036.1. REZULTATELE EVALURII1036.2. CONCLUZII I RECOMANDRI PRIVIND POLITICA DE DEZVOLTARE REGIONAL108

Lista figurilor9Figura nr. 1Abordare metodologic

Figura nr. 2Condiii prealabile generale pentru realizarea analizei contrafactuale i a setului de date40Figura nr. 3Limite, riscuri, erori i strategia de estimare41Figura nr. 4Detalii referitoare la prima Analiz Contrafactual Corelarea Scorului de Propensiune (PSM)57Figura nr. 5Detalii referitoare la cea de-a doua analiz contrafactual - Designul Discontinuitii Regresiei (DDR)58Figura nr. 6Detalii referitoare la cea de-a treia analiz econometric (non contrafactual)59Figura nr. 7Detalii referitoare la cea de-a patra analiz econometric (non contrafactual)60Figura nr. 8Detalii referitoare la cea de-a cincea analiz econometric (non contrafactual)60Figura nr. 9Procesul de estimare61Figura nr. 10Numrul mediu de salariai n perioada 2007/2008-201268Figura nr. 11Variaia medie a variabilelor de rezultat dup dimensiunea microntreprinderilor74Figura nr. 12Propensity Score Matching - Cel mai apropiat vecin cu nlocuire75Figura nr. 13Variaia ocuprii forei de munc abordarea regresiei locale80Figura nr. 14Relaia dintre acordarea grantului i probabilitatea estimat de reziliere89Figura nr. 15Relaia dintre variaia ocuprii forei de munc i grant (log)92Figura nr. 16 - Variaia ocuprii forei de munc i grantul (log): compararea apelurilor93

Lista tabelelor21Tabel nr. 1Componente ale logicii interveniei DMI 4.3

Tabel nr. 2Analiza SWOT Mediul de afaceri26Tabel nr. 3Analiza SWOT Dezvoltare sectorial27Tabel nr. 4Analiza SWOT Piaa muncii28Tabel nr. 5Analiza SWOT Dezvoltare local i regional28Tabel nr. 6Nevoile pentru mediul de afaceri30Tabel nr. 7Nevoile de dezvoltare sectorial30Tabel nr. 8Nevoile de pe piaa muncii31Tabel nr. 9Nevoile de dezvoltare regional i local31Tabel nr. 10Structura general a setului de informaii43Tabel nr. 11Sumarul datelor statistice ale interveniei47Tabel nr. 12Structura regional a interveniei, pe scurt48Tabel nr. 13Structura datelor colectate50Tabel nr. 14Observaii eliminate51Tabel nr. 15Setul de date al metodei Corelarea Scorului de Propensiune (PSM)51Tabel nr. 16Setul de date al metodei Designul Discontinuitii Regresiei (DDR)52Tabel nr. 17Setul de date utilizat n msurarea impactului grantului53Tabel nr. 18Setul de date folosit pentru analiza factorilor care au determinat anularea proiectelor53Tabel nr. 19Setul de date folosit pentru compararea Apelului de proiecte nr. 1 cu Apelul de proiecte nr. 254Tabel nr. 20Date pentru analiza contrafactual66Tabel nr. 21Statistici privind variabila de rezultat66Tabel nr. 22Media numrului de angajaigrupuri nepotrivite66Tabel nr. 23Beneficiar i non-beneficiar dup dimensiunea firmei n 200767Tabel nr. 24Beneficiar i non-beneficiar dup cifra de afaceri n 200767Tabel nr. 25Beneficiar i non-beneficiar dup active nete n 200768Tabel nr. 26Estimarea modelului Logit69Tabel nr. 27Estimarea impactului prin diferite metode72Tabel nr. 28Estimarea impactului prin diferite metode76Tabel nr. 29Definirea eantionului RDD78Tabel nr. 30Numrul mediu de angajai grupuri79Tabel nr. 31Estimarea impactului abordarea regresiei locale81Tabel nr. 32Diferene i similitudini ntre metodele contrafactuale81Tabel nr. 33Statistici rezumative83Tabel nr. 34Cuartile ale variabilelor explicative83Tabel nr. 35Distribuia beneficiarilor dup dimensiune, n 200883Tabel nr. 36Estimri ale modelului 484Tabel nr. 37Eantion86Tabel nr. 38Model logit al contractelor anulate-finalizate87Tabel nr. 39Comparaia apelurilor: model 391Tabel nr. 40Comparaia interveniilor: sector, localizare i beneficiari101

ACRONIME ADR:Agenie de Dezvoltare Regional

BI:Bucureti - Ilfov

CAEN:Clasificarea Activitilor din Economia Naional

CISE/ISCED:Clasificarea Internaional Standard a Educaiei

DDR:Designul Discontinuitii Regresiei

DMIDomeniu Major de Intervenie

Liter greceasc utilizat n cadrul Raportului de Evaluare pentru a raporta diferena

EVALSED:Surs online care furnizeaz orientri privind evaluarea dezvoltrii socio-economice, cu un accent deosebit pe politica de coeziune a UE (a se vedea http://ec.europa.eu/regional_policy/sources/docgener/evaluation/guide/guide_evalsed.pdf)

OI:Organism Intermediar

NE:Nord-Est

NV:Nord-Vest

PESTPolitic, Economic, Social, Teritorial i Tehnologic

PIB:Produs Intern Brut

PNDR:Programul Naional de Dezvoltare Rural

POSCCEProgramul Operaional Sectorial Creterea Capacitii Economice

PORProgramul Operaional Regional

PSM:Metoda Corelrii Scorului de Propensiune (Propensity Score Matching)

SE:Sud-Est

SM:Sud-Muntenia

SPC:Standardul Puterii de Cumprare

SV:Sud-Vest Oltenia

SWOT:Puncte tari, Puncte slabe, Oportuniti i Ameninri

V:Vest

VAB:Valoarea Adugat Brut reprezint creterea de valoare rezultat din utilizarea factorilor de producie, ndeosebi a factorilor munc i capital, peste valoarea materiilor prime, materialelor i serviciilor cumprate de ntreprindere de la teri.

REZUMAT EXECUTIVPrezentul Raport de Evaluare ilustreaz rezultatele evalurii de impact a Domeniului Major de Intervenie (DMI) 4.3 din cadrul POR 2007-2013. Obiectivul DMI 4.3 este acela de a sprijini dezvoltarea microntreprinderilor din sectorul construcii, industrie i servicii, situate n zonele urbane. Acest Domeniu Major de Intervenie a fost implementat ntr-o perioad dificil, deoarece microntreprinderile, care reprezint o parte important a economiei, au fost grav afectate de criza economic.

Procesul de implementare a DMI 4.3 a fost realizat n trei apeluri, ns prezentul Raport de Evaluare se concentreaz doar pe primele dou dintre acestea: Primul apel de proiecte, lansat n 2008, are o alocare financiar de 20 de milioane de euro, cu o co-finanare minim din partea beneficiarului de 30%;

Cel de-al doilea apel de proiecte, lansat n iulie 2010, are o alocare de aproximativ 190 de milioane de euro; componenta nerambursabil ar putea ajunge la 100% din cheltuielile eligibile ale proiectelor.

Abordarea metodologic

n conformitate cu Caietul de sarcini i cu orientrile metodologice ale DG REGIO (EVALSED), abordarea metodologic prevede o combinaie de analize cantitative (tehnici statistice i econometrice) i calitative (interviuri, studii de caz, grupuri nominale, etc.).

Informaiile colectate cuprind date din surse instituionale, interviuri i documente relevante privind politicile de dezvoltare. Analiza efectuat i-a propus s ofere rspunsuri cel puin la ntrebrile de evaluare cuprinse n Caietul de Sarcini i n Raportul Prelimiar. Astfel, prezentul Raport de Evaluare a impactului DMI 4.3 confer o serie de concluzii i recomandri bazate pe urmtoarele tipuri de ntrebri de evaluare (regsite n capitolul 6): I1) Cror nevoi rspunde DMI 4.3? Exist noi provocri n curs de apariie?

I2) Ce aspecte ale performanei firmelor sunt stimulate prin POR 4.3?

I3) Exist o valoare adugat comparativ cu alte intervenii?

I4) n ce msur pot fi observate modificri cantitative datorate DMI 4.3 (eficacitate)?

I5) Exist dovezi cu privire la efectele pe termen lung?

I6) Exist recomandri privind viitoarea politic de dezvoltare aferent microntreprinderilor?

I7) Exist recomandri provenite din analiz pentru evalurile viitoare?

Procesul de analiz a DMI 4.3 fost organizat dup cum este prezentat n figura urmtoare.

Figura nr. 1 Abordare metodologic

Analiza literaturii de specialitate a permis reconstituirea logicii de intervenie a DMI 4.3, actualizarea situaiei inteveniei i efectuarea analizelor SWOT i PEST. n acelai timp, procesul de colectare a datelor a constat n preluarea de informaii din surse administrative i secundare i n construirea unei baze de date pentru analiza cantitativ.

Analiza cantitativ a comparat performana beneficiarilor DMI 4.3 i a non-beneficiarilor similari, pentru primul apel de proiecte, n perioada 2008-2012 i 2008-2013, prin intermediul analizei contrafactuale. Ulterior, au fost folosite analize econometrice suplimentare pentru a estima impactul grantului asupra variaiei ocuprii forei de munc n cadrul primului apel de proiecte, pentru a msura variabilele care influeneaz probabilitatea ca o firm s rezilieze proiectul n cadrul primului apel de proiecte i pentru a compara performana Apelui de proiecte nr. 1 cu cea a Apelului de proiecte nr. 2.Cele dou analize (econometric i contrafactual) au fost elaborate pe baza unui set de date, care a fost construit direct de ctre echipa de evaluare din surse publice. Setul de date furnizeaz baza de informaii i respect condiiile metodologice prealabile pentru a efectua analiza contrafactual.

Analiza calitativ a fost realizat n vederea validrii rezultatelor analizei cantitative i pentru a verifica dac exist schimbri de comportament la nivelul beneficiarilor (de exemplu, inovaie strategic, noi tipuri de organizare, creterea capacitii de management, schimbarea activitii ntreprinderii). Urmrind abordarea DG Regio (Comisia European, 2014 b), metodele calitative au fost utilizate de ctre echipa de evaluare pentru a identifica legturile cauzale i mecanismele de schimbare de-a lungul fiecrei etape a logicii de intervenie, oferind rspuns la ntrebrile "de ce" i "cum" a funcionat intervenia. Principalele instrumente de analiz calitativ sunt: cele 10 proiecte care au reprezentat subiectul studiilor de caz, interviurile cu autoritile publice (Ageniile pentru Dezvoltare Regional i Autoritatea de Management) i reprezentani ai dou organizaii naionale reprezentative pentru domeniul IMM-urilor. Alte instrumente utilizate n analiz au fost panelul de experi, benchmarking i grupurile nominale, aplicate n vederea validrii i elaborrii concluziilor i recomandrilor evalurii.

Principalele constatri ale analizei cantitative

Analiza contrafactual a identificat un impact al interveniei referitor la ocuparea forei de munc. Primul Apel de proiecte a creat, n medie, cu trei noi locuri de munc mai mult dect non-beneficiarii comparai, la trei ani dup finalizarea interveniei. Cu alte cuvinte, ntreprinderea care a beneficiat de sprijin prin DMI 4.3 a fost capabil s i mreasc personalul cu 3 noi persoane n plus fa de ntreprinderile care nu sunt finanate (n medie). Aceast cretere suplimentar relativ, efectul net, este msurat ca diferena medie a noilor locuri de munc create de beneficiarii proiectelor finalizate n 2009 i non-beneficiarii n perioada 2008-2012, odat ce efectul altor factori a fost izolat. Astfel, efectul net se calculeaz numai ntre beneficiarii i non-beneficiarii comparai/similari. Acest rezultat este confirmat prin metodele aplicarea scorului de propensiune i Designul Discontinuitii Regresiei.

Cu toate acestea, analiza contrafactual nu a fost n msur s dovedeasc o variaie semnificativ a cifrei de afaceri din punct de vedere statistic. Acest fapt nseamn c nu este posibil s se indice, din punct de vedere statistic, dac beneficiarii au o probabilitate mai mare/mai mic de a-i crete cifra de afaceri/eficacitatea n comparaie cu non-beneficiarii comparai.

Analiza contrafactual a investigat, de asemenea, durabilitatea efectelor, prin msurarea performanei relative a beneficiarilor comparativ cu non-beneficiarii, la patru ani dup finalizarea proiectelor, cnd beneficiarii nu mai sunt obligai s menin locurile de munc nou create prin proiect. Rezultatul const n faptul c beneficiarii proiectelor finalizate n 2009 au avut performane mai bune chiar i la patru ani dup finalizarea interveniei, crend cu 2,4 locuri de munc per microntreprindere mai mult dect non-beneficiarii comparai. n orice caz, analiza variaiei locurilor de munc n perioada 2008-2013 arat c beneficiarii DMI 4.3, comparai cu non-beneficiarii, au o cretere mai redus a ocuprii forei de munc la patru ani de la finalizarea proiectului comparativ cu creterea nregistrat la trei ani de la finalizare. Acest aspect demonstreaz c, n medie, avantajele DMI 4.3 devin relevante la patru ani dup finalizarea proiectului, chiar dac ntr-un ritm mai ncet.Analiza sugereaz, de asemenea, o legtur specific ntre valoarea finanrii i amploarea impactului, existnd o corelaie pozitiv ntre valoarea financiar a grantului i variaia ocuprii forei de munc. O analiz mai atent a beneficiarilor primului apel de proiecte arat c impactul DMI 4.3 asupra variaiei ocuprii forei de munc este afectat de valoarea financiar a grantului. n special microntreprinderile mai mici s-au confruntat cu o variaie relativ mai mare comparativ cu cele cu un numr mai ridicat de angajai.

O analiz econometric a fost apoi realizat n vederea comparrii celor dou apeluri. Aceasta arat c Apelul de proiecte nr. 2 este mai eficace, n ceea ce privete crearea de locuri de munc, dect Apelul de proiecte nr. 1, i mai puin eficient n ceea ce privete cheltuielile FEDR per loc de munc creat. n perioada de comparaie (2010-2012), beneficiarii Apelului de proiecte nr. 2 au avut performane mai bune n ceea ce privete creterea ocuprii forei de munc, n comparaie cu beneficiarii Apelului de proiecte nr. 1. Aceasta confirm, de asemenea, rezultatul descris anterior privind variaia locurilor de munc pe msur ce crete valoarea finanrii. Cu toate acestea, o mai mare eficacitate a Apelului de proiecte nr. 2 este parial contrabalansat de o eficien mai sczut, deoarece crearea unui loc de munc dup trei ani de la finalizarea proiectului presupune un cost de aproximativ 100.000 de lei din contribuia FEDR n cadrul Apelului de proiecte nr. 1, n timp ce un loc de munc n cadrul celui de-al doilea Apel de proiecte se ridic la 125.000 lei.

Analiza econometric identific factorii eseniali privind accesul la finanare, precum existena site-urilor web ale microntreprinderilor, apartenena la sectorul de servicii i o situaie financiar solid.

Relevana disponibilitii unui site web poate fi explicat prin rolul esenial al internetului n furnizarea de informaii privind DMI 4.3 i poate fi vzut ca un proxy al deschiderii i orientrii spre inovare a microntreprinderilor.

n ceea ce privete specializarea sectorial, microntreprinderile din sectorul construciilor i industriei au o tendin mai sczut de a fi finanate, comparativ cu cele din sectorul serviciilor. O detaliere a impactului specializrii sectoarelor, chiar dac nu a fost inclus n criteriile de selecie, este furnizat n cadrul capitolului 4 din prezentul Raport de evaluare. n plus, efectele apartenenei la diferite sectoare, domenii de activitate, tipuri de investiii i caracteristici de pia, sunt examinate n interviurile efectuate prin aplicarea studiilor de caz.

Situaia financiar a microntreprinderilor, nainte de finanarea n cadrul primului Apel de poriecte din cadrul DMI 4.3 (2007 ca an de referin), a avut un efect pozitiv asupra creterii probabilitii ca acestea s fie finanate prin intervenie. n mod special, microntreprinderile care au condiii financiare mai dificile n termeni de active nete nregistreaz posibiliti mai reduse de a beneficia de sprijinul acordat prin DMI 4.3 i manifest o probabilitate mai mare de a-i anula proiectele, ca urmare a dificultilor nregistrate n accesarea pieelor de credit (a se vedea subcapitolul 4.2 i 4.5 pentru mai multe informaii).

Pe lng accesul la finanare, analiza ofer, de asemenea, perspective interesante n ceea ce privete implementarea interveniei. n cadrul primului Apel de proiecte, exist o rat ridicat de reziliere a proiectelor, ntruct muli beneficiari au decis ntreruperea implementrii proiectului nainte de finalizare. Principalii factori care conduc la creterea probabilitii ca o firm s rezilieze contractul sunt: durata procesului administrativ i de selecie i o situaie financiar precar. Procesul administrativ i de selecie prevede cinci etape: 1) depunerea proiectului; 2) verificarea conformitii; 3) evaluarea tehnic i financiar; 4) vizita pe teren i etapa de pre-contractare; 5) decizia de finanare. Acest proces dureaz aproximativ un an (mai mult pentru beneficiarii care reziliaz proiecte, dect pentru cei care le finalizeaz), iar perioada dintre vizita pe teren i decizia de finanare reprezint aproximativ 50% din procesul de selecie n ansamblu. Firmele cu o variaie pozitiv a activelor nete n perioada de implementare prezint o probabilitate mai mic de a-i rezilia contractele. Mai mult dect att, probabilitatea de a rezilia scade pe msur ce valoarea grantului crete, pn la un anumit prag, cnd tendina se inverseaz. Acest lucru ar putea fi interpretat ca o problem de sustenabilitate financiar a proiectelor, n special n cadrul primului Apel de proiecte, i poate fi de asemenea explicat prin faptul c mecanismele de rambursare prin intermediul cererilor de plat nu au fost posibile la nceputul perioadei de implementare a DMI 4.3.Mai mult dect att, n cazul n care beneficiarii se afl ntr-unul dintre cele mai dezvoltate judee ale rii, exist o probabilitate mai mare a rezilierii proiectelor acestora, fapt care ar putea fi explicat printr-o disponibilitate mai mare a altor resurse de finanare.

Principalele constatri ale analizei calitativeAnaliza efectuat prin derularea studiilor de caz a identificat, la nivel de beneficiar, creterea:

Capacitii de a exploata oportunitile de pia;

Orientrii strategice i schimbrii domeniului de activitate;

Trecerii de la comercializare la producie; Calitii produciei i furnizrii de noi servicii.

DMI 4.3 a permis beneficiarilor s se dezvolte att la nivel regional, ct i naional i, n unele cazuri, s i dezvolte o perspectiv internaional. Dezvoltarea companiilor a produs, de asemenea, "efecte sociale" pozitive, precum mbuntirea competenelor angajailor i conformitatea cu standardele europene privind condiiile de munc sau, n cazul beneficiarilor sectorului de asisten medical, accesul local la servicii medicale de nalt calitate.

Interviurile cu autoritile publice, studiile de caz i grupurile nominale au confirmat rezultatele analizei cantitative: principalele dou provocri ale implementrii proiectelor au constat n dificultile n accesarea de credite i durata procesului de selecie i de contractare. Aceste dou provocri reprezint unele dintre motivele pentru care, n special n cadrul primului Apel de proiecte, muli beneficiari au decis s i rezilieze contractele. n ceea ce privete dificultile n accesarea creditelor, criza economic i reticena general a bncilor de a finana microntreprinderile i proiectele inovatoare au contribuit la creterea acestor dificulti. Din perspectiva procesului de selecie, interviurile i studiile de caz au indicat faptul c durata procedurilor administrative descurajeaz finanarea ideilor inovatoare. Durata ndelungat a procedurilor a contrubuit la creterea riscurilor pentru beneficiari de a face investiii nvechite/care nu mai erau de actualitate. Prin urmare, DMI 4.3 a contribuit mai mult la accelerarea realizrii programelor de investiii existente, dect la realizarea de investiii complet noi.Concluzii i recomandriEvaluarea efectuat ofer principalele rezultate obinute n urma analizei cantitative i calitative, ct i o serie de recomandri privind politica de dezvoltare, care s poat fi luate n considerare pentru proiectarea politicilor viitoare, cu referire la:

a) Depunerea proiectelor, aspect care se refer la accesibilitatea la DMI 4.3 i la conceperea proiectului;

b) Procedurile de selecie i procesul de raportare;

c) Impactul DMI 4.3;

d) Accesul la creditare i valoarea financiar a grantului.a) Depunerea proiectelorConcluziiRecomandri

Principalele aspecte legate de depunerea proiectelor se refer la accesul la informaiile despre DMI i conceperea proiectului. n ceea ce privete accesul la DMI 4.3, deschiderea microntreprinderilor ctre pia (ex.: existena unui site web) crete probabilitatea ca o firm s afle informaii despre DMI 4.3 i s fie finanat. Referitorla conceperea proiectului, i lund n considerare faptul c pregtirea proiectului a fost considerat ca fiind o provocare, muli aplicani au decis s angajeze consultani ad-hoc. n unele cazuri, calitatea consultanei primite nu a atins ateptrile aplicanilor.n ceea ce privete accesul la DMI 4.3, pe lng actualele surse de informare (Internet, publicaii scrise i consultani externi), este oportun ca Autoritile de Management s promoveze activiti de formare (n special n elaborarea planului de afaceri); s sprijine consolidarea Camerelor de Comer i Industrie i Ageniile de Dezvoltare Regional ca centre de help-desk pentru microntreprinderi; s promoveze crearea de reele i schimbul de practici ntre ntreprinderi.

b) Procedurile de selecie i procesul de raportare

ConcluziiRecomandri

Procesul de selecie i de raportare reprezint o dificultate i o provocare pentru beneficiari. Evaluarea efectuat demonstreaz c procedurile administrative reprezint, n unele cazuri, o barier pentru finanarea ideilor inovatoare, iar n alte cazuri, acestea reprezint un motiv de anulare a proiectelor.n ceea ce privete procesul de raportare i procedurile de selecie, eforturi suplimentare par a fi necesare pentru: mbuntirea grilei de evaluare, stabilirea unui calendar clar i transparent pentru procesul administrativ n vederea reducerii intervalului dintre fiecare etap a procesului de selecie, consolidarea capacitii administrative a autoritilor de management, simplificarea procedurii, utilizarea n continuare a mecanismului de cereri de plat.

c) Impactul DMI 4.3ConcluziiRecomandri

n ciuda crizei economice, beneficiarii Apelului nr. 1 creeaz, n medie, cu 3 noi locuri de munc mai mult dect beneficiarii comparai, la trei ani dup finalizarea proiectelor.

Cu toate acestea, la patru ani dup finalizarea proiectelor, beneficiarii Apelului nr. 1 creeaz cu 2,4 locuri de munc mai mult dect non-beneficiari comparai, nregistrnd o valoare uor mai sczut dect cea nregistrat la trei ani dup finalizarea proiectelor. Acest lucru poate fi interpretat ca o durabilitate limitat a efectelor interveniei, din moment ce beneficiarii nu i mai cresc, sau i reduc uor capacitatea de creare de noi locuri de munc, n comparaie cu non-beneficiarii.

Analiza calitativ, n special studiile de caz, arat modificri substaniale n ceea ce privete produsele, furnizarea de servicii i adiionaliti comportamentale. Chiar dac limitat la anumite zone i nu la toat ara, DMI 4.3 a contribuit la crearea de noi branduri, produse i deschiderea de noi oportuniti de pia. Cea mai important valoare adugat a DMI 4.3 este reprezentat de creterea capacitii antreprenoriale a beneficiarilor. De fapt, DMI 4.3, cu simpla solicitare a unui plan de afaceri, a stimulat o reorganizare general a activitilor microntreprinderilor i a asigurat resursele financiare adecvate, n special n cadrul celui de-al doilea apel de proiecte, pentru a finana investiiile.

Mai mult dect att, un aspect suplimentar de luat n considerare la implementarea DMI 4.3 i a caracteristicilor de dezvoltare din Romnia este reprezentat de relevana inegalitilor. Se observ existena unor dispariti clasificate pe dou niveluri diferite: unul se refer la disparitile existente ntre Bucureti i regiunile externe, iar cel de-al doilea se refer la disparitile dintre regiunile rii. Dintr-o perspectiv macroeconomic, n funcie de indicele de competitivitate regional, inegalitatea dintre Bucureti i restul rii rmne ridicat. Cu toate acestea, pe baza interviurilor aplicate funcionarilor ADR, s-a constatat c n anumite cazuri alocarea de fonduri a contribuit la creterea disparitilor ntre regiuni. Acest lucru se datoreaz regulii de alocare a resurselor pe baza numrului de locuitori i faptului c principalii beneficiari ai DMI 4.3 sunt companii din centrele urbane dezvoltate ale regiunii.O elaborare a DMI 4.3 mai orientat spre rezultat i inovare ar putea spori eficiena i impactul la nivel de proiect, n conformitate cu Strategia Specializrii Inteligente a rii. n acest sens, criteriile de selecie i apelurile de proiecte pot fi concepute pentru a promova o abordare mai inovatoare. Alte experiene de programare, consultate n analizele comparative, sugereaz diferite opiuni pentru elaborarea unei intervenii mai orientate spre inovare, precum finanarea proiectelor bazate pe reele i cu o orientare tehnologic consolidat (de exemplu: sectoare de hi-tech, TIC, tehnologii generice eseniale, etc.), finanarea unor etape ale lanului inovrii (instruire i dezvoltare), care sprijin un mic set de microntreprinderi extrem de performante, pentru aplicarea n cadrul programului Orizont 2020.

n ceea ce privete riscul de cretere a inegalitilor, Autoritatea de Management ar putea continua efectuarea evalurii de impact la finalul implementrii DMI 4.3 i ar putea promova o implicare mai intens a factorilor interesai la nivel local i regional, n viitoarea proiectare a interveniilor, pentru reducerea disparitilor interne ca urmare a aplicrii principiului subsidiaritii.

d) Accesul la creditare i valoarea financiar a grantului

ConcluziiRecomandri

Studiile de caz arat c principalele dificulti ale beneficiarilor sunt legate de accesul la creditare (de exemplu, mprumuturi i garanii). Criza economic a avut un impact asupra implementrii DMI 4.3, datorit dificultilor sporite cu privire la capital i fluxul de numerar (co-finanare cu bncile). n ceea ce privete valoarea grantului, analiza cantitativ i calitativ arat o corelaie pozitiv ntre valoare financiar a grantului i variaia ocuprii forei de munc, n special n cazul microntreprinderilor mai mici.Autoritile de management ar trebui s gseasc soluii adecvate pentru a asigura resurse suficiente de capital prin implementarea i a unor instrumente financiare.

n cele din urm, avnd n vedere activitile de evaluare viitoare, evaluarea de impact sugereaz crearea unei baze de date unitare pentru stocarea informaiilor cu privire la ntreprinderile mici, mijlocii i a microntreprinderilor, n calitate de beneficiari de fonduri europene. n acest scop, baza de date realizat n cadrul prezentei evaluri reprezint un suport util, care ar putea fi uor de actualizat n urmtorii ani i folosit pentru a efectua analize suplimentare asupra DMI 4.3. Realizarea unei baze de date mai extinse va permite efectuarea evalurilor viitoare n domeniul sprijinirii afacerilor i va permite, totodat, compararea intervenilor din diferite programe.

INTRODUCEREContextul proiectuluiAcest document raporteaz Evaluarea de impact a DMI 4.3 din cadrul POR 2007-2013. DMI 4.3, Sprijinirea dezvoltrii microntreprinderilor, vizeaz consolidarea dezvoltrii microntreprinderilor din domeniul construcii, producie i servicii, situate n zonele urbane, pentru a promova o cretere general a competitivitii microntreprinderilor i utilizarea noilor tehnologii, inovaii, echipamente i servicii TIC. Evaluarea se axeaz pe primele dou apeluri de proiecte din cadrul DMI 4.3. Apelul de proiecte nr. 1 a fost lansat n 2008, cu o alocare de 20 de milioane de euro, n timp ce Apelul de proiecte nr. 2 lansat n iulie 2010, a avut o alocare de aproximativ 190 de milioane de euro.

Structura documentuluin conformitate cu prevederile contractuale, Raportul cuprinde trei seciuni.

Seciunea I corespunde Activitii 2.1 - Efectuarea recenziei literaturii de specialitate, aa cum este prevzut n Caietul de Sarcini. n cadrul Seciunii I, Capitolul 1 ofer o imagine de ansamblu asupra contextului economic din Romnia i a analizei SWOT; sunt descrise principalele provocri i nevoi pentru activitatea microntreprinderilor vizate de DMI 4.3. Anexele I VII furnizeaz analiza general a situaiei, analiza PEST i orientrile metodologice pentru analiza SWOT i identificarea nevoilor, examineaz n detaliu lista de referine, ilustreaz progresul nregistrat de implementarea DMI 4.3. Seciunea I a fost elaborat folosind urmtoarele metode: analiza documentelor i a literaturii de specialitate, evaluarea pe baz de matrice, modelul logic, utilizarea datelor secundare i administrative, analiza SWOT, analiza PEST, elaborarea diagramei vizuale.

Seciunea II, Activitatea 2.2 - Conceperea metodologiei de evaluare, analiza i interpretarea datelor descrie metodologia de evaluare i ofer estimri cantitative ale eficienei DMI 4.3. Seciunea II cuprinde trei capitole. Capitolul 2 ilustreaz rezultatele subactivitii 2.2.1 Identificarea celor mai adecvate metode de evaluare pentru msurarea impactului interveniilor i construirea modelului de analiz; Capitolul 3 descrie sub-activitatea 2.2.2 Identificarea surselor de date i culegerea datelor. Capitolul 4 raporteaz subactivitatea 2.2.3 Analiza i interpretarea datelor, mpreun cu rezultatele estimrilor contrafactuale. Metodologiile utilizate n seciunea II sunt: evaluarea bazat pe matrice pentru selectarea i colectarea informaiilor relevante pentru estimrile i compararea rezultatelor cu alte studii; metode cantitative (statistici descriptive i analiz contrafactual) pentru a estima efectele nete ale DMI 4.3. Modelarea econometric suplimentar a fost utilizat pentru a examina impactul grantului i pentru compararea celor dou apeluri de proiecte.

Seciunea III, 2.3 Aplicarea metodelor complementare pentru analiza calitativ a rezultatelor, prezint, n cadrul Capitolului 5, rezultatele principale ale interviurilor cu Autoritatea de Management, Ageniile de Dezvoltare Regional, interviurilor cu factorii economici interesai, interviurilor i studiilor de caz cu beneficiarii, precum i a panelului de experi i a analizei de benchmarking. Toate anexele corespunztoare (XI XIV) furnizeaz informaii detaliate despre aceste interviuri. Metodele utilizate n aceast seciune sunt: analiza literaturii de specialitate, analize documentare, interviuri, sondaje, benchmarking i studii de caz.

Documentul se ncheie cu Capitolul 6, care ilustreaz principalele concluzii ale evalurii i recomandrile privind politica de dezvoltare, care au fost discutate n cadrul celor dou grupuri nominale.

SECIUNEA I - Activitatea 2.1. Efectuarea recenziei literaturii de specialitate1. Prezentare general a contextuluiAcest capitol reprezint o sintez a unei analize aprofundate a situaiei i ilustreaz:

cadrul logic al DMI 4.3;

versiunea actualizat a analizei SWOT pentru dezvoltarea microntreprinderilor, realizat n baza anexelor III, IV i V; lista actualizat a nevoilor i provocrilor pentru dezvoltarea microntreprinderilor.Mesaje cheie

DMI 4.3 sprijin dezvoltarea microntreprinderilor din domeniul construciilor, produciei i serviciilor, situate n mediul urban. Reprezint o oportunitate de redresare economic a rii i de mbuntire a creterii ocuprii forei de munc. Acest DMI este relevant pentru Romnia, avnd n vedere c microntreprinderile reprezint o parte important a economiei i acestea au fost grav afectate de criza economic. Principalele provocri ale mediului de afaceri i ale dezvoltrii sectoriale: distribuie inegal a serviciilor de afaceri pe teritoriul rii, dificulti n accesarea finanrii, atitudine antreprenorial/managerial subdezvoltat, sarcini administrative excesive, specializare n sectoare slab productive i cu un grad sczut de inovare. Nevoile i provocrile identificate confirm n special elementele cheie deja incluse n FEDR POR 2007-2013.

1.1. MODELUL LOGIC AL DMI 4.3 N CADRUL PORDMI 4.3 Sprijinirea dezvoltrii microntreprinderilor este o intervenie conceput pentru a sprijini dezvoltarea i restructurarea microntreprinderilor locale i regionale (a se vedea anexa II pentru detalii suplimentare cu privire la implementare, precum i subcapitolul 4.2. pentru criteriile de selecie). DMI 4.3 sprijin restructurarea zonelor rmase n urm din punct de vedere al dezvoltrii, ncurajeaz utilizarea noilor tehnologii i inovaii, a echipamentelor TIC i a serviciilor, cu un rol important n creterea competitivitii, productivitii i a nivelului de calitate al microntreprinderilor care beneficiaz de asisten nerambursabil.

Componentele structurii logicii interveniei sunt:

Nevoile: sunt identificate ca o combinaie a componentelor analizei SWOT i indic raiunea politicii de dezvoltare i problemele care trebuie abordate i rezolvate prin strategie; Strategia: definete obiectivul general, obiectivele specifice i rezultatul ateptat al politicii de dezvoltare;

Rezultatele: schimbrile induse de o schem politic, n condiiile n care exist posibilitatea nregistrrii unui decalaj substanial ntre rezultatele avute n vedere i rezultatele efective, n special datorit aciunii unor factori externi. Msurarea i nelegerea acestui decalaj este unul dintre scopurile principale ale activitilor de evaluare.

Operaiunile: msuri, aciuni, tipuri de intervenii, instrumentul operaional de realizare a strategiei. Produc rezultate la nivel de proiect i la nivel de program/ax prioritar, care pot fi diferite fa de previziunile iniiale. Msurarea i nelegerea acestui decalaj este unul dintre scopurile principale ale activitilor de evaluare. n conformitate cu art. 2 al Regulamentului 1303/2013, operaiunea reprezint un proiect, un contract, o aciune sau un grup de proiecte selectate de ctre autoritile de management ale programelor n cauz, sau aflate sub responsabilitatea lor, care contribuie la obiectivele uneia sau mai multor prioriti. Input-uri: reprezint capitalul, resursele financiare i umane utilizate n cadrul operaiunilor. Se poate face distincie ntre input-uri alocate i cele efective.Componentele principale ale logicii interveniei DMI 4.3 sunt prezentate n continuare:Tabel nr. 1 Componente ale logicii interveniei DMI 4.3NevoiAcestea sunt legate de: mediul de afaceri, dezvoltarea industrial, piaa forei de munc, dezvoltarea teritorial. Nevoile sunt descrise n detaliu n cadrul subcapitolului 1.3.

StrategieDMI 4.3 Sprijinirea dezvoltrii microntreprinderilor este parte a Axei Prioritare 4 mpreun cu alte dou DMI-uri. n timp ce DMI 4.1 i 4.2 se concentreaz mai mult pe aspectele structurale i de infrastructur, DMI 4.3 vizeaz restructurarea zonelor subdezvoltate i consolidarea microntreprinderilor n economia de pia dinamic. Criterii de selectare a operaiunilor: avantaje competitive regionale; dispariti regionale; activiti economice cu avantaje competitive poteniale.

RezultatePrincipalele rezultate ateptate: O cretere general a competitivitii microntreprinderilor;

O cretere n utilizarea noilor tehnologii i inovaii, a echipamentelor TIC i a serviciilor.

Aceste dou schimbri principale ar putea fi caracterizate prin creterea cifrei de afaceri, a productivitii, a numrului de angajai i a capacitii de inovare.

OperaiuniDMI 4.3 poate sprijini, ca beneficiari eligibili, societi comerciale i cooperative care, potrivit legii, se ncadreaz n categoria microntreprinderilor i desfoar activiti ncadrate ntr-o gam larg de domenii specifice produciei, serviciilor i construciilor. Activitile eligibile se refer la trei categorii:

1. achiziii de echipamente noi, moderne i noi tehnologii pentru activitatea de producie, prestarea de servicii i construcii;

2. achiziii de sisteme TIC (hardware i/sau software);

3. construcie/extindere/modernizare a zonelor de producie/zonelor utilizate pentru prestarea de servicii, activiti specifice de dezvoltare.

Input-uriDou apeluri de proiecte reprezint punctul central al acestei evaluri. Pentru primul Apel de proiecte, lansat n anul 2008, alocarea disponibil a fost de aproximativ 20 de milioane de euro, pentru toate cele opt regiuni. Contribuia minim necesar din partea beneficiarului din cheltuielile eligibile ale proiectului a fost de 30%. Pentru Apelul nr. 2, cu o alocare de aproximativ 190 de milioane de euro, n iulie 2010, Comitetul de Management al Programului Operaional Regional (CM POR) a decis s creasc componenta nerambursabil pn la 100% din valoarea cheltuielilor eligibile ale proiectelor. De fapt, aceast msur se aplic tuturor proiectelor depuse n cadrul Apelului nr. 2, chiar dac n momentul n care a fost depus cererea de finanare, aplicanii au solicitat finanare doar pentru maxim 70% din cheltuielile eligibile, n conformitate cu normele n vigoare n momentul depunerii. Un apel de proiecte suplimentar s-a lansat n anul 2014, dar nu va fi analizat n cadrul acestui studiu.

Modelul logic va fi sintetizat n cadrul Capitolului 5 i descris n Anexa XIV, unde, prin intermediul analizei studiilor de caz, evaluarea a verificat dac mecanismele la nivel de firm au funcionat conform ateptrilor, obinnd cu ajutorul intrrilor (input-urilor) alocate ieirile (output-urile) i rezultatele dorite.1.2. ANALIZA SWOT PENTRU DEZVOLTAREA MICRONTREPRINDERILOR Analiza situaiei economice pentru dezvoltarea microntreprinderilor din Romnia a fost elaborat n trei etape, n cadrul acestei seciuni: n prima etap este furnizat o scurt descriere a contextului economic general; n cea de-a doua etap, analiza se concentreaz asupra microntreprinderilor; cea de-a treia etap prevede elaborarea analizei SWOT, lund n considerare i dovezile existente n cadrul POR.CONTEXTUL ECONOMIC GENERALPentru a oferi o imagine de ansamblu a contextului economic global i pentru a compara situaia naional cu cea a altor ri din Europa, au fost utilizate mai multe surse, precum: Eurostat, Rapoartele Comisiei Europene, proiectele de cercetare ESPON, Institutul Naional de Statistic i rapoarte ale Guvernului Romniei. Anexele I-VII ofer informaii suplimentare cu privire la diferitele surse utilizate n analiz.

n conformitate cu datele disponibile la nivelul Eurostat, n 2013 Romnia prezint un nivel mai sczut al PIB-ului pe cap de locuitor n SPC (standardul puterii de cumprare), comparativ cu media UE28, i un nivel ridicat i n cretere al disparitii dintre regiunea capitalei, Bucureti-Ilfov, i celelalte regiuni. n ciuda mbuntirii din ultimii ani datorat unei creteri nete a exporturilor, balana comercial rmne negativ (a se vedea Anexa III pentru mai multe detalii). n ceea ce privete cursul de schimb, RON/EUR a ntmpinat variaii substaniale n perioada anterioar procesului de implementare a DMI 4.3 i, parial, i n perioada 2009-2014, aceste variaii influennd destul de omogen, att beneficiarii ct i non-beneficiarii. n consecin, acest aspect poate fi considerat neglijabil n acest studiu, pentru efectuarea comparaiei dintre beneficiari i non-beneficiari.

n conformitate cu documentul Comisiei Europene, Prognoza Economic European - Iarna 2014, n 2013 creterea PIB-ului a atins 3,5%, fiind generat substanial de exporturi; n 2014 i 2015, PIB-ul real este ateptat s creasc peste 2%, cu o cretere a cererii interne i o decelerare a inflaiei. Ocuparea forei de munc se atept s creasc numai n anul 2015. n ceea ce privete resursele de energie, Romnia pare s aib o vulnerabilitate ridicat i exist, pe teritoriul ei, regiuni ineficiente din punct de vedere energetic (Comisia European, 2008).

Structura ocuprii forei de munc n sectorul privat pe activiti principale ale economiei naionale n 2008 i 2012 ar putea fi rezumat dup cum urmeaz:

Sectorul primar are o pondere ridicat i stabil a lucrtorilor, ceea ce demonstreaz o slab dezvoltare a activitilor non-agricole, cu dependen fa de agricultura de subzisten, n special n zonele cele mai ndeprtate i rurale. Nivelul total al ocuprii forei de munc difer foarte mult de la o regiune la alta, cu diferene de pn la 30% ntre Bucureti-Ilfov i zonele periferice. Capitala este singura regiune care a atins standardele europene n ceea ce privete sectorul muncii.

n ceea ce privete numrul mediu de salariai n diferite tipuri de ntreprinderi, scderea ratei de ocupare afecteaz fiecare tip de ntreprindere, ntreprinderile mici fiind mai rezistente dect celelalte, iar microntreprinderile aflndu-se n situaii de dificultate.

n conformitate cu tendina de ocupare, distribuia naional a ntreprinderilor active pe clase de mrime a demonstrat aproape aceeai dinamic, n perioada 2008-2012. Scderea total a numrului de ntreprinderi ntre 2008-2012 a fost de -15%, cu un impact mai puternic asupra microntreprinderilor (numrul total al microntreprinderilor a sczut la 495.019 n 2008 i la 413.783 n 2012). Sectoarele tradiionale precum agricultura, mineritul, comerul cu ridicata i cu amnuntul acoper o pondere mare n aproape toate regiunile, cu excepia regiunii Bucureti-Ilfov, n care ponderea sectoarelor avansate (TIC i sectorul financiar) deine procente mai ridicate, iar sectorul primar este aproape inexistent.Comisia European, n cadrul Indicelui de Competitivitate Regional, definete competitivitatea ca fiind capacitatea unei ri de a oferi un mediu atractiv i durabil att pentru firme, ct i pentru locuitori. n acest sens, n 2013 Romnia ocup cea mai joas poziie n cadrul clasamentului UE28, cu o diferen mare ntre regiunea Bucureti-Ilfov i restul rii. Acestui dezechilibru i se adaug:

Procesul de urbanizare inegal i dinamica populaiei reflect aceast asimetrie;

Nivelul sczut de accesibilitate, infrastructura limitat i vulnerabilitatea energetic afecteaz potenialul teritorial al rii de coridor ctre Est;

Gradul sczut al inovrii n ntreprinderi i utilizarea limitat a TIC n ciuda capitalului uman relativ calificat.

Cu toate acestea, potrivit unui studiu cu privire la contribuia IMM-urilor din sectorul industrial la creterea economic, a existat din 2011 un numr relativ mic de ntreprinderi care s-au dezvoltat cu viteze record (firmele cu o cretere rapid), chiar i n timpul crizei financiare i economice. Un interes special l prezint un subgrup de ntreprinderi cu cretere rapid, denumit Gazelele, firme care sunt responsabile pentru o treime din numrul total de locuri de munc nou create n perioada de criz.

DEZVOLTAREA MICRONTREPRINDERILOR

n 2011, microntreprinderile din Romnia au reprezentat 87,1% din numrul total de ntreprinderi i au angajat 21,5% din fora de munc, potrivit datelor de la Institutul Naional de Statistic. Diferena dintre regiunile din Romnia prezentate, n ceea ce privete PIB-ul pe cap de locuitor, este reflectat n distribuia general inegal a microntreprinderilor.n ceea ce privete densitatea microntreprinderilor (raportul microntreprinderi/1000 locuitori), exist o diferen mare ntre regiunea Bucureti-Ilfov - aproape 45 microntreprinderi/1000 de locuitori - i Regiunea Nord-Est - 11,88 microntreprinderi/1000 de locuitori, avnd n vedere c atractivitatea mediului de afaceri al capitalei depete cu mult nivelul regiunilor de dezvoltare. n ceea ce privete distribuia ntreprinderilor i a cotei cifrei de afaceri pe regiune, sectorul de servicii, cum ar fi comerul cu ridicata i cu amnuntul, transportul i depozitarea, hoteluri i restaurante, acoper cea mai mare parte din totalul microntreprinderilor din fiecare regiune. Structura sectorial indic tendina microntreprinderilor spre activiti n comer i intermedieri comerciale, n timp ce sistemul de producie industrial nu este bine corelat cu cel al serviciilor, care ar putea genera o maximizare a utilizrii potenialului industrial. Microntreprinderile i IMM-urile i dezvolt afacerile pe plan local, conectat n principal cu pieele regionale.ANALIZA SWOT ACTUALIZAT

Urmtoarea analiz SWOT este elaborat pe baza evidenelor cuprinse n Anexele III i IV i a abordrii metodologice descrise n Anexa V, fiind structurat n jurul urmtoarelor teme principale/piloni principali, evideniai, de asemenea, n cadrul POR: Mediul de afaceri: condiiile structurale ale mediului n care microntreprinderile i dezvolt activitile i care sunt legate de intensitatea microantreprenoriatului (msurat ca raportul dintre microntreprinderi i populaia total);

Dezvoltare sectorial: se refer la specializarea sectorial i performana principalelor activiti economice;

Piaa forei de munc: astfel, unul dintre obiectivele DMI 4.3 vizeaz crearea de locuri de munc noi i durabile, analiza SWOT examineaz factorii care ar putea afecta performanele pieei muncii i tendinele aferente populaiei, migraiei i ratei ocuprii forei de munc;

Dezvoltare teritorial: se iau n considerare principalele dispariti teritoriale, care ar putea afecta performana microntreprinderilor, precum localizarea geografic (apropierea de oraele mari) i accesibilitatea la cile de transport. Mediul de afaceri Principalele elemente ale analizei SWOT pentru mediul de afaceri.

Tabel nr. 2 Analiza SWOT Mediul de afaceriPuncte tariPuncte slabeOportunitiAmeninri

mbuntirea balanei comerciale;

mbuntirea cererii interne;

Parteneri comerciali internaionali puternici, n special Italia i Germania.Dificulti n ceea ce privete accesul la finanare (au devenit mai importante n perioada de criz);

Condiii de afaceri dificile identificate n cadrul POR (atitudine antreprenorial/de management subdezvoltat; control fiscal i sarcini administrative excesive).Integrare pe piaa european;

Inovaii la nivelul organizaiilor i legturi cu liderii europeni n domeniul inovaiei i lanului valoric.

Continuarea crizei financiare ar putea intensifica problemele legate de condiiile de creditare i redresare economic.

Previziunile Comisiei Europene de la nceputul anului 2014 arat o mbuntire general a balanei comerciale, chiar dac aceasta nc nregistreaz un deficit. Deficitul a trecut de la -7.5% din PIB n perioada 1994-2009 la -2,4 n 2013 (Comisia European, 2014). Mai mult, Comisia European evideniaz n acelai raport o cretere a consumului privat, care poate avea un rol n susinerea cererii interne i n creterea economic viitoare.

n conformitate cu analizele raportate n Anexa nr. III, principalii parteneri ai Romniei n comerul internaional sunt Germania i Italia, care reprezint mpreun aproximativ 30% din activitile de import i export. Condiiile economice din aceste ri, precum i continuarea crizei financiare, ar putea crete problemele legate de condiiile de creditare i de activiti de afaceri generale din Romnia. Pe de alt parte, n ciuda recentelor dificulti datorate instabilitii la frontierele estice, integrarea pe piaa european ar putea crea noi oportuniti pentru dezvoltarea Romniei. Acestea pot fi utile pentru a aborda parial i depi principalele puncte slabe ale mediului de afaceri, precum spiritul antreprenorial/managerial subdezvoltat, controlul fiscal i sarcini administrative. Aceste probleme rmn foarte relevante n momentul prezentei evaluri, mpreun cu dificultile de accesare a pieei de creditare, care au crescut n ultimii ani.

Dezvoltare sectorialPrincipalele aspecte ale analizei SWOT legate de dezvoltarea sectorial: Tabel nr. 3 Analiza SWOT Dezvoltare sectorial

Puncte tariPuncte slabeOportunitiAmeninri

Uoar redresare economic n ultimii doi ani:

ntreprinderi cu o cretere rapid i o tendin pozitiv n ceea ce privete performana, ale subgrupului Gazelele.Specializarea n sectoare cu tehnologie intensiv sczut, dezvoltarea sczut a industriei i serviciilor avansate;

Scdere mai accentuat a numrului de microntreprinderi n comparaie cu alte firme.Difuziunea sectorului teriar avansat (TIC, sectorul financiar etc.) i noile evoluii tehnologice;

Rezistena mai bun a ntreprinderilor mici (exclusiv microntreprinderi) la criz.Criza economic persistent la nivelul pieelor occidentale (redresare limitat a Europei).

Comisia European arat o redresare economic uoar dup recesiunea din 2010 i o reducere a ocuprii forei de munc ntre 2007 i 2011 n toate regiunile (Comisia European, 2014). n acest context, criza economic persistent n pieele occidentale, n special n ceea ce privete redresarea limitat a Europei, reprezint o ameninare major pentru cererea internaional de bunuri din Romnia.

Reducerea ocuprii forei de munc a afectat orice tip de ntreprinderi, ntreprinderile mici fiind mai rezistente dect altele, iar microntreprinderile fiind n mai mare dificultate.

n ciuda performanei bune a Gazelelor (Guvernul Romniei, 2011), punctele structurale slabe ale dezvoltrii economice din Romnia nu s-au schimbat substanial n ultimii cinci ani. Acestea sunt strict legate de specializarea n sectoarele de tehnologie intensiv sczut i n sectoare de productivitate sczut (agricultur, transporturi, intermedieri etc.). n ceea ce privete distribuia microntreprinderilor i ponderea cifrei de afaceri din regiune, sectorul de servicii non-avansate, precum comerul cu ridicata i cu amnuntul, transport i depozitare, hoteluri i restaurante, acoper cea mai mare pondere din totalul microntreprinderilor n fiecare regiune (a se vedea Anexa III pentru o analiz detaliat). innd cont de nivelul de concentrare i de dezvoltarea dezechilibrat, Axa Prioritar nr. 4 - Sprijinirea dezvoltrii mediului de afaceri regional i local, a reprezentat o oportunitate pentru a nfiina i a dezvolta structuri de sprijinire a afacerilor din mediul regional i local, pentru a reabilita siturile industriale i a sprijini iniiativele antreprenoriale locale i regionale, pentru a facilita crearea de locuri de munc i creterea economic durabil. n mod particular, TIC i dezvoltarea tehnologic reprezint oportuniti relevante, att pentru abordarea principalelor provocri ale dezvoltrii sectoriale din Romnia, ct i pentru a spori specializarea industrial (a se vedea Anexa IV pentru mai multe detalii).

Piaa munciiAnaliza SWOT nu se concentreaz pe toate aspectele relevante ale dinamicii pieei forei de munc, deoarece evaluarea vizeaz aspectele legate mai mult de FEDR, adic distribuia pe vrste, nivelul de educaie i tendinele demografice.

Tabel nr. 4 Analiza SWOT Piaa munciiPuncte tariPuncte slabeOportunitiAmeninri

Populaie relativ tnr;

For de munc specializat, n special n regiunile cu centre universitare (Vest, Bucureti-Ilfov, Centru).Migraie n strintate;

Nivel sczut de educaie primar n zonele rurale i creterea abandonului colar.Dobndirea de competene antreprenoriale i tehnice ale emigranilor ntori.Previziuni negative privind tendina demografic (scderea i mbtrnirea populaiei).

n comparaie cu Europa, conform proiectului ESPON TerrEvi (a se vedea Anexa III i IV), Romnia prezint o populaie relativ tnr, ateptndu-se la o populaie n scdere i la o mbtrnire dinamic, cu excepia cazului Bucureti-Ilfov. Romnia are, de asemenea, o for de munc bine educat, la acelai nivel ca unele dintre cele mai performante regiuni din Europa (de exemplu, Frana, Irlanda, rile Benelux).

Dezvoltare local i regionalDup cum a fost evideniat n special n cadrul analizei dinamicii pieei muncii, dezvoltarea teritorial neuniform este una dintre provocrile economiei romneti. Principalele aspecte legate de dezvoltarea teritorial i local din Romnia: Tabel nr. 5 Analiza SWOT Dezvoltare local i regionalPuncte tariPuncte slabeOportunitiAmeninri

Municipiul Bucureti are o performan economic mai bun dect media european;

Poziie favorabil a rii n calitate de coridor ctre Est.Creterea economic regional concentrat i dezechilibrat;

Potenial sczut de accesibilitate multinodal i TIC;

Divergen larg n ceea ce privete dezvoltarea i activitatea economic ntre regiunea capitalei i alte regiuni n curs de dezvoltare.Procesul de urbanizare, ca oportunitate de dezvoltare industrial i de mbuntire a calitii vieii.Accentuarea continu a disparitilor de dezvoltare regional i de polarizare n zonele urbane importante.

Bucuretiul are o performan remarcabil comparativ cu restul rii i cu media european calculat n PIB-ul pe cap de locuitor n PPP, potrivit datelor Eurostat din 2011. Importana crescnd a capitalei n comparaie cu restul rii, permite atingerea economiilor de scar pentru atragerea de investiii mari i contribuie, de asemenea, la o cretere regional concentrat i dezechilibrat.Diferena ntre regiunile din Romnia n ceea ce privete PIB-ul pe cap de locuitor este, de asemenea, reflectat n dou aspecte suplimentare: accesibilitate multinodal i distribuia microntreprinderilor.

1.3. PROVOCRILE I NEVOILE MICRONTREPRINDERILORn conformitate cu abordarea metodologic ilustrat n Anexa V, analiza SWOT propus, mpreun cu analiza PEST i analiza situaiei, permite identificarea nevoilor principale i a provocrilor pentru dezvoltarea microntreprinderilor din Romnia i indic dac acestea au fost modificate n perioada 2007-2013. Principalele provocri i nevoi n dezvoltarea microntreprinderilor din Romnia sunt legate de patru domenii: mediul de afaceri, dezvoltare sectorial, piaa forei de munc, dezvoltare local i teritorial. Urmtoarele tabele prezint nevoile identificate, care confirm n mod efectiv validitatea raionamentului DMI 4.3, n special n ceea ce privete: promovarea unui mediu de afaceri mai bun pentru microntreprinderi; sprijinirea dezvoltrii sectoriale; mbuntirea dinamicii microntreprinderilor pentru a atrage investiii i a crea locuri de munc; reducerea disparitilor interne dintre regiuni. Chiar dac fondul general de dezvoltare a microntreprinderilor nu s-a schimbat n mod substanial, au aprut dou provocri principale: oportunitile i ameninrile legate de criza economic i financiar i de integrarea pe piaa europen.Tabel nr. 6 Nevoile pentru mediul de afaceriPotenial de dezvoltare (Oportuniti versus puncte slabe)Flexibilitatea IMM-urilor i a microntreprinderilor, precum i oportunitile care provin din integrarea pe piaa european ar putea contribui la reducerea dificultilor ntmpinate de mediul economic, datorit unei eficiene generate de rolul n inovare i lanul valoric internaional (ex: acces i condiii de creditare mai bune aplicate de ctre sistemul bancar; atitudine antreprenorial/de management mai bun).

Criza economic a afectat parial integrarea pe piaa european, n timp ce Strategia Europa 2020 (n special, strategiile de specializare inteligent i Small Business Act) ar putea reprezenta o prghie pentru a promova inovarea i dezvoltarea i, de asemenea, pentru a crea noi oportuniti de locuri de munc pentru tineri i persoane cu un nivel ridicat de educaie.

Obstacole n calea dezvoltrii (Ameninri care contracareaz punctele tari)Redresarea limitat a cererii interne ar putea duce la o cretere economic mai fragil, n special n regiunile subdezvoltate (recuperarea limitat a raportului dintre microntreprinderi i populaia total, continuarea creterii numrului de microntreprinderi radiate).

n ultimii ani i luni, instabilitatea la graniele estice ale Romniei a contribuit la crearea unui mediu de afaceri mai dificil pentru microntreprinderi n comparaie cu perioada de lansare a DMI 4.3.

Tabel nr. 7 Nevoile de dezvoltare sectorialPotenial de dezvoltare (Oportuniti versus puncte slabe)Dezvoltarea sectorului teriar avansat (sectorul financiar, TIC etc.) i a noilor tehnologii ar putea promova diversificarea i dezvoltarea trans-sectorial a specializrii naionale n Romnia i, eventual, ar putea contribui la inversarea tendinei privind rata de radiere a microntreprinderilor.

n ultimii ani, specializarea industrial nu s-a schimbat n mod substanial, chiar i n condiiile unei specializri agricole intense n unele regiuni (ex: n partea de Sud i de Nord-Est).

Obstacole n calea dezvoltrii (Ameninri care contracareaz punctele tari)Dezvoltarea industrial i creterea productivitii limitate, n special pentru microntreprinderi, care sunt concentrate pe prestarea de servicii non-avansate (comerul cu ridicata i cu amnuntul, transport i depozitare, hoteluri i restaurante), precum i criza economic persistent din rile europene, n special principalele piee din Romnia, ar putea afecta redresarea economic a rii.

n perioada 2008-2013, principalele provocri ale dezvoltrii sectoriale se pare c nu s-au schimbat.

Tabel nr. 8 Nevoile de pe piaa muncii

Potenial de dezvoltare (Oportuniti versus puncte slabe)Dobndirea de competene antreprenoriale i tehnice ale emigranilor ntori pot crea condiiile pentru dezvoltarea endogen n Romnia i de reducere a migraiei forei de munc nalt calificate.

Principalele provocri nu s-au schimbat.

Obstacole n calea dezvoltrii (Ameninri care contracareaz punctele tari)Ateptrile referitoare la tendine negative demografice (scderea i mbtrnirea populaiei), scderea forei de munc i riscurile aferente exodului populaiei calificate ar putea mpiedica potenialul de dezvoltare a unei populaii relativ tinere i a forei de munc relativ bine educate.

Principalele provocri ale dezvoltrii industriale se pare c nu au fost schimbate.

Tabel nr. 9 Nevoile de dezvoltare regional i localPotenial de dezvoltare (Oportuniti versus puncte slabe)Performana economic pozitiv a capitalei i procesul de urbanizare ar putea contribui la un efect ulterior de dezvoltare pentru restul rii datorit creterii costurilor n zonele urbane mai dezvoltate ca urmare a congestiei/aglomerrii i exploatrii coridorului Vest-Est al rii.

Obstacole n calea dezvoltrii (Ameninri care contracareaz punctele tari)Vulnerabilitatea dezvoltrii Romniei, bazat pe o cretere economic regional concentrat i dezechilibrat, fr un sector al produciei solid, ar putea continua s influeneze n mod negativ microntreprinderile prin evoluia mai lent n raport cu celelalte, i reprezint un motiv de ngrijorare n ceea ce privete dezvoltarea durabil i favorabil incluziunii teritoriale.

SECIUNEA II - Activitatea 2.2 Conceperea metodologiei de evaluare, analiza i interpretarea datelor2. Identificarea de metode de evaluare

2.1. EVALUAREA IMPACTULUI n literatura de evaluare, sunt cunoscute dou mari categorii de evaluri de impact Evaluarea de impact bazat pe o abordare teoretic i Evaluarea de impact prin intermediul metodei contrafactuale. Prezenta evaluare va combina ambele metode n conformitate cu abordarea DG Regio (Comisia European, 2014 b), care indic n mod clar faptul c metoda contrafactual i abordrile bazate pe teorie ar trebui s se completeze reciproc. ntruct rezultatele evalurii de impact bazate pe teorie vor fi ilustrate n cadrul capitolului 5, capitolele 2, 3 i 4 se vor referi la metoda contrafactual.

Evaluarea de impact prin intermediul metodei contrafactuale este instrumentul cel mai utilizat pentru a rspunde la ntrebarea Intervenia public funcioneaz/are un efect?. Aceast ntrebare se refer la existena unei legturi de cauzalitate ntre intervenie i un efect ex-post i vizeaz identificarea efectului net n cadrul modelului logic al schemei politice finanate. Efectul msurat n evaluarea contrafactual este definit n conformitate cu Orientrile DG Regio ca fiind efectul net, ce corespunde contribuiei unei intervenii la o schimbare produs ntr-un teritoriu, dup ce a fost izolat efectul altor factori.

Conform POR 2007-2013, principala schimbare ce trebuie realizat pentru DMI 4.3, dup cum este detaliat n cadrul Activitii 2.1 a evalurii (a se vedea Capitolul 1), este creterea spiritului antreprenorial i creterea numrului de locuri de munc. Indicatorul de rezultat ce reflect schimbarea creat este numrul de locuri de munc nou create n microntreprinderile sprijinite. n cadrul POR a fost stabilit un obiectiv de 3.000 de noi locuri de munc, msurat ca echivalent al normei ntregi pentru angajai. Schimbarea produs de crearea a 3.000 de noi locuri de munc este diferit de efectul net msurat printr-o evaluare contrafactual. Impactul analizat prin aceast metod, definit ca efect net, reprezint schimbarea plus/minus contribuia altor factori. Impactul analizat prin metoda contrafactual reprezint efectul net, acesta fiind estimat cu scopul de a separa contribuia diverilor factori i de a izola contribuia DMI 4.3.

n termeni teoretici, evaluarea contrafactual a efectelor unei intervenii trebuie realizat prin compararea, n aceeai perioad, a aceluiai set de uniti - n cazul DMI 4.3, microntreprinderi -cu i fr sprijin prin intermediul interveniei. Efectul DMI 4.3 ar produce o diferen ntre:

performana (ex: creterea numrului de angajai) microntreprinderii care beneficiaz de finanare i

performana aceleiai microntreprinderi n situaia n care nu a primit finanare.n mod evident, singurul tip de informaii disponibil aferent beneficiarilor este cel privind performana acestora n situaia accesrii unei finanri. Ca urmare, este necesar s se identifice un grup de control plauzibil, alctuit din microntreprinderi care au caracteristici similare cu cele care au beneficiat de sprijinul oferit de DMI 4.3, cu principala diferen c acestea nu au primit sprijin financiar n perioada de timp analizat. 2.2. GRUPUL DE CONTROL I INSTRUMENTE DE EVALUARE CONTRAFACTUAL Metodele empirice adoptate n evaluarea politicilor publice fac parte din abordarea metodei non-experimentale, ntruct fluxul de date rezult din procesul natural de implementare a politicii. Evaluarea contrafactual a efectului const n estimarea diferenei dintre valoarea observat a variabilei de rezultat dup intervenie i valoarea observat (valoare contrafactual) dac intervenia nu ar fi fost implementat. Principiul care fundamenteaz aceast analiz este cuantificarea efectului politicii ca diferen dintre rezultatul (efectiv) variabilei analizate dup implementarea politicii i rezultatul (contrafactual) n cazul n care intervenia nu ar fi fost adoptat. Ca la orice metod non-experimental bazat pe informaii disponibile i n lipsa de date experimentale, fiind ipoteza contrafactual neobservabil, este necesar s se aplice o procedur prudent n vederea reducerii riscului de influenare a seleciei unitilor, ncercndu-se reducerea la minimum a problemelor diferenelor care nu sunt nule n condiiile iniiale, pentru a avea o estimare fiabil a efectului contrafactual.

Pentru a oferi o msur credibil i o interpretare cauzal plauzibil a impactului, prezenta evaluare a impactului a utilizat grupuri de control pentru a delimita impactul interveniilor politicii/programului raportat de la contribuia factorilor externi i a fost conceput n scopul de a ndeplini urmtoarele pre-condiii:

evaluarea contrafactual de impact necesit un grup de control credibil, adic este necesar un set de date numerice pentru ambele categorii: beneficiari (proiecte finalizate) i non-beneficiari; un numr suficient de mare de participani, entiti i uniti de control pentru a asigura nsemntatea din punct de vedere statistic, adic, trebuie creat un set de date adecvate n ceea ce privete dimensiunea eantionului i disponibilitatea datelor n timp, care s permit comparaia ntre situaia anterioar i ulterioar interveniei;

unitile grupului de control trebuie s aib caracteristici similare cu cele ale beneficiarilor DMI 4.3 n ceea ce privete:

statutul juridic (trebuie s fie microntreprindere, cu maxim 9 angajai), n aceeai perioad n care beneficiarii au aplicat la finanare;

activitatea ntr-un domeniu similar cu cel al beneficiarilor (servicii, industrie, servicii n agricultur, construcii etc.);

existena pe pia (n ceea ce privete anii analizai);

caracteristici structurale similare (dimensiune, localizare, situaie financiar, accesibilitate web).

date privind participanii sprijinii i cei care nu au fost sprijini pentru a compara rezultatele, adic, este necesar un set de date bazate pe informaii provenind din surse credibile.

Lund n considerare toate aspectele menionate mai sus, echipa de evaluare a considerat c modalitatea cea mai eficient i adecvat pentru a identifica non-beneficiarii interveniei este de a lua n considerare microntreprinderile care au aplicat pentru finanare prin DMI 4.3, n cadrul acelorai apeluri ca beneficiarii cu care sunt comparai, chiar dac nu au fost selectate pentru finanarea proiectului din diverse motive (nu au primit punctajul minim pentru aprobare, lipsesc unele documente sau lipsesc documente valabile, fapt ce a condus la descalificare n etapa de evaluare, exist un conflict de interese etc.). Aceast ipotez metodologic pare a fi o soluie optim conform literaturii n domeniul evalurii. Participarea n cadrul apelului de proiecte poate fi vzut ca un proxy n ceea ce privete tendina de a investi n domeniile eligibile ale apelului de proiecte. Aceast tendin de a investi este mprtit numai de ctre solicitani (beneficiari i non-beneficiari) n cadrul apelului. Ca urmare, estimrile vizeaz doar aplicanii la DMI 4.3 (beneficiari i non-beneficiari).

n vederea identificrii grupului de control din setul de non-beneficiari i pentru estimarea impactului, n evaluare s-a folosit un set de instrumente specifice din ghidul EVALSED al Comisiei Europene: metoda Diferena Diferenelor (Difference in Difference), Designul Discontinuitii Regresiei (Regression Discontinuity Design) i aplicarea Scorului de Propensiune (Propensity Score Matching).2.2.a. Diferena Diferenelor (DID)

Diferena diferenelor sau dubla difereniere (DID) se bazeaz pe faptul c variabilele de rezultat sunt disponibile pentru beneficiari i non-beneficiari, att nainte, ct i dup intervenie. Efectele sunt obinute prin scderea diferenei n rezultate, pre-intervenie, ntre beneficiari i non-beneficiari din diferena post-intervenie. Etapele abordrii sunt:

1. definirea variabilei/variabilelor de rezultat;

2. definirea dimensiunii n timp;

3. calculul dublei diferene;

4. rularea regresiei.

ntr-o prim faz se urmrete identificarea variabilelor de rezultat pentru definirea dimensiunii n timp aferente estimrii metodei diferena diferenelor n cadrul celei de-a doua etape. n cele ce urmeaz, DID este calculat ca medie pentru cele dou grupuri n cele dou perioade de timp (Average Treatment on Treated - Media tratamentului pentru tratai, ATT). Interpretarea cauzal se bazeaz pe presupunerea netestat, conform creia, n absena interveniei, unitile sprijinite ar fi avut aceleai performane ca unitile care nu au beneficiat de sprijin. n evaluare, metoda DID se aplic, de regul, dup metoda aplicrii Scorului de Propensiune (Propensity Score Matching). O abordare asemntoare a fost adoptat n cadrul prezentei evaluri.2.2.b. Designul Discontinuitii Regresiei (RDD)

Metoda se bazeaz pe ideea c o discontinuitate n tratament are loc n jurul unui anumit prag. Aceasta se aplic n special n situaiile n care anumite uniti devin eligibile pentru intervenie datorit punctajului sau a altor norme administrative care definesc un prag. Cele dou grupuri (beneficiari i non-beneficiari) comparate sunt similare n alte privine, cu excepia poziiei lor n raport cu pragul definit. Metoda cuprinde urmtoarele etape:

1. definirea variabilei/variabilelor de rezultat;

2. specificarea variabilei de selecie i a pragului relevant;

3. alegerea intervalului din jurul pragului;

4. estimarea efectului.

Similar cu metoda DID, primul pas const n identificarea variabilei de rezultat (diferena n ceea ce privete echivalentul numrului de angajai cu norm ntreag). Cea de a doua etap se refer la selectarea variabilei i a pragului. n cazul prezentei evaluri pragul corespunde punctajului de admitere de 3,5 puncte, aa cum este stabilit n ghidul solicitantului. Punctajul pentru admiterea (sau neadmiterea) microntreprinderilor la finanare este cuprins ntre 0 i 6. n continuare, trebuie s fie definit intervalul n jurul pragului n funcie de caracteristicile descriptive ale distribuiei de date. Cu ct este mai mic limea de band, cu att sunt mai probabile condiiile unui cvasi-experiment. Cu toate acestea, trebuie avut n vedere compensaia dintre mrimea intervalului benzii i numrul de observaii. n final, efectul sprijinului (n jurul pragului) se obine prin compararea participanilor i a neparticipanilor marginali n jurul pragului.

Prin aplicarea acestei metode, pot fi obinute unele concluzii relevante cu privire la impactul interveniei, avnd n vedere similitudinea grupurilor de comparaie la momentul depunerii proiectului, deoarece nregistreaz o diferen foarte mic de punctaj. Ca o consecin, diferena de performan ntr-o anumit perioad de timp poate fi considerat ca rezultat al beneficierii de suport prin intervenie. n contextul acestei evaluri, metoda RDD este folosit ca o verificare metodologic pentru metodele PSM i DID.2.2.c. Scorul de Propensiune (PSM - Propensity Score Matching)

PSM se bazeaz pe selectarea unui grup de non-beneficiari similari beneficiarilor, mai puin n ceea ce privete primirea sprijinului financiar. Strategia de estimare cuprinde urmtoarele etape:

1. identificarea tuturor variabilelor relevante pentru performan;

2. estimarea scorului de propensiune; 3. efectuarea Propensity Score Matching (PSM);

4. estimarea efectului mediu net.

Aceast abordare se aplic n cazul n care ambele grupuri (beneficiari i non-beneficiari) sunt echilibrate n ceea ce privete caracteristicile relevante. Se procedeaz la identificarea de variabile relevante pentru a reduce eroarea de selecie (populaia int este diferit de populaia contrafactual, datorit caracteristicilor din perioada de pre-intervenie) i problema de dinamic spontan (populaia int difer de populaia de control n ceea ce privete trendul).

Scorul de propensiune este probabilitatea conform creia beneficiarii pot primi sprijin financiar n funcie de un set de variabile. Estimarea este realizat n general prin intermediul unui model logit. Au fost propuse diverse metode i modaliti de estimare n literatura de specialitate pentru a corela observaii precum: mperecherea pe baza criteriului ceului mai apropiat vecin (Nearest Neighbor Matching), mperechere radial (Radius Matching), Potrivirea Kernel (Kernel Matching) i mperecherea stratificat (Stratification Matching). Dup corelare, efectul net al interveniilor este estimat prin diferena ntre media variabilelor de rezultat pentru beneficiari i non-beneficiari. Metoda a fost aplicat n cadrul evalurii deoarece anumite precondiii necesare sunt satisfcute: disponibilitatea datelor att privind beneficiarii, ct i non-beneficiarii; stadiul avansat de implementare a proiectului/interveniei evaluate; un eantion de dimensiune relevant. Potrivirea este de obicei preferat n comparaie cu regresia standard, pentru care nu este necesar nicio ipotez cu privire la forma funcional. Au fost utilizate anumite instrumente pentru mbuntirea calitii rezultatelor: condiia sprijinului comun n scopul de a identifica i elimina valorile aflate la extreme i pentru a mbunti calitatea estimrii; identificarea numrului optim de elemente dup evaluarea scorurilor de propensiune pentru a realiza Verificarea Ipotezei (Balancing Hypothesis hold); utilizarea metodei Bootstrap.2.3. LIMITRI I ERORI DE SELECIE ALE ESTIMRILOR 2.3.a. Eroarea de selecie Scopul evalurii de impact este de a obine estimri credibile ale impactului programului prin eliminarea sau atenuarea erorii de selecie. Eroarea de selecie n evaluarea de impact a unui program apare dac rezultatul mediu al unitilor care au participat la program difer de rezultatul mediu al unitilor care nu au fost sprijinite, chiar i n absena sprijinului. Un motiv pentru aceast diferen ar putea fi reprezentat de prezena discrepanelor pre-existente ntre caracteristicile eseniale ale celor dou grupuri, care determin, de asemenea, performana grupurilor. Eroarea de selecie poate afecta n mod substanial i denatura o estimare a impactului programului. Acesta poate aprea atunci cnd evaluatorii adopt anumite decizii, de exemplu, privind utilizarea non-beneficiarilor programului ca grup de control. Pentru a nelege acest aspect este necesar realizarea faptului c decizia privind participarea n cadrul programului se poate baza pe o serie de factori neobservai, care sunt corelai cu rezultatele. De exemplu, firmele pot decide dac particip sau nu la un program n funcie de factori precum preferinele, performana lor anterioar general, costurile de oportunitate i ctigurile ateptate din program etc. n plus, programele/msurile nu sunt repartizate aleatoriu la beneficiari, dar: i) sunt concepute pentru a viza anumii beneficiari, cu o anumit caracteristic de performan (ex: productori/companii/domenii subdezvoltate etc.) sau ii) includ diverse condiii de eligibilitate, care, n practic, pot fi ndeplinite doar de ctre anumite tipuri de uniti economice, de exemplu, cele mai performante ntreprinderi. n ambele cazuri, un grup de beneficiari direci ai programului se poate clasa cu uurin nainte sau dup grupuri specifice de control i media la nivel naional, n urma efecturii unor comparaii simple privind performana ambelor grupuri, comparaii prtinitoare din punct de vedere statistic i, prin urmare, inacceptabile. De exemplu, performane superioare ale beneficiarilor programului n comparaie cu un grup de control al non-beneficiarilor programului, pot aprea din cauza faptului c primul grup este caracterizat prin abiliti mai dezvoltate de management n comparaie cu cel de-al doilea grup, i nu din cauza sprijinului obinut. Selecia entitilor neobservate (ex.: prin considerarea non-beneficiarilor tuturor programelor ca un grup de control) creeaz o dificultate n stabilirea unei analize contrafactuale credibile: cei care nu particip la program sunt, n general, un grup de control inadecvat pentru cei care particip, deoarece este dificil de spus dac diferenele rezultate din cele dou grupuri se datoreaz diferenelor ntre caracteristicile neobservabile sau sprjinului obinut n cadrul unui program.

ntruct omiterea uneia sau mai multor variabile neobservabile poate duce la estimri subiective, echipa de evaluare a proiectat evaluarea pentru a reduce erorile de selecie i pentru a minimiza rolul entitilor neobservate, transformndu-le n msura n care este posibil n observabile sau controlabile. Referitor la aceast ultim caracteristic, transformarea se poate realiza prin ncorporarea explicit n analiz (adic potrivirea) a acelor caracteristici eseniale (ex.: socio-economice) ale unor uniti care pot fi presupuse a influena att o decizie de a participa la un anumit program, ct i performana rezultat. Pentru a fi semnificativ, un grup de control ar trebui, prin urmare, s conin numai acele ntreprinderi care se potrivesc, lund n considerare caracteristicile lor observabile, cu ntreprinderile sprijinite (n perioada anterioar programului). n timp ce estimarea contrafactual adecvat corespunde eliminrii problemei privind erorile de selecie, toate metodele de evaluare a politicilor care au fost dezvoltate pn acum au ca obiectiv reducerea acestei probleme.

Pentru a evita eventualele probleme menionate anterior, echipa de evaluare a lucrat cu o baz de date incluznd observaii pentru beneficiari (a se vedea capitolele 3 i 4), n care au fost colectate informaii relevante cu privire la non-beneficiari. Baza de date conine aceleai domenii ca cele completate pentru beneficiari, astfel nct s se asigure o comparaie, din punct de vedere al evalurii, ntre variabilele care urmeaz s fie comparate ntre cele dou grupuri analizate (beneficiari DMI 4.3 i grupul corespunztor de control).

2.3.b Eroarea auto-selecieiUn alt tip de distorsionare poate fi considerat aa-numita eroare a auto-seleciei. Aceasta poate aprea n cazul n care firmele care au anticipat participarea la program i-au ajustat propria performan nainte de nceperea programului, cu scopul de a corespunde criteriilor de eligibilitate a programului. n aceast situaie, chiar dac grupul de control a fost foarte similar grupului de participani la program, prin realizarea de comparaii ntre grupuri nainte de participarea la program, s-ar putea produce o eroare semnificativ a controlului. Consecina important pentru evaluarea ex-post este c acest tip de eroare ar trebui s fie contientizat i redus sau eliminat (dac este posibil), nainte de a realiza evaluarea impactului programului.

2.3.c. Efecte Eterogene de Tratament

Un efect de tratament omogen este cel mai simplu caz n care se consider c efectul programului este constant pentru toi indivizii/unitile. n acest caz, rezultatele participanilor i ale celor care nu particip la program sunt dou curbe paralele diferite doar ca nivel. Dei un astfel de efect ar facilita foarte mult analiza programului din perspectiva impactului/rezultatelor, considerarea efectului tratamentului omogen este n contradicie cu dovezile empirice i produce numeroase influenri ale estimrii (care trebuie s fie evitate). n cazul unor efecte de tratament eterogene, se presupune c impactul sprijinului acordat variaz ntre indivizi/uniti (un posibil efect al unei componente observabile sau ca o parte a celor neobservabile). Cu toate acestea, spre deosebire de efectul tratamentului omogen, aceast structurare nu permite extrapolarea la toate straturile populaiei de uniti evaluate. Mai mult dect att, ntr-o astfel de situaie (inclusiv selecia neobservabilelor) a fost demonstrat faptul c utilizarea modelului econometric recunoscut al estimatorilor OLS (chiar i dup controlarea n vederea identificrii diferenelor n caracteristici ale componentelor observabile) ar fi inconsistent. Ca o consecin, n cazul efectului de tratament eterogen, ar trebui aplicate alte tehnici de evaluare a impactului mai sofisticate dect OLS.Diversele influenri descrise anterior au un rol de exagerare sau diminuare a efectelor programului. Deoarece acestea creeaz o ameninare pentru validitatea efectelor estimate ale programului, o sarcin important a evaluatorilor este de a utiliza un design de evaluare care s minimizeze aceste consecine.

2.4. CONCEPEREA STRATEGIEI DE ESTIMARE PRIVIND RISCURILE I INFLUENELEAceast seciune descrie principalele caracteristici ale strategiei de estimare care a fost proiectat i construit pentru a reduce limitele i influenele estimrii menionate i pentru a crete capacitatea explicativ a estimrilor. Pre-condiiile generale pentru a efectua o analiz contrafactual sunt asociate n principal caracteristicilor setului de date. Acesta este motivul pentru care sunt ilustrate n cele ce urmeaz principalele caracteristici ale setului de date, pentru a explica de ce abordarea propus pentru evaluare ndeplinete condiiile prealabile pentru o analiz contrafactual. Figura nr. 2 Condiii prealabile generale pentru realizarea analizei contrafactuale i a setului de date

PrecondiiiPrincipalele caracteristici ale setului de date

Un set de date, cu informaii numerice pentru ambele categorii: beneficiari (proiecte finalizate) i non-beneficiari.Dup cum este descris n detaliu n Capitolele 3 i 4, setul de date conine o serie vast de date referitoare la variabilele de performan/rezultat (de ex., cifra de afaceri, numrul de angajai echivalent cu norm ntreag) i variabilele structurale (de ex., localizare) pentru un numr ridicat de aplicani n cadrul DMI 4.3. Avnd n vedere faptul c evaluarea contrafactual este pe deplin aplicabil doar pentru primul Apel de proiecte, setul de date cuprinde date despre aplicanii n cadrul Apelului de proiecte nr. 1 i un eantion de proiecte finalizate din Apelul nr. 2, pentru a permite un punct de referin preliminar i o analiz comparativ ntre cele dou apeluri.

Un set de date corespunztoare n ceea ce privete dimensiunea eantionului i disponibilitatea datelor n timpSetul de date conine principalele informaii din informaiile contabile pentru solicitanii nscrii la Apelul nr. 1 i un eantion de solicitani nscrii la Apelul nr. 2, raportate pe o perioad relativ lung n timp 2007-2013 care s permit, n cazul n care este posibil, comparaia ntre situaiile asimilate pre-interveniei i post-interveniei. Datorit faptului c beneficiarii au obligaia de a menine numrul de locuri de munc create prin proiect pentru o perioad de trei ani dup finalizarea proiectului (acest aspect fiind verificat i n cadrul vizitelor de monitorizare ex-post), adiionalitatea i sustenabilitatea interveniei pot fi estimate doar pe eantionul de solicitani cu proiecte finalizate pn n 2010.

Un set de date bazat pe informaii provenind din surse de ncredere.Setul de date conine att informaii numerice administrative furnizate de Ministerul Dezvoltrii Regionale i Administraiei Publice, ct i date din bilanurile contabile disponibile la nivelul Camerelor de Comer. Capitolul 3 prezint mai detaliat diversele surse utilizate.

Principalele limite, riscuri i influenri ntr-o analiz contrafactual pot fi, n principiu, cel puin reduse sau evitate datorit unei abordri speciale de estimare. Tabelul urmtor rezum felul n care strategia de estimare este creat n scopul de a reduce i/sau evita principalele riscuri i influenri, descrise anterior.

Figura nr. 3 Limite, riscuri, erori i strategia de estimare

Limite, riscuri i eroriPrincipalele caracteristici ale strategiei de estimare

Eroarea de seleciePentru a reduce eroarea de selecie datorat diferenelor substaniale dintre beneficiari i unitile care nu au fost sprijinite, estimrile se concentreaz doar pe aplicanii n cadrul DMI 4.3 (beneficiari i non beneficiari). Mai mult dect att, urmrind literatura din domeniu, cel puin n cazul metodei aplicrii scorului de propensiune (Propensity Score Matching - PSM), un set mare de variabile este utilizat pentru a modela din punct de vedere statistic selectarea grupului de control, astfel nct acesta s prezinte ct mai multe similitudini cu unitile finanate.

Eroarea autoselecieiPentru a reduce eroarea de auto-selecie (adic, firmele i-au ajustat propriile performane pentru a se conforma cu anumite criterii de eligibilitate din cadrul programului), strategia de estimare ia n considerare caracteristicile microntreprinderilor anterioare anului lansrii apelului (caracteristici existente la nivelul anului 2007, cel puin, n cazul Apelului nr. 1) i le compar cu cele din anii urmtori (caracteristici existente la nivelul anului 2008, cel puin, n cazul Apelului nr. 1).

Efecte eterogenen ceea ce privete problematica efectului tratamentului eterogen, simpla metod OLS nu a fost utilizat. n cazul Designului Discontinuitii Regresiei abordarea fuzzy este folosit pentru a verifica, analiza i a lua n considerare caracterul neliniar. n cazul scorului de propensiune (Propensity Score Matching), utilizarea mai multor variabile care se refer la nivelul cifrei de afaceri i la numrul de locuri de munc (exprimate ca variabile dummy) permite reducerea riscului generat de efecte eterogene.

Frecvena efectelor n timpStrategia de estimare i setul de date iau n considerare i evoluia variabilelor de rezultat (ex: numrul de locuri de munc) n timp i include informaii numerice din 2007 pn n 2013. n special, se msoar efectele ca diferen ntre condiiile din anul 2012/2013 i cele din anul 2008, n cazul Apelului de proiecte nr. 1. Mai mult dect att, comparaia dintre Apelul nr. 1 i Apelul nr. 2 a fost efectuat doar pentru proiectele finalizate, pentru perioada 2010-2012.

3.Surse de date i baze de date

3.1. PROCESUL PARCURS DE LA SURSELE DE DATE PN LA SETUL DE DATEStructura setului de informaii utilizate poate fi neleas prin consultarea tabelului urmtor:

Tabel nr. 10 Structura general a setului de informaiiInformaii disponibileNumr

Numr de observaii908

Numr de variabile25

Apel1 i 2

Sursa:Baza de date cu privire la intervenia DMI 4.3, MDRAP

Setul de date furnizeaz informaii despre 908 microntreprinderi, care reprezint aproximativ 20% din numrul total de proiecte depuse, 4.674 (777 n cadrul Apelului de proiecte nr. 1 i 3.897 n cadrul Apelului de proiecte nr. 2), i 0,2% din numrul total de microntreprinderi din Romnia (495.019 n anul 2008). Anexa nr. XVII a fost elaborat pentru a ilustra principalele caracteristici i metadatele utilizate n procesul de crearea a bazei de date realizat n cadrul contractului. n anex se regsesc cele mai importante informaii cu privire la interpretarea variabilelor utilizate n procesul de evaluare, precum i explicarea acestora.

Echipa de evaluare a folosit trei mari categorii de date, pentru a asigura consistena i veridicitatea datelor folosite n procesul de analiz, precum: Datele privind beneficiarii i non-beneficiarii;

nregistrrile variabilelor de rezultat;

Date influenabile n funcie de context, care ajut la controlul diferenelor/similaritilor ntre beneficiari i grupurile de control.

Pentru a realiza o analiz consistent, baza de date cu privire la intervenia DMI 4.3, furnizat de serviciile din cadrul MDRAP, a fost extins prin colectarea de date suplimentare fa de versiunea iniial pentru microntreprinderi beneficiare i non-beneficiare.

Astfel, baza de date transmis de ctre Ministerul Dezvoltrii Regionale i Administraiei Publice coninea informaii cu privire la:

Codul proiectului;

Codul SMIS;

Denumirea beneficiarului;

Titlul proiectului;

Locul de implementare al proiectului (jude, localitate);

Valoarea total a proiectului;

Contribuia beneficiarului la valoarea eligibil;

Contribuia beneficiarului la valoarea neeligibil;

Finanarea nerambursabil;

Numrul contractului de finanare;

Data contractului de finanare;

Perioada de implementare a proiectului;

Contract finalizat (1-Da, 0-Nu);

Contract reziliat (1-Da, 0-Nu);

Regiunea de dezvoltarea.Pentru efectuarea unei analize pertinente i n vederea aplicrii metodelor contrafactuale, echipa de evaluare a creat un set suplimentar de cmpuri care au fost completate pe parcursul procesului de evaluare, cu informaii referitoare la:

Data de nregistrare la Registrul Comerului a fiecrei uniti analizate;

Cod fiscal;

Existena unei adrese web;

Genul proprietarului;

Cifra de afaceri pentru intervalul 2007-2013;

Numrul de angajai echivaleni cu norm ntreag pentru intervalul 2007-2013;

Active nete pentru intervalul 2007-2013;

Domeniul de activitate - cod CAEN. Aceast metod de colectare suplimentar a datelor despre cele dou grupuri analizate (beneficiari i non-beneficiar) a permis: asigurarea unei analize adecvate i corecte a datelor, precum i efectuarea evalurii contrafactuale. Domeniile informaiilor de completat au fost stabilite de ctre experii echipei dup o analiz preliminar pentru a asigura relevana variabilelor care urmau a fi incluse n evaluare. Selecia a reprezentat un pas important al evalurii, bazat pe cercetarea de birou a cifrelor aferente microntreprinderilor din diferite surse de informaii.

Identificarea variabilelor se bazeaz pe principala referin din literatura de specialitate (Bondonio, 2007, Pufahl i Weiss, 2009), Caietul de sarcini i ia n considerare compensarea n ceea ce privete structura bazei de date, considernd dimensiunea acesteia i intervalul de timp analizat.

Informaiile referitoare la contractele reziliate sau la firmele aflate n insolven au fost incluse n baza de date, dar nu au fost folosite n estimrile contrafactuale. n mod similar, datele lips sau informaiile inconsistente au dus la excluderea unor observaii din analiza cantitativ.

Colectarea datelor a fost conceput pentru a sprijini urmtoarele analize:

1) compararea beneficiarilor (proiecte finalizate) i non-beneficiarilor (proiecte respinse) pentru Apelul nr. 1, prin utilizarea analizei contrafactuale i a Designului Discontinuitii Regresiei;

2) evaluarea impactului granturilor asupra grupului de beneficiari definit anterior;

3) compararea contractelor anulate i a contractelor finalizate n cadrul Apelului de proiecte nr. 1, pentru a identifica posibilele