logo-colle

Bienvenue sur le site de présentation de l’évaluation de l’EDM

Bienvenue sur le site de présentation de l’évaluation de l’EDM

LOGO-RESADE

a. Fonction principale

NetSIGL 2.0 est un outil numérique de gestion logistique destiné à améliorer le suivi et la gestion des stocks de médicaments et de produits pharmaceutiques au niveau des formations sanitaires et des districts sanitaires. Il permet d’effectuer des opérations essentielles telles que les inventaires, la planification des commandes, l’anticipation des péremptions, et la dispensation des produits. L’objectif principal de l’outil est de renforcer la traçabilité des flux de produits, d’optimiser les approvisionnements et de soutenir la prise de décision à tous les niveaux du système de santé

b. Niveau de déploiement et date

4–6 septembre 2023
DS de Ténado

Formation du 1er groupe de binômes infirmiers chefs de postes (ICP) et gérants de dépôts pharmaceutiques.

25–27 septembre 2023
DS de Ténado

Formation du 2ᵉ groupe de binômes ICP-gérants

Ténado - En cours de déploiement

Sapouy - Non déployé

Janvier 2024

Démarrage de l’utilisation effective de NetSIGL 2.0 dans les formations sanitaires du district de Ténado.

18–20 juin 2024
DS de Ziniaré

Formation et déploiement auprès de 25 binômes ICP-gérants (1er groupe).

30 septembre–2 octobre 2024
DS de Ziniaré

Formation et déploiement auprès de 25 binômes ICP-gérants (2ᵉ groupe)

3–5 octobre 2024
DS de Ziniaré

Formation et déploiement auprès de 25 binômes ICP-gérants (3ᵉ groupe)

La formation sur NetSIGL 2.0 a été assurée dans les districts de Ténado et Ziniaré, en ciblant les ICP et gérants de dépôts pharmaceutiques. À Ténado, deux sessions de trois jours ont permis une alternance de théorie et de pratique sur tablette, avec saisie de données fictives. Chaque formation sanitaire a été dotée d’une tablette, et l’utilisation effective de l’outil a démarré en janvier 2024 après attribution des codes d’accès.

À Ziniaré, trois vagues de formation ont concerné 75 binômes ICP-gérants. Chaque session comprenait des exposés sur les modules et fonctions de l’outil, une dotation en tablette et un appui en connectivité (2000 FCFA pour internet), suivis de travaux pratiques sur la saisie de données réelles.

Les évaluations post-formation ont révélé plusieurs défis opérationnels : la non-interopérabilité de NetSIGL 2.0 avec l’outil ENDOS, le besoin d’une connexion internet stable, l’augmentation de la charge de travail, ainsi que la complexité de l’outil face au niveau d’éducation limité de nombreux gérants. Ces constats soulignent l’importance d’un accompagnement technique renforcé et de solutions d’adaptation pour assurer une appropriation durable.

a. Résultats pré-test

Les résultats du pré-test révèlent que les participants disposaient d’une familiarité partielle avec les outils numériques de collecte de données avant la formation, mais leur exposition spécifique à NetSIGL 2.0 restait très limitée :

– Usage antérieur de tablette : Seuls 48,2 % des répondants avaient déjà utilisé une tablette, indiquant une compétence technique de base encore incomplète.

– Connaissance antérieure des outils numériques de collecte de données : 48,2 % déclaraient avoir déjà été exposés à ce type d’outils, contre 51,9 % qui n’en avaient aucune expérience.

– Formation antérieure sur un outil de collecte de données : Moins de la moitié (44,4 %) avaient bénéficié d’une formation préalable dans ce domaine, montrant une lacune à combler pour favoriser une appropriation fluide.

En revanche, les lacunes sont particulièrement marquées concernant l’outil ciblé :

– Connaissance du fonctionnement de NetSIGL 2.0 : Seulement 7,4 % des participants déclaraient avoir une connaissance préalable de l’outil, contre 92,6 % n’en ayant jamais entendu parler, signalant un déficit massif de familiarité spécifique.

En conclusion, le pré-test met en évidence une base modérée en outils numériques, mais surtout un déficit majeur de connaissance spécifique sur NetSIGL 2.0. Ces résultats confirment la pertinence de l’organisation de la formation, indispensable pour garantir une bonne appropriation du dispositif de gestion logistique et assurer une utilisation autonome et efficace sur le terrain.

b. Résultats post-test

Niveau de difficulté après la formation

Après la formation, les résultats montrent que l’outil NetSIGL 2.0 est globalement perçu comme difficile à utiliser par une majorité d’utilisateurs dans les deux districts évalués.

À Ténado, 62,96 % des répondants trouvent l’outil « difficile », et 3,7 % le jugent même « très difficile ». Toutefois, 29,63 % le considèrent « facile » à utiliser, et 3,7 % le trouvent « très facile », traduisant une appropriation partielle mais encourageante.

À Ziniaré, la perception est encore plus critique : 53,25 % estiment que l’outil est « difficile », et 35,06 % le qualifient de « très difficile ». Seuls 10,39 % le jugent « facile » et 1,3 % « très facile ».

Ces résultats traduisent une perception globalement négative de la facilité d’utilisation de NetSIGL 2.0, en particulier à Ziniaré. Ils soulignent la nécessité de renforcer l’accompagnement post-formation, d’ajuster les contenus pédagogiques et de proposer un appui de proximité afin de lever les barrières techniques à l’utilisation de l’outil.

Capacité à utiliser l’outil sur une échelle de zéro à trois

La majorité des utilisateurs s’estiment compétents pour utiliser l’outil NetSIGL 2.0. À Ziniaré, 55,8 % des répondants se placent au niveau « 2 » (capacité d’utilisation acceptable), et 6,5 % au niveau « 3 » (utilisation optimale). Toutefois, 36,4 % se disent « pas en mesure de bien utiliser » l’outil (niveau 1), et 1,3 % déclarent ne pas du tout être en mesure de l’utiliser (niveau 0), traduisant une appropriation encore incomplète.

À Ténado, les résultats sont plus positifs : 55,6 % des utilisateurs se placent également au niveau « 2 » (acceptable), mais 25,9 % estiment avoir une capacité d’utilisation optimale (niveau 3), soit quatre fois plus qu’à Ziniaré. Seuls 18,5 % se situent au niveau 1, et aucun répondant ne s’est déclaré au niveau 0.

Ces résultats montrent une meilleure appropriation de l’outil à Ténado, tandis qu’à Ziniaré, une proportion significative d’utilisateurs reste en difficulté. Cela suggère la nécessité de renforcer l’accompagnement ciblé dans ce district, afin d’atteindre une plus grande autonomie et homogénéité dans l’utilisation de NetSIGL 2.0.

Satisfaction globale sur le déroulement de la formation

Les responsables de structure constituent le profil le plus représenté dans tous les districts. À Ziniaré, 100 % des répondants à la 2ᵉ collecte sont des responsables. Cette tendance est similaire à Manga (100 % à la 2ᵉ collecte), Ténado (58,33 % à la 2ᵉ collecte) et Sapouy (42,86 % à la 2ᵉ collecte). Les gérants DMEG sont aussi bien représentés, notamment à Sapouy (57,14 % à la 2ᵉ collecte), tandis que les agents de santé apparaissent plus ponctuellement, surtout à Manga (37,5 % à la 1ère collecte) et Ténado (25 % à la 2ᵉ collecte).

Les utilisateurs de NetSIGL sont majoritairement des hommes dans tous les districts et à toutes les phases. À Ziniaré, 100 % des répondants sont des hommes. À Ténado, cette proportion atteint 87,5 % à la 2ᵉ collecte, contre 71,43 % à Sapouy. Les femmes sont minoritaires, avec un maximum de 28,57 % à Sapouy lors de la 1ère collecte.

La tranche d’âge dominante est celle des [41–55] ans, en particulier à Ziniaré (50 %), Manga (37,5 %), Ténado (62,5 % à la 2ᵉ collecte) et Sapouy (jusqu’à 61,9 % si l’on regroupe [31–40] et [41–55] ans). Les moins de 30 ans sont très peu représentés et souvent absents. Les répondants de plus de 56 ans sont présents uniquement à Ténado (4,17 %).

Le niveau d’instruction est relativement élevé. La majorité des utilisateurs ont un niveau secondaire (2ᵉ cycle), notamment à Ténado (43,75 % à la 2ᵉ collecte) et Sapouy (33,33 % à la 1ère collecte, 33,33 % à la 2ᵉ). Le niveau universitaire est bien représenté à Ziniaré (100 %), mais plus faible ailleurs. Les niveaux primaire ou secondaire 1er cycle restent marginaux.

 

En résumé, les utilisateurs de NetSIGL 2.0 sont en grande majorité des hommes, âgés de plus de 30 ans, ayant un niveau d’instruction secondaire ou supérieur, et occupant principalement des fonctions de responsables de structures ou gérants de dépôts pharmaceutiques. Cette configuration, centrée sur des profils décisionnels, est cohérente avec les exigences de l’outil, mais souligne la nécessité de former davantage les profils de terrain, notamment les agents de santé, pour une appropriation plus large et durable du dispositif.

ZINIARE MANGA TENADO SAPOUY
1ère collecte
2ère collecte
1ère collecte
2ère collecte
1ère collecte
2ère collecte
1ère collecte
2ère collecte
Sexe de l’enquêté
Feminin
()
()
1(12.50)
4(33.33)
9(37.50)
4(28.57)
3(14.29)
Masculin
()
4(100.00)
()
7(87.50)
8(66.67)
15(62.50)
10(71.43)
18(85.71)
Tranche d’âge
[18-30] ans
()
()
1(12.50)
1(8.33)
3(12.50)
2(14.29)
2(9.52)
[31-40] ans
()
2(50.00)
()
4(50.00)
4(33.33)
5(20.83)
7(50.00)
13(61.90)
[41-55] ans
()
2(50.00)
()
3(37.50)
7(58.33)
15(62.50)
4(28.57)
5(23.81)
56 ans et plus
()
()
1(4.17)
1(7.14)
1(4.76)
Niveau d’instruction scolaire?
Primaire
()
()
1(7.14)
1(4.76)
Secondaire (1er cycle)
()
()
3(37.50)
3(25.00)
7(29.17)
8(57.14)
10(47.62)
Secondaire (second cycle)
()
()
4(50.00)
5(41.67)
11(45.83)
3(21.43)
7(33.33)
Supérieur (Universitaire)
()
4(100.00)
()
1(12.50)
4(33.33)
6(25.00)
2(14.29)
3(14.29)
Profil des utilisateurs
Agent de santé
()
()
1(12.50)
1(8.33)
3(12.50)
Gérant DMEG
()
()
3(37.50)
3(25.00)
7(29.17)
10(71.43)
12(57.14)
Responsable de structure
()
4(100.00)
()
4(50.00)
8(66.67)
14(58.33)
4(28.57)
9(42.86)

a. Connaissance de Netsigl 2.0

Le graphique présente l’évaluation des capacités techniques des utilisateurs dans les quatre districts à utiliser de manière autonome les différentes fonctionnalités de l’outil NetSIGL 2.0.

Les résultats révèlent une maîtrise élevée des fonctionnalités de base, notamment l’effectuation des commandes, avec des taux supérieurs à 75 % dans tous les districts (jusqu’à 88,9 % à Sapouy et 88,2 % à Ziniaré). La dispensation des produits et la réalisation de l’inventaire mensuel sont également bien maîtrisées, notamment à Sapouy (79,3 %), Manga (79,4 %) et Ziniaré (75 %).

La réalisation de l’inventaire initial affiche des résultats solides à Ziniaré (70,6 %) et Manga (69 %), mais plus faibles à Ténado (63 %), et reste inexistante à Sapouy (0 %), indiquant un besoin d’accompagnement spécifique dans ce district sur cette fonctionnalité.

Certaines fonctionnalités apparaissent plus hétérogènes. Le calcul de la consommation moyenne mensuelle (CMM) reste peu pratiqué, en particulier à Ténado (17,2 %) et Sapouy (25 %), contre 50 % à Ziniaré. De même, les réceptions de produits et les ajustements de stock connaissent des écarts notables : les taux varient fortement de 25 % (Manga) à 77,8 % (Sapouy) pour les réceptions, et de 37,9 % à 75 % pour les ajustements.

La génération du rapport NetSIGL est bien assurée à Ziniaré (63 %), mais plus faible à Manga et Ténado (50 %), traduisant une marge d’amélioration possible. À noter également que certains utilisateurs, notamment à Manga (25 %) et Ténado (3,4 %), déclarent ne pas savoir s’ils effectuent certaines tâches.

Ces résultats indiquent une autonomie opérationnelle satisfaisante sur les fonctionnalités clés du système, avec des pics de performance dans les districts de Ziniaré et Sapouy. Toutefois, des écarts de compétence subsistent, particulièrement à Ténado et Manga, sur des fonctionnalités techniques spécifiques comme les ajustements, le CMM ou les rapports. Cela justifie la nécessité de renforcer l’accompagnement ciblé et de proposer un appui technique continu pour homogénéiser les niveaux d’usage et améliorer l’efficacité globale du dispositif NetSIGL 2.0.

Les tâches de base, telles que la connexion à la plateforme, la réalisation de l’inventaire initial, ou encore le calcul de la consommation moyenne mensuelle (CMM), sont bien maîtrisées dans tous les districts, notamment à Ziniaré et Sapouy, avec des taux proches ou supérieurs à 80 %. La capacité à effectuer une commande ordinaire sans aide est également très élevée à Ténado et Ziniaré.

Les fonctionnalités opérationnelles telles que la synchronisation, la dispensation, les ajustements, et la réalisation de l’inventaire mensuel sont généralement bien exécutées de manière autonome, en particulier à Ziniaré et Ténado, où les taux atteignent ou dépassent régulièrement les 70–90 %.

Cependant, certains écarts apparaissent selon les districts et les tâches :

– À Manga, les niveaux d’autonomie sont souvent inférieurs, notamment pour la réception de dons ou de commandes DRD non traitées, ce qui pourrait signaler un besoin de renforcement spécifique.

– À Sapouy, les utilisateurs sont très autonomes sur les tâches courantes, mais des lacunes apparaissent sur des fonctionnalités plus techniques comme la réception des commandes non traitées ou la génération du rapport SIGL, où les taux sont significativement plus faibles.

– À Ténado, bien que les compétences soient relativement homogènes, quelques fonctionnalités (réception de dons ou ajustements) mériteraient un accompagnement complémentaire.

Ces résultats mettent en évidence une bonne autonomie générale des utilisateurs sur les fonctionnalités clés de NetSIGL 2.0, particulièrement à Ziniaré et Ténado, mais soulignent la nécessité d’un renforcement des compétences à Manga et sur certaines tâches spécifiques à Sapouy, afin d’assurer une utilisation homogène et efficace du système dans tous les districts.

b. Maîtrise des outils

Le graphique met en évidence la perception des utilisateurs quant à leur niveau de maîtrise de l’outil NetSIGL 2.0 dans les districts de Ziniaré, Ténado et Sapouy.

À Ténado, la majorité des répondants (66,7 %) déclarent être « d’accord » avec l’affirmation selon laquelle ils maîtrisent ou sont à l’aise avec l’utilisation de NetSIGL 2.0, tandis que 33,3 % se positionnent dans la catégorie « pas d’accord », traduisant une appropriation encore partielle de l’outil dans ce district. Aucun répondant n’a indiqué être « tout à fait d’accord », ce qui reflète un niveau de confiance modéré.

À Sapouy, les résultats sont légèrement plus nuancés : 57,1 % des utilisateurs se disent « d’accord » et 14,3 % « tout à fait d’accord », soit un total de 71,4 % d’opinions favorables. Toutefois, une proportion non négligeable exprime des réserves : 21,4 % ne sont « pas d’accord » et 7,1 % vont jusqu’à se dire « pas du tout d’accord », ce qui invite à un accompagnement renforcé.

En revanche, aucune donnée n’est disponible pour Ziniaré et Manga, ce qui reflète soit une absence de formation ou de collecte, soit un retard dans le déploiement effectif de l’outil dans ces districts.

En résumé, les résultats montrent une adoption modérée de NetSIGL 2.0, avec une majorité d’utilisateurs se sentant à l’aise à Ténado et Sapouy, mais aussi des pochettes d’insatisfaction qui méritent une attention particulière. Le renforcement de la formation continue et le soutien post-déploiement s’avèrent nécessaires pour consolider la maîtrise de l’outil, notamment dans les districts où les doutes persistent.

a. La satisfaction des utilisateurs

Le tableau présente le niveau de satisfaction des utilisateurs vis-à-vis des outils numériques (dont NetSIGL 2.0) dans les districts de Ziniaré, Manga, Ténado et Sapouy.

Les résultats montrent une satisfaction largement majoritaire dans les trois districts pour lesquels des données sont disponibles (Ziniaré, Ténado, Sapouy) :

– À Ténado, 85,7 % des répondants se déclarent « satisfaits » et 14,3 % « très satisfaits », soit 100 % d’avis positifs, ce qui reflète une appropriation solide et une perception très favorable de l’outil.

– À Ziniaré, la tendance est également très positive, avec 66,7 % de « satisfaits » et 8,3 % de « très satisfaits », totalisant 75 % d’opinions favorables. Aucun répondant ne s’est déclaré « pas satisfait » ou « pas du tout satisfait ».

– À Sapouy, bien que les effectifs soient plus faibles, 100 % des utilisateurs se déclarent satisfaits ou très satisfaits (85,7 % et 14,3 % respectivement), ce qui témoigne également d’une bonne expérience utilisateur.

– À noter que Manga présente une situation contrastée : 25 % des répondants déclarent ne pas être satisfaits, tandis qu’aucun n’exprime un avis positif, ce qui souligne une insatisfaction totale et appelle à des mesures correctives urgentes dans ce district.

En conclusion, les utilisateurs de NetSIGL 2.0 sont globalement satisfaits, notamment à Ténado et Sapouy où les taux de satisfaction atteignent 100 %. La situation à Manga, en revanche, nécessite une attention particulière afin d’identifier et de résoudre les sources d’insatisfaction.

Quelle est votre niveau de satisfaction de NetSIGL 2.0 ZINIARE MANGA TENADO SAPOUY
N(%)
N(%)
N(%)
N(%)
Pas du tout satisfait
0(0.0)
0(0.0)
Pas satisfait
3(25.0)
0(0.0)
Satisfait
8(66.67)
12(85.7)
Très satisfait
1(8.3)
2(14.3)

b. Perception de l’impact sur le travail et la qualité des soins

Les résultats montrent une forte adhésion des utilisateurs à l’affirmation selon laquelle l’outil NetSIGL 2.0 améliore la gestion des médicaments et des produits pharmaceutiques.

Dans les districts de Manga et Sapouy, l’adhésion est quasi unanime, avec 100 % et 95,24 % des répondants respectivement affirmant que l’outil contribue effectivement à l’amélioration de la gestion pharmaceutique.

Le district de Ténado présente également une perception très favorable, avec 75 % des utilisateurs en accord avec cette affirmation. Toutefois, 25 % des répondants dans ce district ne perçoivent pas encore clairement l’utilité de l’outil, ce qui pourrait refléter des difficultés d’appropriation ou un besoin d’accompagnement complémentaire.

À Ziniaré, les données ne sont pas renseignées, suggérant soit une absence de réponse, soit une absence d’évaluation sur ce point spécifique, ce qui mérite d’être clarifié.

En résumé, NetSIGL 2.0 est largement perçu comme un outil utile pour améliorer la gestion des produits pharmaceutiques dans les districts évalués, avec des résultats particulièrement encourageants à Sapouy et Manga. Ces résultats confirment la pertinence du déploiement de l’outil, tout en soulignant la nécessité de renforcer l’accompagnement à Ténado et de mieux documenter les perceptions à Ziniaré.

ZINIARE
N%
Manga
N%
TENADO
N%
SAPOUY
N%
NetSIGL 2.0
Trouvez-vous que NetSIGL 2.0 ameliore la gestion des médicaments et des produits pharmaceutiques?
Oui


Non
6(25.00)


18(75.00)
1(4.76)


20(95.24)

c. Difficultés ou suggestions d’amélioration

L’analyse de la perception de la facilité d’utilisation de l’outil NetSIGL 2.0 dans les districts de Ziniaré, Manga, Ténado et Sapouy met en évidence des niveaux de difficulté relativement élevés, particulièrement lors de la 2ᵉ collecte.

À Ziniaré, l’ensemble des répondants de la 2ᵉ collecte ont jugé l’outil « facile » à utiliser (100 %), traduisant une bonne appropriation dans ce district, bien qu’aucun répondant n’ait indiqué une utilisation « très facile ».

À Manga, les réponses sont plus nuancées : 62,5 % des utilisateurs trouvent l’outil « facile », mais 25 % le jugent « très difficile », et 12,5 % « difficile », traduisant des difficultés persistantes dans une partie du groupe.

La situation est plus contrastée à Ténado, où 45,83 % des utilisateurs considèrent l’outil « facile », mais 33,33 % le jugent « difficile » et 16,67 % « très difficile ». Cela montre que plus de la moitié des utilisateurs rencontrent encore des obstacles importants.

À Sapouy, la situation est également préoccupante : seulement 52,38 % des utilisateurs trouvent l’outil « facile », alors que 38,10 % déclarent des difficultés et 9,52 % estiment que l’outil est « très difficile ».

En résumé, la perception globale de la facilité d’utilisation de NetSIGL 2.0 varie fortement selon les districts. Si Ziniaré se distingue par une très bonne appropriation, Ténado et Sapouy présentent des niveaux de difficulté préoccupants. Ces résultats mettent en évidence la nécessité d’un renforcement des capacités et d’un appui technique plus soutenu, notamment dans les districts où les utilisateurs expriment une gêne persistante dans la manipulation de l’outil.

En cours de collecte

En cours de collecte