Overcoming Challenges for Quantitative Risk Modeling Using Machine Learned Data Correlations and Predictive Modeling
Notice bibliographique
Résumé
Abstract After 20 years of learnings and successful risk reduction, the pipeline industry is striving to achieve the next step change in risk performance by migrating from relative index-based risk models toward probabilistic approaches across all threats and all pipeline segments for system-wide risk assessment. While the quantification of pipeline risk can be readily supported by in-line inspection (ILI) results coupled with probabilistic limit state modeling for certain threats and pipeline segments where this information is available, where such data is lacking for other pipeline segments or threats, it is necessary to apply a meaningful methodology to establish the probability of failure for all dynamic segments used to quantify risk. The process for establishing probability-based threat assessments for these other segments involves several stages: (1) identify correlations based on ILI historical results (i.e., create the “training” dataset); (2) leverage classification trees to identify statistically relevant data observations of key variables; (3) apply machine learning techniques to develop probabilistic and/or causal models that predict target outcomes from the combinations of key variables; and, (4) apply the relationships established in stages 1, 2 and 3 to all assets lacking ILI results. Although seemingly straightforward, several challenges exist for achieving seamless implementation. This paper will review each process step and provide guidance on preparing and tackling common data intelligence challenges. The paper will also propose strategies for classifying assets, other than indexing, for application in those situations where machine learning does not indicate statistically significant variable correlations or yield strong predictions of target outcomes. Although still early in the understanding of migrating from relative index-based to probabilistic risk algorithms, the value provided in this paper is the sharing of lessons learned regarding “how” to gather the “evidence” necessary to identify statistical dependencies, how to apply data confidence metrics within the decision process, the challenges in data preparation/QC and interpretation techniques, and suggestions for determining the necessary limitations that should be applied to the outcomes toward the objective of quantifying the risk.
Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.
Comment cette classification a été obtenuedéplier
Prédiction machine sur la base complète
Imitation des enseignantsNi prévalence calibrée, ni vérité terrain. Validation humaine à venir. Le volet Gemma est une étiquette directe du modèle pour chaque travail de la base, lue sur la notice réduite au titre. Le volet Codex est un classifieur appris des 10 348 étiquettes directes de Codex et calibré sur les taux pondérés de l'échantillon; les champs sans appui suffisant ne portent aucun appel Codex. Le mode candidate est l'union des deux volets; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont pas des étiquettes humaines.
Scores du classifieur distillé par catégorie (deux têtes)
| Catégorie | Codex | Gemma |
|---|---|---|
| Métarecherche | 0,018 | 0,049 |
| Méta-épidémiologie (sens strict) | 0,001 | 0,001 |
| Méta-épidémiologie (sens large) | 0,001 | 0,001 |
| Bibliométrie | 0,002 | 0,002 |
| Études des sciences et des technologies | 0,001 | 0,003 |
| Communication savante | 0,006 | 0,007 |
| Science ouverte | 0,003 | 0,003 |
| Intégrité de la recherche | 0,002 | 0,007 |
| Charge utile insuffisante (le modèle a refusé de juger) | 0,001 | 0,000 |
Scores machine (provisoires)
Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.
Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.
score_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découleClassification
machine, non validéePrédiction automatique; un appel candidat d’une seule source (Gemma direct ou Codex distillé), pas un consensus.
Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».