json - 有没有更优雅的方法将大对象变量传递给 jq？

Question

我有以下 JSON 输入要转换(数百个相似对象的数组):

[{
    "Nmarch\u00e9": "2013-90006",
    "SIRETMandataire": null,
    "LibelleEntiteMandataire": "R\u00e9gion Bretagne",
    "SIRETAcheteur": null,
    "LibelleAcheteur": null,
    "Nature": null,
    "Objet": "PBF Formation qualifiante 2013 Monteur en construction bois lot 4",
    "CodeCPV": null,
    "Type ": "Services",
    "Procedure": "MAPA - art 30 - au dessus des seuils",
    "CodePostalCommuneExecution": 35000.0,
    "NomCommuneExecution": "Rennes",
    "CodeINSEEExecution": null,
    "GranulariteINSEEExecution": null,
    "MillesimeMandatement": 2013,
    "DateNotification": "2013-10-01",
    "Montant mandate TTC": 245526,
    "Montant mandate HT": null,
    "Montant attribue TTC": 245526,
    "Montant attribue HT": null,
    "Date de cloture": null,
    "Duree": null,
    "SIRETContractant": 300599123,
    "DenominationSociale": "AFPA DIRECTION REGIONALE BRETAGNE",
    "Role": "Titulaire",
    "CodePostal": 35208,
    "Dpt ID ": 35,
    "D\u00e9partement": "Ille-et-Vilaine",
    "Commune": "RENNES",
    "Taille": "10 000 et plus",
    "Taille des entreprises par categorie officielle": "Grande entreprise",
    "Code NAF": 8559,
    "Libelle NAF": "ENSEIGNEMENT",
    "Libelle SBA": "Administration publique\/enseignement",
    "Libelle CCI": "Tertiaire non marchand",
    "geolocalisation": null
}
]

在Procedure中，我有很多无效值，需要通过值映射进行替换。因此，我想将一个 JSON 对象提供给我的 jq 转换，其中无效值作为键，正确值作为值:

 {
    "MAPA - art 28": "Procédure adaptée",
    "MAPA - art 30 - au dessus des seuils": "Procédure adaptée",
    "MAPA - art 30 - en dessous des seuils": "Procédure adaptée",
    "Proc. adaptée/allégée (art.28et30)": "Procédure adaptée",
    "Procédure adaptée (MAPA)": "Procédure adaptée",
    "Appel d'offre ouvert": "Appel d'offres ouvert",
    "appel d'offres ouvert": "Appel d'offres ouvert",
    "Appel d'offre ouvert (art.33)": "Appel d'offres ouvert",
    "Appel d'offre restreint": "Appel d'offres restreint",
    "Achat direct": "Marché négocié sans publicité ni mise en concurrence préalable",
    "Négocié avec pub (art.35I)": "Procédure négociée avec mise en concurrence préalable",
    "Procédure négociée après pub": "Procédure négociée avec mise en concurrence préalable",
    "Procédure négociée après pub.": "Procédure négociée avec mise en concurrence préalable",
    "Procédure négociée sans pub": "Marché négocié sans publicité ni mise en concurrence préalable",
    "Procédure négociée sans pub.": "Marché négocié sans publicité ni mise en concurrence préalable",
    "Marché négocié": "Marché négocié sans publicité ni mise en concurrence préalable",
    "marché négocié": "Marché négocié sans publicité ni mise en concurrence préalable",
    "Marché negocié": "Marché négocié sans publicité ni mise en concurrence préalable"
}

我想在我的 jq 转换文件中声明这个对象，但我没有看到如何使用 bla as var 语法来声明具有外部数据的变量(理想情况下我想将其声明为文件)。因此，我最终使用了 --argjson 命令行参数。

这可行(我得到带有替换值的 JSON 输出)，但我希望我可以有一个更清晰的命令并使其更易于维护:

cat temp.json | jq --argjson procedures '{"MAPA - art 28":"Procédure adaptée","MAPA - art 30 - au dessus des seuils":"Procédure adaptée","MAPA - art 30 - en dessous des seuils":"Procédure adaptée","Proc. adaptée/allégée (art.28et30)":"Procédure adaptée","Procédure adaptée (MAPA)":"Procédure adaptée","Appel d\u0027offre ouvert":"Appel d\u0027offres ouvert","appel d\u0027offres ouvert":"Appel d\u0027offres ouvert","Appel d\u0027offre ouvert (art.33)":"Appel d\u0027offres ouvert","Appel d\u0027offre restreint":"Appel d\u0027offres restreint","Achat direct":"Marché négocié sans publicité ni mise en concurrence préalable","Négocié avec pub (art.35I)":"Procédure négociée avec mise en concurrence préalable","Procédure négociée après pub":"Procédure négociée avec mise en concurrence préalable","Procédure négociée après pub.":"Procédure négociée avec mise en concurrence préalable","Procédure négociée sans pub":"Marché négocié sans publicité ni mise en concurrence préalable","Procédure négociée sans pub.":"Marché négocié sans publicité ni mise en concurrence préalable","Marché négocié":"Marché négocié sans publicité ni mise en concurrence préalable","marché négocié":"Marché négocié sans publicité ni mise en concurrence préalable","Marché negocié":"Marché négocié sans publicité ni mise en concurrence préalable"}' -f jq-filter.jq

为了供您引用，这里是 jq-filter.jq:

{
  "$schema": "../../schémas/json/paquet.json",
  "marches" : [.[] | {
      id: ."Nmarché",
      acheteur: {
          id: .SIRETMandataire,
          nom: .LibelleEntiteMandataire
      },
      nature: .Nature,
      objet: .Objet,
      codeCPV: .CodeCPV,
      procedure: $procedures[.Procedure],
      lieuExecution: {
          code: ( .CodeINSEEExecution //.CodePostalCommuneExecution),
          nom: .NomCommuneExecution,
          typeCode: (if .CodeINSEEExecution != null  then "Code commune" elif .CodePostalCommuneExecution != null then "Code postal" else null end)
      },
      dateNotification: .DateNotification,
      montant: ."Montant Attribue HT",
      dureeMois: null,
      titulaires: {
          id: .SIRETContractant,
          denominationSociale: .DenominationSociale
      }
  }
  ]
}

Answer 1

有什么原因不能使用 --slurpfile or --argfile ？

--slurpfile variable-name filename:

This option reads all the JSON texts in the named file and binds an array of the parsed JSON values to the given global variable. If you run jq with --argfile foo bar, then $foo is available in the program and has an array whose elements correspond to the texts in the file named bar.

--argfile variable-name filename:

Do not use. Use --slurpfile instead. (This option is like --slurpfile, but when the file has just one text, then that is used, else an array of texts is used as in --slurpfile.)

假设您将映射放入 procedures.json 中，并且您稍微更改了过滤器:

  procedure: $procedures[0][.Procedure],

然后你可以使用--slurpfile:

$ jq --slurpfile procedures procedures.json -f jq-filter.jq temp.json

或者你使用 --argfile (尽管文档说不要这样做)

$ jq --argfile procedures procedures.json -f jq-filter.jq temp.json

无需对您的代码进行任何其他更改。