Cutting down on WDI observations with no data

[Sarven Capadisli]

Hi,

I just wanted to mention that some of the observations in the World
Development Indicators dataset do not have measured data ( i.e.
<wb:value /> ) in the API call with XML format.

If the observations with no such data were to be removed from the API
response, it'd significantly cut down on the total weight of the responses.

According to my findings, there are about 51.5 million WDI observations,
however, about 10 million observations actually have values.

-Sarven

[Sarven Capadisli]

Moreover, the following indicators have no observation values at all:

BMGSRGNFSCD
BMGSRGNFSKD
BMGSRGNFSXD
BMGSRMRCHCD
BMGSRMRCHKD
BMGSRMRCHXD
BMGSRNFSVCD
BMGSRNFSVKD
BMGSRNFSVXD
BMOTHCACD
BNGSRGNFSCD
BNGSRGNFSKD
BNGSRMRCHCD
BNGSRMRCHKD
BNGSRNFSVCD
BNGSRNFSVKD
BXGSRGNFSKD
BXGSRGNFSXD
BXGSRMRCHCD
BXGSRMRCHKD
BXGSRMRCHXD
BXGSRNFSVCD
BXGSRNFSVKD
BXGSRNFSVXD
BXOTHCACD
CPTOTNSXN
CPTOTNSXNZGY
DMGSRMRCHNSCD
DMGSRMRCHNSKD
DMGSRMRCHNSXD
DPANUSIFS
DT.DOD.DECF.CD.PF.GG.EU
DT.DOD.DECF.CD.PF.GG.JY
DT.DOD.DECF.CD.PF.GG.OT
DT.DOD.DECF.CD.PF.GG.TO
DT.DOD.DECF.CD.PF.GG.US
DT.DOD.DECF.CD.PF.MA.EU
DT.DOD.DECF.CD.PF.MA.JY
DT.DOD.DECF.CD.PF.MA.OT
DT.DOD.DECF.CD.PF.MA.TO
DT.DOD.DECF.CD.PF.MA.US
DT.DOD.DECF.CD.RF.GG.EU
DT.DOD.DECF.CD.RF.GG.JY
DT.DOD.DECF.CD.RF.GG.OT
DT.DOD.DECF.CD.RF.GG.TO
DT.DOD.DECF.CD.RF.GG.US
DT.DOD.DECF.CD.RF.MA.EU
DT.DOD.DECF.CD.RF.MA.JY
DT.DOD.DECF.CD.RF.MA.OT
DT.DOD.DECF.CD.RF.MA.TO
DT.DOD.DECF.CD.RF.MA.US
DT.DOD.DECO.CD.PF.GG.EU
DT.DOD.DECO.CD.PF.GG.JY
DT.DOD.DECO.CD.PF.GG.OT
DT.DOD.DECO.CD.PF.GG.TO
DT.DOD.DECO.CD.PF.GG.US
DT.DOD.DECO.CD.PF.MA.EU
DT.DOD.DECO.CD.PF.MA.JY
DT.DOD.DECO.CD.PF.MA.OT
DT.DOD.DECO.CD.PF.MA.TO
DT.DOD.DECO.CD.PF.MA.US
DT.DOD.DECO.CD.RF.GG.EU
DT.DOD.DECO.CD.RF.GG.JY
DT.DOD.DECO.CD.RF.GG.OT
DT.DOD.DECO.CD.RF.GG.TO
DT.DOD.DECO.CD.RF.GG.US
DT.DOD.DECO.CD.RF.MA.EU
DT.DOD.DECO.CD.RF.MA.JY
DT.DOD.DECO.CD.RF.MA.OT
DT.DOD.DECO.CD.RF.MA.TO
DT.DOD.DECO.CD.RF.MA.US
DT.DOD.DECT.CD.PF.CB.EU
DT.DOD.DECT.CD.PF.CB.JY
DT.DOD.DECT.CD.PF.CB.OT
DT.DOD.DECT.CD.PF.CB.TO
DT.DOD.DECT.CD.PF.CB.US
DT.DOD.DECT.CD.PF.EU
DT.DOD.DECT.CD.PF.GG.EU
DT.DOD.DECT.CD.PF.GG.JY
DT.DOD.DECT.CD.PF.GG.OT
DT.DOD.DECT.CD.PF.GG.TO
DT.DOD.DECT.CD.PF.GG.US
DT.DOD.DECT.CD.PF.JY
DT.DOD.DECT.CD.PF.MA.EU
DT.DOD.DECT.CD.PF.MA.JY
DT.DOD.DECT.CD.PF.MA.OT
DT.DOD.DECT.CD.PF.MA.TO
DT.DOD.DECT.CD.PF.MA.US
DT.DOD.DECT.CD.PF.OT.EU
DT.DOD.DECT.CD.PF.OT.JY
DT.DOD.DECT.CD.PF.OT.OT
DT.DOD.DECT.CD.PF.OT
DT.DOD.DECT.CD.PF.OT.TO
DT.DOD.DECT.CD.PF.OT.US
DT.DOD.DECT.CD.PF.TO
DT.DOD.DECT.CD.PF.US
DT.DOD.DECT.CD.RF.CB.EU
DT.DOD.DECT.CD.RF.CB.JY
DT.DOD.DECT.CD.RF.CB.OT
DT.DOD.DECT.CD.RF.CB.TO
DT.DOD.DECT.CD.RF.CB.US
DT.DOD.DECT.CD.RF.EU
DT.DOD.DECT.CD.RF.GG.EU
DT.DOD.DECT.CD.RF.GG.JY
DT.DOD.DECT.CD.RF.GG.OT
DT.DOD.DECT.CD.RF.GG.TO
DT.DOD.DECT.CD.RF.GG.US
DT.DOD.DECT.CD.RF.JY
DT.DOD.DECT.CD.RF.MA.EU
DT.DOD.DECT.CD.RF.MA.JY
DT.DOD.DECT.CD.RF.MA.OT
DT.DOD.DECT.CD.RF.MA.TO
DT.DOD.DECT.CD.RF.MA.US
DT.DOD.DECT.CD.RF.OT.EU
DT.DOD.DECT.CD.RF.OT.JY
DT.DOD.DECT.CD.RF.OT.OT
DT.DOD.DECT.CD.RF.OT
DT.DOD.DECT.CD.RF.OT.TO
DT.DOD.DECT.CD.RF.OT.US
DT.DOD.DECT.CD.RF.TO
DT.DOD.DECT.CD.RF.US
DT.DOD.MLTN.CD
DT.IIA.DECT.CD.OT.HH
DXGSRMRCHNSCD
DXGSRMRCHNSKD
DXGSRMRCHNSXD
GGBALOVRLCN
IC.FRM.FIN.FIN20
IC.FRM.FIN.FIN21
IC.FRM.FINPUT.ZS
IC.LIC.NUM
IC.LIC.TIME
IC.TAX.LBR.ZS
IC.TAX.OTH.ZS
IC.TAX.PFT.ZS
IMETMIN_DV100
IPTOTNSKD
IR10Y
KIMETMIN_DV100
KRUBBER1_TSR20
M2BYR
M2MULT
NEGDIKSTKKD
NEGDISTKBXN
NEGDITOTLCD
NEGDITOTLCN
NEGDITOTLKD
NEGDITOTLKN
NEGDITOTLXN
NYGDPDISCXN
NYGDPGAP_
NYGDPMKTPCP
NYGDPMKTPKP
NYGDPMKTPXP
PMKEY
PXKEY
RUBBER1_TSR20
SH.DYN.MORT.FE
SH.DYN.MORT.MA
SP.DYN.IMRT.FE.IN
SP.DYN.IMRT.MA.IN
SP.POP.0024.TO.ZS
SPPOPTOTL
XMKT

If no data is available for those indicator observations, is there a
particular reason why they exist?

-Sarven

[sl...@worldbank.org]

Thanks for the suggestion on the API. We will definitely look into it. For the indicators with no values, we need to look at those as well but my initial sense is that they do not belong in the API. I'll post a reply once this is confirmed.