Gestió d'errors a Excel Power Query en recuperar dades del web

Gestió d'errors a Excel Power Query en recuperar dades del web
Gestió d'errors a Excel Power Query en recuperar dades del web
Alice Dupont
Dijous, 18 de juliol de 2024 a les 14:25:07

Gestió d'errors de recuperació de dades a Excel Power Query

Quan es treballa amb Excel Power Query per obtenir dades dels URL interns de l'empresa, és habitual trobar codis de resposta diferents. Normalment, aquests codis de resposta indiquen si la recuperació de dades va tenir èxit (200) o no s'ha trobat (404). Assegurar un bon maneig d'aquests codis de resposta és essencial per a una representació precisa de les dades a Excel.

En aquest article s'explorarà com utilitzar una funció de Power Query per obtenir i mostrar dades d'un URL intern. El focus se centrarà en la gestió dels escenaris on el codi de resposta de recuperació de dades és 404, evitant errors i garantint un processament de dades fluid. Seguirem els passos necessaris i oferirem solucions per gestionar aquests errors de manera eficaç.

Comandament Descripció
Json.Document Analitza les dades JSON recuperades d'un servei web.
Web.Contents Obtén dades d'un URL especificat.
try ... otherwise Intenta una operació i proporciona un resultat alternatiu si es produeix un error.
Record.ToTable Converteix un registre en un format de taula.
Table.SelectRows Filtra una taula en funció d'una condició especificada.
Table.Pivot Transforma les files en columnes en funció de valors diferents.

Entendre el maneig d'errors a Power Query

En els scripts proporcionats, comencem utilitzant el Web.Contents funció per obtenir dades d'un URL especificat, que es construeix de manera dinàmica mitjançant el id paràmetre. Aquestes dades s'analitzen mitjançant Json.Document, convertint la resposta JSON en un format que pot processar Power Query. La resposta conté un Instrument registre, al qual accedim mitjançant la indexació (Instrument{0}). D'aquest registre, extreu el Data_Flow per comprovar el Data_Response_Code, que indica l'èxit o el fracàs de la recuperació de dades.

Si el Data_Response_Code és 200, procedim a extreure els camps de dades requerits - Instrument_Full_Name i CFI_Code - de la Instrument_Common registre. A continuació, aquests camps es converteixen en un format de taula utilitzant Table.Pivot. Si el codi de resposta és 404, que indica que no s'han trobat les dades, ens assegurem que els camps de sortida estiguin en blanc configurant-los de manera explícita. Aquest enfocament evita errors mitjançant l'ús try...otherwise constructe, que detecta problemes potencials i es posa per defecte en un estat segur.

Desglossament detallat de Power Query M Language Script

El segon script s'amplia sobre el primer incorporant el try...otherwise construir, proporcionant un mecanisme de reserva per a qualsevol error que es trobi durant la recuperació de dades. Després d'analitzar la resposta JSON amb Json.Document i accedir al Instrument registre, intentem recuperar el Data_Response_Code. Si aquesta operació falla, l'script per defecte és 404, assegurant-se que la resta del procés continua sense interrupcions.

Un cop confirmat el codi de resposta, l'script extreu els camps de dades Instrument_Common o els posa en blanc si el codi de resposta és 404. La funció FetchData llavors s'utilitza per afegir aquests resultats a una nova columna de la taula existent, aprofitant Table.AddColumn. Aquest mètode permet una gestió robusta d'errors i garanteix que es mantingui la integritat de les dades, fins i tot quan falten alguns punts de dades o la sol·licitud web falla. En general, aquests scripts demostren tècniques efectives per gestionar els errors de recuperació de dades web a Power Query.

Gestió d'errors de recuperació de dades a Power Query

Ús de Power Query M Language

(id as text)=>
let
    Source = Json.Document(Web.Contents("https://example.com/data?Identifier=" & id)),
    Instrument = Source[Instrument]{0},
    DataFlow = Instrument[Data_Flow],
    ResponseCode = DataFlow[Data_Response_Code],
    Output = if ResponseCode = 200 then
        let
            InstrumentCommon = Instrument[Instrument_Common],
            FullName = InstrumentCommon[Instrument_Full_Name],
            CFI = InstrumentCommon[CFI_Code]
        in
            [FullName = FullName, CFI_Code = CFI]
    else
        [FullName = "", CFI_Code = ""]
in
    Output

Garantir la integritat de les dades amb Power Query

Ús d'Excel Power Query M Language

let
    FetchData = (id as text) =>
    let
        Source = Json.Document(Web.Contents("https://example.com/data?Identifier=" & id)),
        Instrument = Source[Instrument]{0}?
        ResponseCode = try Instrument[Data_Flow][Data_Response_Code] otherwise 404,
        Output = if ResponseCode = 200 then
            let
                InstrumentCommon = Instrument[Instrument_Common],
                FullName = InstrumentCommon[Instrument_Full_Name],
                CFI = InstrumentCommon[CFI_Code]
            in
                [FullName = FullName, CFI_Code = CFI]
        else
            [FullName = "", CFI_Code = ""]
    in
        Output,
    Result = Table.AddColumn(YourTableName, "FetchData", each FetchData([Id]))
in
    Result

Entendre les ordres de Power Query

Gestió d'errors de recuperació de dades a Power Query

Ús de Power Query M Language

(id as text)=>
let
    Source = Json.Document(Web.Contents("https://example.com/data?Identifier=" & id)),
    Instrument = Source[Instrument]{0},
    DataFlow = Instrument[Data_Flow],
    ResponseCode = DataFlow[Data_Response_Code],
    Output = if ResponseCode = 200 then
        let
            InstrumentCommon = Instrument[Instrument_Common],
            FullName = InstrumentCommon[Instrument_Full_Name],
            CFI = InstrumentCommon[CFI_Code]
        in
            [FullName = FullName, CFI_Code = CFI]
    else
        [FullName = "", CFI_Code = ""]
in
    Output

Garantir la integritat de les dades amb Power Query

Ús d'Excel Power Query M Language

let
    FetchData = (id as text) =>
    let
        Source = Json.Document(Web.Contents("https://example.com/data?Identifier=" & id)),
        Instrument = Source[Instrument]{0}?
        ResponseCode = try Instrument[Data_Flow][Data_Response_Code] otherwise 404,
        Output = if ResponseCode = 200 then
            let
                InstrumentCommon = Instrument[Instrument_Common],
                FullName = InstrumentCommon[Instrument_Full_Name],
                CFI = InstrumentCommon[CFI_Code]
            in
                [FullName = FullName, CFI_Code = CFI]
        else
            [FullName = "", CFI_Code = ""]
    in
        Output,
    Result = Table.AddColumn(YourTableName, "FetchData", each FetchData([Id]))
in
    Result

Tècniques avançades per al tractament d'errors en Power Query

Un aspecte de la gestió d'errors a Power Query és la capacitat de gestionar amb gràcia els escenaris on falten les dades esperades o la resposta del servidor no és la prevista. Això pot ser especialment útil quan es tracta de grans conjunts de dades de fonts web on poden sorgir problemes intermitents. Utilitzant el try...otherwise La construcció no només assegura que la consulta no falla, sinó que també ofereix l'oportunitat de registrar aquests errors per a una anàlisi posterior. Els errors de registre es poden aconseguir creant una columna separada que reculli el missatge d'error, permetent als usuaris identificar i abordar la causa arrel de manera eficient.

Una altra característica potent de Power Query és la capacitat de combinar diverses consultes i fonts de dades. En crear una consulta mestra que consolida els resultats de diversos punts finals, els usuaris poden racionalitzar el seu flux de treball de processament de dades. Aquest enfocament és especialment útil quan es tracta d'API que requereixen paginació o diversos identificadors per obtenir conjunts de dades complets. La implementació d'una estructura de bucle dins de Power Query pot automatitzar aquestes tasques, reduir la intervenció manual i millorar la precisió de les dades. Això no només millora la productivitat, sinó que també garanteix un procés d'integració de dades més sòlid.

Preguntes i solucions habituals per a la gestió d'errors de Power Query

  1. Que es el try...otherwise construir a Power Query?
  2. El try...otherwise La construcció s'utilitza per gestionar els errors amb gràcia intentant una operació i proporcionant un resultat alternatiu si l'operació falla.
  3. Com puc registrar errors a Power Query?
  4. Els errors es poden registrar mitjançant la creació d'una columna separada que reculli el missatge d'error mitjançant l' try...otherwise construir, facilitant la identificació i la resolució de problemes.
  5. Quina és la finalitat del Web.Contents funció?
  6. El Web.Contents La funció s'utilitza per obtenir dades d'un URL especificat a Power Query.
  7. Com puc gestionar les dades que falten a Power Query?
  8. Les dades que falten es poden gestionar comprovant el codi de resposta i establint valors predeterminats (per exemple, cadenes buides) quan les dades no estan disponibles, utilitzant el if...then...else construir.
  9. Què és Json.Document usat per?
  10. El Json.Document La funció s'utilitza per analitzar les dades JSON recuperades d'un servei web.
  11. Pot Power Query gestionar diverses fonts de dades?
  12. Sí, Power Query pot combinar diverses fonts de dades mitjançant la creació d'una consulta mestra que consolida els resultats de diversos punts finals, millorant l'eficiència de la integració de dades.
  13. Com puc automatitzar l'obtenció de dades a Power Query?
  14. L'obtenció de dades es pot automatitzar mitjançant la implementació d'una estructura de bucle que processa múltiples identificadors o dades paginades, reduint la intervenció manual.
  15. Què és Table.Pivot usat per?
  16. El Table.Pivot La funció s'utilitza per transformar files en columnes basades en valors diferents, ajudant a l'organització de les dades.
  17. Com puc assegurar la integritat de les dades quan utilitzo Power Query?
  18. La integritat de les dades es pot garantir validant els codis de resposta i tractant els errors de manera adequada, assegurant que només es processin dades exactes i completes.

Conclusió:

La gestió eficaç dels errors a Excel Power Query en recuperar dades del web és crucial per garantir la integritat de les dades i evitar interrupcions en el processament de dades. Mitjançant les ordres i construccions adequades com try...otherwise i Json.Document, podeu gestionar amb gràcia els escenaris on falten dades o les respostes no siguin les esperades. Aquest enfocament no només ajuda a mantenir la precisió, sinó que també millora la robustesa dels vostres fluxos de treball de dades a Excel.