Upload data quality checks

[gatepoet]

When creating a csv file for upload in the register, different data processing tools uses different strings to denote missing values. To make the upload more robust, it would be great if the following strings were treated as empty strings during upload:

• NULL
• N/A

[gatepoet]

@AnneAbelseth kan du fylle ut denne med andre mulige datafelt?

[AnneAbelseth]

server_error_2023-01-03.log
@gatepoet Dette blir visst "a work in progress". Jeg fyller på med nye kommentarer etterhvert som jeg oppdager ting..

1. Første ting er den jeg sendte mail om i går: Jeg skulle laste opp aktiviteter til enheter jeg allerede hadde lastet opp. Legger ved logfilen her for helhetens skyld. Og feilmeldingen på websiden var denne: "An error occurred while updating the entries. See the inner exception for details."

2. Satte igang en opplastingsjobb på 10.000 enheter i går klokka 16:08. Den går fremdeles og er bare kommet ca. en tredjedel. Dette går jo altfor langsomt..

[gatepoet]

@AnneAbelseth

1. Kan ikke se at det er lastet opp noen logfil her.
2. Kan jeg få den fila på 10 000 enheter?

[AnneAbelseth]

10K-enhet-fila ble akkurat ferdig med å lastes opp. Det tok 18 timer og 10 minutter.. 10K-enheter-fila vedlagt.. Og her er mappingen: ***@***.*** From: Kristoffer Rolf Deinoff ***@***.***> Sent: 04 January 2023 11:56 To: statisticsnorway/statbus ***@***.***> Cc: Abelsæth, Anne ***@***.***>; Mention ***@***.***> Subject: Re: [statisticsnorway/statbus] Upload data quality checks (Issue #22) @AnneAbelseth<https://github.com/AnneAbelseth> 1. Kan ikke se at det er lastet opp noen logfil her. 2. Kan jeg få den fila på 10 000 enheter? — Reply to this email directly, view it on GitHub<#22 (comment)>, or unsubscribe<https://github.com/notifications/unsubscribe-auth/ALDPKOHWADSJ6QJQK2E4IB3WQVJL3ANCNFSM6AAAAAATPU5OZM>. You are receiving this because you were mentioned.Message ID: ***@***.******@***.***>>

[gatepoet]

@AnneAbelseth Har laget en egen issue på denne import-feilen. #34

[AnneAbelseth]

I'll do some testing to see if this is still relevant, and if so, I'll probably close this issue and start a new one instead without the discussions..