Skip to contentSkip to footer

Data Engineer Interview Questions

Salaries
Interviews

Data Engineer Interview Questions

I Data engineer sono professionisti informatici richiesti pressoché in tutti i settori. Si occupano di monitorare i trend dei dati per pianificare le azioni più adeguate che un'azienda deve intraprendere. Uno degli aspetti più critici del lavoro di un Data engineer è l'elaborazione dei dati grezzi e la loro trasformazione in dati utilizzabili per creare pipeline e sistemi di dati.

Domande tipiche dei colloqui per Data engineer e come rispondere

Question 1

Domanda 1: Puoi descrivere in dettaglio il tuo livello di competenza nell'ambito dei linguaggi di programmazione?

How to answer
Come rispondere: Prima del colloquio, ripassa il tuo CV e/o portfolio e stila un elenco dei programmi che conosci meglio. Se scopri di non avere una buona conoscenza del programma usato in prevalenza nell'azienda, descrivi te stesso come una persona intraprendente e altamente motivata, che si impegnerà senza sosta per imparare a usare il programma.
Question 2

Domanda 2: Spiega a parole tue che cos’è il data engineering.

How to answer
Come rispondere: Analizza il tuo ruolo in relazione all'azienda e ad altri ruoli quali il data scientist, così da definire in modo chiaro il tuo contributo al sistema aziendale nel suo complesso. Spiega la differenza tra il ruolo di un ingegnere che lavora ai database e quello di un ingegnere che si occupa di pipeline.
Question 3

Domanda 3: Puoi descrivere un'esperienza lavorativa con Apache Hadoop e in ambienti di gestione dei dati nel cloud?

How to answer
Come rispondere: Per prepararti a questa domanda, fai le dovute ricerche sul software utilizzato dall'azienda, sui prodotti cloud per i dati e sull'uso di Apache Hadoop. I Data engineer devono avere un'ottima padronanza dei linguaggi di programmazione e dei sistemi di gestione dei dati utilizzati nel settore, quali Apache Hadoop.

20,248 data engineer interview questions shared by candidates

Shared in DescriptionQuestion1) If we have input.csv, we need to find the output. File and desired output are given below. username, mobile user1,999999991:888888882 user3,777777771 user2,777777234:823232351 user5,734452343:943433434:834323434 user1,999999991:9994433777 output user1:3 user2:2 user3:1 Question2) How can we read a csv file into dataframe Question3) Option to modify the encoding while reading a file in Scala Question 4) Optin to modify the timestamp while reading a file Question 5) How to introduce separators like "," while reading a file Question 6) How to infer Schema =============================== Question 7) How have below 2 tables, we need to find out users who visited a bank but didn't make any transactions? -- Visits table: -- +---------+------------+ -- | user_id | visit_date | -- +---------+------------+ -- | 1 | 2020-01-01 | -- | 2 | 2020-01-02 | -- | 12 | 2020-01-01 | -- | 19 | 2020-01-03 | -- | 1 | 2020-01-02 | -- | 2 | 2020-01-03 | -- | 1 | 2020-01-04 | -- | 7 | 2020-01-11 | -- | 9 | 2020-01-25 | -- | 8 | 2020-01-28 | -- +---------+------------+ -- Transactions table: -- +---------+------------------+--------+ -- | user_id | transaction_date | amount | -- +---------+------------------+--------+ -- | 1 | 2020-01-02 | 120 | -- | 2 | 2020-01-03 | 22 | -- | 7 | 2020-01-11 | 232 | -- | 1 | 2020-01-04 | 7 | -- | 9 | 2020-01-25 | 33 | -- | 9 | 2020-01-25 | 66 | -- | 8 | 2020-01-28 | 1 | -- | 9 | 2020-01-25 | 99 | -- +---------+------------------+--------+
avatar

Senior Big Data Engineer

Interviewed at Impetus Technologies

3.7★
Jun 21, 2022

Shared in DescriptionQuestion1) If we have input.csv, we need to find the output. File and desired output are given below. username, mobile user1,999999991:888888882 user3,777777771 user2,777777234:823232351 user5,734452343:943433434:834323434 user1,999999991:9994433777 output user1:3 user2:2 user3:1 Question2) How can we read a csv file into dataframe Question3) Option to modify the encoding while reading a file in Scala Question 4) Optin to modify the timestamp while reading a file Question 5) How to introduce separators like "," while reading a file Question 6) How to infer Schema =============================== Question 7) How have below 2 tables, we need to find out users who visited a bank but didn't make any transactions? -- Visits table: -- +---------+------------+ -- | user_id | visit_date | -- +---------+------------+ -- | 1 | 2020-01-01 | -- | 2 | 2020-01-02 | -- | 12 | 2020-01-01 | -- | 19 | 2020-01-03 | -- | 1 | 2020-01-02 | -- | 2 | 2020-01-03 | -- | 1 | 2020-01-04 | -- | 7 | 2020-01-11 | -- | 9 | 2020-01-25 | -- | 8 | 2020-01-28 | -- +---------+------------+ -- Transactions table: -- +---------+------------------+--------+ -- | user_id | transaction_date | amount | -- +---------+------------------+--------+ -- | 1 | 2020-01-02 | 120 | -- | 2 | 2020-01-03 | 22 | -- | 7 | 2020-01-11 | 232 | -- | 1 | 2020-01-04 | 7 | -- | 9 | 2020-01-25 | 33 | -- | 9 | 2020-01-25 | 66 | -- | 8 | 2020-01-28 | 1 | -- | 9 | 2020-01-25 | 99 | -- +---------+------------------+--------+

Questions about typical problems that you could phase during your experience with Google Cloud, like dataproc firewall rules, limits of Cloud Functions/Run/App Engine in a VPC - SC environment, Cloud Identity, how would you solve specific problems, etc.
avatar

Data Engineer

Interviewed at Cartier

3.8★
Jun 8, 2023

Questions about typical problems that you could phase during your experience with Google Cloud, like dataproc firewall rules, limits of Cloud Functions/Run/App Engine in a VPC - SC environment, Cloud Identity, how would you solve specific problems, etc.

Viewing 1201 - 1210 interview questions

Glassdoor has 20,248 interview questions and reports from Data engineer interviews. Prepare for your interview. Get hired. Love your job.