Data Engineer

صاحب العمل نشط

1 وظيفة شاغرة
drjobs

حالة تأهب وظيفة

سيتم تحديثك بأحدث تنبيهات الوظائف عبر البريد الإلكتروني
Valid email field required
أرسل الوظائف
drjobs drjobs drjobs
drjobs drjobs
drjobs

حالة تأهب وظيفة

سيتم تحديثك بأحدث تنبيهات الوظائف عبر البريد الإلكتروني

Valid email field required
أرسل الوظائف

الراتب الشهري

drjobs

لم يكشف

drjobs

لم يتم الكشف عن الراتب

عدد الوظائف الشاغرة

1 وظيفة شاغرة

الوصف الوظيفي

رقم الوظيفة : 2634046
Job details/description:
Design develop and implement data pipelines for the new internal application
Leverage GCP services like Cloud Storage Cloud Functions Pub/Sub Cloud Scheduler Cloud Run BigQuery and Cloud SQL
Utilize Python scripting and libraries (NumPy Pandas SciPy) for data manipulation and analysis
Collaborate with crossfunctional teams to ensure data quality and accessibility
Troubleshoot and resolve complex data engineering challenges
Continuously improve data pipelines for efficiency and performance

Cloud: (required)

  • Experience with cloud computing platforms such as Amazon Web Services (AWS) Microsoft Azure or Google Cloud Platform (GCP)
  • Familiarity with cloud computing concepts such as virtual machines storage and networking
  • Experience with cloudbased data engineering tools and services
  • GCP: (required)

  • Experience with Google Cloud Platform (GCP)
  • Familiarity with GCP services such as Google Cloud Storage Cloud Functions Pub/Sub Cloud Scheduler Cloud Run BigQuery and Cloud SQL
  • Experience with GCP APIs and SDKs
  • Other required skills: (required)

  • Experience with data engineering tools and technologies such as Apache Spark Hadoop and Hive
  • Familiarity with data modeling and database design
  • Strong problemsolving and analytical skills
  • Excellent communication and teamwork skills
  • Python scripting:

  • Experience writing Python scripts for data engineering tasks
  • Familiarity with Python libraries for data manipulation and analysis such as NumPy Pandas and SciPy
  • Experience with Python frameworks for web development such as Django or Flask
  • Other preferred skills: (preferred)

  • r/rshiny for front end development preferred

ATD Technology LLC is a certified minority woman owned business that creates opportunities to match qualified individuals with client programs while meeting all parties financial and technical goals. ATD is a full service provider with offerings in Contract Permanent and TemptoPerm staffing solutions. We serve Fortune 1000 mid cap and small cap companies in the Commercial Public and Government sectors.

نوع التوظيف

دوام كامل

المهارات المطلوبة

  • Apache Hive
  • S3
  • Hadoop
  • Redshift
  • Spark
  • AWS
  • Apache Pig
  • NoSQL
  • البيانات الضخمة
  • مستودع البيانات
  • Kafka
  • Scala

نبذة عن الشركة

الإبلاغ عن هذه الوظيفة
إخلاء المسؤولية: د.جوب هو مجرد منصة تربط بين الباحثين عن عمل وأصحاب العمل. ننصح المتقدمين بإجراء بحث مستقل خاص بهم في أوراق اعتماد صاحب العمل المحتمل. نحن نحرص على ألا يتم طلب أي مدفوعات مالية من قبل عملائنا، وبالتالي فإننا ننصح بعدم مشاركة أي معلومات شخصية أو متعلقة بالحسابات المصرفية مع أي طرف ثالث. إذا كنت تشك في وقوع أي احتيال أو سوء تصرف، فيرجى التواصل معنا من خلال تعبئة النموذج الموجود على الصفحة اتصل بنا