Karip Kaya，英国巴克赫斯特山的开发商
Karip is available for hire
Hire Karip

Karip Kaya

验证专家  in Engineering

Data Developer

Location
巴克赫斯特山，英国
至今成员总数
March 29, 2022

Karip是一名数据工程师和开发人员，在IT行业有18年的经验，在自由职业者社区有6年的经验. 他擅长Java、Scala和Python，并精通Hadoop、Spark和PL/SQL. Karip喜欢从事后端、数据库和大数据项目.

Data Migration工程数据Big DataJavaSQLJava 8GitHubRDBMSOraclePL/SQLDatabasesGitETLData PipelinesApache HiveOracle ExadataJCLInformatica ETLGrouponSUNSqoopInformatica

Portfolio

Atos
Apache Spark, Apache Hive, PySpark, SQL, Databricks，大数据...
Groupon
大数据、Apache Spark、Java 8、Apache Maven、Git、SQL、Spark、Spark SQL、HDFS...
Deutsche Bank
Apache Hive, Spark SQL, Pandas, PySpark, Apache Spark, HDFS, SQL, Scala...

Experience

Java - 15年SQL - 15 yearsApache Hive - 5年HDFS - 5 yearsSpark SQL - 3年火花- 3年Scala - 3年Python 3 - 2年

Availability

Part-time

首选的环境

Java, Scala, Python 3, SQL, Apache Hive, Spark, Databricks

最神奇的...

...我开发的是桌面环境的消息传递和文件共享程序.

Work Experience

高级数据工程师

2021 - 2022
Atos
  • 减少了将基于pandas的数据转换代码运行到PySpark DataFrame的14小时, 五分钟跑完.
  • 解决每周管道数据问题. 加载所需的数据集.
  • 参与维护基于Azure数据工厂的每周数据流.
技术:Apache Spark, Apache Hive, PySpark, SQL, Databricks，大数据, Azure数据工厂, HDFS, Java, Python 3, Spark, Spark SQL, Pandas, Python, Git, Databases, 工程数据, ETL, Data Pipelines, Azure, Hadoop, GitHub, RDBMS

高级数据工程师

2021 - 2022
Groupon
  • 使用Docker完成内部Java API的云迁移.
  • 维护内部数据流和Linux crontab计划维护.
  • 通过更改现有Java代码解决了云API超时问题.
  • 应用了CDC数据流函数性能解决方案.
Technologies: 大数据、Apache Spark、Java 8、Apache Maven、Git、SQL、Spark、Spark SQL、HDFS, Python, Jenkins, PySpark, Databases, 工程数据, ETL, Data Pipelines, Linux, Kubernetes, Hadoop, GitHub, RDBMS, Java开发工具包(JDK)

Data Engineer

2020 - 2021
Deutsche Bank
  • 创建了Hive, Spark, Scala和PySpark的初始数据管道集成.
  • 解决了分区和bucket Hive表的文件数限制问题.
  • 参与设计在Hive上建立的DWH数据库模型.
技术:Apache Hive, Spark SQL, Pandas, PySpark, Apache Spark, HDFS, SQL, Scala, Python 3, Spark, Python, Big Data, Git, Databases, 工程数据, ETL, Data Pipelines, Hadoop, GitHub, Bitbucket, RDBMS

高级数据工程师

2015 - 2019
Akbank
  • 为现有数据集市创建和维护DWH表和etl, 包括所有分级表.
  • 在Informatica上开发和维护ETLs. 还通过更新SQL和应用下推优化增强了ETL性能.
  • 采用大数据集群卸载ETL.
  • 建立近在线销售/目标数据集市，支持日常销售.
  • 使用Informatica存储库表分析和报告数据沿袭.
技术:Informatica ETL, Oracle Exadata, Big Data, Cloudera, Spark, SQL, Apache Hive, Impala, Apache Sqoop, Apache Spark, Oracle, Databases, Data Migration, 工程数据, ETL, Data Pipelines, ETL开发, Informatica, Hadoop, GitHub, RDBMS

高级开发人员

2003 - 2015
Yapi Kredi
  • 开发和维护与客户相关的应用程序和数据库表.
  • 将基于c的客户端代码迁移到Java Hibernate中.
  • 标准化并清理了客户特定领域的数据.
  • 将特定于领域的API从PL/SQL转换为Java-Spring.
技术:Oracle 11g, Oracle 12c, PL/SQL, Java, C, COBOL Batch, JCL, Git, Hibernate, Spring, SQL, Oracle, Databases, Data Migration, GitHub, RDBMS

数独验证器

http://github.com/karipkaya/sudokuvalidator
一个简单的验证器，检查给定的数独解决方案.

我用Java写的, 生成的测试, 并使用Maven进行依赖管理、构建和运行操作. 目的是演示基本的Java、Maven和测试知识.
2023年6月至今

Python Basic

HackerRank

2023年2月至今

解决问题(基础)

HackerRank

2023年2月至今

SQL (Advanced)

HackerRank

2019年10月至今

Oracle认证助理

Oracle

Libraries/APIs

PySpark,熊猫

Tools

Spark SQL, Git, Informatica ETL, GitHub, Apache Maven, Oracle Exadata, Impala, CircleCI, Jenkins, JCL, Cloudera, Apache Sqoop, Bitbucket, Java开发工具包(JDK)

Frameworks

Spark, Apache Spark, Hadoop, Hibernate, Spring

Paradigms

ETL

Languages

Java, SQL, Java 8, Scala, Python 3, Python, C

Platforms

Oracle, Databricks, Azure, Linux, Kubernetes

Storage

Apache Hive, HDFS, PL/SQL，数据库，数据管道，RDBMS, Oracle 11g, Oracle 12c

Other

Big Data, Data Migration, 工程数据, ETL开发, Informatica, Azure数据工厂, COBOL Batch, Algorithms

有效的合作

如何使用Toptal

在数小时内，而不是数周或数月，我们的网络将为您直接匹配全球行业专家.

1

分享你的需求

在与Toptal领域专家的电话中讨论您的需求并细化您的范围.
2

选择你的才能

在24小时内获得专业匹配人才的简短列表，以进行审查，面试和选择.
3

开始你的无风险人才试验

与你选择的人才一起工作，试用最多两周. 只有当你决定雇佣他们时才付钱.

对顶尖人才的需求很大.

Start hiring