Olcay Ozyilmaz
Verified Expert in Engineering
数据工程师和开发人员
olkay是一名数据工程师，拥有计算机科学博士学位，拥有14年以上的专业项目经验. 他是一名数据仓库(DWH)专家，也是一名专注于使用机器人技术提高生产力的开发人员. 他的沟通能力也很强, 决策, 以及由企业管理硕士学位支持的组织专业知识. olkay是一个优秀的团队成员和领导者，他具有出色的分析和解决问题的能力，承担具有挑战性的工作.
Portfolio
Experience
Availability
首选的环境
Linux, Abinitio, Python, SQL, Docker, Git, 机器学习, 亚马逊网络服务(AWS), Jenkins, Atlassian, 数据仓库设计
最神奇的...
...作为DWH专家，我所做的事情是为沃达丰和SoftTech的DWH再造项目构建ETL和处理工作流，并开发DevOps CI/CD管道.
工作经验
高级数据工程顾问
Ashish Bansal
- 审核客户的ETL管道. 我为他们使用的产品和行业标准提供咨询.
- 为DWH标准如命名标准、编码标准提供咨询.
- 为他们难以解决的一些问题设计最有效的解决方案.
技术性ETL文档撰写者
Zoetis - Main
- 以编程方式从混乱的体系结构中提取信息. 没有编码标准或文档, 我制作了精心设计的图表和文档.
- Inspected 9,超过10个ETL平台的000多个ETL管道, including ADF, data bricks, Alteryx, SQL servers, MySQL servers, clouds, and blobs. 从4000+管道中提取信息, 22,000多个数据源, 30多个ETL和存储平台.
- 协助他们将Alteryx和Data Factory管道重新设计为数据砖笔记本.
- 提取遗留ETL管道中的所有业务. 现有的体系结构缺乏针对许多不同ETL平台的标准化或文档, codes, and scripts, 包括Alteryx, ADF, adb, SQL, bat, shell, and Python.
DevOps Engineer & Architect
沃达丰土耳其
- 创建ETL工作流和流程，并为DWH设计和开发DevOps CI/CD管道流程.
- 监控敏捷委员会，通过为Jira提供自动化来提高交付质量和速度, 这也有助于提高Jira的使用率.
- 通过开发“完成和准备”的正式定义，并为流程中的每个任务准备职责分配矩阵，改进了工作流质量.
- 处理Bitbucket, Jira, UC4和Confluence管理.
数据工程师| QA经理| DevOps工程师
SoftTech
- 参与了Boubyan Bank-SoftTech DWH再造项目.
- 创建一个过程流来消除项目中的职责差距.
- 开发DevOps管道，减少返工成本，提高交付质量.
- 记录测试和部署策略，并设计端到端项目流程.
- 构建集成了Jira的测试和部署自动化工具，并通过简化报告和管理帮助标准化和增加Jira的使用.
- 通过清晰地定义项目中的“完成和准备”并实现CI/CD管道，将交付速度提高了30倍.
- 开发了Informatica部署自动化管道. 开发了BO部署自动化. 开发SQL部署自动化.
- 创建测试执行自动化. 在Jira上开发缺陷管理. 根据测试自动化的结果，缺陷被自动创建.
- 促成了通过Jira转换触发的所有自动化. 它还提高了Jira的使用质量，并为团队提供了一个用户友好的界面.
- 开发了Power BI部署自动化. 定义仪表板和报告测试策略和范围.
数据工程师| QA主管|迁移经理| DevOps工程师
德勤法律国际
- 参与沃达丰和德勤DWH重组项目.
- 构建ETL工作流和流程, 设计并开发了DevOps CI/CD管道和迁移流, 并进行DWH建模.
- 管理敏捷团队，审查设计和代码，参加架构设计会议.
- 开发了“完成和准备”的定义，提高了生产力和交付质量.
- 为移交创建正式文件，并管理Jira, Confluence, 以及Bitbucket存储库和主板.
- 设计功能性和非功能性需求的解决方案.
- 参与了项目的不同领域. 为遗留系统开发迁移流，以重新设计DWH. 分析使用领域并执行数据建模.
高级ETL开发人员
Turkcell
- 审查设计和代码，开发许多生产力工具和自动化.
- 使用Oracle, Ab Initio, Unix和shell脚本实现ETL进程.
- 对个人盈利等项目做出贡献, 客户细分, BTK系统评审质量定期报告, 顾客忠诚度分析, Siebel集成, DecisionHub, 订阅领域再造.
- 使用Ab Initio GDE开发大数据ETL，并负责ETL维护, 性能调优, 资源监控.
- 为流构建连续的数据工作流. 我还开发了接近实时的ETL(小批量)和ETL流(批量ETL)。.
- 优化了ETL调度器并调优了关键路径作业的性能.
- 为特定需求的开发开发了几个自动化工具和框架. 有了这些框架, 初级开发人员可以通过一些配置轻松创建完美的ETL流.
- 为经典DWH架构的几乎所有部分构建框架:提取, CDC, load, 回收管理, 维度管理(类型# tables), 以及密钥管理.
- 在处理政府相关数据和关键错误项目时重新设计订阅域.
- 开发测试自动化以简化测试过程并提高生产率. 我编写了自动化代码来生成一些文档，比如发布说明.
高级分析顾问
i2i Systems
- 担任数据工程师和Turkcell DWH路线图团队成员.
- 参与路线图项目，包括开发Turkcell路线图的ETL.
- 开发的生产力工具，包括开发本身的自动化.
Developer
暂停互动
- 应大学教授的要求和邀请，作为一名全栈开发人员加入了这家数字代理初创公司.
- 为一个营销平台进行web开发和数据库建模.
- 构建移动应用程序和开发人员API, 处理社交网络整合, 并实现了OAuth协议.
机器人技术开发人员
Ford Otosan
- 在福特Gölcük工厂生产汽车的编程机器人.
- 测试夹具机器人并开发新的机器人要求.
- 参与机器人开发培训课程，提高生产机器人的性能.
Experience
QA管理角色
我准备了QA策略文档，并为这些策略中涉及的所有任务定义了DoD(完成定义)和DoR(准备定义), 绘制它们以消除质量差距. 我还为所有任务准备和审查RACI矩阵，消除责任差距.
除了出席行政会议, 我还为DWH开发了端到端的CI/CD管道，允许:
*验证每项任务的输出和输入
*提高生产力
*减少返工成本
*测量加工流水线中的所有细节(如果你不能测量，你就不能改进.)
*将所有自动化集成到Jira, 有助于提高Jira的使用率和质量，并允许与不同的任务管理工具集成
*为ETL管道开发开发框架，使经验不足的ETL开发人员可以执行配置开发
开发人员框架和自动化
•提高生产率
•提高产品质量和标准化
•简化初级开发人员的工作
减少返工成本
一些与dwh相关的开发框架通过元数据驱动开发将开发简化为几个配置，包括:
•提取框架
•CDC框架
•维度管理框架(类型# Dim管理)
•负载框架和分区维护
•数据清理框架
•回收管理框架
•自动调度定义
•自动创建测试用例(根据模型标准)
•测试自动化
•缺陷管理
•操作警报管理(SMTP集成)
•和解检查器
•发行说明的文档生成器
•编码器代码生成一些批量代码为各种目的
沃达丰DWH再造项目
ANKA |帮助协调信息系统
布比扬银行DWH再造项目
社交网络集成语义应用
生产力工具| Ab Initio图形生成器
生产力工具|测试用例创建器
生产力工具|部署和文档管理器
Skills
Languages
Python, SQL, t - sql (transact - sql)， Regex, Java, HTML, CSS, JavaScript, c#.NET, c#， Snowflake
Libraries/APIs
NumPy, REST APIs, Pandas, PySpark, Keras, 詹金斯管道, Jira REST API, Bitbucket API, Twitter API, Facebook API, Google API, Google Maps, Bing API, Bing Maps, 谷歌地图API, Binance API, Bing Maps API
Tools
Abinitio, Git, Atlassian, Jira, Microsoft Excel, Postman, Jenkins, Shell, Docker Compose, GitHub, Confluence, Bitbucket, Toad, Automic (UC4), Kafka Streams, Informatica ETL, Microsoft Power BI, Tableau, Apache NiFi, Guacamole, Apache Airflow, Amazon Elastic MapReduce (EMR), AWS IAM, AWS CLI, AWS Fargate, AWS Glue, Amazon Athena
Paradigms
ETL, DevOps, Agile, 商业智能(BI), OLAP, Automation, Testing, Management, 数据库设计, Data Science, REST, Oracle ODI, Serverless架构
Platforms
Linux, Oracle, Docker, Databricks, Jupyter笔记本, Oracle Data Integrator (ODI), BlackBerry, Android, Apache Kafka, Amazon EC2, Kubernetes, 亚马逊网络服务(AWS), Alteryx, Azure, AWS Lambda
Storage
PL/SQL, Oracle PL/SQL, Data Pipelines, Databases, 数据集成, 关系数据库, Dynamic SQL, SQL存储过程, Microsoft SQL Server, PostgreSQL, Data Lakes, OLTP, PL / SQL开发人员, Teradata, Oracle SQL开发人员, Amazon S3 (AWS S3), Redshift, MySQL, SQL Server集成服务(SSIS), SQL Server分析服务(SSAS), SQL Server 2016, Amazon DynamoDB
Other
Development, 工程数据, Productivity, 数据仓库, DevOps Engineer, Engineering, Algorithms, Scripting, CSV文件处理, CSV, Data Analysis, Pipelines, Data, 技术写作, API集成, Consulting, 数据架构, 数据管理, 数据转换, 技术架构, Monitoring, Writing & 编辑，精算，数据仓库设计，实体关系, 机器学习, ETL Tools, Big Data, 数据治理, Process Design, 工艺流程设计, Jira管理, Data Migration, Data Modeling, 正则表达式, APIs, 数据级安全, 数据可视化, ELT, 数据结构, Data Lakehouse, 大数据架构, 工业物联网(IIoT), 性能调优, Metadata, Architecture, PL/SQL Tuning, Deep Learning, 人工智能(AI), 强化学习, Robotics, Languages, CI / CD管道, Process Flows, Migration, Team Management, Deployment, 移动应用开发, JavaScript库, Maps, HTML5的地理位置, 计算机科学, Programming, 遗传算法, 人工神经网络(ANN), 企业管理, Lead Marketing, 人力资源(HR), Finance, TradingView, Mobile Apps, Web Scraping, Informatica, Jira管理员, 质量审计, 质量控制(QC), Dashboards, BI Reports, Reports, QA Automation, Data Quality, 质量改进, 高代码质量, Serverless, Data Analytics, Azure数据工厂, Azure砖, Azure数据湖, Azure数据浏览器, Amazon RDS, Airbyte
Frameworks
Windows PowerShell，无服务器框架，Apache Spark, Spark
Education
计算机科学博士
伊斯坦布尔Ticaret大学(伊斯坦布尔商业大学)-伊斯坦布尔，土耳其
工商管理硕士学位
贝肯特大学-伊斯坦布尔，土耳其
计算机科学学士学位
伊斯坦布尔Ticaret大学(伊斯坦布尔商业大学)-伊斯坦布尔，土耳其
Certifications
AWS认证解决方案架构师-助理
亚马逊网络服务培训和认证
AWS机器学习工程师纳米学位
Udacity
Oracle SQL专家认证
甲骨文大学
Ab Initio技术员
Ab Initio
西班牙语高级中级
伊斯坦布尔Ticaret大学(伊斯坦布尔商业大学)
Robotics
中东技术大学