Apache Spark

Articles related to "Apache Spark"

4 articles in total

AI Engineer, FDE (Forward Deployed Engineer)

本文是Databricks在印度班加罗尔发布的AI工程师-FDE前线部署工程师招聘信息。该岗位隶属于Databricks的AI Forward Deployed Engineering团队,这是一个高度专业化的客户面AI团队,负责为客户交付专业服务,帮助其构建并产品化首创AI应用。岗位核心职责包括利用Databricks AI研究的最新技术开发尖端GenAI解决方案,涵盖RAG、多智能体系统、Text2SQL及模型微调等;负责面向消费者及内部的GenAI应用的生产上线;并作为客户的可信技术顾问。该职位要求与工程、产品及开发者关系团队跨职能协作,影响产品路线图,并在Data + AI Summit等顶级会议上发表演讲。技术栈方面,候选人需具备使用HuggingFace、LangChain、DSPy等工具构建GenAI应用的实战经验,以及在大规模分布式数据集上使用Databricks Intelligence Platform和Apache Spark的经验。任职要求强调生产级机器学习部署能力,涉及AWS、Azure或GCP云平台,且需具备在pandas、scikit-learn、PyTorch等常见工具上的多年数据科学行业经验。该职位支持远程办公,要求候选人拥有计算机科学或统计学等相关量化专业硕士学位,并具备向非技术受众传达技术概念的沟通能力。

Read More

Databricks 的前线部署工程师 - FDE(全栈)

本文是Databricks公司在德国慕尼黑招聘一名Forward Deployed Engineer (FDE) Fullstack 的岗位信息。FDE 是一个面向客户的、动手能力强的技术角色,主要负责与客户合作,利用Databricks平台构建和生产化数据与AI解决方案。该岗位的核心职责包括:领导端到端系统的架构设计和实施,涵盖数据工程、AI和应用开发;交付生产级系统、设计参考架构、自定义应用以及数据摄取和ML/AI模型集成;指导战略客户实施大数据和AI应用的端到端设计、构建和部署;确保解决方案的安全性和可扩展性,并符合Databricks最佳实践;与工程和客户支持团队合作提供产品反馈;深入客户团队,从技术IC到高管层,深度理解挑战并交付影响。岗位要求包括:6年以上数据工程、数据平台或软件工程经验;熟练使用Python、Scala、JavaScript/TypeScript等编程语言;掌握至少一种主流云生态(AWS、Azure、GCP);深入了解Apache Spark分布式计算及其运行时内部机制;熟悉CI/CD、MLOps和AI模型/API;具备企业客户交付和项目范围管理经验。Databricks是一家数据和AI公司,全球超过10000家组织依赖其Data Intelligence Platform,总部位于旧金山,由Lakehouse、Apache Spark、Delta Lake和MLflow的原创始人创建。

Read More

高级AI工程师 - FDE(前向部署工程师)- 美国联邦部门 - Databricks

本文是Databricks发布的Sr. AI Engineer - FDE(前线部署工程师)招聘信息,工作地点位于美国华盛顿特区、马里兰州或弗吉尼亚州,服务于美国联邦部门。该职位隶属于Databricks高度专业化的客户面向AI团队——AI FDE团队,核心职责包括利用Databricks AI研究的最新技术开发前沿生成式AI解决方案,涵盖RAG、多智能体系统、Text2SQL、模型微调等应用,并负责GenAI应用的生产环境部署、评估与优化。候选人需使用HuggingFace、LangChain、DSPy等工具,并具备在AWS、Azure或GCP上部署生产级机器学习系统的经验。由于联邦合同要求,该职位强制要求美国公民身份及获得美国政府机密许可的能力,持有现行Secret或更高级别许可者优先。职位薪资范围为182,000至250,208美元年薪,并提供年度绩效奖金、股权等福利。Databricks强调其平台已被Comcast、Condé Nast、Grammarly及超过50%的财富500强企业采用,由Lakehouse、Apache Spark、Delta Lake和MLflow的原创者创立。该职位需要跨职能协作,影响产品路线图,并在Data + AI Summit等会议上担任思想领袖。

Read More

AI Engineer - FDE (Forward Deployed Engineer)

本文是一则来自Databricks的招聘启事,职位为AI工程师 - 前线部署工程师(Forward Deployed Engineer, FDE),工作地点位于瑞典斯德哥尔摩。该职位隶属于Databricks高度专业化的客户服务型AI前线部署工程团队,团队编号为CSQ227R178,向EMEA地区的高级经理汇报。FDE团队的核心任务是交付专业服务,帮助客户构建并产品化首创的AI应用,并与工程、产品和开发者关系团队跨职能合作,塑造长期战略优先事项。职位的主要影响力包括:开发融合Databricks AI研究成果的尖端生成式AI解决方案,负责面向消费者和内部的生成式AI应用的生产环境部署,担任不同领域客户的可信赖技术顾问,以及在Data + AI Summit等会议上发表演讲,成为内外部公认的思想领袖。候选人需具备构建RAG(检索增强生成)、多智能体系统、Text2SQL和模型微调等生成式AI应用的经验,并熟练使用HuggingFace、LangChain和DSPy等工具;必须精通在AWS、Azure或GCP上部署生产级机器学习系统。优先考虑有使用Databricks智能平台和Apache Spark处理大规模分布式数据集经验的候选人。Databricks总部位于旧金山,全球拥有超过30个办事处,其统一的Data + AI平台被包括阿迪达斯、AT&T、拜耳、万事达卡和70%的财富500强在内的超过20,000家组织使用,平台包含Genie、Lakebase、Agent Bricks、Lakeflow、Lakehouse和Unity Catalog等组件。

Read More