Ibrahim Haddad
数据、资源的整合对开源AI生态系统的构建至关重要,我们致力于将多个开源项目集成管理,为各领域开源用户提供便捷、高效的多领域服务。
大家好,我是LF AI&Data foundation的执行董事,我今天主要和大家探讨LF AI&Data foundation为建立开源AI和数据生态系统提供的支持。
我先来介绍一下LF AI&Data foundation的来源,LF AI一直致力于人工智能学习和深度学习,而ODPI则聚焦于资源,为了整合技术与资源,LFAI基金会与ODPI合并成立了LF AI&Data foundation基金会。2018-2019年,在信息增长领域,我们确立了项目互相支持、互相合作的模式,这一模式横跨整个生态系统。为了早日实现多项目一体化的目标,我们将LF AI和ODPI的人员聚集起来,向组织和项目中引入合适的开发人员,他们配合委员会支持开源AI和数据的开发,为用户提供统一的指引,尤其在提供跨项目、集成、标准的互操作性指导领域和人工智能领域。我们还连通了人工智能项目和数据项目,并对这两个项目进行了整合,促进项目之间的互操作性。在单一的基金会下管理、开发这些项目,使我们能够更加便捷的合作,建立起更强大的生态系统,极大地提高了效率。我们为集成项目提供的服务有12~15个不同的类别,其中包括机器学习、深度学习、数据模型、精确计算、教育、安全和隐私等。这些类别中还包含多个子类,如机器学习类别中包含框架平台、库等大约300个子类别。在这些子类别中,许多项目互相竞争并提供相似的功能,如在机器学习平台下的深度学习框架中有12种不同的产品,而在深度学习项目的资源库中也提供了类似的产品。全世界超过35000个开发商正在积极地为不同的项目做出贡献。
生态系统中的活动繁多且数量不断增长,问题层出不穷。这些问题与缺乏管理项目有关。这些问题大部分来源于系统个体的内部工作。随着时间的推移,公司意识到将这些工作开源的重要性,对于数据模型的开源和应用来说,工作开源的重要性不体现在企业正在对项目进行研究的时候,而是体现在项目完成后。在项目完成后,确定谁来管理项目资产、谁来负责出口单据和出口控制单据的填写、谁来为网站付钱、谁来为各种构建系统买单、谁来使用AWS信用等。为了解决这些不同的需求,不断扩大开源AI生态系统,我们建立了LF AI。
开源具有如下几个优势:具备多路径访问和更改代码的能力、灵活的许可证模式、能够进行同行之间的评审等。从开放源码、AI的角度来看,人工智能也有很多独特的优势,如透明和开放的发展模式、多领域可信度等。通过AI技术的应用,我们减少了模型和数据集的偏差,开发了检测篡改数据集和模型的方法,这些方法提高了模型的稳定性,帮助我们确认数据集和AI模型的来源。开源帮助我们寻找清理、排序、跟踪数据来源的方法。LF AI&Data foundation支持人工智能机器学习、深度学习等技术,为了提高这些不同项目之间的互操作性,我们将这些项目汇总、集成,实现了跨项目的紧密合作,在技术咨询委员会的支持下,我们为用户提供统一的指导。这些努力帮助我们朝着建立一个强大的开放源码AI&Data生态系统前进。为了建设这个系统,我们建立了管理委员会、技术顾问委员会、互操作性委员会、Trusted AI委员会、BI&AI委员会。技术咨询委员会推动我们对这些项目进行开放管理、获得许多独立的知识产权,它还提供了很多机会使我们将项目深度整合。我们还在其他的场景中开发项目,如我们提供在edex平台上的免费培训;我们还关注数据方向的技术开发,并为数据市场提供开源模型以及一系列支持工具。
我们还开展了涵盖市场营销领域的活动、给用户提供电子邮件的活动通知、每月的计划和项目的汇总,旨在为会员展示各领域领先的技术与项目。我们还专门为大学、政府实驗室、研究机构和其他非盈利组织设立了会员级别,为他们提供免费的会员服务。技术咨询委员会的项目采用开放和中立的治理模式,由全职的工作人员来进行全时段管理、提供全流程支持服务,并对重要的数据来源进行核实,从市场营销的角度对项目进行公关宣传,提供在不同地区的法律支持。我们正在从linux基金会中获取经验,建立能够为社区资产提供支持的系统。
LF AI&Data foundation开发过的项目中积累了很多孵化项目经验。我们管理项目的知识、产权,为所有项目提供多项法律服务和免费的培训服务、认证工作。我们有能力设计、执行软件和硬件的测试认证程序、协助开发商进行营销活动。除了验证工作和测试开发人员的操作之外,我们还提供创新、安保等服务。针对不同的项目,我们建立了发现漏洞的奖赏机制,并通过源代码扫描服务,将这一机制覆盖所有项目。在营销方面,我们提供市场公关服务来支持所有的项目,从博客到公告、白皮书、海报、演示、推广、对新项目的支持等。有些用户关注特定项目的活动进程,还有一些用户关注基金会的活动进程,如为了品牌推广开展的LF AI峰会。为此,我们还提供活动服务,对不同类型的活动提供支持。如今我们正在为筹备LF AI&Data foundation峰会努力。
(根据演讲内容整理,未经本人审核)