写点什么

案例 | 在肯尼亚,青年们正在说着“Sheng”语...

作者:澳鹏Appen
  • 2023-02-09
    上海
  • 本文字数:1286 字

    阅读完需:约 4 分钟

案例 | 在肯尼亚,青年们正在说着“Sheng”语...

你听说过一种叫做“Sheng”的语言吗?这是一种斯瓦希里语-英语俚语,主要使用者为肯尼亚内罗毕等城市地区的青年。近年来,随着“Sheng”的使用量不断增加,一家非盈利组织正在帮助更新该地区的社区信息资源,随时根据词汇中的新变化做出调整,以便及时为当地的人们提供尽可能准确可靠的信息。


CLEAR Global,前身为无国界译者(Translators Without Borders,是一个非营利组织,致力于帮助人们突破语言的边界,获取重要信息并积极传达自身观点。


CLEAR Global 与澳鹏 Appen 作为公益合作伙伴,长期在一些文化发展较为不足的地区积极开发语音聊天机器人等人工智能应用,以促进当地的文化交流和人们的心理健康。


挑战


由于“Sheng”是澳鹏 Appen 和 CLEAR Global 从未处理过的一种新语言,澳鹏 Appen 语言学家团队需要围绕语言研究、最佳实践和方法论开发一个项目模型。澳鹏 Appen 团队需要提供针对该语言特性的咨询服务,并形成定制文档,在未来的应用中实现类似的输出。


“Sheng”的使用发展迅速,目前已经被应用于广告和各类社会活动中。然而,由于社区之间的语言差异很大,词汇转换率很高,为形成规范文档带来了一定挑战



解决


在处理一种对澳鹏 Appen 而言复杂或陌生的语言时,我们的团队会进行结构化研究,其输出是一份语言特性(LSP)文档。LSP 是一份简明的研究文档,它概述一种语言的语音、语法和缀字法,以及该语言的应用环境,例如语音聊天机器人等


“Sheng”LSP 需要强调这些变化模式,以帮助开发人员在他们的模型中妥善处理可变性。在两个多月的时间里,项目团队提供了 5 种咨询模板、一份 Sheng LSP 文档和一份 LSP 模板,其中包含了创建未来 LSP 文档的说明



作为一名母语为 Sheng 和斯瓦希里语的人,澳鹏 Appen 提供的 LSP 文档的精准度让我印象深刻。这是个强大的工具,展现出诸多未开发语言的无限可能,相信我们可以在这些语言领域大有所为。


——Paul Waramabo

CLEAR Global 斯瓦希里语负责人


成果


该项目的咨询模板和 LSP 模板专为 CLEAR Global 开发,供人们进行可持续的进一步研究,特别是研究不太为人所知的小语种。通过澳鹏 Appen 提供的材料,CLEAR Global 能够开发自己的 LSP 研究文档,用于未来开发一系列非洲语言的 ASR 模型。


与此同时,澳鹏 Appen 也通过参与此项目深受启发。我们为不同项目开发和编写的 LSP 文档的专业知识和流程得到进一步优化,这对于未来研究资源较少的语言和方言将大有裨益


在全球,澳鹏 Appen 拥有超过 100 万名技能娴熟的众包资源,支持 235+种语言和方言,遍布全球 170 多个国家和地区。在中国,我们亦具备丰富的小语种及方言项目经验,每种语言及方言均涵盖大规模专业、高质量的资源池,可做到人机协同、采标一体,高效达到至少 95%以上的准确率要求。


APPEN

澳鹏 Appen Limited (ASX:APX) 是全球领先的图像、文本、语音、音频、视频等 AI 训练数据服务提供商,拥有业内最先进的人工智能辅助数据标注平台、一体化的 AI 数据及资源管理平台及全球 100 多万名技能娴熟的众包资源,支持 235+种语言和方言。澳鹏 Appen 的解决方案可为全球科技、汽车、金融服务、零售、制造和政府等行业的领导者提供优质、安全、高效的服务。澳鹏 Appen 成立于 1996 年,客户和办事处遍布全球。点此了解更多


发布于: 刚刚阅读数: 7
用户头像

澳鹏Appen

关注

还未添加个人签名 2021-03-15 加入

高质量的AI训练数据服务商

评论

发布
暂无评论
案例 | 在肯尼亚,青年们正在说着“Sheng”语..._人工智能_澳鹏Appen_InfoQ写作社区