批处理
0 人感兴趣 · 16 次引用
- 最新
- 推荐
接口优化的常见方案实战总结
针对老项目,去年做了许多降本增效的事情,其中发现最多的就是接口耗时过长的问题,就集中搞了一次接口性能优化。本文将给小伙伴们分享一下接口优化的通用方案。
“pip 不是内部或外部命令,也不是可运行的程序或批处理文件” 到底有多么神秘
pip不是内部或外部命令,也不是可运行的程序或批处理文件到底有多么神秘?
带你认识 FusionInsight Flink:既能批处理,又能流处理
摘要:本文主要介绍了FusionInsight Flink组件的基本原理、Flink任务提交的常见问题、以及最佳实践FAQ。
中原银行分布式批处理调度平台介绍
中原银行分布式批处理调度平台具备应用开发门槛低、应用开发效率高、无需人工干预、支持可视化编排、任务执行性能优异等多个特点,在分布式架构场景下,支撑了中原银行大量日终批量的稳定执行。本文介绍平台诞生背景、平台技术选型和平台的常见功能。
有状态流处理简介 (一)
写在前面: 大家好,我是强哥,一个热爱分享的技术狂。目前已有 12 年大数据与AI相关项目经验, 10 年推荐系统研究及实践经验。平时喜欢读书、暴走和写作。
大数据 - 数据处理分类篇
大数据是这个时代最热的话题,大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
Storm- 实时计算系统
Storm 最早是由 BackType 公司开发的实时处理系统,底层由 Clojure 实现。Clojure 也是一门基于 JVM 的高级面向函数式的编程语言。
Hadoop- 离线批处理技术
Apache Hadoop软件库是一个框架,该框架允许使用简单的编程模型跨计算机集群对大型数据集进行分布式处理。它旨在从单个服务器扩展到数千台机器,每台机器都提供本地计算和存储。
SpringBatch 系列入门之 Tasklet
Spring Batch是一个开源的批量处理框架,Spring Batch提供了类和API来读写资源,管理事务,作业处理统计、重启、以及分区技术处理大量数据。在Spring Batch中,一个作业任务可以由多个step组成,每个任务又都可以分为Read-Process-Write或者是tasklet