全部分类 数据库 前端 云计算
[转帖]密集计算场景下的 JNI 实战

https://www.jianshu.com/p/ab8fd26014c1 作者：vivo 互联网服务器团队- Wei Qianzi、Li Haoxuan 在 Java 发展历程中，JNI 一直都是一个不可或缺的角色，但是在实际的项目开发中，JNI 这项技术应用的很少。在笔者经过艰难的踩坑之后，终

密集 计算 场景 jni
0
2022-12-21
PVT：特征金字塔在Vision Transormer的首次应用，又快又好 | ICCV 2021

论文设计了用于密集预测任务的纯Transformer主干网络PVT，包含渐进收缩的特征金字塔结构和spatial-reduction attention层，能够在有限的计算资源和内存资源下获得高分辨率和多尺度的特征图。从物体检测和语义分割的实验可以看到，PVT在相同的参数数量下比CNN主干网络更强大

pvt vision transormer iccv
0
2024-05-22
前后端结合解决Excel海量公式计算的性能问题

背景 在数据密集的业务领域，尤其是金融，保险，税务等行业中，经常需要利用Excel模型，来对业务进行分析和处理。例如： 1.金融投资： 根据模型进行估值计算，并对投资风险进行评估，通过测算出投资的内部收益率（IRR），净现值（NPV）来做投资收益分析，反应项目的获利能力。 2.保险精算： 运用数学，

前后 结合 解决 excel
2200
2022-11-23
[转帖]为什么说IO密集型业务，线程数是CPU数的2倍？

https://juejin.cn/post/7184619435309662266 原创：小姐姐味道（微信公众号ID：xjjdog），欢迎分享，非公众号转载保留此声明。 I/O密集型业务，线程数量要设置成 CPU 的 2 倍！ 也不知道这是哪本书的坑爹理论，现在总有一些小青年老拿着这样的定理来说教

为什么 io 密集型 业务
0
2023-01-25
从2PC和容错共识算法讨论zookeeper中的Create请求

最近在读《数据密集型应用系统设计》，其中谈到了zookeeper对容错共识算法的应用。这让我想到之前参考的zookeeper学习资料中，误将容错共识算法写成了2PC（两阶段提交协议），所以准备以此文对共识算法和2PC做梳理和区分，也希望它能帮助像我一样对这两者有误解的同学。

2pc 容错 共识 算法
94
2023-06-26
我们的智能化应用是需要自动驾驶(Autopilot)还是副驾(Copilot)

自动驾驶Autopilot 是一个知识密集且科技含量很高的技术，不基于点什么很难把它讲的相对清楚。副驾驶 Copilot 是一种由 AI 提供支持的数字助理，旨在为用户提供针对一系列任务和活动的个性化协助。自微软发布 Microsoft 365 Copilot 以来，Copilot 这个词便被各界人

我们 智能化 应用 需要
661
2023-05-31
如何使用io_uring构建快速响应的I/O密集型应用？

通过异步I/O操作和高效事件处理，io_uring为开发人员提供了一种强大工具，能够显著减少I/O等待时间并实现更高的吞吐量。

如何 使用 io uring
38
2023-08-30
别再纠结线程池池大小、线程数量了，哪有什么固定公式

可能很多人都看到过一个线程数设置的理论：CPU 密集型的程序 - 核心数 + 1，I/O 密集型的程序 - 核心数 * 2，不会吧，不会吧，真的有人按照这个理论规划线程数？

大小 线程 数量 公式
19
2023-09-20
[转帖]Linux 异步 I/O 框架 io_uring：基本原理、程序示例与性能压测

io_uring是 2019 年 Linux 5.1内核首次引入的高性能异步 I/O 框架，能显着加速 I/O 密集型应用的性能。但如果你的应用已经在使用传统 Linux AIO 了，并且使用方式恰当， 那io_uring并不会带来太大的性能提升—— 根据测试，即便打开高级特性，也只有 5%。除非你

linux 异步 框架 io
0
2023-01-20
[转帖]Linux性能优化（十五）——CPU绑定

一、孤立CPU 1、孤立CPU简介 针对CPU密集型的任务，CPU负载较高，推荐设置CPU Affinity，以提高任务执行效率，避免CPU进行上下文切换，提高CPU Cache命中率。 默认情况下，Linux内核调度器可以使用任意CPU核心，如果特定任务（进程/线程）需要独占一个CPU核心并且不想

linux 性能 优化 十五
0
2023-04-20
新做了一个MySQL 数据库 DDL 差异对比的网站

MySQL 数据库 DDL 差异对比的网站 摘要 新做了个网站，用来对比不同环境下的 DDL 差异，生成变更点和 迁移 DDL 网站地址：https://ddlcompare.com/ 对比过程中如果有问题，可以通过邮箱联系我 huiyuanai709@gmail.com，下班后我会密集的修一波 b

mysql ddl
14
2024-07-22
DeepSpeed框架：1-大纲和资料梳理

DeepSpeed是一个深度学习优化软件套件，使分布式训练和推理变得简单、高效和有效。它可以做些什么呢？训练/推理具有数十亿或数万亿参数的密集或稀疏模型；实现出色的系统吞吐量并有效扩展到数千个GPU；在资源受限的GPU系统上进行训练/推理；实现前所未有的低延迟和高吞吐量的推理；以低成本实现极限压缩，

deepspeed 框架 大纲 资料
3
2023-10-12
基于Python的性能优化

通过多线程、协程和多进程可以显著提升程序的性能。多线程适用于I/O密集型任务，尽管受限于Python的GIL，但能在I/O等待期间提高并发性。协程则更为轻量和高效，特别适合处理大量异步I/O操作。

python
0
2024-05-24
[转帖]巧用Systemtap注入延迟模拟IO设备抖动

http://blog.yufeng.info/archives/2935 原创文章，转载请注明： 转载自系统技术非业余研究 本文链接地址: 巧用Systemtap注入延迟模拟IO设备抖动 当我们的IO密集型的应用怀疑设备的IO抖动，比如说一段时间的wait时间过长导致性能或其他疑难问题的时候，这个

巧用 systemtap 注入 延迟
0
2022-12-06
[转帖]Redis子进程开销与优化

Redis子进程开销与优化 文章系转载，便于分类和归纳，源文地址：https://blog.csdn.net/y532798113/article/details/106870299 1、CPU 开销 RDB和AOF文件生成，属于CPU密集型 优化 不做CPU绑定，也就是不把redis进程绑定在一个

redis 进程 开销 优化
0
2023-04-18
CUDA C编程权威指南：1-基于CUDA的异构并行计算

什么是CUDA？CUDA（Compute Unified Device Architecture,统一计算设备架构）是NVIDIA（英伟达）提出的并行计算架构，结合了CPU和GPU的优点，主要用来处理密集型及并行计算。什么是异构计算？这里的异构主要指的是主机端的CPU和设备端的GPU，CPU更擅长逻

cuda 编程 权威 指南
15
2023-10-05
快来给你的宠物视频加个表情特效吧

摘要：我们将给猫贴一张卡通脸，给 Elon Musk 贴上小胡子，给小狗贴上驯鹿角！ 本文分享自华为云社区《视频AI，给你的宠物加个表情特效！》，作者：HWCloudAI。 GAN 监督学习是一种联合端到端学习判别模型及其 GAN 生成的训练数据的方法。GANgealing将框架应用于密集视觉对齐问

快来 宠物 视频 表情
327
2022-12-07
C#实现多线程的几种方式

前言 多线程是C#中一个重要的概念，多线程指的是在同一进程中同时运行多个线程的机制。多线程适用于需要提高系统并发性、吞吐量和响应速度的场景，可以充分利用多核处理器和系统资源，提高应用程序的性能和效率。 多线程常用场景 CPU 密集型任务. I/O 密集型任务. 并发请求处理. 大数据处理等. 什么是

9
2024-05-11
如何基于three.js(webgl)引擎架构，研发一套通过配置就能自动生成的3D机房系统

自动化3D机房、微模块、3D机房、3D数据中心、科技感数据中心、三维机房、3d建筑,3d消防,消防演习模拟,3d库房,3d档案室,3d密集架,webGL,threejs,3d机房,bim管理系统

如何 基于 three js
50
2023-10-13
[转帖]密码学入门

https://www.cnblogs.com/codelogs/p/16202557.html 原创：打码日记（微信公众号ID：codelogs），欢迎分享，转载请保留出处。 简介# 在信息安全领域，一般会遇到"窃听"、"篡改"、"伪装"、"否认"这些威胁，而密码学家们提供了相应的密码学算法来解决

密码学 入门
0
2023-03-09
# 热门排行
微软 New Bing AI 申请与使用保姆级教程（免魔法） ChatGPT API使用介绍 ChatGPT开发实战 一篇带你了解如何使用纯前端类Excel表格构建现金流量表 手把手教你玩转 Excel 数据透视表 为什么 C# 可能是最好的第一编程语言 .NET 入门到高级路线 提高工作效率的神器：基于前端表格实现Chrome Excel扩展插件 React + Springboot + Quartz，从0实现Excel报表自动化 用Echarts实现前端表格引用从属关系可视化
© PmDaddy. 2023 PmDaddy教程网 All rights reserved.