文章目录前言一、Knowledge distillation(知识蒸馏)是什么？1.论文的研究动机2.何为Knowledge(知识)3.蒸馏知识的方法4.温度参数T(temperature)5.蒸馏的过程二、代码部分1.引入库2.读入数据3.训练代码总结 前言随着人工智能的不断发展，深度学习模型的体量也变得越来越大，但在某些应用场景下，深度学习模型的大体量却容易成为项目落地的障碍，因此我们迫切地需
转载
2024-01-04 07:57:38
68阅读
近年来，露营成为最受欢迎的休闲娱乐方式之一，从形式到内容也在不断丰富，随着疫情防控和出行政策的放宽，进一步激发了人们的户外休闲的欲望。专注于研发以电为核心的户外生活装备的新晋品牌“火星玩家”（Mars Players）首次提出“电核露营”的先进概念，以户外和露营为载体，以探索火星为主题，结合多元需求的电动元素，让露营爱好者能享受舒适、安全、便捷的户外生活体验，同时做到环境保护和绿色生活。
转载
2024-01-22 21:01:55
86阅读
日常我们接触过各种“轻量级xxx”的词组，比如轻量级框架、轻量级网络、轻量级密码等，在论文里更是常见到各种“…… 轻量级 ……”（“… lightweight …”）的题目。 可能很多人会主观的认为轻量级就是体
转载
2023-12-19 20:50:44
78阅读
当今企业级开发中，几乎都会用到orm框架，有全自动的orm框架hibernate，也有半自动的orm框架mybatis，还有springboot推荐使用的jpa，作者本人个偏向于mybatis框架（写原生sql真的很爽啊！！！），但是在高并发的场景下，不推荐在sql语句中使用关联查询，更倾向于单张表表冗余查询，在代码中使用stream操作，当然这是题外话。前几天逛论坛意外发现一篇标题为《抛弃myb
近年来，以“微度假”为概念的露营游成为人们心目中一种理想而高级的旅宿方式，目前随着更多的露营爱好者加入，露营的场景、时间和玩法都在大众层面得到拓展。 然而，即使露营地点不限、装备不限、形式不拘一格，格局却往往受制于“无电”这个短板。小到卡式炉煮食、灯火照明，大到取火供暖，烧水洗澡等，都需要一套又一套的系列装备，同时还有安全、环保等问题。铺个垫子、摆上熟食或半成品的“无电露营”已成过去式，“电核露营
转载
2023-10-20 09:59:54
36阅读
简化Java开发Spring的诞生应对应用的复杂性，Spring的关键策略基于POJO的轻量级和最小侵入性编程通过依赖注入和面向接口实现松耦合基于切面AOP和惯例进行声明式编程通过切面和模板减少样板式代码POJO之美定义POJO（Plain Old Java Objects）：简单普通的Java对象。不具有任何特殊角色，不继承/实现任何其他Java框架的类和接口。很多框架具有侵入性，强迫开发者编写
转载
2024-07-08 14:38:23
20阅读
动态slimmable网络：高性能的网络轻量化方法！对比slimmable涨点5.9% 论文链接：https://arxiv.org/abs/2103.13258代码：https://github.com/changlin31/DS-Net 一、研究动机动态剪枝算法及其问题动态网络为每个输入自适应地配置不同的网络结构，而不是像神经网络搜索（NAS）或剪枝
转载
2023-10-22 13:37:42
124阅读
摘要: Transformer虽然效果好，但是却对资源要求比较高，很难在端设备上运行。在传统的Transformer中，每个block中都有Multi-head Attention和全连接层，其中，随着序列长度N的增大，全连接层的计算量是线性增长，而attent ...人工智能学习离不开实践的验证，推荐大家可以多在FlyAI-AI竞赛服务平台多参加训练和竞赛，以此来提升自己的能力。FlyAI是为A
转载
2024-04-01 13:30:48
452阅读
YoursLC 是我们独立研发的一款低代码产品，YoursLC-yours你们的、LC是低代码low-code的缩写，中文名称：有源低代码， 是一套双输出的低代码产品：既能完整输出功能又能100%输出源码。满足用户高效率、低成本和个性化的需求。几十倍的提高开发效率，用户完全可控，可轻松进行二次开发。我们长期致力于零代码、低代码产品的开发研究，YoursLC是我们第三代产品，于2022年2月上线，码
一、传统部署方式 传统的手工部署存在缺点非常多，就不一一描述了，而且还很low（出去没法装X）。。。二、Jenkins+Docker自动化部署项目采用jenkins部署是很方便，但是也存在安装配置麻烦，最最重要的是依赖后端同学或者运维同学搭环境，没有运维经验前端同学还是放弃吧，本人按教程也没有安装成功。。。三、使用node-ssh实现前端轻量化部署node-ssh是一个基于ssh2的轻量级npm包
转载
2024-02-10 21:31:38
107阅读
说明项目网站：://github/iawia002/annieAnnie是一个基于go语言编写的下载器，先来解释一下这几个形容词。简洁：程序无UI界面，通过命令行操作，且简单易懂。强大：支持Windows、macOS、Linux系统，各大视频网站均可下载，且还能下载其他文件如音频，图片等。在项目网站列举的有：抖音、、半次元、pixivision、优酷、YouTube、爱奇
转载
2024-08-27 23:22:12
56阅读
作者：NoahSYZhang轻量化视觉基础模型系列文章继续更新啦！上一篇文章中，我们介绍了 MobileViT 和 EdgeNeXt，本期我们将继续回顾轻量级模型的最新工作：EfficientFormer 和 TinyViT。这两个工作分别从模型设计原则和模型训练技巧两个方面，对轻量化基础模型展开了详细的探索。EfficientFormer：轻量级模型设计的经验指南在实际应用中，一个可部署模型的实
转载
2024-08-27 14:39:53
364阅读
GROUP-TRANSFORMER: TOWARDS A LIGHTWEIGHT CHARACTER-LEVEL LANGUAGE MODELINTRODUCTION本文介绍了一种用于字符级语言建模的轻量级转换器。我们的方法是一种因式分解方法，它使用分组线性操作来分离transformer架构中的标准线性层，并在线性转换之间进行稀疏连接。该模型受到群卷积方法的启发，被称为Group Transfo
转载
2024-02-25 13:52:07
398阅读
前言 本文将回顾轻量级模型的最新工作：EfficientFormer 和 TinyViT，分别从模型设计原则和模型训练技巧两个方面，对轻量化基础模型展开了详细的探索。作者 | 带来新知识的EfficientFormer：轻量级模型设计的经验指南在实际应用中，一个可部署模型的实际推理速度是非常重要的，尤其是像 ViT 这类模型的部署是非常具有挑战的。该工作系统性地分析了 ViT 系列模型的
背景传统的前端代码手工部署流程如下：传统的手工部署需要经历：打包，本地运行npm run build打包生成dist文件夹。ssh连接服务器，切换路径到web对应目录下。上传代码到web目录，一般通过xshell或者xftp完成。传统的手工部署存在以下缺点：每次都需要打开xshell软件与服务器建立连接。当负责多个项目且每个项目都具有测试环境和线上环境时，容易引起部署错误。全自动化的部署其实可以采
转载
2024-06-17 16:24:56
165阅读
随着科技的进步，各个领地都在不断探索和应用新的技术来提高效率和准确性。HOOPS技术作为一种先进的3D可视化和模拟技术，正在采掘和地质科学领域发挥着重要的作用。本文将探讨HOOPS技术在采掘和地质科学中的具体应用，并分析其对这些领域的影响。一、HOOPS在采矿业在地质科学中的应用（1）HOOPS技术在采煤行业中的应用可大幅提高挖掘和开采过程的效率通过使用HOOPS技术，矿工以和地质学家可以创造准确
spring核心容器的理论很简单：spring核心容器就是一个超级大工厂，所有的对象（包括数据源、Hibernate SessionFactory等基础性资源）都会被当成spring核心容器管理的对象。spring把容器中的一切对象统称为bean。配置文件中的<bean.../>元素默认以反射方式来调用该类无参数的构造器。比如：<bean id="person" class="c
转载
2024-09-29 19:39:40
15阅读
这篇是承接《轻量级 Java 开发框架 设计》系列Blog文的后续文章，本文主要介绍设计的这款框架它的架构设计要求。 轻量级是这个框架的设计要求，但是要达到真正的模块化却变得十分繁重。最后很可能导致轻量级变成重量级。因此在框架的边界设计变得尤其重要。首先明确一下设计 Hasor 的目的： 1.用于Java
转载
2024-07-31 11:14:34
67阅读
使用单模型轻量化，实现模型结构更优，将成为3D行业用户，规避模型处理痛点的最佳技术路径。现在凡事都讲究轻量，3D行业也不例外。尤其元宇宙来势汹汹，整个轻量化需求的市场和声量，依旧维持在高点之上。身处这条赛道，企业都在根据行业环境的骤变，迅速调整自身节奏，继续展现出手中握有的最强成果。也是基于上述背景，今天想展开聊聊即将上线的3D轻量化“黑马”—单模型轻量化技术。因为它的支持，3D模型多方面的性能，
转载
2023-12-20 07:46:57
17阅读
十岁的小男孩 本文为终端移植的一个小章节。目录 引言 论文 A. MobileNets B. ShuffleNet C. Squeezenet D. Xception E. ResNeXt引言 在保证模型性能的前提下尽可能的降低模型的复杂度以及运算量。除此之外，还有很多工作将注意力放在更小、更高效、更精细的网
