分类 优秀开源 下的文章

开源数据集成/清洗/转化工具pentaho-kettle&OpenRefine&airbyte

pentaho-kettle Kettle,也称为Pentaho Data Integration,是一款强大的开源ETL(Extract, Transform, Load)工具。它主要用于从多个数据源提取数据,并对数据进行转换和加载到目标系统中。Kettle 提供了可视化的界面,使用户能够使用拖放方式创建数据流程,并通过连接不同的转换步骤进行数据转换和处理。Kettle 支持多种数据源和目...

继续阅读 »

CPU和内存性能分析工具: PerfView

PerfView 是什么? PerfView 是微软开源的 CPU 和内存性能分析工具。 PerfView 是一款免费的性能分析工具,可帮助隔离与 CPU 和内存相关的性能问题。它是一个 Windows 工具,但它也支持分析 Linux 机器上收集的数据。它适用于各种场景,但具有许多特殊功能,可用于调查为 .NET 运行时编写的代码中的性能问题。 在Linux中调试性能问题 在 Linux...

继续阅读 »

jmeter-压力和性能测试

jemter 简介 jmeter 可以做接口测试和压力测试。其中接口测试的简单操作包括做 http 脚本(发 get/post 请求、加 cookie、加 header、加权 限认证、上传文件)、做 webservice 脚本、参数化、断言、关联(正则表达式提取器和处理 json-json path extractor)和 jmeter 操作数据库等等。 jmeter 安装 安装jdk(略...

继续阅读 »

frp 搭建内网穿透服务

什么是内网穿透 什么时候需要用内网穿透? 无公网IP时,需要将本地服务器和应用服务,提供到互联网访问时,就需要使用内网穿透的方法。 内网穿透和DDNS的区别 DDNS(动态域名解析)指的是直接将域名解析到家用路由器上, 然后路由器实现端口转发, 从而实现通过域名访问内网中的服务器的目的. 内网穿透和DDNS都是为了让内网的设备被公网访问。 两者的区别: 是否需要公网服务器? 内网穿透需要,...

继续阅读 »

反编译微信小程序wxappUnpacker

前言 工具准备(免费) 微信小程序反编译 https://www.aliyundrive.com/s/x6zddHbHK6R 提取码: 90ut 解密小程序 确认小程序包位置推荐微信电脑版 打开一个小程序 小程序的位置为文件管理/Applet 在提取小程序前最好先清空该目录, 不然太多无法识别 D:\Administrator\Documents\WeChat Files\Applet\w...

继续阅读 »

Anaconda是专注于数据分析的Python发行版本

Anaconda是专注于数据分析的Python发行版本,包含了conda、Python等190多个科学包及其依赖项。注意pip和conda是两个不同的东西,它们的包安装地址都不一样,不要混淆了。 为什么选择Anaconda 什么是 conda conda 是开源包(packages)和虚拟环境(environment)的管理系统。 packages 管理:一个类似于pip的包管理工具,不同...

继续阅读 »

Schedule—简单实用的 Python 周期任务调度工具

注意:Schedule主要作用是替代linux系统自带的Crontab命令,用于周期性的执行某个命令。 科普一下任务调度系统 任务调度系统的地位 任务调度系统在数据平台中算是非常核心的组件,相当于指挥部,指挥各个平台上各个组件的运行,并监督任务的运行情况。大数据平台中通常会有很多任务运行,有一个好的任务调度系统可以极大提高效率。 最简单的任务调度系统莫过于linux系统自带的Crontab工...

继续阅读 »

优秀的ssh工具推荐

Xshell + Xftp 付费软件,不过有家庭免费版 https://www.xshellcn.com/xshell.html 此软件是在公司中使用的软件,公司电脑配置差。打开占用内存 30M左右。只能运行在windows环境中。需要说明一下的是,以前这两款软件爆出过收集用户信息的丑闻了的。 tabby 开源工具 https://github.com/Eugeny/tabby 经过...

继续阅读 »

go实现的压测工具

网站 项目网站:https://github.com/wenxuwan/go-stress-testing 示例 ─────┬───────┬───────┬───────┬────────┬────────┬────────┬────────┬──────── 耗时│ 并发数 │ 成功数│ 失败数 │ qps │最长耗时 │最短耗时│平均耗时 │ 错误码 ─────┼────...

继续阅读 »

一个神奇的文档网站生成工具docsify

什么是docsify? docsify官方定义是“一个神奇的文档网站生成器” 官方网站 可以查看其样式与使用教程。 docsify本质上就是一个可以渲染MarkDown资源的单页应用,我们只需要写MarkDown然后挂在http服务器上就可以了。 docsify可以快速帮你生成文档网站,我们在做完项目的时候经常会写一些项目手册,教程等。 docsify使用nodejs开发,但是不必懂n...

继续阅读 »