人工智能

1. 首页
2. IT互联网
3. 人工智能

【知识】ETL大数据集成工具Sqoop、dataX、Kettle、Canal、StreamSets大比拼

1. 摘要 对于数据仓库，大数据集成类应用，通常会采用ETL工具辅助完成。ETL，是英文 Extract-Transform-Load 的缩写，用来描述将数据从来源端经过抽取（extract）、交互转换（transform）、加载（load）至目的端的过程。当前的很多应用也存在大量的ELT应用模式。常见的ETL工具或类ETL的数据集成同步工具很多，以下对开源的Sqoop、dataX、

人工智能 2025年07月05日 64 点赞 0 评论 1403 浏览

市场洞察所需要的“数据”，是如何搜集的呢？

市场洞察所需要的“数据”，是如何搜集的呢？ 一、传统的数据收集方法 1.1一手数据 一手数据，也称之为原始数据，是指通过人员访谈、询问、问卷、测定等方式，直接获得的新数据。 收集方法：定性调查与定量调查。 定性调查：主要通过一对一“深度访谈”，例如焦点座谈会。 定量调查：主要通过向消费者发送一个结构化的调查问卷获取数据。 两者可以结合使用，先定性调查挖掘未知、深度，然后定量调查实现数

人工智能 2025年05月10日 121 点赞 0 评论 1392 浏览

跟着Nature Communications学作图--复杂散点图

复杂散点图 从这个系列开始，师兄就带着大家从各大顶级期刊中的Figuer入手，从仿照别人的作图风格到最后实现自己游刃有余的套用在自己的分析数据上！这一系列绝对是高质量！还不赶紧点赞+在看，学起来！ 参考文献 本期分享的是Nature Communications上一篇关于机器学习的文章中的散点图。 这个散点图的亮点在于充分利用了散点的填充和描边属性，将两者与图形要表达

人工智能 2025年05月19日 122 点赞 0 评论 1371 浏览

大数据：HDFS知识体系（知其然，知其所以然）

前言 HDFS是Hadoop体系的基础，不知道各位怎么对待HDFS。反正我更多的关注一些应用层的东西，对于HDFS多有忽视。 但是每次面试的时候都要重新去背面经，我觉得这样的情况不太正常，因此耗时两天半整理了HDFS的知识体系，力求知其然也要知其所以然。 文章中有不少个人思考，希望能让各位更好的理解HDFS. 一、HDFS特性 高容错性：HDFS认为硬件总是不可靠的。 高吞吐量：HDFS为大量

人工智能 2025年05月01日 97 点赞 0 评论 1366 浏览

SM2算法功能简述（二） 验签流程

人工智能 2025年07月26日 123 点赞 0 评论 1342 浏览

细胞类型重复性验证----MetaNeighbor（2）

继续上面MetaNeighbor 1的学习，我们做第二个测试数据，第二组场景的测试。 ========测试数据2============ 第二个数据集，基于已经训练好或者注释好的参考数据集，来衡量新数据集细胞类型注释的准确性。这个测试数据是采用的BICCN，一个小鼠初级运动皮层的细胞。可以去作者的paper链接中下载。 library(MetaNeighbor) library(SingleCel

人工智能 2025年04月21日 125 点赞 0 评论 1334 浏览

651.【系统架构】边缘计算——边云协同（一）

边缘计算与云计算各有所长，云计算擅长全局性、非实时、长周期的大数据处理分析，能够在长周期维护、业务决策等领域发挥优势； 边缘计算更适用局部性、实时、短周期数据的处理与分析，能更好地支撑本地业务的实时智能化决策与执行。 因此边缘计算与云计算之间不是替代关系，而是互补协同关系，边云协同将放大边缘计算与云计算的应用价值： 边缘计算既靠近执行单元，更是云端所需高价值数据的采集和初步处理单元，可以更好地支

人工智能 2025年06月14日 146 点赞 0 评论 1329 浏览

单细胞之轨迹分析-7：Seurat+scVelo

轨迹分析系列： 单细胞之轨迹分析-1：RNA velocity 单细胞之轨迹分析-2：monocle2 原理解读+实操 单细胞之轨迹分析-3：monocle3 单细胞之轨迹分析-4：scVelo 单细胞之轨迹分析-5：slingshot 单细胞之轨迹分析-6：velocyto.R+Seurat 一般要去计算RNA velocity的时候，是已经预先处理过数据了，比如做过了降维，聚类，差异分

人工智能 2025年06月21日 175 点赞 0 评论 1258 浏览

305. 【操作系统】文件系统

所谓文件管理系统，就是操作系统中实现文件统一管理的一组软件和相关数据的集合，专门负责管理和存取文件信息的软件结构，简称文件系统。 文件系统的功能包括： 按名存取，即用户可以“按名存取”，而不是“按地址存取”； 统一的用户接口，在不同设备上提供同样的接口，方便用户操作和编程； 并发访问和控制，在多道程序系统中支持对文件的并发访问和控制； 安全性控制，在多用户系统中的不同用户对同一文件可有不同的访问

人工智能 2025年06月17日 171 点赞 0 评论 1246 浏览

方差分析、T检验、卡方分析如何区分？

差异研究的目的在于比较两组数据或多组数据之间的差异，通常包括以下几类分析方法，分别是方差分析、T检验和卡方检验。 三个方法的区别 其实核心的区别在于：数据类型不一样。如果是定类和定类，此时应该使用卡方分析；如果是定类和定量，此时应该使用方差或者T检验。 方差和T检验的区别在于，对于T检验的X来讲，其只能为2个类别比如男和女。如果X为3个类别

人工智能 2025年05月20日 131 点赞 0 评论 1244 浏览