-
技术培训 | 大数据分析处理与用户画像实践|预告
所属栏目:[大数据] 日期:2021-03-16 热度:144
主题: 大数据分析处理与用户画像实践 时间: 5 月 11 日 20:00 —— 21:30 地点: QingCloud 技术分享群,文末有二维码。 讲师: 孔淼 诸葛io 创始人 CEO 90 后连续创业者,曾任 37degree CTO ,在任 37degree CTO 期间,孔淼曾带领团队服务 CCTV 、海尔[详细]
-
第10章-基于树的方法(1)-生成树
所属栏目:[大数据] 日期:2021-03-16 热度:81
原文参考:https://onlinecourses.science.psu.edu/stat857/node/22 一,本章简介 1,本章主要学习目标 理解决策树的基本概念 理解构成决策树的三个基本元素 理解’不纯度’及其他度量公式的定义 知道如何估计每个树节点的各个所属分类的后验概率 理解基于树[详细]
-
数据处理1:一个中型数据的数据处理平台构建
所属栏目:[大数据] 日期:2021-03-16 热度:141
数据是这个样子的 大概一共有两万多行,我需要对每一行进行逗号的分隔解析,然后把数据重新输出 方法是把它存为文件,然后通过文件读取的方式去读取这些数据,读取一行然后进行处理让其变成单个字符串并进行显示 我这里用的是 结构体存储 的方法,并且 分割[详细]
-
大数据分析平台搭建教程:基于Apache Zeppelin Notebook和R的交
所属栏目:[大数据] 日期:2021-03-16 热度:85
介绍 这篇文章的目的是帮助您开始使用 Apache Zeppelin Notebook,它可以满足您用R做数据科学的需求。Zeppelin 是一个提供交互数据分析且基于Web的笔记本。方便你做出可数据驱动的、可交互且可协作的精美文档,并且支持多种语言,包括 Scala(使用 Apache Spa[详细]
-
四大主流开源BI商业智能平台对比评测
所属栏目:[大数据] 日期:2021-03-16 热度:130
概述: 本文对主流的四款开源BI商业智能平台进行了对比,主要从三方面入手,文档、演示和架构体系。 一、文档篇 完善的文档对平台的学习和使用是非常有用的,也是判断平台是否优秀的一个最直观的方法,所以我们有理由来比较一下四个平台的文档。 openI的文档[详细]
-
HDU 1502 三维dp加大数
所属栏目:[大数据] 日期:2021-03-16 热度:190
F[a][b][c]=F[a-1][b][c]+F[a][b-1][c]+F[a][b][c-1]; a=b=c; package zzz;import java.math.BigInteger;import java.util.Scanner;public class Main {public static void main(String args[]){Scanner cin=new Scanner(System.in);BigInteger a[][][]=new[详细]
-
Bi-shoe and Phi-shoe【lightoj1370】——欧拉数
所属栏目:[大数据] 日期:2021-03-16 热度:165
Bamboo Pole-vault is a massively popular sport in Xzhiland. And Master Phi-shoe is a very popular coach for his success. He needs some bamboos for his students,so he asked his assistant Bi-Shoe to go to the market and buy them. Plenty of B[详细]
-
【重!磅!干!货
所属栏目:[大数据] 日期:2021-03-16 热度:143
查看之前文章请点击右上角 , 关注 并且 查看历史消息 ,还可以在文章最后评论留言。谢谢您的支持! 回复【 文本挖掘 】 或者 【 点击阅读原文 】 获取链接与代码附录 一、 功能概述 ? ? ? ?关键词词频网络图是以股票论坛、 个股新闻、研究报告三个网站作为[详细]
-
上机题目(初级)-大数求和
所属栏目:[大数据] 日期:2021-03-16 热度:144
描述:? 给定两个非常大的正整数A和B,位数在50至100之间。求C=A+B; ? 题目类别: ?字符串? 难度: ?中级? 运行时间限制: 10Sec 内存限制: 128MByte 阶段: ?入职前练习? 输入: ? 因为A和B很大,从高位到低位,以字符串的形式输入两行数字A和B。A和B的位数在50[详细]
-
BI cube的前世今生:商业智能BI为什么需要cube技术
所属栏目:[大数据] 日期:2021-03-15 热度:152
企业中常常会出现这样一幕幕尴尬的场景: 企业的决策人员需要从不同的角度来审视业务,协助他们分析业务,例如分析销售数据,可能会综合时间周期、产品类别、地理分布、客户群类等多种因素来考量。 IT 人员在每一个分析角度上都建了一张报表。然而,决策人员[详细]
-
一共81个,开源大数据处理工具汇总(上)
所属栏目:[大数据] 日期:2021-03-15 热度:101
作者:大数据女神-诺蓝(微信公号:dashujunvshen)。本文是36大数据专稿,转载必须标明来源36大数据。 本文一共分为上下两部分。我们将针对大数据开源工具不同的用处来进行分类,并且附上了官网和部分下载链接,希望能给做大数据的朋友做个参考。下面是第一[详细]
-
一共81个,开源大数据处理工具汇总(下),包括日志收集系统/集
所属栏目:[大数据] 日期:2021-03-15 热度:115
作者:大数据女神-诺蓝(微信公号:dashujunvshen)。本文是36大数据专稿,转载必须标明来源36大数据。 接上一部分:一共81个,开源大数据处理工具汇总(上),第二部分主要收集整理的内容主要有日志收集系统、消息系统、分布式服务、集群管理、RPC、基础设[详细]
-
DeepLearning: 数据处理5:将caffe训练时屏幕输出可视化(matlab
所属栏目:[大数据] 日期:2021-03-15 热度:121
说明:必须再前一篇博文的基础上使用本文中的代码。先将屏幕输出保存到文本中,然后在使用本文中的代码。。。同样,这里只是我的环境下调通的,根据个人,适当调整代码就行了。。。都是重复造轮子,没啥技术含量。。。 % 根据caffe输出文档,作出accuracy,lo[详细]
-
大数据处理的一些总结和应用(有关舆情监控)
所属栏目:[大数据] 日期:2021-03-15 热度:78
? ? 说到大数据处理可能大家都不会陌生,这是近年来非常火热的话题,各行各业都想借助大数据为自己助力,有了这个工具,就好像在飞机上看农田一般清晰,一目了然,也也就是业内人士常说的大数据提供了一个------上帝视角 大数据的概念: 1、指的是所涉及的资[详细]
-
[BZOJ3110][Zjoi2013]K大数查询(主席数套线段树 )
所属栏目:[大数据] 日期:2021-03-15 热度:74
题目描述 传送门 题解 外层权值线段树,权值线段树的每一个位置都是一棵线段树,线段树用动态开点。 注意pushdown或者查询的时候还有可能要继续开点。 注意最顶端的点的权有可能是炸了int了,因为有可能加入了50000^2个点。 代码 #includealgorithm#includei[详细]
-
余弦相似性:找出相似文章
所属栏目:[大数据] 日期:2021-03-15 热度:174
上一次,我用TF-IDF算法自动提取关键词。 今天,我们再来研究另一个相关的问题。有些时候,除了找到关键词,我们还希望找到与原文章相似的其他文章。比如,"Google新闻"在主新闻下方,还提供多条相似的新闻。 为了找出相似的文章,需要用到"余弦相似性"(cos[详细]
-
bzoj 3110: [Zjoi2013]K大数查询(树套树,整体二分)
所属栏目:[大数据] 日期:2021-03-15 热度:83
3110: [Zjoi2013]K大数查询 Time Limit:? 20 Sec?? Memory Limit:? 512 MB Submit:? 4020?? Solved:? 1547 [ Submit][ Status][ Discuss] Description 有N个位置,M个操作。操作有两种,每次操作如果是1 a b c的形式表示在第a个位置到第b个位置,每个位置加[详细]
-
数据流和批量大数据分析技术 Apache Apex 提升为 Apache 顶级项
所属栏目:[大数据] 日期:2021-03-15 热度:95
数据流和批量大数据分析技术Apache Apex近日被Apache软件基金会提升为顶级项目。这项技术已被包括第一资本(Capital One)和通用电气(GE)在内的企业组织使用,可以帮助开发人员更快速地创建充分利用实时数据的应用程序。 Apache Spark日益受到关注,表明了[详细]
-
大数加法运算
所属栏目:[大数据] 日期:2021-03-15 热度:99
void add(char a[],char b[]){/*********************装换*********************/int num1[LEN];int num2[LEN];for (int i = 0; i LEN; i++){num1[i] = 0;num2[i] = 0;}int lena = strlen(a);int lenb = strlen(b);for (int i = lena - 1,j = 0; i = 0; i--)[详细]
-
推荐系统技术之文本相似性计算(三)
所属栏目:[大数据] 日期:2021-03-12 热度:188
今天这篇也比较长,但中间有部分是代码,7,8,9最后三节的信息我认为较为有用。 前面说了两篇了,推荐系统技术之文本相似性计算(一)和推荐系统技术 --- 文本相似性计算(二)分别介绍了 TFIDF 和向量空间的相关东西,然后介绍了 主题模型 ,这一篇我们就[详细]
-
趣图:论修电脑和当医生的相似性
所属栏目:[大数据] 日期:2021-03-12 热度:97
(点击 上方公众号 ,可快速关注) 既然喝水这么重要,今天来送个福利 ↓↓↓ 据路边社报道,水杯离你越近,喝水的频率将会越高。 借今天的趣图,来团一款方便携带的随手水杯。emoi 品牌,环保,外观设计简洁大方,手感也很不错。密封防漏做的好,可随身携带[详细]
-
[生产库实战] 如何合理的使用logmnr进行日志挖掘,并对生产库影
所属栏目:[大数据] 日期:2021-03-12 热度:172
Oracle Logmnr这个工具怎么用这里就不详细说,可以查看官方文档,网上的文档也一大堆,自己找吧。我这里就直接上干货了。 --创建Oracle目录 select * from dba_directories; create directory archivelog_dir as '/archivelog1/temp_archivelog/'; --grant r[详细]
-
基因数据处理44之cloud-scale-bwamem安装
所属栏目:[大数据] 日期:2021-03-12 热度:108
cloud-scale-bwamem是在spark等云环境上实现bwa-mem算法,加速对全基因组匹配的处理 1.下载: git clone https: //github.com/ytchen0323/cloud-scale-bwamem.git 2.编译: mvn clean package 3.编译成功: [INFO] ----------------------------------------[详细]
-
基因数据处理50之cs-bwamem、bwa、snap、bwa-mem与art比较
所属栏目:[大数据] 日期:2021-03-12 热度:157
直接看结果: (1)art仿真数据: hadoop @Master :~/cloud/adam/xubo/data/GRCH38Sub/cs-bwamem $ cat G38L100c50Nhs20 .aln ##ART_Illumina read_length 100 @CM art_illumina -ss HS20 -i GRCH38chr1L3556522 .fna -l 100 -c 50 -o G38L100c50Nhs20 -rs 1[详细]
-
基因数据处理45之cloud-scale-bwamem安装(compile.pl安装有问题
所属栏目:[大数据] 日期:2021-03-12 热度:200
脚本: hadoop @Master :~/xubo/tools/cloud-scale-bwamem $ cat compile.pl #! /usr/bin/perl system "mvn clean package" ;chdir "./src" ;system "mvn package -PotherOutputDir" ;chdir "./main/jni_fpga" ;system "mvn package -PotherOutputDir" ;chdi[详细]