-
手把手：R语言文本挖掘和词云可视化实践
所属栏目：[大数据] 日期：2021-05-16 热度：116
副标题#e# 感谢eBDA工作室的投稿！ eBDA工作室是植根于运营商的一支数据分析团队，是由一群喜欢数据分析和创新的小伙伴组成的，成立两年以来，我们在底层数据存储HDFS/ORCFile，计算框架和资源管理MapReduce/Storm/Spark/Yarn，到数据分析工具Hive/Pig/R/Sp[详细]
-
![4542: [Hnoi2016]大数|莫队](/uploads/allimg/c210514/1620a5091Q5Z-153L.gif)
4542: [Hnoi2016]大数|莫队
所属栏目：[大数据] 日期：2021-05-16 热度：155
HN一天考两个莫队是什么鬼..或者说莫队不是正确的姿势..? 考虑已经知道了 l..r 的答案新添入 r+1 如何更新当前答案 需要先预处理出后缀 modp 的值 bi ，假设子序列 l..r 模 p 的值为 x 那么 x?10r?l+b[r]=b[l] 然后就可以直接莫队统计了 模数为2或5的时候[详细]
-
4542: [Hnoi2016]大数 莫队算法
所属栏目：[大数据] 日期：2021-05-16 热度：139
555我好弱啊 都说今年的HNOI是无脑数据结构赛，都很好想只是码代码的问题，然而我还是不会做这道题。 要退役了啊啊[详细]
-
基因数据处理25之avocado安装
所属栏目：[大数据] 日期：2021-05-16 热度：142
基因数据处理25之avocado安装 下载： git clone https://github.com/bigdatagenomics/avocado.git 安装 第一次失败，第二次成功 hadoop@Master:~/cloud/adam/xubo/code/avocado$ mvn install[INFO] Scanning for projects...[INFO] ----------------------[详细]
-
白话空间统计二十一：密度分析（一）
所属栏目：[大数据] 日期：2021-05-16 热度：175
白话空间统计二十一：密度分析（一） 密度分析这个概念其实很早就想写了，也有无数同学都问过我，虾神你能不能讲讲那些漂亮的热度图是怎么做的啊？比如下面这种： 如果说，这是互联网地图里面，最让人喜闻乐见的一种空间分析模式（或者是看热闹的同学就认[详细]
-
基因数据处理24之BWASW算法ref分块建立索引然后比对（ref切分为
所属栏目：[大数据] 日期：2021-05-16 热度：172
比默认的要块1倍左右 1[M::bwa_idx_load_from_disk] read 0 ALT contigs[bsw2_aln] read 25000 sequences/pairs (14470082 bp) ...[main] Version: 0.7.13-r1126[main] CMD: bwa bwasw -t 4 GRCH38chr1L3556522.fna SRR003161h100000.fastq[main] Real tim[详细]
-
基因数据处理23之BWASW算法ref分块建立索引然后比对（ref切分为
所属栏目：[大数据] 日期：2021-05-15 热度：162
结论： read为25000条对单条染色体进行比对需要110秒左右，对chr1-4比对需要160秒左右 运行结果： 1[M::bwa_idx_load_from_disk] read 0 ALT contigs[bsw2_aln] read 17040 sequences/pairs (10000385 bp) ...[bsw2_aln] read 7960 sequences/pairs (44696[详细]
-
产品策略研究期的数据分析与挖掘
所属栏目：[大数据] 日期：2021-05-15 热度：122
副标题#e# 万物生长，适者生存，事物发展代谢遵循一定趋势，产品亦然。 策略研究找趋势 在产品设计阶段，第一时期策略研究首先从宏观角度对外部环境和内部情况加以分析，重点关注市[详细]
-
基因数据处理21之BWASW算法ref分块建立索引然后比对（ref切分为
所属栏目：[大数据] 日期：2021-05-15 热度：100
副标题#e# 1.时间分析 对ref为单条染色体进行比对，第一次比对在3-5s不等，对chr1-4比对，在20s左右 连续比对多次后，对单染色体比对降到1s左右，chr1-4降到2s左右 不懂为什么比一次比对时间比较长，后面几次比对时间变短 运行代码： hadoop@Master:~/cloud[详细]
-
基因数据处理20之BWASW算法ref分块建立索引然后比对
所属栏目：[大数据] 日期：2021-05-15 热度：107
SRR003161h20.fastq span style="font-family: Arial,Helvetica,sans-serif; font-size: 12px; background-color: rgb(255,255,255);"三次测试：/span hadoop@Master:~/cloud/adam/xubo/data/GRCH38Sub$ bwa bwasw GRCH38chr1L3556522.fna SRR003161h20.fa[详细]
-
基因数据处理22之对GRCH38全基因建立BWA索引
所属栏目：[大数据] 日期：2021-05-15 热度：139
副标题#e# 环境： ubuntu 14.04 内存 6G bwa 0.7.12 结论： 建立索引大概4500秒左右 节点2运行： hadoop@Mcnode2:~/cloud/adam/xubo/data/test20160422$ cp ../test20160310/GCA_000001405.15_GRCh38/GCA_000001405.15_GRCh38_full_analysis_set.fna .hadoo[详细]
-
数据流和批量大数据分析技术 Apache Apex 提升为 Apache 顶级项
所属栏目：[大数据] 日期：2021-05-15 热度：111
数据流和批量大数据分析技术Apache Apex近日被Apache软件基金会提升为顶级项目。这项技术已被包括第一资本（Capital One）和通用电气（GE）在内的企业组织使用，可以帮助开发人员更快速地创建充分利用实时数据的应用程序。 Apache Spark日益受到关注，表明[详细]
-
大数加法运算
所属栏目：[大数据] 日期：2021-05-15 热度：50
void add(char a[],char b[]){/*********************装换*********************/int num1[LEN];int num2[LEN];for (int i = 0; i LEN; i++){num1[i] = 0;num2[i] = 0;}int lena = strlen(a);int lenb = strlen(b);for (int i = lena - 1,j = 0; i = 0; i-[详细]
-
图像相似性搜索的原理
所属栏目：[大数据] 日期：2021-05-15 热度：100
副标题#e# 本文转自： http://www.hackerfactor.com/blog/index.php?/archives/432-Looks-Like-It.html http://www.voidcn.com/article/p-nvcdxgfv-bnx.html http://blog.sina.com.cn/s/blog_b27f71160101gp9c.html http://www.voidcn.com/article/p-ojqegj[详细]
-
大数加，减，乘，取余一起
所属栏目：[大数据] 日期：2021-05-15 热度：62
#includeiostream#includestring#define LEN 100using namespace std;void add(char a[],char b[]){/*********************装换*********************/int num1[LEN];int num2[LEN];for (int i = 0; i LEN; i++){num1[i] = 0;num2[i] = 0;}int lena = strl[详细]
-
余弦相似性算法
所属栏目：[大数据] 日期：2021-05-15 热度：124
余弦相似性算法的具体介绍参考:http://www.ruanyifeng.com/blog/2013/03/cosine_similarity.html 下面是我根据上边的介绍进行的java语言的实现: import java.io.IOException;import java.io.StringReader;import java.util.Collections;import java.util.C[详细]
-
HNOI2016 大数（number）lt;莫队gt;
所属栏目：[大数据] 日期：2021-05-15 热度：173
题目 分析 一道典型的莫队。 先预处理出后缀，即f[i]表示i~(n-1) mod p 的值. 但p的值不小，显然不能直接存，加一个离散化。 观察题目，发现一串数s(l~r)整除p满足s(l~n-1)%p==s(r+1~n-1)%p 但p值为2或5不满足这个性质需要特判（不过数据中好像没有，于是[详细]
-
FZU- Problem 1147 Tiling，递推坑题，大数水过~~
所属栏目：[大数据] 日期：2021-05-15 热度：130
副标题#e# Problem 1147 Tiling Time Limit: 1000 mSec?? ??Memory Limit : 32768 KB http://acm.fzu.edu.cn/problem.php?pid=1147 ?Problem Description In how many ways can you tile a 2x n ?rectangle by 2x1 or 2x2 tiles? Here is a sample tiling o[详细]
-
NBUT1461 数字整除(大数处理，减法、除法)
所属栏目：[大数据] 日期：2021-05-15 热度：186
数字整除 Description 定理：把一个至少两位的正整数的个位数字去掉，再从余下的数中减去个位数的5倍。当且仅当差是17的倍数时，原数也是17的倍数 。 例如，34是17的倍数，因为3-20=-17是17的倍数；201不是17的倍数，因为20-5=15不是17的倍数。输入一个正[详细]
-
大数整除（大数ｍｏｄ）
所属栏目：[大数据] 日期：2021-05-15 热度：97
Description 定理：把一个至少两位的正整数的个位数字去掉，再从余下的数中减去个位数的5倍。当且仅当差是17的倍数时，原数也是17的倍数 。 例如，34是17的倍数，因为3-20=-17是17的倍数；201不是17的倍数，因为20-5=15不是17的倍数。输入一个正整数 n ，[详细]
-
求大数的阶乘和末尾0个数的计算
所属栏目：[大数据] 日期：2021-05-15 热度：93
求末尾0的个数： 至于末尾有多少个0，这个简单，0的个数为（其中的“/”是取整除法）： 例子：（1000的阶乘末尾0的个数）?? ? ? ? 1000 ? / ? 5 ? + ? 1000 ? / ? 25 ? + ? 1000 ? / ? 125 ? + ? 1000 ? / ? 625 ?? ? = ? 200 ? + ? 40 ? + ? 8 ? + ? 1 ??[详细]
-
POJ 3101 素数分解+大数
所属栏目：[大数据] 日期：2021-05-14 热度：52
题目 Astronomy Time Limit: 2000MS Memory Limit: 65536K Total Submissions: 5643 Accepted: 1252 Description There are n planets in the planetary system of star X. They orbit star X in circular orbits located in the same plane. Their tangen[详细]
-
CodeForces - 582A GCD Table （map大数操作amp;gcd）好题
所属栏目：[大数据] 日期：2021-05-14 热度：160
CodeForces - 582A GCD Table SubmitStatus Description The GCD table G of size n ?×? n for an array of positive integers a of length n is defined by formula Let us remind you that the greatest common divisor (GCD) of two positive integers[详细]
-
HNOI2016 大数(number)
所属栏目：[大数据] 日期：2021-05-14 热度：129
分析 首先，我们要知道取模的几个性质： 设 p=a+b ， q=a*b 1. p%x=(a%x+b%x)%x 2. q%x=(a%x*b%x)%x 知道这两个性质之后，我们首先输入进要模的数 x 和字符串 s ，处理出一个后缀数组 m ，和一个 po 数组， m[i] 表示字符串中从前往后数的第 i 位到结尾所[详细]
-
轻松搞定数据处理的五款Eclipse开源工具
所属栏目：[大数据] 日期：2021-05-14 热度：82
手动处理数据的时代已经成为历史。如今科学工具正快速普及，且足以在复杂且庞大的数据处理领域帮助用户满足日益增长的需求。 立足于Eclipse富客户端平台(简称RCP)框架，多种科学工具不断涌现，旨在帮助我们在开源环境下实现数据处理与可视化。相关各企业与[详细]
