-
一共81个，开源大数据处理工具汇总（下），包括日志收集系统/集
所属栏目：[大数据] 日期：2021-03-16 热度：142
作者：大数据女神-诺蓝（微信公号：dashujunvshen）。本文是36大数据专稿，转载必须标明来源36大数据。 接上一部分：一共81个，开源大数据处理工具汇总（上），第二部分主要收集整理的内容主要有日志收集系统、消息系统、分布式服务、集群管理、RPC、基础[详细]
-
DeepLearning: 数据处理5:将caffe训练时屏幕输出可视化（matlab
所属栏目：[大数据] 日期：2021-03-16 热度：196
说明：必须再前一篇博文的基础上使用本文中的代码。先将屏幕输出保存到文本中，然后在使用本文中的代码。。。同样，这里只是我的环境下调通的，根据个人，适当调整代码就行了。。。都是重复造轮子，没啥技术含量。。。 % 根据caffe输出文档，作出accuracy,[详细]
-
大数据处理的一些总结和应用（有关舆情监控）
所属栏目：[大数据] 日期：2021-03-16 热度：167
? ? 说到大数据处理可能大家都不会陌生，这是近年来非常火热的话题，各行各业都想借助大数据为自己助力，有了这个工具，就好像在飞机上看农田一般清晰，一目了然，也也就是业内人士常说的大数据提供了一个------上帝视角 大数据的概念： 1、指的是所涉及的[详细]
-
[BZOJ3110][Zjoi2013]K大数查询（主席数套线段树 ）
所属栏目：[大数据] 日期：2021-03-16 热度：196
题目描述 传送门 题解 外层权值线段树，权值线段树的每一个位置都是一棵线段树，线段树用动态开点。 注意pushdown或者查询的时候还有可能要继续开点。 注意最顶端的点的权有可能是炸了int了，因为有可能加入了50000^2个点。 代码 #includealgorithm#includ[详细]
-
余弦相似性：找出相似文章
所属栏目：[大数据] 日期：2021-03-16 热度：130
上一次，我用TF-IDF算法自动提取关键词。 今天，我们再来研究另一个相关的问题。有些时候，除了找到关键词，我们还希望找到与原文章相似的其他文章。比如，"Google新闻"在主新闻下方，还提供多条相似的新闻。 为了找出相似的文章，需要用到"余弦相似性"（c[详细]
-
bzoj 3110: [Zjoi2013]K大数查询（树套树，整体二分）
所属栏目：[大数据] 日期：2021-03-16 热度：89
副标题#e# 3110: [Zjoi2013]K大数查询 Time Limit:?20 Sec?? Memory Limit:?512 MB Submit:?4020?? Solved:?1547 [ Submit][ Status][ Discuss] Description 有N个位置，M个操作。操作有两种，每次操作如果是1 a b c的形式表示在第a个位置到第b个位置，每个[详细]
-
数据流和批量大数据分析技术 Apache Apex 提升为 Apache 顶级项
所属栏目：[大数据] 日期：2021-03-16 热度：121
数据流和批量大数据分析技术Apache Apex近日被Apache软件基金会提升为顶级项目。这项技术已被包括第一资本（Capital One）和通用电气（GE）在内的企业组织使用，可以帮助开发人员更快速地创建充分利用实时数据的应用程序。 Apache Spark日益受到关注，表明[详细]
-
大数加法运算
所属栏目：[大数据] 日期：2021-03-16 热度：196
void add(char a[],char b[]){/*********************装换*********************/int num1[LEN];int num2[LEN];for (int i = 0; i LEN; i++){num1[i] = 0;num2[i] = 0;}int lena = strlen(a);int lenb = strlen(b);for (int i = lena - 1,j = 0; i = 0; i-[详细]
-
非二元属性的关联规则挖掘和关联规则的评价
所属栏目：[大数据] 日期：2021-03-14 热度：138
===================================================================== ? 《机器学习实战》系列博客是博主阅读《机器学习实战》这本书的笔记也包含一些其他python实现的机器学习算法 ? ? github 源码同步：https://github.com/Thinkgamer/Machine-Learn[详细]
-
bzoj4542【HNOI2016】大数
所属栏目：[大数据] 日期：2021-03-14 热度：180
4542: [Hnoi2016]大数 Time Limit:?20 Sec?? Memory Limit:?128 MB Submit:?801?? Solved:?282 [ Submit][ Status][ Discuss] Description 小 B 有一个很大的数 S，长度达到了 N 位；这个数可以看成是一个串，它可能有前导 0，例如00009312345 。小B还有一[详细]
-
What is EFF in BI
所属栏目：[大数据] 日期：2021-03-14 热度：123
副标题#e# Flexfields Series: Extensible Flexfields (EFF) Explained Overview Introduced with Fusion Applications,Extensible Flexfields (EFF) extend the functionality ofDynamic Flexfields (DFF) by adding features that expand on their scale[详细]
-
BI解决方案分享：地产BI数据分析系统的建设
所属栏目：[大数据] 日期：2021-03-14 热度：76
? ? ? ?近几年中国地产行业发展迅猛，行业整合已成大势所趋，逐步由区域开发转变为集团化的跨地区综合开发商。然而，对于处在超常规速度发展的房地产企业来说，其面临的挑战也是超常规的。企业要在有限的资金和人力条件下，同一时间，对全国区域范围内的多[详细]
-
如何利用BI搭建电商数据分析平台
所属栏目：[大数据] 日期：2021-03-14 热度：51
? ? ? ? 某电商是某大型服装集团下的重要销售平台。2015 年，该集团品牌价值达数百亿元，产品质量、市场占有率、出口创汇、销售收入连年居全国绒纺行业第一，在中国有终端店3000多家,零售额80 亿。其羊绒制品年产销能力1000万件以上的规模，占有中国的40%[详细]
-
![[案例分享] 大数据分析的威力：HPE Vertica 帮助Guess 网上商店](/uploads/allimg/c210314/1615G45F4U20-11Y5.gif)
[案例分享] 大数据分析的威力：HPE Vertica 帮助Guess 网上商店
所属栏目：[大数据] 日期：2021-03-14 热度：134
副标题#e# 在今天这个颠覆式创新的时代，消费者行为正在发生着巨大的变迁，他们相互之间的联系越来越紧密，他们与自己心仪的品牌之间也有着与以往不同的互动行为，此时，零售行业必须适时作出改变，通过大数据分析，实现更加精准的营销。 通过将大量数据从[详细]
-
干货丨初学者必看的大数据分析实用贴士
所属栏目：[大数据] 日期：2021-03-14 热度：78
选自：DZone 编译：数据观-赵杏 来源：数据观（公众号：cbdioreview） 作者：Marleen Anderson，是提供IT支持服务和IT培训的澳大利亚公司Saxons中团队的成员，是一名伟大的对企业家精神有极大兴趣的技术痴迷者。 数据分析是目前市场中的一个主要力量，理解[详细]
-
新一代大数据处理引擎 Apache Flink
所属栏目：[大数据] 日期：2021-03-14 热度：153
大数据计算引擎的发展 这几年大数据的飞速发展，出现了很多热门的开源社区，其中著名的有 Hadoop、Storm，以及后来的 Spark，他们都有着各自专注的应用场景。Spark 掀开了内存计算的先河，也以内存为赌注，赢得了内存计算的飞速发展。Spark 的火热或多或少[详细]
-
《hadoop进阶》PeopleRank从社交关系中挖掘价值用户
所属栏目：[大数据] 日期：2021-03-11 热度：152
副标题#e# 转载请注明出处： 转载自? Thinkgamer的CSDN博客： blog.csdn.net/gamer_gyt 代码下载地址：点击查看 1：PageRank 与 PeopleRank 2：需求分析：挖掘CSDN博客的价值用户 3：算法模型：PeopleRank算法 4：架构设计：从数据准备到PR算法的MR化 5：程[详细]
-
XTU 1247 Robb#39;s Problem
所属栏目：[大数据] 日期：2021-03-11 热度：133
思路：大数处理，可以用二维数组，也可以用Java的BigInteger来处理。我用的是Java，因为方便、快捷。 AC代码如下： import java.util.*;import java.math.*;public class Main{ final static int MAXN = 1005; public static void main(String args[]){ Sc[详细]
-
基因数据处理38之dbSnpId到omimId的映射表
所属栏目：[大数据] 日期：2021-03-11 热度：133
1.下载： 首先收到【2】，来源是【2】 【1】中有描述： You can also get those SNPs with an OMIM ID number by downloading from the dbSNP FTP site: the OmimVarLocusIdSNP table contains the information you need for your organisim of interest ([详细]
-
基因数据处理39之mango安装记录
所属栏目：[大数据] 日期：2021-03-11 热度：173
更多代码请见：https://github.com/xubo245/AdamLearning 1解释 mango安装记录 mango主要是在adam上实现 可视化平台 A scalable genome browser 2.代码： git clone https://github.com/bigdatagenomics/mango.gitcd mangomvn clean package -DskipTests[详细]
-
基因数据处理41之mango使用失败
所属栏目：[大数据] 日期：2021-03-11 热度：144
hadoop@Master:~/xubo/tools/adam-2.10-0.19-git/bin$ mango-submit /xubo/mango/snap/datatest.fa.adam -read_files /xubo/mango/snap/datatest2.sort.bam.adam -var_files /xubo/mango/snap/datatest2.flt.vcf.adam -feat_file /xubo/mango/snap/datates[详细]
-
51NOD 1116 K进制下的大数(字符串取模 + 枚举)
所属栏目：[大数据] 日期：2021-03-11 热度：116
传送门 1116 K进制下的大数 基准时间限制：1 秒 空间限制：131072 KB 分值: 20 难度：3级算法题 收藏 关注 有一个字符串S，记录了一个大数，但不知这个大数是多少进制的，只知道这个数在K进制下是K - 1的倍数。现在由你来求出这个最小的进制K。 例如：给出[详细]
-
poj3181 Dollar Dayz (DP+大数)
所属栏目：[大数据] 日期：2021-03-11 热度：143
Dollar Dayz Crawling in process... Crawling failed Time Limit:1000MS???? Memory Limit:65536KB???? 64bit IO Format:%I64d %I64u Submit Status Practice POJ 3181 Appoint description: System Crawler (2016-05-27) Description Farmer John goes t[详细]
-
基因数据处理40之bedtools的安装和使用
所属栏目：[大数据] 日期：2021-03-11 热度：168
1.下载： git clone https://github.com/arq5x/bedtools.git 2.编译： make 3.配置： cp * /usr/local/bin/ 4.运行： bam变成bed hadoop@Master:~/xubo/data/snap$ bamToBed -i datatest.sorted.bam datatest.sorted.bed 查看： hadoop@Master:~/xubo/data[详细]
-
基因数据处理42之mango问题_seqdict.avro不存在解决
所属栏目：[大数据] 日期：2021-03-11 热度：73
副标题#e# 参考【1】中问题解决 问题分析：这是新版本的问题：adam0.19.1目前在maven中心仓库没有 解决办法： package org.gcdss.testimport java.io.Fileimport java.nio.file.Filesimport org.apache.parquet.hadoop.metadata.CompressionCodecNameimport[详细]
