-
开源ETL工具kettle系列之增量更新设计
所属栏目：[大数据] 日期：2021-01-17 热度：92
前言 ETL中增量更新是一个比较依赖与工具和设计方法的过程，Kettle中主要提供Insert / Update 步骤，Delete 步骤和Database Lookup 步骤来支持增量更新，增量更新的设计方法也是根据应用场景来选取的，虽然本文讨论的是Kettle的实现方式，但也许对其他工具[详细]
-
开源ETL工具kettle系列之动态转换
所属栏目：[大数据] 日期：2021-01-17 热度：183
摘要 本文主要讨论使用Kettle来设计一些较为复杂和动态的转换可能使用到的一些技巧，这些技巧可能会让你在使用Kettle的时候更加容易的设计更强大的ETL任务。 动态参数的传递 Kettle 在处理运行时输入参数可以使用JavaScript 来实现，大部分工作只是按照一[详细]
-
互联网金融之量化投资深度文本挖掘——附源码文档
所属栏目：[大数据] 日期：2021-01-17 热度：118
?? 【重！磅！干！货[详细]
-
hdoj 5834 Magic boy Bi Luo with his excited tree 树形dp
所属栏目：[大数据] 日期：2021-01-17 热度：138
假设 1 为 根节点 dp[i][0] 代表从自己出发选择到儿子节点最后必须返回自己的最大价值 dp[i][1] 代表从自己出发选择到儿子节点最后可选择不回来的最大价值 并记录最后选择的离开节点 id[i] 树形dp先跑一遍出来 再第二遍 dfs 因为每个节点也可以流向父节点[详细]
-
HDOJ 5832 A water problem（高精度 大数取模）
所属栏目：[大数据] 日期：2021-01-17 热度：198
A water problem Time Limit: 5000/2500 MS (Java/Others)????Memory Limit: 65536/65536 K (Java/Others) Total Submission(s): 826????Accepted Submission(s): 428 Problem Description Two planets named Haha and Xixi in the universe and they were[详细]
-
Dynamic CRM BI Report
所属栏目：[大数据] 日期：2021-01-17 热度：114
BI综述： BI（Business Intelligence）即商务智能，它是一套完整的解决方案，用来将企业中现有的数据进行有效的整合，快速准确的提供报表并提出决策依据，帮助企业做出明智的业务经营决策。转自百科。 Dynamic CRM： Microsoft Dynamics CRM是全球唯一以销[详细]
-
Hdu 5834 Magic boy Bi Luo with his excited tree(从树上每个点
所属栏目：[大数据] 日期：2021-01-17 热度：100
传送门:Hdu 5834 Magic boy Bi Luo with his excited tree 题意:给你一棵树,有n个点,每个点都有一个利润,每条边都有一个花费,问从每个点出发,获得的最大的利润为多少(每个点上的利润只能取一次,每条边每走一次就要花费) 思路:我们任意选取一个根,每个点都[详细]
-
大数据处理需要用到的编程语言开发语言
所属栏目：[大数据] 日期：2021-01-17 热度：61
你有一个大数据项目，你知道问题领域（problem domain），也知道使用什么基础设施，甚至可能已决定使用哪种框架来处理所有这些数据，但是有一个决定迟迟未能做出：我该选择哪种语言？（或者可能更有针对性的问题是，我该迫使我的所有开发人员和数据科学家[详细]
-
BI中事实表和维度表的定义
所属栏目：[大数据] 日期：2021-01-17 热度：112
?? 一个典型的例子是，把逻辑业务比作一个立方体，产品维、时间维、地点维分别作为不同的坐标轴，而坐标轴的交点就是一个具体的事实。也就是说事实表是多个维度表的一个交点。而维度表是分析事实的一个窗口。? ?????? 首先介绍下数据库结构中的星型结构，[详细]
-
BI进行中，重新设计改造质检数据管理系统（图文）
所属栏目：[大数据] 日期：2021-01-17 热度：50
最近在做一个质检系统BI项目的过程中个，发现原有的系统设计有很大问题，数据特别混乱，主要问题有：指标设计结构不合理，将指标直接与产品关联，而且每个车间的产品都使用独立id加以区分，这样的后果就是有很多重复的产品和大量的指标，当在BI系统中对数[详细]
-
51nod1030 大数进制转换
所属栏目：[大数据] 日期：2021-01-17 热度：56
题目描述 给出一个36进制的大数A(0-9,A-Z)，将其转为10进制并输出。 每一位用’0-9”,’A-Z’来表示，A的长度 = 100000) a进制数k转b进制问题 第一位(最低位)=k%b 第二位=k/b%b 第三位=k/b^2%b …… (这个应该是比较显然的) 然而A的长度 = 100000，太大了[详细]
-
技术分享 | 从白盒审计角度挖掘逻辑漏洞
所属栏目：[大数据] 日期：2021-01-16 热度：149
0x01 背景 ? ? ? 通常来讲，扫描器难以发现逻辑类漏洞，所以企业和安全研究者都比较重视这方面的漏洞。 ? ? ? 最近国外漏洞披露平台hackerone上，一位白帽子发现Uber一修改任意账户密码的逻辑漏洞，获得了$10000美元的奖励。 ? ? ? 所以如何通过代码审计来[详细]
-
实战：图片信息挖掘与解析-1
所属栏目：[大数据] 日期：2021-01-16 热度：117
因著作权限制，请大家点击左下角“阅读原文”进行查阅。[详细]
-
实战：图片信息挖掘与解析-2
所属栏目：[大数据] 日期：2021-01-16 热度：194
因著作权限制，请大家点击左下角“阅读原文”进行查阅。[详细]
-
6个用于大数据处理分析的最好工具
所属栏目：[大数据] 日期：2021-01-16 热度：188
副标题#e# 大数据是一个含义广泛的术语，是指数据集，如此庞大而复杂的，他们需要专门设计的硬件和软件工具进行处理。该数据集通常是万亿或EB的大[详细]
-
hdu 1002 大数相加
所属栏目：[大数据] 日期：2021-01-16 热度：157
Problem Description I have a very simple problem for you. Given two integers A and B,your job is to calculate the Sum of A + B. ? Input The first line of the input contains an integer T(1=T=20) which means the number of test cases. Then[详细]
-
大数相加算法
所属栏目：[大数据] 日期：2021-01-16 热度：67
public static String add(String str1,String str2){int m=str1.length();int n=str2.length();if(m!=n){byte[] buff=new byte[mn?m-n:n-m];for(int k=0;kbuff.length;k++){buff[k]='0';}String buf=new String(buff);if(mn)str2=buf+str2;elsestr1=buf+s[详细]
-
白帽笔记：我的“一日一洞”高效漏洞挖掘之旅 20160811
所属栏目：[大数据] 日期：2021-01-16 热度：182
作者：Shubham Shah，澳大利亚安全研究人员，专注于程序开发、渗透测试和黑客技术。2016年初被安全媒体评为10大著名“漏洞赏金猎人”之一。本文原名《高效漏洞挖掘：120天120个漏洞》 2016年初，我就给自己设定了一个目标：在这一年中，平均每天挖掘出一个[详细]
-
一些数据的处理
所属栏目：[大数据] 日期：2021-01-16 热度：102
关于一些取点，数组下标等等的处理 数组下标 来源于STL的代码思考 2点技术： x ? !!X ?这个可以让 不是0 的数全返回 1 【8 ? 16 ?24 32 ?数组分段是这样的话】 X (X+7)/8-1 ?这个可以找到对应的下标值 X 二进制编码相关 ? ? ?128 64 32 16 ? 8 ?4 2 1? （~[详细]
-
从公安大数据业务切入，挖掘更多数据价值：明略数据完成 2 亿元
所属栏目：[大数据] 日期：2021-01-16 热度：83
大数据概念在国内炒的过热，落地大数据应用的产品并不多。原因一方面在于底层数据的非结构化存储，数据挖掘技术难度大；另一方面在于数据挖掘多样化模型建立的技术难度。从IT时代到DT时代，大家都在谈大数据概念而无法落地，而一旦系统应用到具体场景，完[详细]
-
大数加法（C语言）#includelt;stdio.hgt; #includelt;std
所属栏目：[大数据] 日期：2021-01-15 热度：61
关于大数加法的C语言版本 可完美通过 #includestdio.h#includestdlib.h#includestring.hchar A[10005];char B[10005];int fa,fb;void swap(char *a,int i,int j){char t = a[i]-'0';a[i] = a[j]-'0';a[j] = t;}void add(char *a,char *b){int la = strlen([详细]
-
【独家】消费金融大数据分析方法与金融大数据分析师养成
所属栏目：[大数据] 日期：2021-01-15 热度：150
副标题#e# 2016年10月25日晚，清华大数据“应用·创新”系列讲座——“消费金融大数据分析方法与金融大数据分析师养成”在清华大学FIT楼多功能厅成功举办，本期讲座邀请到瑞天欣实数据科技公司创立人之一杨子君博士。杨子君博士持有美国南加大（USC）电子与[详细]
-
大数运算之加法
所属栏目：[大数据] 日期：2021-01-14 热度：102
大数运算之加法： 思路： 1.一次性输入大数，利用for循环读入缓冲区数据，当读到回车符时结束，将char型转化为int型数据，char-'0'=int 2.倒置数组。因为是累加填入数组，运算时从低位开始，而实际运算是从右边开始的，方便进位。采用对折 /2交换元素，无[详细]
-
重阳节了，老年人市场还有多少价值空间有待挖掘？
所属栏目：[大数据] 日期：2021-01-14 热度：182
副标题#e# 按照人口预测的曲线图，从本世纪30年代中期开始一直到2100年，中国的老年人口都不会再低于3.5亿人。而2050年以后，中国80岁以上的高龄老人会保持在1亿人这个庞大的数字。 文 | 高小倩 “重阳节”又被称为“老人节”，是中国由来已久的习俗，但近[详细]
-
51Nod-1028-大数乘法 V2
所属栏目：[大数据] 日期：2021-01-14 热度：139
ACM模版 描述 题解 FFT模版题，不禁赞叹FFT的神奇，但是着实不好理解，算法导论上讲得还好，可以看看。 感觉可以用截位相乘的方法做，但是不知道会不会超时。 代码 #include iostream#include cmath#include cstringusing namespace std;const double PI =[详细]
