-
BigData学习4_内部攻击实验数据集浅析
所属栏目：[大数据] 日期：2020-12-25 来源：DaWei
杨光+吴钰 摘要：获取用户行为数据集是内部威胁研究的前提和基础，该文深度调研了当今公开的内部威胁实验数据集，通过分析KDD99、SEA、WUIL以及CERT-IT四种主流的数据集，提出上述数据集的优缺点，并指出未来数据集构建的研究方向。 关键词：内部威胁；网络[详细]
-
情人节福利！那些“浪(zhuang)漫(bi)”的程序员情书
所属栏目：[大数据] 日期：2020-12-25 来源：DaWei
情人节到来，小编为大家准备了几篇只有程序员才看得懂的情书。小编祝天下有情人终成眷属！ 情书正文 ?do?{?a++;?b++;}?while(a??b); 我和你原本就是两个世界的人，一直都在不停的向前走。 直到有一天在某一刻相遇，我们才在彼此的世界里相拥， 然后追寻着各[详细]
-
大数据处理分析的六大最好工具
所属栏目：[大数据] 日期：2020-12-25 来源：DaWei
我们的数据来自各个方面，在面对庞大而复杂的大数据，选择一个合适的处理工具显得很有必要，工欲善其事，必须利其器，一个好的工具不仅可以使我们的工作事半功倍，也可以让我们在竞争日益激烈的云计算时代，挖掘大数据价值，及时调整战略方向。本文转载自中[详细]
-
![[干货]大规模数据处理的演变(2003-2017)](/uploads/allimg/c201225/160XC2F024Z-1c36.gif)
[干货]大规模数据处理的演变(2003-2017)
所属栏目：[大数据] 日期：2020-12-25 来源：DaWei
本PPT介绍了大规模数据处理的演变，从最早的Mapreduce、Hadoop介绍到最新的Beam；并最后得出结论： The future of streaming and batch is Apache Beam。 值得一看。 本PPT由Google的大神泰勒?阿克道（Tyler Akidau）分享，他是谷歌的一名高级软件工程师。是[详细]
-
算法提高 P1001 （大数乘法）
所属栏目：[大数据] 日期：2020-12-25 来源：DaWei
当两个比较大的整数相乘时，可能会出现数据溢出的情形。为避免溢出，可以采用字符串的方法来实现两个大数之间的乘法。具体来说，首先以字符串的形式输入两个整数，每个整数的长度不会超过8位，然后把它们相乘的结果存储在另一个字符串当中（长度不会超过16位[详细]
-
如何进行大数据分析及处理？
所属栏目：[大数据] 日期：2020-12-25 来源：DaWei
大数据的分析 从所周知，大数据已经不简简单单是数据大的事实了，而最重要的现实是对大数据进行分析，只有通过分析才能获取很多智能的，深入的，有价值的信息。那么越来越多的应用涉及到大数据，而这些大数据的属性，包括数量，速度，多样性等等都是呈现了大[详细]
-
开源大数据处理工具汇总（下）
所属栏目：[大数据] 日期：2020-12-25 来源：DaWei
第二部分主要收集整理的内容主要有日志收集系统、消息系统、分布式服务、集群管理、RPC、基础设施、搜索引擎、Iaas和监控管理等大数据开源工具。 日志收集系统 一、Facebook?Scribe 贡献者 ：Facebook 简介 ：Scribe是Facebook开源的日志收集系统，在Faceboo[详细]
-
开源大数据处理工具汇总（上）
所属栏目：[大数据] 日期：2020-12-25 来源：DaWei
查询引擎 一、Phoenix 贡献者：：Salesforce 简介：这是一个Java中间层，可以让开发者在Apache HBase上执行SQL查询。Phoenix完全使用Java编写，代码位于GitHub上，并且提供了一个客户端可嵌入的JDBC驱动。 Phoenix查询引擎会将SQL查询转换为一个或多个HBase[详细]
-
推荐大数据分析的八大工具
所属栏目：[大数据] 日期：2020-12-25 来源：DaWei
去年，IBM宣布以17亿美元收购数据分析公司Netezza；EMC继收购数据仓库软件厂商Greenplum后再次收购集群NAS厂商Isilon；Teradata收购了Aster Data 公司；随后，惠普收购实时分析平台Vertica等，这些收购事件指向的是同一个目标市[详细]
-
大数据分析到底需要多少种工具？
所属栏目：[大数据] 日期：2020-12-25 来源：DaWei
摘要 JMLR 杂志上最近有一篇论文，作者比较了 179 种不同的分类学习方法（分类学习算法）在 121 个数据集上的性能，发现 Random Forest （随机森林）和 SVM （支持向量机）分类准确率最高，在大多数情况下超过其他方法。本文针对“大数据分析到底需要多少种[详细]
-
数据处理的统计学习（scikit-learn教程）
所属栏目：[大数据] 日期：2020-12-25 来源：DaWei
数据挖掘入门与实战 ?公众号： datadw Scikit-learn 是一个紧密结合Python科学计算库(Numpy、Scipy、matplotlib)，集成经典机器学习算法的Python模块。 一、统计学习：scikit-learn中的设置与评估函数对象 （1）数据集 scikit-learn 从二维数组描述的数据中[详细]
-
大数版的斐波那契数列
所属栏目：[大数据] 日期：2020-12-25 来源：DaWei
光棍的yy http://acm.nyist.net/JudgeOnline/problem.php?pid=655 时间限制：1000?ms ?|? 内存限制：65535?KB 难度：2 输入 第一行输入一个n表示有n个测试数据 以下n行，每行输入m个1 (1 = n,m = 200) 输出 输出这种组合种数，占一行 样例输入 31111122222[详细]
-
基于大数据分析的安全管理平台技术研究及应用
所属栏目：[大数据] 日期：2020-12-24 来源：DaWei
转自：http://www.36dsj.com/archives/30027 基于大数据分析的安全管理平台技术研究及应用 基于大数据分析的安全管理平台技术研究及应用 Research and Application of Big Data Analysis Based Security Management Platform Last Modified By yepeng @ 2014[详细]
-
BI解决方案资料收集
所属栏目：[大数据] 日期：2020-12-24 来源：DaWei
ETL工具：Kettle（官网，Pentaho公司开源）、?Informatica、Datastage、OWB、微软DTS、Beeload、久其ETL，Oracle GoldenGate等等……开源的工具（16款开源工具，OSchina ETL工具列表），有eclipse的ETL插件: cloveretl 工作流引擎：jBPM，Activiti，H3 BPM,?[详细]
-
文本挖掘：手把手教你分析携程网评论数据
所属栏目：[大数据] 日期：2020-12-24 来源：DaWei
文本分析的应用越来越广泛，这不，我的工作也开始涉及了文本分析，今天就讲讲关于评论数据的那点事。 首先评论数据如何获取？ 一般通过 网络爬虫的方式 抓取各大网站的评论数据，本次分析数据就来源于携程网某酒店的评论，在同事的协助下，成功爬取该酒店的[详细]
-
R中文舆情包cnSentimentR
所属栏目：[大数据] 日期：2020-12-24 来源：DaWei
该包使用jiebaR分词,svm[e1071]进行分类; 包括三个函数:cnsr.prepare,cnsr.train,cnsr.predict 目前还在开发中,功能不完整. 请见: https://github.com/leeshuheng/cnSentimentR[详细]
-
工作坊 | 大数据智能分析和挖掘在互联网中的应用实战案例
所属栏目：[大数据] 日期：2020-12-24 来源：DaWei
大数据分析和挖掘在互联网公司中已经得到实质性的推进和应用，典型的应用场景包括搜索引擎的搜索结果和搜索广告排序、电商网站的商品推荐和虚假信息检测、电子邮件服务中垃圾邮件检测、互联网安全公司的病毒和木马检测、视频和新闻分享网站中视频和新闻推荐[详细]
-
亚马逊前首席科学家:大数据价值体现在AI、BI、CI、DI
所属栏目：[大数据] 日期：2020-12-24 来源：DaWei
「 技术领导者 」的订阅首选 本文转载自灯塔大数据 无人机送货、阿法狗下棋、小冰和你谈场恋爱……人工智能领域的成果，一直是企业在大数据运用能力上的主要外在体现，但在亚马逊原首席科学家安德雷斯·韦思岸(Andreas Weigend)看来，大数据能为企业做的，还[详细]
-
![bzoj 1670: [Usaco2006 Oct]Building the Moat护城河的挖掘 （凸](/uploads/allimg/c201224/160X13RPPZ-15U2.gif)
bzoj 1670: [Usaco2006 Oct]Building the Moat护城河的挖掘 （凸
所属栏目：[大数据] 日期：2020-12-24 来源：DaWei
1670: [Usaco2006 Oct]Building the Moat护城河的挖掘 Time Limit:? 3 Sec?? Memory Limit:? 64 MB Submit:? 524?? Solved:? 384 [ Submit][ Status][ Discuss] Description 为了防止口渴的食蚁兽进入他的农场，Farmer John决定在他的农场周围挖一条护城河。[详细]
-
《Speed-BI云平台-基于Excel数据源的技巧应用：区域销售收入分析
所属栏目：[大数据] 日期：2020-12-24 来源：DaWei
对于刚接触speed-BI的朋友们，一些看似很简单很琐碎的动作，当没有小窍门和智能化的操作就会使得工作量变大，时间耗起来真要命。本次课就将围绕speed-BI常用的功能进行串讲，还有特别的小技巧一并教授，成为speed-BI的技巧王！ ? 课程应用： 本次课程以销售[详细]
-
[bigdata-042]从头搭建 spring+mvc+boot+tomcat
所属栏目：[大数据] 日期：2020-12-24 来源：DaWei
1. 需求 1.1 在spring.io下载一个spring mvc的demo，能运行成功。 1.2 按照自己的理解，重写这个例子，并做适当修改，运行成功。 1.3 将这个例子打包成war包，放到tomcat运行成功。 2. 在spring.ip下载spring mvc并运行 2.1 spring的例子在 http://spring.io[详细]
-
[bigdata-043] tomcat的一些资料和文档试用（ 未整理）
所属栏目：[大数据] 日期：2020-12-24 来源：DaWei
1. tomcat的官网在这里 http://tomcat.apache.org/whichversion.html 2. tomcat的版本跟jdk相关。jdk1.8已经广泛使用，选择tomcat 9优先。 3. 下载tomcat 9 3.1 首先要阅读文档 https://mirrors.tuna.tsinghua.edu.cn/apache/tomcat/tomcat-9/v9.0.0.M17/REA[详细]
-
文思海辉与达梦完成产品兼容互认证
所属栏目：[大数据] 日期：2020-12-17 来源：DaWei
继文思海辉与国产IT厂商南大通用、数腾软件完成产品兼容互认证，近日，文思海辉又与武汉达梦数据库股份有限公司(以下简称：达梦公司)完成产品兼容性互认证。[详细]
-
净利润同比下滑超60%，少了小米后华米科技能否独立“行走”？
所属栏目：[大数据] 日期：2020-12-17 来源：DaWei
北京时间11月23日美股盘前，华米科技发布了2020财年第三季度的财务报告。在财报发布后，华米科技当天盘前股价累计下跌7.6%。在23日美股三大股指集体收涨情况下，[详细]
-
奏响5G“主旋律”，MWC将于明年2月重返上海
所属栏目：[大数据] 日期：2020-12-17 来源：DaWei
如果没有因为疫情而停办，2021年将是MWC世界移动通信大会落地上海的第十年。按计划，它将在明年的6月份举办。但由于疫情的影响，2020年的MWC上海展没能如期举行，或许也因为如此，明年的大会比原计划来得更早一些。 据主办方GSMA近日宣布，2021年MWC上海展[详细]
