大数据知识问答分享社区，提供包括Java主流框架、hadoop、spark、机器学习等大数据相关学习常见问题和技术经验分享。
Scala系列3：轻松搞定Scala变量与数据类型，运算符等基础语法
0. Scala中的数据类型 因为Scala底层是Jvm,所以Scala和Java一样，有7种数值类型Byte、Char、Short、Int、Long、Float和Double（scala里无包装类型）和一个Boolean类型（都是大写的类型），其他Java支持的数据类型如String类型，Scala一般都支持。但是跟Java...
Scala系列1：为什么大数据需要学习Scala?
0.什么是Scala? Scala是运行在 JVM 上的多范式编程语言， 同时支持面向对象和面向函数编程,早期， scala刚出现的时候， 并没有怎么引起重视， 随着Spark和Kafka这样基于scala的大数据框架的兴起， scala逐步进入大数据开发者的眼帘。 scala的主要优势是它的表...
大数据究竟是什么？一篇文章让你认识并读懂大数据
在写这篇文章之前，我发现身边很多IT人对于这些热门的新技术、新趋势往往趋之若鹜却又很难说的透彻，如果你问他大数据和你有什么关系？估计很少能说出一二 三来。究其原因，一是因为大家对新技术有着相同的原始渴求，至少知其然在聊天时不会显得很土鳖；...
怎么实现kudu表数据的导入导出
一、kudu数据导出到文件例：impala-shell -l -u xuyi --auth_creds_ok_in_clear -q "select sms_content from warehouse.restart where eventId='filtrate_inbox_sms_delete_sms' " -B --output_deli...
禁止“杀熟”是对大数据的创新管理尝试
10月1日起，文旅部制定的《在线旅游经营服务管理暂行规定》将正式施行，其中明确提出，滥用大数据分析等技术手段对旅游者消费记录、旅游偏好等设置不公平交易条件的行为将被禁止。也就是说，再过半个月，在线旅游平台等经营者不能再滥用大数据分析等技术手段...
数据库并发与并发异常
在使用数据库来支撑业务系统时，随着用户量的增大，经常会遇到同时读取相同数据的情况，在没有进行并发控制的情况下就会遇到各种各样的问题，对于可能出现的问题我们要有所了解。一、什么是并发并发指的是在同一时间，有多个程序都处在启动运行到运行完毕之间...
MySQL数据库的常用索引
在使用数据库的过程中，经常会进行数据的查询。随着数据量的增大，查询的时间会变的原来越长，这就需要合理的建立索引来提高查询效率。一、索引概述1. 数据库检索在讲述索引之前我们要先来简单介绍一下数据库中是如何进行数据查询的，这更有助于我们理解索引...
对Scala元组的迭代
对Scala元组的迭代在scala中，我们可以按如下方式获取元组上的迭代器valt=(1,2) valit=t.productIterator乃至it.foreach(x=>println(x.isInstanceOf[Int]))返回true，我们不能在不使用asInstanceOf [Int]的情况下对迭代器值进行简单的操作，因为it.foreach(x=...
Electron初探
使用 JavaScript，HTML 和 CSS 构建跨平台的桌面应用程序，下面是构建HelloWorld入门程序的3种方式利用官方提供的模板npminstall-gelectron gitclonehttps://github.com/electron/electron-quick-start cdelectron-quick-start npminstall npmstart通过ele...
MySQL千万级别大表的优化小建议
1.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。2.应尽量避免在 where 子句中对字段进行 null 值判断，否则将导致引擎放弃使用索引而进行全表扫描，如：select id from t where num is null可以在num上设置默认...
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1515056452',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','http://www.shouhuola.com/data/category/000/00/00/big_000000021.jpg', '《大数据》','http://www.shouhuola.com/cat-21','页面编码gb2312|utf-8默认gb2312'));){kind=link}