-
[综合] scala 匹配数组、列表、元组
arrmatch{ caseArray(0)=>"0" caseArray(x,y)=>x+""+y caseArray(0,_*)=>"0..." case_=>"somethingelse" }
76
热度 -
[综合] netty 里的设计模式
Reactor模式的使用 Netty底层事件的收发机制是多线程的Reactor模式的应用。reactor设计模式,是一种基于事件驱动的设计模式。Reactor框架是ACE各个框架中最基础的一个框架,其他框架都或多或少地用到了Reactor框架。在事件驱动的应用中,将一个或多个客户的服务请求分离(de...
31
热度 -
[综合] hive导入导出数据的几种方式
一,Hive数据导入的几种方式 首先列出讲述下面几种导入方式的数据和hive表。 Hive表: 创建testA: [java]viewplain copy CREATETABLEtestA( idINT, namestring, areastring )PARTITIONED...
24
热度 -
[综合] java知识点-hashCode
1.【强制】关于hashCode和equals的处理,遵循如下规则: 1)只要重写equals,就必须重写hashCode。 2)因为Set存储的是不重复的对象,依据hashCode和equals进行判断,所 以Set存储的对象必须重写这两个方法。 3)如果自定义对象做为Map的键,那么必须重写ha...
8
热度 -
[综合] spark 开窗函数 topN
packagecom.spark.sparksql.save; importorg.apache.spark.SparkConf; importorg.apache.spark.api.java.JavaSparkContext; importorg.apache.spark.sql.DataF...
5
热度 -
[综合] spark udaf的使用
/** *按照模板实现UDAF */ classMyUDAFextendsUserDefinedAggregateFunction{ /** *该方法指定具体输入数据的类型 *@return */ overridedefinputSchema:StructType=StructType(Array...
41
热度 -
[综合] spark 基站时长统计
综合练习:通过基站信息计算家庭地址和工作地址 需求:根据手机信号来计算其所在的位置 手机一开机,就会和附近的基站建立连接,建立连接和断开连接都会被记录到服务器上的日志, 所以即使没手机有开启网络或者GPS,也可以定位手机所在的位置。基站都有一定的辐射范围, 并且根据信号强度有不同的信号级别...
98
热度 -
[综合] spark重点:join操作之昂贵,先reduceByKey
总之,join通常是你在使用Spark时最昂贵的操作,需要在join之前应尽可能的先缩小你的数据。 假设,你有一个RDD存着(熊猫id,分数),另外一个RDD存着(熊猫id,邮箱地址)。若你想给每只可爱的熊猫的邮箱发送她所得的最高的分数,你可以将RDD根据id进行join,然后计算最高的分数,如下:...
17
热度 -
49
热度 -
[综合] scala 拉链操作
valprices=List(5.0,20.0,9.95) valquantities=List(10,2,1) zip方法让你将他们组合成一个对偶的列表例如priceszipquanties 将得好一个List[(Double,Int)]=List{(5.0,10),(20.0,2),(9.95,...
47
热度 -
71
热度 -
[综合] control 返回静态html 及 restcontroller与controller的区别
我们来对比下restController和controller的区别: @RestControllerisastereotypeannotationthatcombines@ResponseBodyand@Controller.意思是:@RestController注解相当于@ResponseBod...
49
热度 -
[综合] 4种thread pool
Java可以通过Executors创建四中线程池,分别为: 1.newCachedThreadPool 创建一个可缓存线程池,如果线程池长度超过处理需要,可灵活回收空闲线程,若无可回收, 则新建线程; 2.newFixedThreadPool 创建一个定长线程池,可控制线程最大并发数,超出的线程会在...
88
热度 -
[综合] rabbit mq实际操作遇到的错误
配置了用户,虚拟路径后,还是一直报权限问题,另一个同事做客户端能够顺利的把数据发上去。所以,最终定位到spring-boot版本问题,由1.4.3改为1.5.6就没有问题了。大坑!
19
热度 -
[综合] mybatis 事务开启
二、事务的配置,就是在mybatis的基础上加上两个注解。1、需要的注解为@EnableTransactionManagement和@Transactional两个,它们来自于下边这个包: spring-tx.jar 该包其实在前边配置mybatis引入依赖时,已自动引入,就是下边这个: <...
32
热度 -
[综合] mybatis 如果返回值为空,设0
SELECTCASEWHENs1.online_statusISNOTNULLANDTRIM(s1.online_status)!=''THENs1.online_statusELSE0ENDonline_statusFROMserver_configcLEFTJOIN`cur_data_origi...
48
热度 -
[综合] eclipse转idea 工程
我引入的时候,先引入eclipse(不是maven),keepprojectandmodulefilesinmavenhomedirectory修改一下右键addasmavenproject进去之后需要mavenupdate.
58
热度 -
[综合] MATLAB内的傅里叶变换
图像转换:rgb2gray彩色图像转变为灰度图像 傅里叶变换:fft2(I,m,n)I为输入图像,m,n为进行padding时候补零的操作 反傅里叶变换:ifft2 将频谱转换到中心使得输出能够对称fftshift逆变换为ifftshift() 进行傅里叶变换的过程: (1)对图像进行fft,在...
19
热度 -
[综合] MATLAB绘制空间域高斯函数
<spanstyle="font-family:Arial,Helvetica,sans-serif;">x=[-100:1:99];</span> y=x; [X,Y]=meshgrid(x,y); fork=1:1:200form=1:1:200D(k,m)=(k-100...
13
热度 -
[综合] 约瑟夫环(1)-双向链表
问题描述:约瑟夫环是一个数学的应用问题:已知n个人(以编号1,2,3...n分别表示)围坐在一张圆桌周围。从编号为k的人开始报数,数到m的那个人出列;他的下一个人又从1开始报数,数到m的那个人又出列;依此规律重复下去,直到圆桌周围的人全部出列。(摘自百度百科) 问题分析:约瑟夫环是一个数学问题,但...
38
热度