• 欢迎光临~

标签:partition

开发技术

一文读懂Apache Geode缓存中间件

一文读懂Apache Geode缓存中间件
我们一直使用关系型数据库作为我们几乎是唯一的数据存储方案。关系型数据库在对复杂结构的数据的组织上、持久性和一致性控制上有巨大的优势。但磁盘数据库无论如何进行查询优化,速度上终究无法和内存读写相提并论。而随着客户数据量越来越大、并发量越来越高、客户场景越来越复杂,我们对数据访问效率的要求也在提高。此时,引入缓存中间件成了我们一定要考虑的事情。 ……继续阅读 »

diligentman 3天前 0浏览 0个赞

开发技术

LeetCode86 分隔链表

LeetCode86 分隔链表
 idea: 烦死了,这个题一直因为创立的指针为空,或者接入结点方法不对,结果将两个小链表搞混乱了,不过具体思路ok。将小值结点成一组,大值结点成一组,最后在首尾相连,实现起来也比较简单 ……继续阅读 »

diligentman 4天前 0浏览 0个赞

开发技术

DSC共享存储集群的搭建

DSC共享存储集群的搭建
首先进行环境准备 硬件:两台相同配置机器,3G 内存,23G 本地磁盘,2 块网卡,另有一块共享磁盘 20G。 操作系统:Ubuntu 64 位。 DM 各种工具位于目录:/dm8/tool。 配置文件位于目录:/dm8/data。 真实的生产环境中,建议至少配置两块共享磁盘,分别用来存放联机日志文 件和数据文件。 ……继续阅读 »

diligentman 2周前 (09-22) 0浏览 0个赞

开发技术

DSC共享存储集群的搭建

DSC共享存储集群的搭建
首先进行环境准备 硬件:两台相同配置机器,3G 内存,23G 本地磁盘,2 块网卡,另有一块共享磁盘 20G。 操作系统:Ubuntu 64 位。 DM 各种工具位于目录:/dm8/tool。 配置文件位于目录:/dm8/data。 真实的生产环境中,建议至少配置两块共享磁盘,分别用来存放联机日志文 件和数据文件。 ……继续阅读 »

diligentman 2周前 (09-22) 0浏览 0个赞

开发技术

Java8 Stream使用汇总总结

Java8 Stream使用汇总总结
贴几个基础案例(来源于庞大的互联网案例):从员工集合中筛选出salary大于8000的员工,并放置到新的集合里。 统计员工的最高薪资、平均薪资、薪资之和。 将员工按薪资从高到低排序,同样薪资者年龄小者在前。 将员工按性别分类,将员工按性别和地区分类,将员工按薪资是否高于8000分为两部分。 用传统的迭代处理也不是很难,但代码就显得冗余了,跟Stream相比高……继续阅读 »

diligentman 2周前 (09-21) 0浏览 0个赞

开发技术

5 步教你将 MRS 数据导入 DWS

5 步教你将 MRS 数据导入 DWS
MapReduce 服务(MapReduce Service,简称 MRS)是一个基于开源 Hadoop 生态环境而运行的大数据集群,对外提供大容量数据的存储和分析能力,可解决用户的数据存储和处理需求。用户可以将海量业务数据,存储在 MRS 的分析集群,即使用 Hive/Spark 组件保存。Hive/Spark 的数据文件则保存在 HDFS 中。Gauss……继续阅读 »

diligentman 2周前 (09-20) 0浏览 0个赞

开发技术

国产CPLD(AGM1280)试用记录——做个SPI接口的任意波形DDS [原创www.cnblogs.com/helesheng]

国产CPLD(AGM1280)试用记录——做个SPI接口的任意波形DDS [原创www.cnblogs.com/helesheng]
我之前用过的CPLD有Altera公司的MAX和MAX-II系列,主要有两个优点:1、程序存储在片上Flash,上电即行,保密性高。2、CPLD器件规模小,成本和功耗低,时序不收敛情况也不容易出现。缺点也很明显:1、没有片上RAM,无法对数据进行高速暂存和处理;2、没有PLL,使用一个以上的高频时钟非常不方便;3、没有小封装产品,MAX-II最小的EPM24……继续阅读 »

diligentman 3周前 (09-17) 0浏览 0个赞

开发技术

记一次 Sedona(GeoSpark) 空间计算优化

记一次 Sedona(GeoSpark) 空间计算优化
项目需求需要空间计算能力,开始选型Sedona(GeoSpark)来完成, 需求需要每一条数据在满足某条件的情况下,去查找某张表进行空间匹配,找到离这个点(point)最近的一条道路(lineString) 第一个方案: 使用sedona来使用临近道路的判断 由于sedona本质还是使用spark的能力,所以遵循spark的开发规则,不能在rdd.map 里……继续阅读 »

diligentman 4周前 (09-06) 0浏览 0个赞