专利标题 公开号/公告号 公开日期 摘要 专利状态
一种基于堆外内存的缓存索引的方法及系统 CN201710104402.X 2019-10-29 本发明公开了一种基于堆外内存的缓存索引的方法及系统。本发明方法包括以下步骤：当Lucene处于启动状态时，在堆外内存中为索引数据分配指定大小的内存并放入内存池后，对堆外缓存索引预热；当Lucene处于索引状态时，判断堆外内存索引容量大小，若所述索引容量达到需求值，则在堆外内存索引中打开输出流以写入索引数据；当Lucene处于搜索状态时，判断堆外内存索引中是否存在当前需要读取的索引数据，若存在，则在堆外内存索引中打开输入流以读取索引数据。本发明系统与方法相对应。本发明大大降低因磁盘IO带来的性能瓶颈，又能将数据持久化；同时不会因磁盘IO瓶颈导致降低合并速度进而导致数据实时写入延迟。 专利权的授权
一种针对长文本的相似性判定方法 CN201610594557.1 - 本发明涉及信息技术领域，特别是一种针对长文本的相似性判定方法，包括以下步骤，步骤S101：文本语句片段分割，根据采集到的待分析文本内容进行语句片段分割；步骤S102：长句组合，将文本分割后的长句片段进行随意组合；步骤S103：文本相似性判断，判断待分析文本的长句组合是否出现相同的集合；如果是，则待分析文本内容相似；如果否，则待分析文本内容不相似。采用上述方法后，本发明计算简单，容易实现，大大减少时间、空间计算复杂度；相对于其他相似判定方法，对于数据量大的采集系统是一种简洁而非常有效的文本相似判定方法。 专利申请的驳回
基于分布式数据库的网页URL去重方法 CN201610277708.0 - 本发明涉及分布式数据库技术领域，特别是一种基于分布式数据库的网页URL去重方法，包括以下步骤，步骤S101：获取待爬取URL，由分布式爬虫获取网页待爬取的网页URL；步骤S102：计算URL的hash值；步骤S103：查询数据库，分布式爬虫将各自采集库中的URL压缩后统一发送到分布式数据库做去重处理；步骤S104：反馈结果，将数据查询结果状态返回；步骤S105：数据采集，爬虫节点根据返回结果状态确定该网页是否可以爬取。采用上述方法后，本发明的基于分布式数据库的网页URL去重方法，很好地解决了海量URL去重过程中的内存问题、单点问题，同时保证了高查询效率与低碰撞率。 专利申请的驳回
一种微博热度指数的分析方法 CN201610277771.4 - 本发明涉及网络技术领域，特别是一种微博热度指数的分析方法，包括以下步骤，步骤S101：数据预处理，借用语料库过滤掉垃圾数据，筛选出与热度相关博文数据，然后进行预处理；步骤S102：微博热度指数计算，根据组内热度指数和修正热度指数综合计算得出微博相对热度指数。采用上述方法后，本发明主要根据热度博文在所有微博中被提及的比例，以及它被提及的次数，计算微博热度指数。这种方法同时考虑了相同组内微博热度差异以及提及次数的差异，综合两个侧面体现博文在微博上的热议程度。 专利申请的驳回
一种流式大数据去重的方法 CN201610277707.6 - 本发明涉及大数据处理技术领域，特别是一种流式大数据去重的方法，使用多个Bloom?Filter轮换的方式来进行不间断实时消息处理。采用上述方法后，本发明具有以下优点：1、在实时消息处理中，不需要停顿，保证消息处理的连续性和实时性；2、由于消息重复率一般符合正态分布，本方法总是保留最近一段时间的数据作为去重的依据，可以去除绝大部分重复数据达到满意的去重效果。 专利申请的驳回
一种基于状态的无锁分布式ACID一致性实现方法 CN201610277709.5 - 本发明涉及网络技术领域，特别是一种基于状态的无锁分布式ACID一致性实现方法，包括以下步骤，步骤S101：创建事务记录，当客户端请求写入数据时，写入进程会创建一个事务记录；步骤S102：暂存写入意图；步骤S103：读取写入意图；步骤S104：提交事务；步骤S105：清除写入意图，在事务完成后，系统会尽快清除暂存值。采用上述方法后，本发明的一种基于状态的无锁分布式ACID事务实现方法在具备分布式数据库的高可用、高扩展的情况下，提供数据的高一致性。 专利申请的驳回
一种社会情绪指数的分析方法 CN201610277706.1 - 本发明涉及网络技术领域，特别是一种社会情绪指数的分析方法，包括以下步骤，步骤S101：确定指标体系；步骤S102：计算情绪波动；步骤S103：确定指标体系中各情绪的权重；步骤S104：计算社会情绪指数。采用上述方法后，本发明通过建立科学的指标体系、设置合理的子情绪权重将社会情绪进行量化并且归一；从而对多维度的社会情绪降维而获得综合的社会情绪指数，以便从宏观的角度衡量社会情绪；有助于从整体把握社会情绪的走向和趋势变化。 专利申请的驳回
一种微博事件地域热度指数的分析方法 CN201610277710.8 - 本发明涉及网络技术领域，特别是一种微博事件地域热度指数的分析方法，包括以下步骤，步骤S101：微博数据预处理，抽取历史数据中含地域字段的微博数据，分别统计各级行政单位中的微博数量；步骤S102：计算微博事件地域热度统计基线；步骤S103：微博事件数据抽取，抽取指定时间范围内满足关键词约束的微博数据后，分别统计各级行政单位中的微博数量；步骤S104：计算微博事件的绝对地域热度；步骤S105：计算微博事件的相对地域热度；步骤S106：计算地域热度指数。采用上述方法后，本发明相比传统的基于频数的热度值，新的热度值消除了微博平台的在各个地域的普及程度、不同地域微博用户活跃程度等因素的影响，在表征微博事件的地域特性方面获得了更好的效果。 专利申请的驳回
一种基于安全域的用户认证方法 CN201610109613.8 - 本发明涉及用户认证技术领域，特别是一种基于安全域的用户认证方法，包括以下步骤，步骤S101：应用信息获取，获取应用当前的信息；步骤S102：安全域确定，确定应用的安全域；步骤S103：安全域下用户认证；步骤S104：认证结果返回；步骤S105：结束.采用上述方法后，本发明通过定义安全域的方式，完美的将需要统一认证的系统和需要用户隔离的系统整合到一起，极大的降低了原有的用户认证系统的重复建设，能够对用户认证统一化和规范化。 专利申请的驳回
一种针对流数据的二级排序方法 CN201610109615.7 - 本发明涉及数据排序技术领域，特比是一种针对流数据的二级排序方法，包括以下步骤，步骤S101：建立数据结构，数据结构为二级排序结构，包括由一个数组构成的第一级排序结构和由若干数组构成的第二级排序结构，其中第一级排序结构为第二级排序结构的索引；步骤S102：第一级排序结构查找，等待数据到达，到达数据在第一级排序结构中查找，定位到第二级排序结构中的某个数组；步骤S103：第二级排序结构排序，将到达数据插入查找到的第二级排序结构中的数组中，返回步骤S102。采用上述方法后，本发明能够在数据规模不可知的情况下，对大量持续到达的数据进行快速排序，能够大幅度缩小查找和排序的规模。 专利申请的驳回