开发原理 - 京东云开发者的个人空间 - OSCHINA - 中文开源技术交流社区

京东云开发者

京东云开发者（Developer of JD Technology）为AI、云计算、IoT等相关领域提供技术分享交流。平台将发布京东产品技术信息、行业技术、活动大赛等资讯。

认证官方账号

6.8W

经验值

6.9W

开源豆

关注私信

连击天

fork: star:

加载中

开篇我是孙林，2021-京东集团-博士管培生，清华大学软件学院博士，工作期间提交专利5篇，获得北京亦麒麟优秀人才称号。目前，我担任算法中台研发部数据开发工程师，围绕检索增强生成应用领域...

pipeline 大语言模型 prompt python 其他 qanything promptflow 数据存储服务开源框架

06/28 16:30

109

1、前言截至目前（2023年），Java8发布至今已有9年，2018年9月25日，Oracle发布了Java11，这是Java8之后的首个LTS版本。那么从JDK8到JDK11，到底带来了哪些特性呢？值得我们升级吗？而且升级...

java jsf 垃圾回收器 lite .net maven fastjson jdk 其他 bind spi support 垃圾收集器 jaxb

06/25 14:40

2.2K

引言随着业务系统和底层中间件服务的复杂度不断增加，传统手工运维方式面临着诸多挑战和限制。人工编写运维脚本显得非常低效，同时手动执行运维操作存在着巨大风险。在此情况下，推动运维自...

controller chubaofs watch sops http接口管理工具自动化工具 devops 云计算数据备份

02/21 11:40

81

spark为什么比mapreduce快？首先澄清几个误区： 1：两者都是基于内存计算的，任何计算框架都肯定是基于内存的，所以网上说的spark是基于内存计算所以快，显然是错误的 2;DAG计算模型减少的是...

mapreduce spark reduce hadoop 机器学习 shuffle reducetask sparktask sparkshuffle bypass maptask

02/20 16:07

43

背景营销系统中，客户投诉是业务发展的一大阻碍，一般会过滤掉黑名单高风险账号，并配合频控策略，来减少客诉，进而增加营销效率，减少营销成本，提升营销质量。营销系统一般是通过大数据分...

redis java 大数据其他哈希函数 collection concise github 面试网络爬虫数据处理

02/19 15:17

1.3K

引言最初考虑引用“ DevOps 已死，平台工程才是未来”作为标题，但这样的表达可能太过于绝对。最终，决定用了“扯淡的”这个词来描述 DevOps，但这并不是一种文明的表达方式。文章旨在重新...

devops 自动化工具 owner 构建工具 twitter atm 云原生 nps 其他 gartner

02/19 12:25

379

一、背景京东APP商品详情页展示的评价数据通过单独请求评价接口获取，与商详模块流量近乎1:1，需要共同应对秒杀等海量流量的冲击，存在突发流量风险。经过对用户操作行为和评价埋点信息分析...

数据监控 10px 500ms result tp99 50ms

02/04 09:53

750

前言我们在刚开始学习ClickHouse的MergeTree引擎时，就会发现建表语句的末尾总会有SETTINGS index_granularity = 8192这句话（其实不写也可以），表示索引粒度为8192。在每个data part中，索...

index clickhouse granularity adaptive bytes primary counter merge column 10mb settingsindex mrk2

02/01 13:56

219

streampark+flink一键整库或多表同步mysql到doris实战，此应用一旦推广起来，那么数据实时异构时，不仅可以减少对数据库的查询压力，还可以减少数据同步时的至少50%的成本，还可以减少30%的存...

mysql flink tools doris 虚拟机 linux docker apache java jdbc git maven streampark sink workspace

01/31 11:38

261

A、Problem Description 1. PageHelper方法使用了静态的ThreadLocal参数，在startPage()调用紧跟MyBatis查询方法后，才会自动清除ThreadLocal存储的对象。 2. 当一个线程先执行了A方法的Pag...

threadlocal startpage mybatis skip intercept pagehelper controller https blob mapper executor

01/30 11:25

322

一、前言软件在持续的开发和维护过程中，会不断添加新功能和修复旧的缺陷，这往往伴随着代码的快速增长和复杂性的提升。若代码库没有得到良好的管理和重构，就可能积累大量的技术债务，包括...

node code java 数据库应用高级编程语言程序员 join count start level0 level1 step5

01/29 11:25

370

背景部门内有一些亿级别核心业务表增速非常快，增量日均100W，但线上业务只依赖近一周的数据。随着数据量的迅速增长，慢SQL频发，数据库性能下降，系统稳定性受到严重影响。本篇文章，将分享...

mybatis sharding-jdbc json aspectj java 开源 binlog operate cannal 100w mybaits equals

01/26 11:43

447

你曾读spring源码 “不知所云”、“绞尽脑汁”、“不知所措”嘛🤣🤣🤣 那这篇文章可能会对你有所帮助，小编尝试用简单、易懂的例子来模拟spring经典代码👉Spring Bean生命周期及扩展...

bean spring java award application ioc容器 springbean 文件路径 service populate infocom

01/25 12:00

407

一、热更新解决了什么问题？在研发过程中，每个研发同学在联调、自测阶段中总会频繁的去执行编译、构建、打包的动作，遇到比较大的项目，执行一套流程下来，往往需要3-10分钟左右，极大的降...

ibatis bean spring class dcevm java delete update engine init builder watcher sqlmap dispatcher

01/25 11:35

120

前言：最近刚接触写Hive SQL，却发现许多查询的执行速度远不如预期。为了提升查询效率，我去阅读了《Hive编程指南》，希望通过理解其底层机制来找到优化的方式，并为未来能编写出高效的SQL...

hive mapreduce hdfs hadoop 关系型数据库 reduce 其他 null 资源管理器

01/25 11:34

211

一、背景介绍 CDP系统提供了强大的标签和群体的构建能力，面对海量数据的标签和群体，我们采用了Bitmap+ClickHouse的存储与计算方案。详细内容可以参考之前文章。有了群体之后，它们被广泛...

redis clickhouse bitmap java offset code 其他性能优化 50ms tp999 hash getbit cksql 1000w

01/24 10:31

425

一、背景介绍 CDP系统中目前存在大量由用户ID集合组成的标签和群体，截止当前已有几千+标签，群体2W+。大量的标签都是亿级别数据量以上，例如性别、职业、学历等均，甚至有群体中的ID数量达...

01/24 09:40

449

前言如何评定一个系统的质量？什么样的系统或者软件可以称之为高质量？可以从三个角度来看，一是架构设计，例如技术选型、分布式系统中的数据一致性考虑等，二是项目管理，无论是敏捷开发还...

01/22 11:49

289

1、五种连接策略选择连接策略的核心原则是尽量避免shuffle和sort的操作，因为这些操作性能开销很大，比较吃资源且耗时，所以首选的连接策略是不需要shuffle和sort的hash连接策略。 ◦Broad...

01/22 10:39

165

Nginx已经广泛应用于J-one和Jdos的环境部署上，本文对Nginx的常用的配置和基本功能进行讲解，适合Nginx入门学习。 1 核心配置找到Nginx安装目录下的conf目录下nginx.conf文件，Nginx的基本功...

nginx server 正则表达式代理服务器 html 其他 cookie rewrite type fair 文件路径

01/19 14:40

4.7K

没有更多内容

加载失败，请刷新页面

©OSCHINA(OSChina.NET)

工信部

开源软件推进联盟

指定官方社区

社区规范

深圳市奥思网络科技有限公司版权所有

粤ICP备12009483号

顶部