在参与得物大语言模型（Large Language Model, LLM）项目的深度实践中，笔者亲历了预训练数据的搜集与清洗全过程。这篇文章通过详细梳理现有预训练数据集以及其清洗框架，旨在提供一个全面而实用的参考，以便为 LLM 训练提供快速有效的数据集落地方案。

83 技术 lddgo 分享于 2024-01-03

品牌符号宣传海报作为品牌运营很重要的曝光手段，随着AI技术的不断发展已经逐渐替代传统设计方法，质量、效率方面的提升使它成为热门的超级符号延展的设计方式，今天我们就来了解下这套设计方法论，解析利用AI生图制作超级符号海报的方式。

44 技术 lddgo 分享于 2024-01-03

本文针对模拟点击的黑产实时防控问题，介绍过去2年蚂蚁集团在技术方面的工作，旨在介绍风险存在的原因、风险的特点、风险的技术分析以及风险的防控方法。

210 技术 lddgo 分享于 2024-01-03

ByConity 是由字节跳动开源的云原生数仓，采用了存储计算分离的架构，支持主流的 OLAP 引擎优化技术，实现了租户资源隔离、弹性扩缩容，并具有数据读写的强一致性等特性。「基于共享存储的选主方式」作为 ByConity 的重要功能，本文将详细介绍它基于存算分离架构的设计思考及实践。

39 技术 lddgo 分享于 2024-01-03

对于 SaaS 服务商来说，标准化产品和个性化需求是两个重要的方面。标准化产品指的是一种在各个客户之间共享的统一产品或服务。通过提供标准化产品，SaaS 服务商可以更有效地开发、部署和维护软件，降低成本并提升整体的可靠性和稳定性。 然而，不同的客户可能有不同的诉求，因此个性化需求也是需要考虑的因素。某些客户可能需要定制化的功能、设计或流程，以满足其独特的业务需求。为了满足这些个性化需求，SaaS 服务商需要进行额外的开发和支持，确保他们的产品能够适应不同客户的需求。

62 技术 lddgo 分享于 2024-01-02

本文作者通过爬楼梯还是等电梯的例子影射职场晋升的道理。

205 技术 lddgo 分享于 2024-01-02

本文预测了 2024 年 API 管理的六大趋势，包括多源 API、多种 API 标准和格式、API 技术的解耦、API 的自动化和智能化、API 的无服务器化和边缘化、以及 API 的 GitOps 化。

24 技术 lddgo 分享于 2024-01-02

RTC（Real time communication）实时通信，是实时音视频的一个简称，我们常说的RTC技术一般指的是WebRTC技术。 WebRTC是一个由Google发起的实时通讯解决方案，其中包含视频音频采集，编解码，数据传输，音视频展示等功能，我们可以通过技术快速地构建出一个音视频通讯应用，在不借助中间媒介的情况下，建立点对点（Peer-to-Peer）的连接，实现视频流和（或）音频流或者其他任意数据的传输。虽然其名为WebRTC，但不光支持Web，还可以通过编译C++代码达到全平台的互通。 在 B站的直播业务中，有多个互动类型的业务，比如：视频连线、PK、语聊房、语音连麦等。这类业务都有实时性的要求，底层都采用了WebRTC技术。

58 技术 lddgo 分享于 2024-01-02

随着微服务以及容器技术的发展，系统软件的构建方式也随之发生了改变，微服务调用关系错综复杂，传统的监控方案很难满足当下应用场景的需求，指标、链路追踪以及日志目前已经成为了云原生应用的“必备品”，当把它们集成在一起时，需要拥有一个更加成熟的现代化可观测体系来支撑，以便了解应用系统内发生的事情。通过可观测性体系的建立，我们可以更好的去洞察监控数据，从而能够更快速的做问题定界以及根因定位，降低 MTTR。 随着腾讯云的快速发展，越来越多的企业客户选择腾讯云作为其业务运行的基础设施。为了更好地满足客户需求，提升用户体验，腾讯云在应用性能监控（APM）方面持续发力，提供了全链路追踪功能。本文将分享腾讯云 APM 全链路追踪的落地实践，供您参考。

37 技术 lddgo 分享于 2024-01-02

GPTs 是 OpenAI 在2023年11月发布的新版本，具有可定制性和完成特定任务的强大功能。它提供了一种新的方式来使用ChatGPT，可以让用户根据自己的需求定制化，并与其他用户共享。

165 技术 lddgo 分享于 2024-01-02