快讯

掌握技术趋势,了解最新行业动向

周五

2021-12-03

  • 数据中台与湖仓一体能碰出怎样的火花?网易数帆实时数据湖Arctic的新探索

    作者 | 蔡芳芳 采访嘉宾 | 马进 网易数帆平台开发专家 数据中台也要从离线为主走向实时化,湖仓一体是第一步。 数据从离线到实时是当前一个很大的趋势,但要建设实时数据、应用实时数据还面临两个难题。首先是实时和离线的技术栈不统一,导致系统和研发重复投入,在这之上的数据模型、代码也不能统一;其次是缺少数据治理,实时数据通常没有纳入数据中台管理,没有建模规范、数据质量差。针对这两个问题,网易数帆近日推出了实时数据湖引擎 Arctic。据介绍,Arctic 具备实时数据更新和导入的能力,能够无缝...

  • 数据库事务的三个元问题

    究竟什么是数据库的事务?为什么数据库需要支持事务?为了实现数据库事务,各种数据库是如何设计的?这次只谈理解,欢迎大家来讨论。 1. 数据库事务是什么 事务,就是用来保证数据操作符合业务逻辑要求而实现的一系列功能。换句话说,如果数据库不支持事务,上层业务系统的程序员就需要自己写代码,以保证相关数据处理逻辑的正确性。举个例子,数据库最开始普及就是在金融业,银行的存取款场景就是一个最典型的 OLTP 数据库场景,而事务就是用来保证类似场景的业务逻辑正确性的。 (图片来自网络,侵删) 原子性:...

  • DeepMind提出强化学习新方法,可实现人机合作

    本文来自 BDTechTalks 网站的“AI研究论文评论”专栏。该专栏提供人工智能最新发现的系列解读文章。 尽管人工智能研究人员正力图建立能在围棋、星际争霸到 Dota 等复杂游戏中击败人类专家的强化学习系统,但如何创建出能与人类开展合作而非竞争的强化学习系统是人工智能正面临的更大挑战。 在一篇由 DeepMind 的人工智能研究人员最新预发布的论文中,提出了一种称为 FCP(Fictitious Co-Play,虚拟合作)的新方法。该方法实现智能体与不同技能水平人类间的合作,无需人工生...

周四

2021-12-02

  • 互联网公司裁员,中年失业找不到工作,大龄程序员的出路在哪里

    对于最近10年互联网一定是一个最好的赛道和职业发展路径,年薪百万也是常事。但是最近一系列的事件,类似国家的互联网反垄断,共同富裕,45岁的大龄Java程序员求助总理找不到工作,类似阿里,拼多多等中概互联网股票都屡创新低。最近又爆出了类似爱奇艺,携程,去哪儿等很多互联网企业也开始裁员和人员优化。 这不得不让我们思考一个问题。 互联网行业和就职是否还是一个好的赛道? 在去年我给一个同学的小孩高考填报志愿咨询的时候,小孩就问到了两个问题。第一个是IT行业是否都是加班严重,第二个是35岁后就业困难是...

  • JavaScript 浏览器统治地位不保?Python 有望取代

    据 The Register 报道,Mypy 项目核心团队的成员 Ethan Smith 创建了一个项目,项目将使 CPython 通过 WebAssembly 或 WASM 在 Web 浏览器中运行。该项目是在 Python 核心开发人员 Christian Heimes 的帮助下创建的,它可以使 Python 在某些 Web 应用程序中取代 JavaScript。 “Christian Heimes 和我正在开展的新项目目标是使网络成为 CPython 的支持平台,就像 Windows...

  • Meta开源全新移动端AI生成神器,造个AI应用5分钟,安卓iOS都支持

    近日,一年一度的PyTorch开发者大会召开。 在会上,Meta(原名 Facebook)发布了PyTorch Live,这是一套可以为移动端用户提供人工智能体验的工具。 PyTorch Live支持一种编程语言JavaScript,可以为Android和iOS两个移动端操作系统开发应用程序,还能为更广泛的PyTorch社区提供定制机器学习模型的服务。 目前,PyTorch Live已经开源,版本号v0.1.1。 https://github.com/pytorch/live PyT...

  • 独家专访腾讯云CTO王慧星:云技术变革上下二十年

    采访嘉宾?|?王慧星?腾讯云高级副总裁? CTO? 主持人 |?霍太稳?极客邦科技创始人? CEO?? 编辑 | 赵钰莹?刘燕 发展十余年,腾讯云技术演进的底层变迁逻辑是什么?低代码会不会是云计算下一个风口?未来十年,开发者面对的技术世界是什么样子? 本期 C 位面对面,我们有幸邀请到了腾讯云高级副总裁、腾讯云 CTO 王慧星。他加入腾讯十七年,从腾讯 QQ、QQ 空间等社交平台后台海量技术架构的重要设计者到今天的腾讯云 CTO,他在腾讯这些年经历了太多次技术变迁。如今面对上述业内焦点问题...

  • Nature最新封面:两大数学难题被AI突破!DeepMind YYDS

    现在,AI不仅能参与数学研究,甚至还快人一步,开始帮助人类提出数学猜想了。 就在今天,这只由DeepMind与顶级数学家合作研发的AI,登上了最新一期Nature封面。 有多顶级呢?这些数学家全部都来自牛津大学、悉尼大学,其中还不乏英国皇家学会史上最年轻的院士。 就是这位,曾在两年内斩获谢瓦莱奖、克雷研究奖等4项数学大奖的Geordie Williamson: 对于这项研究,DeepMind官方自称其“首次证明了人工智能可以走在纯数学研究的前沿”。 为什么这次的研究被Nature评价为...

  • ProxySQL + MySQL MGR 自拆书架的Sysbench 只读压测报告

    在大量并行读请求、读多写少的业务场景下,本文利用 Sysbench 性能测试工具,研究基于【负载均衡+ProxySQL Cluster MGR 的读写分离架构】能够有效地利用横向扩展 MySQL 实例的读物能力,并最终提高应用系统 QPS。 前言 在大量并行读请求、读多写少的业务场景下,本文利用 Sysbench 性能测试工具,研究基于【负载均衡+ProxySQL Cluster MGR 的读写分离架构】能够有效地利用横向扩展 MySQL 实例的读物能力,并最终提高应用系统 QPS。 My...

  • 请不起日薪2万+的网络安全人才,就做不好数字化转型吗?

    中国计算机界一年一度的顶级盛会 —— CNCC2021( 中国计算机大会) 将于 12 月 16-18 日在深圳拉开帷幕。InfoQ 极客传媒已正式成为 CNCC2021 的战略合作媒体。作为合作的一部分,《InfoQ 大咖说》与 CCF 联合推出了高端访谈栏目《技术风云 | 对话 CNCC》。 《技术风云 | 对话 CNCC》高端访谈栏目将以直播对话的形式,从纵览计算机发展的视角出发,特邀来自 CNCC2021 的顶尖专家学者、科技企业的技术领袖,围绕 AI、数字化转型、计算 + 、...

  • DeepMind提出引导式元学习算法,让元学习器具备自学能力

    DeepMind 的一个研究小组近期提出了一种引导式(Bootstrap)的元学习算法,用于解决元优化以及短视的元目标问题,并让学习器具备自学能力。 大部分人类学会学习的过程都是应用过往经验,再学习新任务。然而,将这种能力赋予人工智能时却仍是颇具挑战。自学意味着机器学习的学习器需要学会更新规则,而这件事一般都是由人类根据任务手动调整的。 元学习的目标是为研究如何让学习器学会学习,而自学也是提升人工代理效率的一个很重要的研究领域。自学的方法之一,便是让学习器通过将新的规则应用于已完成的步骤,...

  • Google Cloud和高通合作开发Vertex AI NAS 实现AI模型的自动创建

    在本周二举行的高通骁龙技术年度峰会上,Google Cloud 和高通合作开发 Vertex AI Neural Architecture Search(NAS)。Google 将它描述为用于生成、评估和训练应用程序模型架构的搜索技术。 双方合作的重点是实现人工智能模型的自动创建,并减少人工工作量。据高通公司称,一旦与高通公司的人工智能(AI)引擎相结合,NAS 将被用来为骁龙移动、ACPC、XR、骁龙 Ride 汽车平台和物联网计划“加速神经网络开发和差异化”。 Goo...

  • 使用哪些工具,可以提升 Python 项目质量

    前记 在编写项目时,都会对代码质量有一定的追求, 比如代码艺术、设计模式、?重构设计等等。但是一个良好 Python 项目除了程序员本身的代码质量能力之外, 还有系统设计和代码质量工具等等。不过由于每个系统的设计都会有一些不同, 系统设计需要程序员一定的经验, 需要跟着项目去一起成长。 代码质量工具可以都抽离出来,应用到每个项目中, 本文则是我对这些代码质量工具的简要使用总结。 0.提交代码规范 每个团队或个人, 都必须要有一套自己的分支管理和提交代码规范, 对于分支管理, 一般会选用?gi...

周三

2021-12-01

  • 一个 Babelfish ,看懂云数据库的发展方向

    作为基础软件皇冠上的明珠,数据库技术一直以来都是开发者关注的焦点。这关注度是如此之高,几乎自然打通了学界和产业界的隔阂,以至于关于数据库技术的每一篇重要论文面世,都可能导致一批价值数十亿美金的公司出现。 而在最近几年,纵观整个数据库产业,云数据库逐渐成为焦点中的焦点。据 Gartner.Inc 称,到 2022 年,所有数据库中有 75% 将部署或迁移到云平台,只有 5% 曾考虑返回到本地。而 IDC 认为,到 2025 年,全球超过 50% 的数据库将部署在公有云上;在中国市场,这个数据...

  • 如何构建智能湖仓架构?亚马逊工程师的代码实践

    数据仓库的数据体系严格、治理容易,业务规模越大,ROI 越高;数据湖的数据种类丰富,治理困难,业务规模越大,ROI 越低,但胜在灵活。 现在,鱼和熊掌我都想要,应该怎么办?湖仓一体架构就在这种情况下,快速在产业内普及。 要构建湖仓一体架构并不容易,需要解决非常多的数据问题。比如,计算层、存储层、异构集群层都要打通,对元数据要进行统一的管理和治理。对于很多业内技术团队而言,已经是个比较大的挑战。 可即便如此,在亚马逊云科技技术专家潘超看来,也未必最能贴合企业级大数据处理的最新理念。在 11 ...

  • 延续三代的苗乡三七,运转百年的鞍钢集团,该如何实现数智化转型?

    在彩云之南,有个文山州,那里因为地形、气候等独一无二的优势,成为我国三七的原产地和主产区,三七产业也成为其经济发展的引擎。三七就像老天爷赏的一盅“佛跳墙”,罩在了云南省文山州上头。文山总面积不到 3000 平方千米,常住人口不到七十万人,却满足了全球市场 95% 的三七供给,着实令人艳羡。 可就是这样得天独厚的条件,在飞速变化的数字时代,也遇见了问题。文山三七曾全部依赖当地农民“作坊式”零散种植,二十几道工序完全依赖个人经验。就地搭帐篷晒干、山头赶大集贩卖,没采摘的三七可能遭遇虫害,采摘好...

  • 贝壳Flutter调试工具-FDB

    开源地址 GitHub 地址:https://github.com/LianjiaTech/flutter_fdb_package 1.前言 目前 Flutter 在贝壳的使用量越来越高,业务中 Flutter 页面达到 600+,甚至在某些业务线 Flutter 页面占比达到 70%。这种状况下我们迫切需要一个功能完善、体验流畅的 Flutter 调试工具。调研市面上 Flutter 调试工具之后,结合我们公司的业务特点,开发了自己的 Flutter 调试工具——FDB。 本文将简要介...

  • 基于人工智能揭示未知细胞成分:人体细胞包含70多种成分

    据国外媒体报道,基于人工智能的最新技术揭示了之前未知细胞成分,可能为人类发展和疾病治疗提供新的线索。多数人类疾病都可追溯至细胞某些部分出现问题,例如:肿瘤能够生长是因为基因未准确地转化为特定蛋白质,或者新陈代谢疾病产生是因为线粒体无法正常激活,但要理解细胞中哪些部分可能出现错误,科学家首先需要一个完整的细胞成分列表。 通过结合显微镜、生物化学和人工智能技术,美国加州大学圣地亚哥医学院研究人员已获得重大突破,他们认为这对于理解人类细胞具有重要意义。该项技术被称为“多尺度集成细胞(MuSIC)”...

  • 解决Transformer固有缺陷:复旦大学等提出线性复杂度SOFT

    视觉 Transformer (ViT) 借助 patch-wise 图像标记化和自注意力机制已经在各种视觉识别任务上实现了 SOTA。然而,自注意力模块的使用使得 Transformer 类模型的空间和时间复杂度都是 O(n^2)。自然语言处理领域的研究者们已经进行了各种让 self-attention 计算逼近线性复杂度的尝试。 近日,来自复旦大学、萨里大学和华为诺亚方舟实验室的研究者在一项研究中经过深入分析表明,这些尝试要么在理论上存在缺陷,要么在实验中对视觉识别无效,并进一步发现这些...

  • 谷歌时间晶体登上Nature,诺奖得主重大猜想成为现实

    没有能量的供给,没有能量的消耗,它的循环运动会永远持续下去。 时间晶体就像是一个「永动机」在不同状态之间永久循环往复而不消耗任何能量。来自斯坦福大学、谷歌、马克思 · 普朗克复杂系统物理研究所和牛津大学的研究团队声称已经在量子计算机中构建了这种全新的物相。这可能是近几十年来最为重大的一次物理发现。 11 月 30 日,顶尖学术期刊《自然》杂志提前发表时间晶体重要研究《Time-Crystalline Eigenstate Order on a Quantum Processor》,展示了谷歌 Q...

扫码关注云+社区

领取腾讯云代金券


http://www.vxiaotou.com