News

The Von Neumann Institute was honored to host a delegation from the World Economic Forum Young Global Leaders during their visit. Professor Jiaya Jia, Director of the Institute, delivered an engaging lecture highlighting the latest advancements in generative AI and computer vision. The session offered the delegation an in depth look at emerging research trends, real world applications, and the transformative potential of AI technologies. The visit fostered meaningful dialogue on innovation and global collaboration, reinforcing the Institute's commitment to shaping the future of intelligent computing.

On 21 November 2025, a delegation from the Hungarian Research Network (HUN-REN), led by Prof. Balázs Gulyás, President of HUN-REN, visited the Von Neumann Institute, named after John von Neumann, the Hungarian-born mathematician and computer scientist. During the visit, we showcased AI applications in biomedicine, smart manufacturing, and dual-arm robotic collaboration for assembly, and discussed opportunities for further academic collaboration.

2025年11月11日，寧波女企業家代表團參觀馮諾依曼研究院，深入了解人工智慧前沿技術。交流內容涵蓋多模型理解技術、大模型在工業生產中的應用，以及具身智能的最新發展，探討智能機器如何結合感知與行動，實現更高層次的自主操作與人機協作。

2025年11月5日，國家科技部副部長陳家昌先生率領代表團蒞臨香港科技大學馮諾依曼研究院參觀交流，深入了解研究院在人工智能領域的科研成果與創新應用。

在研究院院長賈佳亞教授的陪同下，陳副部長一行參觀了多模態人工智能實驗室及智能機器人展示區，並聽取了研究團隊對大型語言模型、AI芯片設計及跨學科應用的詳細介紹。賈教授特別介紹了研究院最新研發的多模態生成模型 DreamOmini2，展示其在語言、圖像與機器人控制等方面的突破性成果。

此次參訪不僅加深了雙方的了解，也為未來的合作奠定了堅實基礎。馮諾依曼研究院將持續致力於打造世界一流的人工智能研究平台，推動香港成為全球科技創新的重要節點。

中國科學院院士、國家自然科學基金委員會副主任陸建華教授率領基金委訪問團蒞臨香港科技大學馮諾依曼研究院，進行深入交流與考察。訪問團重點了解研究院在具身智能、人工智能賦能醫療健康及智能工業等領域的最新科研進展。

在參觀過程中，陸建華院士一行聽取了研究院教授團隊的技術展示與研究成果介紹，特別關注AI在感知、理解與決策層面的跨模態融合能力，以及其在臨床輔助診斷與工業自動化中的應用潛力。雙方並就科研合作、人才培養與技術轉化等議題展開深入討論，為未來跨地域科研協作奠定良好基礎。

在多模態指令生成任務中，DreamOmni2能基於圖片中的實體進行圖像生成，例如提取圖一的畫作掛在臥室牆上，將圖二盤子的材質套用在圖三的水杯，並將水杯放置在桌子上，以生成符合用家要求的新圖像。

在多模態指令編輯任務中，DreamOmni2的表現亦非常優秀，例如將圖中帽子的顏色變成與另一張圖毛衣相同的配色。

馮諾依曼研究院院長賈佳亞教授團隊近日發佈的DreamOmni2模型，在AI圖像生成與編輯領域取得重大突破。該模型特別針對抽象風格的理解與還原進行優化，能夠準確捕捉如「莫蘭迪色調」、「港風蓬鬆髮型」等難以量化的視覺特質，並在多圖參考輸入下實現高保真風格遷移。透過創新的三階段數據構建範式與索引編碼技術，DreamOmni2成功打破過往模型在抽象概念處理上的限制，為設計、創作等領域提供更具創意理解力的AI工具，展現香港在多模態AI技術上的深厚實力。

Link:

開源github地址：https://github.com/dvlab-research/DreamOmni2?tab=readme-ov-file

工程展示主頁：https://pbihao.github.io/projects/DreamOmni2/index.html

Huggingface space線上試用樣例：

• 編輯模型：https://huggingface.co/spaces/wcy1122/DreamOmni2-Edit

• 生成模型：https://huggingface.co/spaces/wcy1122/DreamOmni2-Gen

YouTube教學：https://www.youtube.com/watch?v=QWxYv6UF_vE

新聞稿：香港科大馮諾依曼研究院團隊發佈創新AI圖像生成和編輯器 突破創作瓶頸 表現優於現有模型 | The Hong Kong University of Science and Technology

交通銀行（香港）董事長肖霆先生率領訪問團蒞臨香港科技大學馮諾依曼研究院，進行交流與參觀。研究院教授團隊向來賓介紹了人工智能在具身智能、商業應用及智能工業等領域的最新研究成果與應用場景。

訪問期間，肖霆董事長一行深入了解AI如何透過多模態感知與語義理解，推動人機協作及工業流程優化等創新應用。雙方並就金融科技與智能製造的融合前景展開交流，探討AI技術在金融服務與實體經濟中的賦能潛力。

此次交流不僅促進了產學研合作，也展現了研究院在推動AI技術落地與跨界融合方面的前瞻性與實力。

2025年9月22日，佛山市政府代表團參觀科大馮諾依曼研究院，重點了解具身智能、多臂協作裝配技術，多模態工業檢測，以及人工智慧在眼科醫療診斷中的創新應用。研究院團隊展示了針對老年性黃斑部病變所研發的跨設備自適應多模態診斷智能平台，並分享AI技術如何提升診斷準確性與臨床效率。雙方就相關技術的產業化前景及產學研合作模式展開深入討論，期待未來在智能製造與智慧醫療領域建立更緊密的合作關係。

2025年9月18日，华为中央媒體技術院院長杜成及公司技術合作部部長付潔率團蒞臨科大馮諾依曼研究院，受到研究院賈佳亞教授親自接待。賈教授向來賓詳細介紹了其團隊自主開發的Mini-Gemini在多模態視覺語言模型領域的最新技術突破，並就人工智慧在產業應用的前沿進展與華為團隊進行了深入交流，雙方期待未來在AI技術創新與產學研合作方面展開更緊密的合作。

2025年9月6日，上海復旦大學校長與多位在港高校校友一行參觀科大馮諾依曼研究院，雙方就人工智能賦能醫療應用、大模型在工業生產及檢測等領域的創新實踐進行深入交流。來訪嘉賓高度肯定研究院在AI醫療、智能製造等方面的技術突破，並期待未來在產學研協同、推動行業數字化轉型等方面展開更緊密合作。