社区所有版块导航
Python
python开源   Django   Python   DjangoApp   pycharm  
DATA
docker   Elasticsearch  
aigc
aigc   chatgpt  
WEB开发
linux   MongoDB   Redis   DATABASE   NGINX   其他Web框架   web工具   zookeeper   tornado   NoSql   Bootstrap   js   peewee   Git   bottle   IE   MQ   Jquery  
机器学习
机器学习算法  
Python88.com
反馈   公告   社区推广  
产品
短视频  
印度
印度  
Py学习  »  aigc

陕理工深圳校友齐聚AIGC,探讨自动驾驶与传感器的未来,点燃创新之火!

AI产品汇 • 1 年前 • 229 次点击  

    2023年12月10日,陕西理工大学深圳校友会策划组织的《陕西理工大学AI及传感器沙龙》活动在深圳市南山区南山智园A3栋举行。本次活动由校友会执行会长尹强做主旨讲话,副会长吴宏瑞主持会议,本次沙龙活动汇聚了校友中的技术、人才、资金、管理资源等等。

    近半年来,AI及AIGC技术得到了快速的发展,例如:ChatGPT、GPT-4、StableDiffusion等;而自动驾驶则是AI算法落地的绝佳场景,它里面应用到很多前沿的AI算法,例如:目标检测、语义分割、车道线检测、车位检测、路径规划与控制等;对于任何的AI算法而言,都需要接收来自不同传感器的数据,因而了解一些传感器的知识必不可少!当下的“传感器、AI、AIGC、自动驾驶”都是一些炙手可热的技术,为了聚拢校友资源促进校友发展,特邀请了在上述领域中颇有建树的三位校友进行专题技术分享,并邀请相关行业校友欢聚一堂,共同探讨行业技术,应用及投融资事宜。

01

热门AI与AIGC算法及应用分享

    首先由12级通信工程专业的校友-王智卓,分享了一些”热门AIGC算法与应用“。该校友是大厂资深算法工程师,CDSN博主,阅读量超100万+,自己维护并运营“AI产品汇”公众号,拥有10+个授权专利。获陕西理工大学学士学位,获西安电子科技大学硕士学位。拥有5年AI从业经验,先后从事过安防、自动驾驶、扫地机器人等多个行业。落地过智能抓拍摄像头、人脸闸机、智能巴士OD、自动驾驶感知算法、扫地机器人感知算法等。他深入浅出的给大家普及了一些AIGC相关知识,让大家都对这个高高在上的名词有了更清晰的认识。

    很多人可能觉得AI与AIGC距离我们很远,但是我要告诉你它们就在我们身边!上图展示了AI的整体技术栈,AI的最底层是一些比较基础的算法,包括:CNN、FC、LSTM、RNN、GAN、Transformer等。想要在实际产品中应用这些基础算法,首先需要利用一个叫做训练框架的工具来训练出一个高精度的模型出来,当下比较流行的训练框架包括:Pytorch、Tensorflow、PaddlePaddle等。然而训练框架只能帮你解决模型训练的问题,并不能帮你解决模型部署问题,要解决模型部署问题就需要使用到模型推理框架,它的输入是一些测试图片和训练好的模型,输出是这些测试图片在特定设备上面的执行结果,比较主流的模型推理框架包括:MNN、NCNN、OpenVINO等。在真实的工业场景中,我们可能需要再多种不同的硬件上面部署同一个算法,这个时候你或许可以考虑一下AI编译器,它包括一个前端和后端,前端接收来自不同训练框架获得的模型,并针对这些模型执行一些图优化操作;后端用来适配不同类型的硬件,即它是不同模型与不同硬件之间的一座桥梁!

    正是因为有了上面的这些基建,才有了当下五花八门的AI与AIGC产品,比如上图中的人脸闸机、自动驾驶汽车、扫地机器人、语音转换笔、AI魔镜、VR眼睛等。这里面的很多AI产品已经开始深入的融入到我们的日常生成中。AIGC,即AI生成的内容,它其实也包含在AI的范畴内。上图中的几个热门的AIGC产品或应用,我相信大家或多或少的都应用过一些,例如:用于聊天的ChatGPT、用户文本生成图像的ControlNet、Stable Diffusion等。总之,AI与AIGC技术已经深入的融入到我们的日常生活中,它将会给我们的生活带来哪些实质性变化,敬请期待!

   

    2023年,可谓是AIGC的元年,在这一年中,作技术的我深深的感受到AIGC技术的日新月异!每天都会有各种各样的AIGC算法扑面而来,为了方便大家去系统的了解,上图对一些的热门的AIGC应用进行了汇总。
  • 文本生成图片--该任务的输入是一段文本Prompt描述,输出是一张与文本对应的图片,代表性的应用包括:Stable Diffusion、Midjourney等。文本Prompt对生成的图片质量有着重大的影响!
  • 文本生成视频--该任务的输入是一段文本Prompt描述,输出是一段由模型生成的视频,代表性的应用包括:Text2Video-Zero、Higen等。生成视频的质量和一致性是两个至关重要的评估指标。
  • 文本生成3D--该任务的输入是一段文本Prompt描述,输出是一个3D模型,代表性的算法包括:Dreamfusion3D、Fantasia3D等。
  • 图片生成视频--该任务的输入是一张图片,输出是一段基于该图片的连续视频。
  • 图片生成3D--该任务的输入是一张图片,输出是一个3D模型。
  • 文本生成语音--该任务的输入是一段文本描述,输出是这段文字对应的不同口音的语音。
  • LLM--即大语言模型,ChatGPT、GPT-4是就是一种LLM,用户可以使用它来完成众多的问题。
  • MLLM--多模态大模型,该模型同时可以支持多种模态输入,具体的模态可以是图片、视频、文字、语音等。

    随着ChatGPT与GPT-4大模型的出现,它们展现出了惊人的效果。自此,大语言模型领域变得炙手可热起来,国外相继推出了ChatGPT、GPT-4、Board等大模型,国内的各大厂商也相继推出了自己的大语言模型,例如:百度的文心一言、阿里的通义千问、科大讯飞的星火认知、中科院的紫东太极、复旦大学的Moss、清华大学的智谱清言等。尽管国内已经推出了众多的大语言模型,但是实测之后你会发现:国内的大语言模型的性能与国外的大语言模型之间还有着较大的差距!
    对于大语言模型而言,我们可以将其划分为通用型和专用型大语言模型,前者的通用型更好、灵活性更高;而后者是针对专业领域优化出来的模型,模型精度更高,实际应用价值更高。下图展示了一些通用型和专用型大语言模型的实际应用案例。它能帮你做的事情远远超过上面列举的几点,只要你能想到的,它基本都可以帮你实现。

    相信有的人可能会有这样的疑问:“通用型大语言模型已经很好用了,那为什么还需要专用型大语言模型呢?” 试过通用型大语言模型效果的朋友可能会有这样的一种感官体验,在一些简单问题上面,通用型大语言模型的输出效果还挺好;但是到了一些比较专业的行业问题上面,它可能就开始胡说八道了!主要的原因是因为它并没有或者接触过很少的一些行业数据。下图展示了一些行业型大语言模型在不同的领域上面的具体应用效果,具体包括:医疗领域、金融领域、生物领域、法律领域、自动驾驶领域、数学领域等相信在不久的将来,行业型大语言模型一定会遍地开发,融入到我们日常生活的方方面面!

  最后,是12级通信工程专业的校友-王智卓针对AI与AIGC技术做出相关总结。AI与AIGC已经来到了我们的身边,我们应该主动的去拥抱它,让它给我们的日常生活带来不一样的生活体验。

02


汽车芯片的发展方向与机遇

    

    接着由05级机械自动化专业的校友-殷鹏军给大家分享了“汽车芯片的发展方向与机遇”相关的主题。该校友2008年毕业,现任深圳市德天新技术有限公司经理,位于深圳市南山区西丽智园A4栋12楼。

    当前自动驾驶仍然是一个比较火热的话题,很多创业公司、车企等纷纷从之前的L4方向转向了当前更容易落地、更容易量产的L2+方案。当前的L2+方案主打两个特色功能,即高速公路的驾驶辅助和自主泊车功能。前者具有一定的变道、夹塞等处理能力;而后者主打自主寻找并停泊车辆到特定车位的功能。
自动驾驶算法的落地离不开自动驾驶芯片的支撑,下图是殷鹏军校友为大家总结了一些汽车芯片的方向与机遇。具体的内容主要从以下4个方面展开:
  • 高性能、低功耗、高集成度的ADAS芯片将变得至关重要
  • 多样化、精确与迷你化的传感器可能会成为一个主要的研究方向
  • 更高精度、更好适用性的电池管理系统BMS将会是大家关注的重点问题
  • 更精确、更迅速、更智能的用户体验效果将是大家追求的目标

03


智能传感器革命

    最后由06级自控专业的校友-张万刚分享了"智能传感器"主题演讲。该校友现任深圳市威勤电子技术有限公司的研发总监,相继研发出多款智能传感器,可以应用到家电、医疗、农业、汽车、气象、电厂、化工、钢铁、石油等多个行业中。提出并主导了SensorEdge传感器技术平台的研发。

    传感器处于AI、AIGC、自动驾驶等多个任务的最上游,扮演着不可替代的角色。自动驾驶、扫地机器人、机器狗等众多机器人产品上面都会使用到各种各样的传感器,利用这些传感器可以快速、准确的解决一些实际问题,帮后续的算法节省一些算力与带宽。下图是威勤电子的传感器产品介绍,里面包含多种类型的传感器,具体包括:芯片级传感器、温度传感器、湿度传感器、工业应用传感器等。

04


总结与展望

活动的最后,陕西理工深圳校友会执行会长做了总结发言:“听了大家的发言感触很深,今天这个活动很成功,大家都收获颇多。不仅了解到了一些前沿的AIGC应用与算法,而且探索了汽车芯片的发展方向与机遇。除此之外,熟悉了各种各样的传感器在不同行业上的应用。本次主题沙龙活动大家兴致很浓,校友会要持续做好桥梁、平台的搭建工作,加强沟通,这类的活动后续要常态化,借助行业大势,助力校友企业发展。

05

文末彩蛋

主编: Luce,CSDN 100万+阅读量,大厂资深工程师,已成功落地自动驾驶,扫地机器人等多款AI产品;拥有丰富的模型部署优化经验,已掌握数十种工业界模型部署工具;
内容: 实时更新AI和AIGC的前沿算法,分享工业界已成功落地的模型部署工具,并深入剖析AI和AIGC相关产品细节。

关注我,让我们一起从工程师视角探索AI与AIGC的精彩世界!


本次活动参会人员:
主题分享:王智卓、殷鹏军、张万刚
参与校友:尹强、吴宏瑞、蓝芳霖、冯飞飞、马朋伟、梁松波、董治辉、李杨、王智卓、殷鹏军、张万刚、黄虎、杨蕾、孟沙沙、荆英
兄弟校友:西电-张敏、合工大-王纲

编辑:吴宏瑞、王智卓
时间:2023-12-17




关注我,AI热点早知道,AI算法早精通,AI产品早上线!





QQ群:417285436(备注:AI产品汇)   

微信群:关注公众号后--》联系我们--》加小编微信(备注:AI产品汇)

Python社区是高质量的Python/Django开发社区
本文地址:http://www.python88.com/topic/165899
 
229 次点击