2023幎11月

我々の研究チヌムは、囜際孊術誌「Computational Materials Science」に論文「Data augmentation in material images using the improved HP-VAE-GAN」を発衚した。筆頭単䜍は䞊海倧孊コンピュヌタヌ工皋科孊孊院、筆頭著者はYuexing Han、第2著者はYuhong Liu、通信著者rはQiaochuan Chenである。

论文囟片

コンピュヌタビゞョンの急速な発展は、倧芏暡なラベル付きデヌタず高性胜な蚈算機に倧きく䟝存しおいるため、小さなサンプルデヌタセットでの画像認識は、モデル孊習の実斜が困難であるなど、いく぀かの課題に盎面しおいる。材料研究の分野では、画像デヌタの収集コストが比范的高い。材料研究における画像サンプル䞍足の問題を解決するために、デヌタ増匷を実珟する材料画像を生成する改良型HP-VAE-GANが提案されおいる。

HP-VAE-GANは、Patch-VAEずPatch-GANから構成される単䞀サンプル生成モデルである。改良型HP-VAE-GANは、泚目メカニズムをモデルに導入する。Patch-VAEの゚ンコヌダヌにCBAM(Convolutional Block Attention Module)を远加するこずで、ネットワヌクの特城抜出ず衚珟胜力がさらに向䞊しおいる。

このモデルを甚いお1枚の画像を孊習し、その埌䞀定数のサンプルを生成しお孊習セットの拡匵を実珟する。超高炭玠鋌埮现構造画像の分類では、実画像生成画像で孊習した分類モデルMobileNet、ResNet50、VGG16の粟床が明らかに向䞊するこずが実隓で瀺された。たた、材料画像に類䌌したテクスチャ画像に察する実隓により、改良型HP-VAE-GANの有効性を怜蚌した。

論文ぞのリンク Data augmentation in material images using the improved HP-VAE-GAN

コヌディング: https://github.com/han-yuexing/Improved-HP-VAE-GAN

刘宇虹照片

読む

私たちのチヌムは、囜際ゞャヌナル「Expert Systems With Applications」IF: 8.5、コンピュヌタサむ゚ンス1区TOPにお「A pseudo-labeling based weakly supervised segmentation method for few-shot texture images」ずいう論文を発衚したした。この論文では、䞊海倧孊コンピュヌタ工孊科孊孊院が第䞀機関であり、Han Yuexingが第䞀著者、Li Ruiqiが第二著者、Han YuexingずChen Qiaochuanが共同通信著者であるこずをご報告いたしたす。

PTS眑络结构囟

深さ孊習に基づく材料埮现構造画像分割は、サンプルの垌少性、泚釈の難易床、モデルの汎甚化などの問題に盎面しおいる。耇雑なテクスチャを持぀材料画像では、異なる物盞間の境界を正確に区別するこずは困難であるこずが倚い。これらの問題は、材料埮现構造画像分割における既存の深さ孊習ネットワヌクの性胜䜎䞋をもたらしおいる。これらの問題を解決するために、本文はスクラむブマヌクアップに基づく匱監督擬䌌マヌクアップテクスチャ意味分割PTSネットワヌクを提案した。完党な寞法に比べお、スクラむブ寞法は明確なカテゎリを持぀少数のピクセルに察しおのみ寞法を行う必芁があり、寞法䜜業に必芁な分野の知識を倧幅に削枛したす。しかし、スクラむブ衚瀺によっおカバヌされる画玠数は極めお少なく、耇雑なニュヌラルネットワヌクを十分に監芖孊習するこずは容易ではない。したがっお、PTSネットワヌクは、トレヌニング段階で停ラベルを生成するこずにより、より利甚可胜な監芖情報を取埗する。

䞊図に瀺すように、PTSネットワヌクは二重分岐構造を採甚し、䞻分岐ず補助分岐の2぀の郚分を含む。䞻分岐は画像特城ず分割予枬を抜出するために甚いられ、補助分岐は停ラベルを生成するために甚いられ、䞻分岐が蚓緎を行うのを助け、それによっお䞻分岐の分割予枬結果の二重監督スコアリングず停ラベルを実珟する。詊隓段階では、䞻分岐のみが画像の分割結果を予枬するために䜿甚される。PTSネットワヌクは、1〜2枚のスクラむブラむンに基づく耇雑なテクスチャ材料画像を実珟し、汎化胜力を持぀画像分割モデルを蚓緎し、モデルは普遍的である。次の図は、チタン合金デヌタセット䞊のスクラむブ衚瀺に基づく異なるモデルの分割結果です。

分割结果对比囟

PTSネットワヌクの特城ずUnet++ネットワヌクの特城をそれぞれt-SNE方法を甚いおディメンションダりンした埌、図3に瀺すような特城分垃を埗るこずができる。PTSネットワヌクずUnet++ネットワヌクの特城分垃を比范するこずにより、Unet++ネットワヌクの異なるカテゎリの特城はPTSネットワヌクに比べお混同されおいるこずが分かった。䞋図のUnet++ネットワヌクの青ずオレンゞの特城点の分垃は互いに重なり合い、Unet++ネットワヌクの最終的な分割結果を制限する可胜性がある。察照的に、PTSネットワヌクの特城分垃の異なるカテゎリ間の境界はより明確であり、予枬分割をより良く行うのに圹立぀。

特埁分垃囟

私たちのコヌドず論文は、以䞋の堎所で公開されおいたすhttps://github.com/han-yuexing/Scribble_Segmentation

李睿祺照片

読む

私たちのチヌムは、囜際ゞャヌナル『Computational Materials Science』IF: 3.3000にお「材料科孊の出版物におけるテキストず衚デヌタの統合に基づく文献マむニング手法」ず題する論文をオンラむンで発衚したした。この論文では、䞊海倧孊コンピュヌタ工孊ず科孊孊院が第䞀機関ずなり、第䞀著者は匵瑞副教授、第二著者は匵家旺氏であり、通信著者は韓越兎副教授です。

论文囟片

科孊文献は研究成果を瀺す重芁な手段であり、本研究では倧芏暡な材料科孊文献情報凊理手法を提案し、文献からテキストず衚デヌタをそれぞれ抜出し分析したした。たず、汎甚的な動的ワヌドベクトルずドメむン固有の静的ワヌドベクトルを組み合わせた材料テキストの固有衚珟認識モデルを提案したした。次に、効率的か぀正確な画像型衚デヌタの認識ず成分抜出手法を提案し、成分衚から材料名、単䜍、および成分を抜出したした。最埌に、テキストず衚デヌタから抜出した成分、プロセス、性胜、および性胜倉化を䜿甚しお、機械孊習を甚いお耐食性、延性、匷床、および硬床を予枬したした。本研究ではステンレス鋌をデモ玠材ずし、11058件のステンレス鋌材料文献から236䞇の゚ンティティず7970の成分を抜出し、4぀の性胜倉化を予枬したした。提案された手法は、材料科孊文献からの知識の倧芏暡な抜出を実珟し、関連する研究者に利甚可胜な抜出結果を提䟛し、材料性胜改善の促進に圹立ちたす。

匠家旺照片

論文ぞのリンクA literature-mining method of integrating text and table extraction for materials science publications

読む
2023幎09月
黄志怡

黄志怡さんは、銖郜垫範倧孊でコンピュヌタ科孊ず技術の専攻を孊び、珟圚は䞊海倧孊でコンピュヌタ科孊ず技術 の修士課皋に圚籍しおいたす。圌女は明るく楜芳的な性栌で、感情の安定しおおり、人々ずの関わりが良いです。映画 やアニメを芋たり、音楜を聎いたりするこずが奜きで、新しいものを受け入れるこずに喜びを感じおいたす。圌女は積 極的で向䞊心があり、蚈画的に物事に取り組む傟向がありたす。䞊海倧孊で新たな旅を始め、しっかりず孊び、䜓を鍛 え、前進し続けるこずを期埅しおいたす

葛嘉浩さんは男性で、䞊海倧孊のコンピュヌタ孊院コンピュヌタ科孊ず技術系で孊士号を取埗し、珟圚は䞊海倧孊 のコンピュヌタ孊院で研究生ずしお孊んでいたす。圌は内向的な性栌でありながらも人に察しお友奜的であり、物事に 察しお奜奇心を持ち、生掻を愛しおいたす。圌の趣味は幅広く、音楜を聎くこずや写真を撮るこず、そしお氎泳が奜き です。圌は研究生掻で専門胜力を向䞊させ、知識を埗お成長し続けるこずを望んでいたす。

葛嘉浩
李子铭

李子銘さんは男性で、山東建築倧孊で゜フトりェア゚ンゞニアリング゜フトりェア開発方向を専攻しお孊士号 を取埗したした。珟圚は䞊海倧孊でコンピュヌタ科孊ず技術の修士課皋に圚籍しおいたす。圌は明るく、思考が掻発で 楜芳的な性栌を持っおおり、日垞的には音楜を聎いたり映画を芳たりするこずが奜きです。圌は研究生期間の孊習ず実 践を通じお、自身の芖野をさらに広げ、優れた友人ず出䌚い、孊術胜力を向䞊させるこずを望んでいたす。

埐倩掋さんは男性で、垞州倧孊で孊士号を取埗し、珟圚は䞊海倧孊のコンピュヌタ科孊ず技術の修士課皋に圚籍し おいたす。圌は楜芳的で勇敢で、生掻を愛するINFJタむプの人です。音楜、映画、フィットネスが圌の趣味であり、ギ タヌも少し匟くこずができたす。圌は仕事に集䞭し、真剣に取り組み、時折奇想倩倖なアむデアを思い぀くこずがあり たす。研究の道は挑戊に満ちおおり、孊ぶ道のりが意矩深くなるのです。

埐倩掋
李睿杰

李睿杰さんは、䞊海倧孊のコンピュヌタ工孊ず科孊孊院で孊士号を取埗し、珟圚は䞊海倧孊のコンピュヌタ工孊ず 科孊孊院の電子情報専攻の修士課皋に圚籍しおいたす。圌は人懐っこく明るい性栌で、責任感がありたす。ゲヌムをし たり、音楜を聎いたり、自転車に乗ったりなど、珟実から離れる掻動を楜しむこずが奜きです。あらゆるコンピュヌタ の孊術的な問題や実践的な問題に匷い興味を持っおおり、修士課皋で孊術氎準ず専門胜力を高め、同僚や先茩ず共に成 長するこずを望んでいたす。

読む
2023幎08月

私たちのチヌムは、囜際孊術誌『Journal of Materials Research and Technology』IF6.4、䞭科院1区トップにお、「Microstructural evolution and coarsening behavior of the precipitates in 2205 duplex stainless steel aged at 850℃」ずいう論文をオンラむンで発衚したした。この論文では、䞊海倧孊コンピュヌタ工孊ず科孊孊院が第䞀所属機関であり、韓越兎さんが第䞀著者、池掳婷さんが第二著者ずなっおいたす。たた、材料ゲノム工孊研究院の劉埮先生は倚くのサポヌトず助けを提䟛しおくださいたした。共同通信著者ずしお、韓越兎准教授ず材料科孊ず工皋孊院の䜕燕霖教授が名を連ねおいたす。

论文囟片

2205二盞䞍锈钢DSSにおいお、第二盞の圢成はその機械的性胜に倧きな圱響を䞎えたす。2205 DSS䞭の析出盞の埮芖的な構造の進化ず粗化挙動の研究は、科孊的および技術的な意味を持ちたす。珟圚の研究では、SEM/EDS走査電子顕埮鏡/゚ネルギヌ分散X線分析装眮およびTEM透過電子顕埮鏡を甚いお、850℃で200時間にわたり粗化が進行した2205 DSS䞭の析出物の成分ず圢態の倉化を系統的に研究したした。さらに、深局孊習ずデゞタル画像凊理技術を利甚し、SEM画像に基づいお金属間化合物の析出物、特にσ盞のサむズ統蚈を行いたした。これに基づいお、オストワルト粗化機構に基づいおσ盞ずγ盞の平均的な盞間゚ネルギヌを合理的に掚定したした。この研究は、2205 DSS䞭の析出物の埮芖的構造の進化ず粗化挙動に぀いお包括的な理解を提䟛したす。

論文ぞのリンクMaterial structure segmentation method based on graph attention

私たちのコヌドず論文は、以䞋の堎所で公開されおいたすhttps://github.com/han-yuexing/Roughening-Behavior

読む

䞊海倧孊を卒業した2020幎の修士課皋生、王迎枯さん、刘宇虹さん、倏锊桊さん、李睿祺さんは、母校を蚪れ、か぀おのキャンパス生掻を振り返り、か぀おの指導教員である韩越兎先生ず倚くの亀流をしたした。この垰校の旅では、圌らは仕事や生掻での経隓や感想を共有し、母校ぞの深い感情ず愛情を衚珟したした。卒業しお間もない圌らが孊校に戻っおきたこずにより、数々の感慚に胞を打たれたした。このキャンパスは圌らの成長ず倉化を芋守っおきた堎所であり、ここでのすべおが圌らに感謝ず倧切さを䞎えおくれたす。

か぀おの指導教員である韩先生ずの亀流の䞭で、4人の修士課皋生は仕事や生掻の経隓や感想を共有したした。圌らは修士課皋時代の孊びず生掻が圌らをより自信を持ち、独立した存圚にし、職業生掻の堅固な基盀を築いたず感じおいたす。同時に、圌らは指導教員に察する感謝ず敬意を衚し、指導ず助けが圌らの成長ず発展に重芁な圹割を果たしたず認識しおいたす。

この垰校の旅は、4人の修士課皋生に母校の魅力ず䜿呜を再び感じさせ、母校の発展ず進歩に察する圌らの尊重ず関心を高めたした。圌らは、どこにいおも垞に母校の発展ず進歩を泚芖し、支揎する意思を持っおおり、孊校ず瀟䌚ぞの貢献を果たすこずを衚明しおいたす。

四䜍毕䞚同孊回校合圱

読む
2023幎07月

黄子昂さん、姚知远さん、后泜铭さん、葛家浩さん、莺绎琪さん、后文杰さん、埐甜语さん、王英尧さんの卒業を心よりお祝い申し䞊げたす皆さんは䞊海倧孊のコンピュヌタ科孊ず技術専攻で孊士号を取埗し、卒業蚭蚈も韩先生の指導のもずで完了したした。

黄子昂さんの卒業蚭蚈は、材料画像デヌタベヌスシステムプラットフォヌムの研究ず開発に関するもので、デヌタのアップロヌド、デヌタの怜玢、アルゎリズムの利甚が可胜なシステムプラットフォヌムを構築するこずを目指しおいたす。フロント゚ンドのペヌゞぞのアクセスず操䜜を提䟛し、バック゚ンドシステムではデヌタの保存、怜玢、アルゎリズムの呌び出しが行えるようにしたす。最終的には、単䞀たたは耇数の材料画像の重芁なデヌタを怜玢、凊理するなどの䜜業が可胜になりたす。

姚知远さんの卒業蚭蚈は、材料文献デヌタベヌスシステムプラットフォヌムの研究ず開発に関するもので、単䞀たたは耇数の材料文献の重芁なデヌタを怜玢、凊理するなどの䜜業が可胜なシステムを実珟するこずを目指しおいたす。

后泜铭さんの卒業蚭蚈は、ビデオ凊理に基づく街路環境の評䟡システムの研究ず開発に関するものです。この研究では、ビデオ凊理に基づく深局孊習アルゎリズムず画像凊理の研究を基に、街路環境の評䟡システムを構築し、評䟡スコアを提䟛したす。

葛家浩さんの卒業蚭蚈は、異なるビデオのキヌフレヌム内容の融合方法に関する研究です。この研究では、ビデオ凊理を基に、あるビデオからキヌフレヌムを分割し、そのキヌフレヌムの映像を別のビデオに投圱するこずで、異なるビデオのコンテンツを融合するこずを目指しおいたす。

莺绎琪さんの卒業蚭蚈は、炭玠繊維暹脂耇合材料デヌタベヌスの構築ず開発に関するもので、炭玠繊維暹脂耇合材料のさたざたなデヌタの耇雑さに察応するため、効率的な管理が必芁です。デヌタのテンプレヌトが䞎えられた状況䞋で、炭玠繊維暹脂耇合材料デヌタベヌスの構築ず開発を実珟したす。

后文杰さんの卒業蚭蚈は、銅合金の埮芖的組織画像から結晶粒の圢状を抜出し統蚈する方法に関する研究です。この研究では、電子工業で広く䜿甚されおいる銅合金を䟋に、材料画像のセグメンテヌションず認識に基づいたアルゎリズムを開発し、合金の埮芖的組織画像から定量的な特城を抜出し、力孊的および電気的性胜ず関連付けたす。これにより、合金材料の組織に基づいた性胜予枬ず蚭蚈の基瀎を築きたす。

埐甜语さんの卒業蚭蚈は、孊術文献の知識グラフの構築に関する研究ず開発です。この研究では、自然蚀語凊理技術ず機械孊習アルゎリズムを応甚し、孊術文献から知識を自動的に抜出し、知識グラフを生成し、可芖化衚瀺するツヌルを蚭蚈したす。

王英尧さんの卒業蚭蚈は、C++における高䞊行性メモリプヌルの開発に関するものです。このプロゞェクトは、Googleのオヌプン゜ヌスプロゞェクトであるtcmallocをベヌスにし、コアフレヌムワヌクを簡玠化しお、簡易版の高䞊行性メモリプヌルを実装したした。

読む

王迎枯さんは、華僑倧孊で電気工孊及び自動化専攻の孊士号を取埗し、2020幎秋に䞊海倧孊のコンピュヌタ孊院で゜フトりェア工孊専攻の修士号を取埗するための研究を開始したした。王迎枯さんは、陳䟚川先生、韓越兎先生、そしお匵瑞先生の指導のもず、科孊文献䞭の曲線情報凊理方法に関する研究に取り組みたした。先生方のご指導のもず、以䞋の研究を完成させたした

  1. たず、本研究では、珟圚の科孊文献で広く存圚する曲線座暙グラフのデヌタ抜出の難しさず時間のかかる䜜業に取り組みたす。曲線画像は倚様な描画方法、高い密床、匷い連続性を持っおいるため、異なる手法による曲線情報の抜出が䞍正確になるこずがありたす。本研究では、曲線怜出手法によっお生じる曲線の乱れやがやけなどの問題を解決し、曲線情報の抜出粟床を向䞊させるために、密なネットワヌクモデルを基にした゚ンドツヌ゚ンドの曲線抜出モデルを提案したす。受容野を広げるために自己適応的な空掞畳み蟌みモゞュヌルを远加し、逐次的な现分化パスモゞュヌルを導入し、各局の䞭間出力を埌続の现分化モゞュヌルに導入し、損倱関数のパラメヌタを適切に蚭定するこずで、ネットワヌクの性胜を最適化したす。さらに、曲線怜出のためのデヌタセットを独自に構築し、改良されたモデルをトレヌニングするこずで、曲線画像䞭の曲線゚ッゞ情報の抜出胜力をさらに向䞊させたす。定性評䟡の結果は、本研究手法が他の手法ず比べお優れおいるこずをさらに瀺しおいたす。

  2. 次に、前述の方法においお、過剰な密な畳み蟌みモゞュヌルの積み重ねによっおチャネル特城情報が倱われ、モデルの蚓緎可胜なパラメヌタが倧きくなり、トレヌニングず掚論に時間がかかるずいう問題に察しお、本研究では、双方向の効率的なチャネル泚意機構に基づく曲線抜出ネットワヌク構造を提案しおいたす。この方法では、Vggを䞻芁な特城抜出ネットワヌクずし、双方向の効率的なチャネル泚意機構を䜿甚しお異なるチャネルの特城の重みを衚珟し、画像内のチャネル間の関係をより良く孊習し、特城衚珟胜力を向䞊させたす。そしお、ステヌゞ特城統合モゞュヌルを組み蟌み、特城の損倱を枛らし、特城衚珟胜力を向䞊させたす。異なるステヌゞの䜎解像床ず高解像床の特城を統合するこずにより、モデルは画像の意味情報をよりよく理解し、同等の状況䞋でモデルのパラメヌタを倧幅に削枛するこずができたす。曲線デヌタセットでのトレヌニングずテストを行った結果、この方法によっお抜出された曲線の構造ははっきりずし、階局的に明確になり、正確な䜍眮情報を提䟛し、曲線呚蟺のがやけなどの問題をより少ないパラメヌタで解決し、曲線の抜出粟床を向䞊させるこずが瀺されたした。

  3. 最埌に、曲線デヌタの抜出アルゎリズムの耇雑さず実装の難しさは、その応甚範囲を制限するこずが倚いです。そのため、䜿いやすいデヌタ抜出゜フトりェアの開発により、曲線デヌタの抜出が普及し、より簡単に䜿甚できるようになり、実践的な応甚を促進するこずができたす。本研究では、曲線デヌタ抜出の実甚的な䟡倀に焊点を圓お、デスクトップ向けのデヌタ抜出゜フトりェアを開発し、アルゎリズムの実装を掚進したす。これにより、より倚くの人々が曲線デヌタ抜出の実甚的な䟡倀を享受し、さたざたな領域での広範な応甚を促進するこずができたす。

王迎枯さんは、䞊海倧孊の倧孊院生の間に、熱心に孊習し、専門知識ず研究胜力を高めるこずに努力し、優れた指導者や友人たちから倚くの恩恵を受けたした。圌は初心を忘れず、䜿呜を心に刻み、勇敢に前進し、京東零售集団の発展に知恵ず力を貢献するでしょう。圌が業界の優れた人材の䞀人になり、進んで努力するこずを信じおいたす。

論文ぞのリンクResearch on curve information processing methods in scientific literature

王迎枯照片

読む

匵家旺さんは南京情報工皋倧孊で孊士号を取埗し、2020幎に䞊海倧孊のコンピュヌタ工孊ず科孊孊院で専門職の修士課皋に入孊したした。課題グルヌプに参加埌、指導教員である匵瑞先生、韓越兎先生、陳䟚川先生に垫事し、材料文献情報の探玢方法に関する研究を行いたした。先生方のご指導のもず、以䞋の研究を完了したした

  1. 材料文献のテキスト衚珟特性および成分衚の構造特城に察し、文脈を考慮した文献情報抜出手法を提案したした。テキスト情報ず衚情報をそれぞれ探玢するための手法です。材料テキストの抜出には固有衚珟認識技術を䜿甚し、動的な単語ベクトルず材料領域の静的な単語ベクトルを統合するこずで、各単語ベクトルにコンテキスト情報ず材料領域の知識を含めるこずができたした。これにより、材料テキストの固有衚珟認識の効果が著しく向䞊し、ステンレス鋌材料や無機材料の固有衚珟認識デヌタセットで実隓を行いたした。材料文献䞭の成分衚の構造特城に着目し、圢態孊、目暙茪郭怜出、テキストの類䌌床などの手法を組み合わせ、埓来の画像凊理技術に基づく衚の認識手法を提案したした。成分衚の構造を芋出し、ヘッダヌ、およびボディに分解し、異なる領域から材料名、元玠、元玠含有量、および単䜍情報を抜出するこずができたす。実隓により、成分衚の認識手法は良奜な結果を達成するこずが確認されたした。

  2. 材料文献から抜出した匕匵匷床ず材料成分デヌタに基づいお、材料の性胜予枬方法を提案したした。この方法では、XenonPy材料情報孊ラむブラリを䜿甚しお成分デヌタを特城的に拡匵し、拡匵された蚈算原理に基づいお、クロス特城圧瞮ず特城遞択の手法を蚭蚈したした。これにより、元玠レベルの統蚈的特城ず匕匵匷床デヌタを遞択し、これらのデヌタを䜿甚しお機械孊習モデルをトレヌニングしたした。実隓には、日本の囜立材料科孊研究所が公開したデヌタが䜿甚され、結果は提案された成分特城凊理方法がモデルの予枬性胜を倧幅に向䞊させるこずを瀺しおいたす。

  3. ステンレス鋌をサンプル材料ずしお、提案された文献探玢および性胜予枬手法を11,058件のステンレス鋌の科孊文献に適甚したした。文献テキストからは2,360,000個の材料゚ンティティを抜出し、文献の衚からは7,970組の材料成分情報を抜出したした。これらから関連するデヌタを遞択し、匕匵匷床の数倀予枬、腐食性、延性、匷床、硬床の倉化傟向の予枬を行いたした。

匵家旺さんは卒業埌、゜フトりェア開発に関連する仕事で華為䞊海研究所に入瀟したした。䞊海倧孊での3幎間の倧孊院生掻で、圌は䞀生懞呜勉匷し、専門知識ず研究胜力を向䞊させたした。たた、倚くの優れた指導教員や友人ず出䌚うこずができたした。将来の道においお、匵家旺さんが初心を忘れず、䜿呜を念頭に眮き、困難に立ち向かい、前進するこずを願っおいたす。

論文ぞのリンクResearch on Context-aware Material Literature Text and Table Information Mining and Application Methodology

匠家旺照片

読む

刘宇虹さんは安埜䞭医薬倧孊で孊士号を取埗し、2020幎9月から䞊海倧孊のコンピュヌタ工孊ず科孊孊院で修士号を取埗するための研究を始めたした。圌女は研究グルヌプに参加し、韓越兎教授の指導のもず、材料画像凊理や材料画像匷化などの関連技術ず応甚に぀いお孊びたした。韓教授の䞁寧な指導のもず、以䞋の研究を完成したした。

  1. 熱障壁コヌティングの衚面圢態特城認識に基づく画像匷化手法を提案したした。この手法は、次の3぀のステップからなりたすポヌラス茪郭の匷化ず画像のノむズ陀去、ポヌラスの削陀ずクラック修埩、そしおクラックの怜出ず長さの蚈算です。これにより、熱障壁コヌティング䞭のクラックを正確に識別するこずができたす。たた、画像フィルタリングや数理圢態孊などの匷化手法を適切に䜿甚するこずで、熱障壁コヌティング䞭のクラックの識別の完党性が高たり、偏差が少なくなりたす。提案された手法は、熱障壁コヌティング䞭のクラックを自動的に識別し、クラックの長さを蚈算するこずができたす。人手による怜出ず比范しお、この手法はクラックの識別がより正確であり、クラックの長さの蚈算速床も速くなりたす。これにより、材料科孊の研究者が熱障壁コヌティングの埮现構造を効果的に分析するのを支揎するこずができたす。

  2. 熱障壁コヌティングの衚面圢態特城を認識するための2぀の゜フトりェアを蚭蚈したした。1぀の゜フトりェアは、熱障壁コヌティングの画像匷化ずクラックのスケルトン抜出を実珟し、もう1぀の゜フトりェアはクラックの識別ず長さの蚈算を実珟したす。これら2぀の゜フトりェアを組み合わせお䜿甚するこずで、熱障壁コヌティングの埮现構造分析の速床がさらに向䞊し、時間ず人的コストが削枛されたす。たた、この゜フトりェアは熱障壁コヌティングの画像ず類䌌した他の材料の画像も凊理するこずができ、材料科孊の研究ず開発を促進したす。

  3. 材料画像デヌタ拡匵のための改良されたHP-VAE-GANの提案を行いたした。改良されたHP-VAE-GANは、CBAMConvolutional Block Attention Moduleメカニズムを䜿甚しお特城マッピングを现化し、ネットワヌクの特城衚珟胜力を向䞊させたす。同時に、゚ンコヌダヌネットワヌクに1぀の畳み蟌みブロックを远加しお、ネットワヌクの特城抜出胜力をさらに向䞊させ、CBAMの挿入䜍眮がモデルの性胜に䞎える圱響を排陀したした。生成結果は、CBAM泚意メカニズムを組み合わせた提案されたHP-VAE-GANが生成画像の品質を効果的に向䞊させるこずを瀺しおいたす。分類実隓の結果からも、この手法はHP-VAE-GANを䜿甚したデヌタ拡匵手法よりも優れた結果を瀺し、少数の材料画像デヌタセットに察しお新たなデヌタ拡匵の手法を提䟛したす。

卒業埌、劉宇虹さんは䞊海振華職業孊校で人工知胜専門の教垫ずしお働いおいたす。劉宇虹さんは䞊海倧孊での3幎間の修士課皋で努力し、専門知識ず研究胜力を向䞊させるために努めたした。倚くの優れた教垫や友人に出䌚うこずができたした。劉宇虹さんには、将来の道のりで初心を忘れず、䜿呜を心に刻み、困難を乗り越えお前進するこずを願っおいたす。

論文ぞのリンクResearch on Enhancement Methods for Small Sample Material Images

刘宇虹照片

読む

倏錊桊さんは、江蘇科技倧孊で孊士課皋を修了し、2020幎に䞊海倧孊のコンピュヌタ工孊科孊孊院で専門の修士研究生コヌスに進孊したした。倏錊桊さんは韓越興先生に垫事し、材料文献情報のマむニング方法に぀いお研究したした。韓先生の熱心な指導のもず、以䞋の研究を遂行したした

  1. 数倀グラフ情報の抜出。数倀グラフず察応するキャプションを組み合わせお、文献マむニングのための画像ずテキストの統合手法を提案したした。この手法ではたず、Yolov5sを䜿甚しお科孊文献から単䞀の数倀グラフ画像を切り出し、改良された科孊文献画像怜出手法を適甚しお粟床を向䞊させたす。次に、PDFminerツヌルを䜿甚しお科孊文献のテキストコンテンツを解析したす。そしお、文の間のコサむン類䌌床ずJaccard類䌌床を蚈算し、数倀グラフに察応するキャプションテキストをマッチングしたす。さらに、Sci-BertモデルずCRFアルゎリズムを䜿甚しお、タむトルから軞の名前を識別したす。さらに、圢態孊的操䜜や文字認識などの技術を䜿甚しお、数倀グラフから具䜓的なデヌタ情報を抜出したす。最埌に、抜出された軞の名前ずデヌタを統合しお完党な数倀グラフ情報を取埗したす。

  2. 䞊蚘の数倀グラフの軞名識別タスクにおけるモデルの認識粟床の䜎さに察凊するため、本論文では科孊文献の数倀グラフ画像ずテキストの関係に着目し、識別効果を向䞊させる手法を提案したした。この手法では、たず数倀グラフ䞊のラベルテキストを識別し、サンプルテンプレヌトに埋め蟌んでアノテヌション䞍芁のテキストデヌタを生成し、デヌタ拡匵の効果を埗たす。同時に、テキストの類䌌床マッチング技術を䜿甚しお科孊文献の本文郚分から数倀グラフの説明文を探し、それをタむトルテキストず結合しおテキストの拡匵を行いたす。これにより、文脈の関連性に基づいお入力文のベクトル衚珟を改善し、モデルの予枬性胜を最適化したす。

倏錊桊さんは卒業埌、杭州広立マむクロ゚レクトロニクス瀟で゜フトりェア開発関連の仕事に携わりたす。倏錊桊さんは䞊海倧孊での3幎間の修士課皋で努力し、専門知識ず研究発衚胜力を向䞊させるために努めたした。倚くの優れた教垫や友人に出䌚うこずができたした。倏錊桊さんには、将来の道のりで初心を忘れず、䜿呜を心に刻み、困難を乗り越えお前進するこずを願っおいたす。

論文ぞのリンクResearch on Context-Aware Information Mining of Image and Text in Material Science Literature

倏锊桊照片

読む
2023幎05月

私たちのチヌムは囜際誌「Materials Today Communications」IF3.662にお「Graph Attentionに基づく材料構造セグメンテヌション手法」ずいう論文をオンラむンで発衚したした。この論文では、䞊海倧孊のコンピュヌタ工孊・科孊孊院が第䞀機関ずなり、陳䟚川氏が第䞀著者、魏惠姗氏が第二著者、韓越兎准教授が通信著者ずなっおいたす。

倚孊科の発展ず融合により、コンピュヌタビゞョンず材料科孊の融合は、埓来の材料研究方法に倧きな倉革をもたらしたした。既存の手法は特定のシヌンの画像を効果的にセグメンテヌションできたすが、材料の画像を正確にセグメンテヌションおよび分析するための汎甚的な手法は存圚したせんでした。材料画像の耇雑なテクスチャ、がやけた境界、䜎いコントラストずいった問題に察凊するため、我々は倚次元特城の統合に䟝存した手法を提案したした。この手法は、有限で利甚可胜な泚釈サンプルをより効果的にネットワヌクを蚓緎するための構築されおいたす。このアヌキテクチャは、゚ンコヌダ、グラフ泚意モゞュヌル、倚スケヌル特城統合モゞュヌル、およびデコヌダから構成されおいたす。我々は、このようなネットワヌクを画像に察しお゚ンドツヌ゚ンドでトレヌニングできるこずを瀺したした。電子顕埮鏡画像では、我々のセグメンテヌション結果が以前の倚くの先進的な手法よりも優れおいるこずを瀺したした。この手法を甚いるこずで、材料画像䞭の耇数の構造を正確に識別するこずができ、材料科孊における構造倉換の新たなメカニズムの倚段階セグメンテヌションや探玢に重芁な瀺唆を䞎えるこずができたす。

論文ぞのリンクMaterial structure segmentation method based on graph attention

読む
2023幎04月

李睿祺さんは、䞊海倧孊で孊士課皋を修了し、2020幎に䞊海倧孊のコンピュヌタ工孊科孊孊院で孊術型の修士研究生コヌスに進孊したした。李睿祺さんは孊郚の最終孊幎から韓越興研究グルヌプに参加し、材料画像凊理技術ずその応甚に関する研究を孊びたした。韓先生の熱心な指導のもず、以䞋の研究を継続・掚進したした

  1. 菊池垯パタヌンの自動怜出。結晶の構造ず取向情報は、EBSD電子背面散乱回折パタヌンの分析によっお埗るこずができたす。これらのパタヌンはEBSD装眮によっお取埗されたす。埗られた情報の信頌性ず正確性は、EBSDパタヌンのストラむプず亀点の䜍眮に䟝存したす。この研究では、Radon倉換ず环積確率ハフ倉換を組み合わせた手法を提案し、EBSDパタヌン菊池垯および亀点の䜍眮を自動的に取埗するこずを実珟したした。実隓結果は、この手法が頑健であり、より正確な菊池垯ず亀点を怜出できるこずを瀺しおいたす。

  2. 材料画像のセグメンテヌションタスクにおける泚釈コストずセグメンテヌション粟床のバランスの問題を解決するために、リアルタむムでセグメンテヌションモデルを取埗するための、察話型の手続き的泚釈ず機械孊習に基づく材料画像のセグメンテヌションアルゎリズムを蚭蚈したした。この手法では、セグメンテヌションモデルのリアルタむム取埗を最優先目暙ずし、材料画像の䞭心点近傍の特城を抜出し、耇数のラりンドの察話型の手続き的泚釈を行い、むンクリメンタル孊習の手法を䜿甚しお最終的な画像セグメンテヌションモデルを蚓緎したす。

  3. 有限か぀容易に入手可胜な泚釈デヌタに基づいお高粟床なセグメンテヌションモデルを実珟するために、擬䌌ラベルを甚いた匱監督深局孊習に基づく材料画像セグメンテヌション手法を蚭蚈したした。この手法では、有限な泚釈デヌタに基づいお最適なセグメンテヌション結果を埗るこずを目暙ずし、新しいデュアルブランチネットワヌク構造を提案し、新しいコンテキスト特城差監督損倱を導入しお擬䌌ラベルを生成したす。これにより、モデルは描かれたアノテヌションのみを䜿甚しお、高いセグメンテヌション粟床を達成するこずができたす。この手法は、材料画像セグメンテヌションタスクにおいお、ディヌプラヌニングニュヌラルネットワヌクが盎面する少量のデヌタ、難しいアノテヌション、およびテストプロセスでのリ゜ヌスの浪費ずいう問題を解決したす。

  4. 盞倉わらず倉態の速い性質ず耇雑な圢態のラスマテンサむトのため、マルテンサむト画像解析に基づく埓来の研究は、盞倉態プロセス䞭の十分な情報を提䟛するこずができたせん。本研究では、ラスマテンサむトの倉換を捉えた動画から情報デヌタを抜出・分析する新しいビデオ凊理方法を提案しおいたす。画像デヌタの分析により、ラスマテンサむト倉換の数、最倧長、最倧幅、平均長、平均幅、面積、カテゎリ方向など、ラスマテンサむト倉換に関するダむナミックな情報を提䟛したす。この研究は、静止画像に基づいたマルテンサむトの研究の限界を打砎し、マルテンサむトのダむナミックな倉換に関する様々なデヌタず情報を包括的に説明したす。

卒業埌、李睿祺さんはリ゚ンむメヌゞむンテリゞェントにおいお゜フトりェア開発関連の業務に埓事するこずになりたした。䞊海倧孊での3幎間の倧孊院生掻で、李睿祺さんは䞀生懞呜勉匷し、専門知識ず研究発衚の胜力を向䞊させおきたした。たた、倚くの優れた垫匠や友人ずの出䌚いも埗るこずができたした。李睿祺さんには、将来の道においお初心を忘れず、䜿呜を心に刻み、困難を乗り越えお前進するこずを願っおいたす。

読む
2023幎03月

䞊海倧孊を卒業した研究生の魏惠姗さん、匵宏址さん、楊珅さんは3月18日に母校に戻り、か぀おのキャンパスラむフを振り返り、か぀おの指導教員である韓越兎先生ず倚くの亀流をしたした。圌らの垰校旅行では、圌らの仕事や生掻での経隓ず感想を共有し、母校ぞの深い感情ず愛情を衚珟したした。数人の同窓生が孊校に戻るず、感慚深い思いに駆られたす。ここに戻っおくるず、圌らは自宅に垰っおきたような感芚を抱きたす。このキャンパスは圌らの成長ず倉化を芋守り、すべおが圌らに感謝ず尊重の気持ちを抱かせたす。 か぀おの指導教員である韓先生ずの亀流の䞭で、3人の研究生は仕事や生掻での経隓ず感想を共有したした。圌らは倧孊時代の孊びず生掻が圌らをより自信を持ち、独立心を逊い、職業生掻の堅固な基盀を築いたず考えおいたす。同時に、圌らは指導教員ぞの感謝ず尊敬の意を衚し、指導ず助けが圌らの成長ず発展においお䞍可欠な圹割を果たしたず認識しおいたす。 この垰校旅行により、3人の研究生は母校の魅力ず䜿呜を再び感じ、母校の発展ず進歩をより䞀局倧切にし、泚目しおいたす。圌らはどこに身を眮いおいおも、垞に母校の発展ず進歩に泚目し、サポヌトし続け、孊校ず瀟䌚ぞの貢献を果たすこずを玄束しおいたす。

魏惠姗
杚珅
匠宏址
読む
最終曎新2025-09-04
アクセス数: 加蜜䞭...