|愛跳碎碎念|(六十九)#跳跳
跳跳&睏寶的WFH崩潰日記(一)序
睽違已久的愛跳碎碎念,隨著暑假的到來,讓他重生吧!
超級久沒有更新,自從睏寶出生之後,自由時間變得更加珍貴,處理完家事、雜事後只想好好追劇逃離現實,或是好好睡覺,換取明天滿滿的戰鬥力。上班反而算是一種休息與調適,脫離爸爸擁有另一種身份的美好,這樣的生活,隨著疫情爆發之後,開始有了變化……
5/19這天宣布 #全國三級警戒,#停課不停學,睏寶不能去保母家,我要在家線上教學,開始一場新的戰鬥!一場永無止盡的單挑!每天24小時跟寶寶膩在一起,無法想像的父女陪伴與交流,從早上六點起床喝奶開始
不過時間真的飛快,一個月的線上教學(with最鬧事助教)生活結束,睏寶重回保母家,我也放暑假。心情有種難以言喻的雀躍,獲得些許喘息空間。
這段日子也辛苦我線上的學生們,偶爾要忍受助教忽然的大吼大叫,一下吃東西、一下玩積木、一下玩黏土,還有想看的故事書跟拼圖,外加主題性說故事系列,都是要在每堂線上課程開始前備好的法寶(不然就會在寶寶、老師、學生 #集體崩潰 狀態下完成課程),還有自己快速轉換的情緒與身手矯捷的替換物品的能力。
一個多月與寶寶線上教學的難得經驗,需要好好記錄一下!多了兩歲叛逆期睏寶的停課不停學,跳跳的線上教學到底該如何進行?先來一張照片會說話,然後讓我們繼續看下去……
真 #無奈跳跳與崩潰睏寶的防疫居家生活
#跳跳防疫育兒日記 #停課不停學 #愛跳碎碎念 #睏寶平安健康 #能吃能睡 #因為有愛 #跳跳憂鬱症 #向全天下地方爸媽致敬 #要當帥爸沒那麼簡單 #調整好心情才能處理事情的真諦 #睏寶2y
同時也有2477部Youtube影片,追蹤數超過2萬的網紅《絕對零域》 ξ槍剎〃,也在其Youtube影片中提到,★★★九月份抖內金主榜★★★ 第一名 寓閎 10000臺幣 第二名 雞雞 8000臺幣 第二名 伊伊 8000臺幣 第三名 龍龍 7500臺幣 第四名 噗噗 6666臺幣 第五名 起笑 5500臺幣 第六名 清寶 2500YT 第七名 凱薩 2000臺幣 第七名 孤獨 2000臺幣 第七名 恐龍 2...
先來一張照片 在 台灣物聯網實驗室 IOT Labs Facebook 的最佳貼文
打造「聊」癒系機器人!看圖說故事 AI也略懂略懂
信傳媒
研之有物
2020年11月8日 下午1:24
看圖說故事對人類來說,是輕鬆好玩的事,但對 AI 來說,卻是巨大挑戰,因為這代表 AI 必須看出圖中有哪些物件、理解圖片意義、能夠生成文句,還要看懂圖片間的因果邏輯。在中研院資訊科學研究所古倫維副研究員的努力下, AI 看圖說故事的能力有了很大的進展。她的模型有什麼獨特之處呢?跟著研之有物一起來瞧瞧!
俗話說得好:「發文不附圖,此風不可長。」不論你發的是爆卦文、閒聊文還是業配文,有圖更容易晉身流量熱文。不過近年來,社群網站發文的風向漸漸有了改變,從「發文附圖」轉變成「發圖附文」,我們總是先來一張照片,再配上相應的描述文字。接下來,我們的發文習慣還會怎麼改變?
或許,未來你拍下一張照片上傳社群網站,電腦就會自動「看圖說故事」,為你的照片腦補一段說明文字,節省你的思考時間。
讓電腦學會「看圖說故事」的伎倆,正是中研院資訊科學研究所的古倫維副研究員正在鑽研的主題之一。她的主要研究領域是人工智慧( AI )的自然語言處理,在因緣際會下,接觸到一個 AI 看圖說故事的競賽: Visual Storytelling ( VIST ),開啟了她對 AI 看圖說故事的興趣。
電腦如何學會「看圖說故事」?目前學界使用「機器學習」,簡單來說,就是讓電腦從大量的圖文搭配組合,從中學習看到怎樣的圖片,應該說出怎樣的故事。古倫維說:「其實一開始我們做得並不特別好。我們跟其他參加競賽的人一樣,用機器學習的方法,把圖和對應的文字丟進電腦,讓機器自己學習最佳的圖文搭配。然而機器學習幾乎是軍備競賽了!誰的電腦計算能力更強,得到的模型更複雜,生成的文字就會更好。」
先選角、打草稿,再寫故事
在軍備競爭不足的情況下,古倫維決定採取不同的策略:「既然完全由 AI 看圖說故事的效果不夠好,能不能在故事生成的過程中,有一個人類可以介入改善的步驟。」所以她把原來的做法分成了兩個階段,先從圖片抽取語意,接著再生成文字故事。
語意抽取,是指先從個別圖片中選出用來說故事的概念(如同電影選角),用知識庫找出概念之間的關係,建立圖片的關聯,再為這些圖片擬定最好的草稿(如同電影故事大綱)。
重點來了!在「選角」階段, AI 會先以機器學習的結果,找出最適合說故事的「角色組合」,尤其是面對連續圖片。這就好比張曼玉、梁朝偉、成龍三個演員,前兩個主要演愛情片,第三個以武打戲為主,如果第一張照片選了張曼玉,第二張照片應該選梁朝偉,生成的故事會比較好看。
但目前 AI 選角部分還不夠靈光,有時仍會發生如「張曼玉配成龍」的選角名單。古倫維的兩階段設計讓人類可在「選角」階段介入修改。實際例子如:圖片中有小男孩、天空、腳踏車三個概念。AI 從上圖抽取出的概念可能是「小男孩」、「天空」,最後生成的故事可能是「一個小男孩在天空下」……滿無聊的。但人類可以把「天空」改成「腳踏車」,機器最後就可能生成「一個小男孩騎著腳踏車。」嗯,是不是比較有故事性了?
最後,人類再將修改後的選角和故事大綱,交給 AI 產生整個故事。這種「先選角、打草稿,再說故事」的方式,最後產生的故事比較不會無聊或是不合理,更接近人類說出的故事。
知識庫,AI 想像力的補充包
為了增加 AI 的想像力,古倫維也在模型中納入「知識庫」,幫 AI 增加故事的知識。例如圖片中有人與馬,如果沒有知識庫,AI 可能只能生成「有一個人與一匹馬」這種平淡的句子。但知識庫可以補充人與馬關聯的知識,包括人可以騎馬、養馬等等,讓 AI 有機會說出「有一個人騎著自己養的馬」比較具故事性的句子。「當然 AI 也可能從大量的故事中以機器學習取得『很多人都會騎馬、養馬』的知識。但知識庫的最大功用,就是直接提供這個知識給 AI ,縮短學習歷程。」 古倫維解釋。
更重要的是,知識庫讓 AI 更容易解讀出圖片之間的關聯。如 VIST 競賽的題目就是包含了五張圖片的圖組,在知識庫的協助下, AI 比較容易找出各別圖片的概念之間的關聯,說出的故事會比較連貫,具有因果關係。
AI 是完全沒有想像力的,但若透過知識庫給它知識,這些知識在故事中呈現出來的,就像是 AI 的想像力。
巧妙切開「語意抽取」與「生成文本」
兩階段生成故事的方法還有一個優點,就是可善用大量的「圖片辨識」與「故事文本」資料庫,避開「圖文搭配」資料的缺乏。
現今的「圖片辨識」技術和資料庫非常成熟,可以精準的從圖片中抽取出各式各樣的概念。另一方面,說故事是人類從古至今不斷從事的活動,留下了大量的「故事文本」。相較之下,看圖說故事的「圖文搭配」資料量卻相當少,需要有人刻意去蒐集圖組、撰寫文字,古倫維說:「這種圖文搭配的資料必須人工建立,能有一萬組就很厲害了,但這個數量對於機器學習來說卻是遠遠不夠的。」
古倫維則把生成故事的過程拆成「語意抽取」與「生成文本」兩個階段,第一階段可利用精熟的圖片辨識技術和資料庫,抽取故事概念;第二階段再運用故事文本資料庫,讓機器學習如何將第一階段抽取(並由人類修改過)的概念,組合成漂亮的故事,巧妙避開了「圖文搭配」資料不足的難題。
把「語意抽取」與「生成文本」切開的話,兩個階段都可以利用幾千萬筆的既有資料,供機器學習。
腦補,讓機器更有溫度
說了半天,但 AI 會看圖說故事,到底能幹嘛?難道只是幫貼圖寫寫圖說?以研究的層面來說,如果 AI 能看圖說故事,代表 AI 在理解圖片、文字分析及因果邏輯等方面,都達到一定的水準,代表 AI 語言能力更加接近人類。在實際應用上, 可以為圖文創作者提供故事草稿,或是對於常常需要撰寫廣告文案、出差報告的人,能夠很快從圖像生成文本,人類只要略做修改潤飾即可 (小職員計畫通!)。
但更重要的是,機器人也能因此更有溫度!古倫維與臺大人工智慧與機器人研究中心的傅立成教授合作,希望透過 AI 看圖說故事的技術,讓居家照護機器人更有「人味」,會主動關懷人類。因為居家照護機器人在家中「看見」的一切,其實就是一張張的圖, AI 可以透過這些「圖」形成可能的故事,再轉化為暖心的問句。
想像一下,未來居家照護機器人看見老人家在廚房,故事劇情可能是「他要煮飯」,於是問出:「今晚想吃什麼?需要幫忙嗎?」當老人拿出相簿緬懷過去,AI 也能從舊照片解讀可能故事,轉化成聊天的問句:「照片中的這個人是誰啊?你們去哪裡玩?」還能變身孩子最愛的說故事姊姊!AI 可能從儲存的繪本資料庫中,隨機抽出不同圖畫重新組合,說出全新的故事。
會看圖說故事的 AI ,可以從眼前的情景連結到事件或情感,就像人類的腦補一般,而這些腦補就是故事。
如此一來,居家照護機器人不再只是被動的處理人類需求,相反的,「說故事的能力賦予了 AI 機器人找話題的功能。」古倫維笑著解釋,機器人從此不再詞窮,可以主動關心人類,與人類互動聊天,讓機器人變得溫暖許多。看來 AI 看圖說故事,不只是寫寫圖說、幫忙解決麻煩的出差報告,在不遠的未來,更是拉近我們與機器人距離的關鍵所在呢。
附圖:AI 看圖說故事的能力,可讓照顧居家照護機器人了解眼前的生活情境,具有找話題的能力,變得溫暖許多。(圖片來源/研之有物授權使用,下同)
中研院資訊科學研究所的古倫維副研究員,主要研究領域是人工智慧( AI )的自然語言處理,現正開發如何讓 AI 不只會說故事,還會看圖說故事。
古倫維的故事生成模型將產生故事的過程分成「語意抽取」及「故事生成」兩個階段。 圖說重製│黃曉君、林洵安
電腦看圖說故事的範例。No KG 代表機器在不添加額外知識時所產生的故事,Visual Genome 與 Open IE 古倫維團隊用兩個不同的知識庫分別產生的故事,GLAC 是除了古倫維的模型外目前成果最好的模型。由上可知,知識庫的確能幫助故事的上下文連結。最後的 Human 是真人所寫的故事,包含了許多圖片中沒有的知識,甚至精神性的內容。
資料來源:https://tw.news.yahoo.com/%E6%89%93%E9%80%A0-%E8%81%8A-%E7%99%92%E7%B3%BB%E6%A9%9F%E5%99%A8%E4%BA%BA-%E7%9C%8B%E5%9C%96%E8%AA%AA%E6%95%85%E4%BA%8B-ai%E4%B9%9F%E7%95%A5%E6%87%82%E7%95%A5%E6%87%82-052415130.html
先來一張照片 在 Dogoose Facebook 的精選貼文
他們家的洋裝再次開掛🔥
每次都出這種誘人款
先來一張照片讓你們瞧瞧
明天我要出去拍它🥰
這件花色真的美翻💐
連不愛賣洋裝的我都準備掏錢給老闆了🤣
工作室目前有貨可以試穿喔❤️
先來一張照片 在 《絕對零域》 ξ槍剎〃 Youtube 的最佳貼文
★★★九月份抖內金主榜★★★
第一名 寓閎 10000臺幣
第二名 雞雞 8000臺幣
第二名 伊伊 8000臺幣
第三名 龍龍 7500臺幣
第四名 噗噗 6666臺幣
第五名 起笑 5500臺幣
第六名 清寶 2500YT
第七名 凱薩 2000臺幣
第七名 孤獨 2000臺幣
第七名 恐龍 2000臺幣
第七名 寬哥 2000臺幣
第七名 粽子 2000臺幣
第七名 墨羽 2000臺幣
第七名 惡魔 2000點卡
第八名 海豚 1500臺幣
第九名 抬抬 1000臺幣
第九名 小鴨 1000臺幣
第九名 恩恩 1000臺幣
第九名 冷淡 1000臺幣
第九名 阿綸 1000臺幣
第九名 蓋印 1000臺幣
第九名 克翔 1000臺幣
第九名 丞丞 1000臺幣
第九名 江北 1000臺幣
第九名 小程 1000臺幣
第九名 牛奶 1000點卡
第十名 玹德 500點卡
★★★十月份抖內金主榜★★★
第一名 雞雞 5000臺幣
第二名 惡魔 3000點卡
第四名 寓閎 2000臺幣
第三名 孤獨 2000臺幣
第三名 墨羽 2000臺幣
第四名 陳心 1000臺幣
第四名 凱薩 1000臺幣
第四名 小鴨 1000臺幣
第四名 才才 1000點卡
大家好 我是絕對の零域 隊長 《絕對零域》 ξ槍剎〃
斗內槍剎福利:
★首先提醒~拜託~各位粉絲.觀眾 不要偷家裡家長的錢錢儲值or抖內~
家人賺錢不容易,且請不要拿自己的吃飯錢贊助我,請填飽肚子
拜託拜託拜託!!!請求各位贊助者遵守!!!
1.★★單筆贊助超過4000元~金主轉盤轉一次~本次新增11200鑽、22400鑽、、33600鑽槍剎跟你們拚運氣了!
2.★★單筆贊助超過4000元~贈送一台 槍剎專屬 行動電源 or 特製保溫杯 or 特製高級傘(可選擇超商收貨.郵寄到府)
(1. 2. 福利可同時領取~)
3.★贊助滿500可+遊戲好友~直播房卡轉轉樂可卡位2場
4.★贊助滿1000會有一場直播為您做封面。收到斗內後我會跟你聯絡哦~可以操控我做壞壞的事情..!?
(觀眾休閒場.觀眾排位場.交流賽代播.房卡轉轉樂.房卡獵殺戰.通話聊天台.我畫你猜台.唱歌欣賞台.照片欣賞台.水上拳擊台)
5.★累積贊助滿2000會給實習管管板手唷~還有專屬管管LINE群!!
6.★★單筆贊助超過2000元~贈送一張有槍剎醜照.LOGO的明信片~
★單挑房卡一場收費500元(無斗內福利)
★陪打1小時半500元(無斗內福利)
(經典.排位.團隊)
抖內方式 綠界超商繳費.7-11無摺存款.轉帳郵局or華南
★綠界 超商付款抖內.贊助 連結:
https://p.ecpay.com.tw/E870A
綠界抖內不會的可以私訊我唷~
直播中抖內會跳斗內語音唷~
★7-11中國信託ATM存款: 帳戶:901562054156
★全家台新銀行ATM存款: 帳戶:28881006101910
★郵局轉帳: 戶名:蘇琨閎 郵局代碼:700 帳戶:00716250266791
★華南轉帳: 戶名:蘇琨閎 華南代碼:008 帳戶:813200507373
★點卡贊助請私訊給序號 感謝
剎剎聯絡方式:
LINE:g150750
LINE2:g1507500
臉書:蘇琨閎
抖音:g150750
★★★加入頻道會員 https://www.youtube.com/channel/UC6rngazn4WLvN8q700cmVLg/join
先來一張照片 在 《絕對零域》 ξ槍剎〃 Youtube 的精選貼文
★★★九月份抖內金主榜★★★
第一名 寓閎 10000臺幣
第二名 雞雞 8000臺幣
第二名 伊伊 8000臺幣
第三名 龍龍 7500臺幣
第四名 噗噗 6666臺幣
第五名 起笑 5500臺幣
第六名 清寶 2500YT
第七名 凱薩 2000臺幣
第七名 孤獨 2000臺幣
第七名 恐龍 2000臺幣
第七名 寬哥 2000臺幣
第七名 粽子 2000臺幣
第七名 墨羽 2000臺幣
第七名 惡魔 2000點卡
第八名 海豚 1500臺幣
第九名 抬抬 1000臺幣
第九名 小鴨 1000臺幣
第九名 恩恩 1000臺幣
第九名 冷淡 1000臺幣
第九名 阿綸 1000臺幣
第九名 蓋印 1000臺幣
第九名 克翔 1000臺幣
第九名 丞丞 1000臺幣
第九名 江北 1000臺幣
第九名 小程 1000臺幣
第九名 牛奶 1000點卡
第十名 玹德 500點卡
★★★十月份抖內金主榜★★★
第一名 雞雞 5000臺幣
第二名 惡魔 3000點卡
第三名 孤獨 2000臺幣
第三名 墨羽 2000臺幣
第四名 凱薩 1000臺幣
第四名 小鴨 1000臺幣
第四名 寓閎 1000臺幣
第四名 才才 1000點卡
大家好 我是絕對の零域 隊長 《絕對零域》 ξ槍剎〃
斗內槍剎福利:
★首先提醒~拜託~各位粉絲.觀眾 不要偷家裡家長的錢錢儲值or抖內~
家人賺錢不容易,且請不要拿自己的吃飯錢贊助我,請填飽肚子
拜託拜託拜託!!!請求各位贊助者遵守!!!
1.★★單筆贊助超過4000元~金主轉盤轉一次~本次新增11200鑽、22400鑽、、33600鑽槍剎跟你們拚運氣了!
2.★★單筆贊助超過4000元~贈送一台 槍剎專屬 行動電源 or 特製保溫杯 or 特製高級傘(可選擇超商收貨.郵寄到府)
(1. 2. 福利可同時領取~)
3.★贊助滿500可+遊戲好友~直播房卡轉轉樂可卡位2場
4.★贊助滿1000會有一場直播為您做封面。收到斗內後我會跟你聯絡哦~可以操控我做壞壞的事情..!?
(觀眾休閒場.觀眾排位場.交流賽代播.房卡轉轉樂.房卡獵殺戰.通話聊天台.我畫你猜台.唱歌欣賞台.照片欣賞台.水上拳擊台)
5.★累積贊助滿2000會給實習管管板手唷~還有專屬管管LINE群!!
6.★★單筆贊助超過2000元~贈送一張有槍剎醜照.LOGO的明信片~
★單挑房卡一場收費500元(無斗內福利)
★陪打1小時半500元(無斗內福利)
(經典.排位.團隊)
抖內方式 綠界超商繳費.7-11無摺存款.轉帳郵局or華南
★綠界 超商付款抖內.贊助 連結:
https://p.ecpay.com.tw/E870A
綠界抖內不會的可以私訊我唷~
直播中抖內會跳斗內語音唷~
★7-11中國信託ATM存款: 帳戶:901562054156
★全家台新銀行ATM存款: 帳戶:28881006101910
★郵局轉帳: 戶名:蘇琨閎 郵局代碼:700 帳戶:00716250266791
★華南轉帳: 戶名:蘇琨閎 華南代碼:008 帳戶:813200507373
★點卡贊助請私訊給序號 感謝
剎剎聯絡方式:
LINE:g150750
LINE2:g1507500
臉書:蘇琨閎
抖音:g150750
★★★加入頻道會員 https://www.youtube.com/channel/UC6rngazn4WLvN8q700cmVLg/join
先來一張照片 在 Ginger薑主播 Youtube 的最讚貼文
請各位大大先試題目 👉 1:15
你答對了嗎? 錯的話是選了哪個了呢?
誰願意承認答錯哈哈 (歪頭)
撇除過度緊張型考生,第一大題就是拿分題。
不相信腦袋就用手指幫忙, 看影片囉!
喜歡我也記得追蹤這些 🔎
♥ FB:https://www.facebook.com/msgingerme
♥ IG:https://www.instagram.com/gingerliu50