Jump to...
redirecting...

Log for YSITD

笑死
你要幫我layㄌㄇ
大家都消失ㄌ
同性伴侶法的草案
要去哪裡看
字體能換ㄇ
換ㄍ受一點ㄉ
很瘦
噢不
[photo](media:AgACAgUAAx0CPZbPgAABFNbNXrbWPOITjuPcMB8BIN1cebyfGKsAArKqMRs-XLhVgWxy140KgeoDpuxqdAADAQADAgADbQADXrYAAhkE@telegram)
啊我要怎麼連你家蹦蹦系統
你ㄇ
[photo](media:AgACAgUAAx0CPZbPgAABFNbQXrbWlLD9P6nky8H6PzznVsHO_PAAArOqMRs-XLhViRUyjg2H4xHEbBprdAADAQADAgADbQADcEcAAhkE@telegram)
還是 @gnehs_OwO ((
帳號跟mail 我幫你在我ㄉ總管理系統加一個
你就能登進我所有系統ㄌ
聽起來我可以炸掉你家
[sticker](media:AAMCAQADHQI9ls-AAAEU1tZettbDt5YRTVsl4nDNkQABPQj38tIAAhwAA_zyIAOiMDfHqnajUmu05y8ABAEAB20AA_UBAAIZBA@telegram)
可以丟 TTF 進去ㄇ
[sticker](media:AAMCBQADHQI9ls-AAAEU1tlettcG8nLErLtWQ9St6SauK6vkewAC1AADiTz7FRNlHSsDZA4DSY8ZMwAEAQAHbQADzSYAAhkE@telegram)
字體
不確定 應該要改code
幫我找一下海豹豹的片片
你在那裡面找不到
:(
[sticker](media:AAMCAQADHQI9ls-AAAEU1t9ettrznJO1UbiJ8Xxmq2gH-TkbOQACMD0AAq8ZYgebQ_pIZSTaYlMJAzAABAEAB20AA54UAAIZBA@telegram)
奇怪我VPN有這麼難連嗎
QuQ
你是說海豹豹的片片 還是海豹豹收藏的片片
@gnehs_OwO@D0x0000FF 都連不上
[sticker](media:AAMCAgADHQI9ls-AAAEU1uZettsVOBrrb_br9FiBYJ56WUSjAQACcxIAAujW4hKWUrYzeg4kNXQKOQ4ABAEAB20AAyo2AAIZBA@telegram)
@da21510 就沒問題
台灣的法律有英文版的欸
[sticker](media:AAMCBQADHQI9ls-AAAEU1ulettsqs0ymFvaJKUHKHB1GJug2mAACUQEAAu4RlQyDe7YS-OjRAAEoQRszAAQBAAdtAANlCgACGQQ@telegram)
[sticker](media:AAMCBQADHQI9ls-AAAEU1upettv73v1VO8bFm3uPsvnLi5on4wAC1AADiTz7FRNlHSsDZA4DSY8ZMwAEAQAHbQADzSYAAhkE@telegram)
啥?
我的l2tpv3很炸 正在搞
沒跟到
你很順利連上ㄌ我ㄉVPN
但其他人很障礙
還有明明是Mac還障礙ㄉ
Mac設定明明沒有可以填ㄉ
那能算VPN嗎
L2TP不算ㄇ
我沒連ㄚ
喔幹妳沒有齁
他MacOS很蹦蹦
不懂
他沒有encrypt
@gnehs_OwO @D0x0000FF 你們兩個連不上ㄉ
https://140.113.170.77:8888/sslvpn/portal.html
直接戳他好ㄌ(
我把forti的SSLVPN弄起來了
直接戳網頁就能連上VPNㄌ
[photo](media:AgACAgUAAx0CPZbPgAABFNb7Xrbn3uNWgCasJEudrrJNAAElDJbRAAK6qjEbPly4VYmkuDHS_SuMpXXDanQAAwEAAwIAA20AA77IAQABGQQ@telegram)
我沒簽憑證(((
尼用 edge 喔
不要打我
哦哦哦酷wwww
可是感覺會悲劇
效能上
笨料料
不會啦
我剛剛用起來還好
幹嘛不給 wg
他就是純SSLVPN
或 OpenVPN
因為我裡面沒有wg機器
sslvpn 很難用欸
難用死了還要裝東西
沒有 另外兩個都還要另外裝軟體
啊你就開個 container 跑個人家寫好的 script
但他們都要裝軟體
我不想讓他們裝一堆怪怪ㄉ東西
那你乾脆開個 ssh port
SSLVPN 好笨
可是潮
[photo](media:AgACAgUAAx0CPZbPgAABFNcTXrboeSjr383zquv_uEgjFqItKlIAAruqMRs-XLhV8S9hnMJTOks7PPFqdAADAQADAgADbQADW70AAhkE@telegram)
你看他可以直接戳到我內網
sslvpn 不用額外裝軟體ㄇ
所以我要簽憑證對ㄅQuQ
上面那樣是 proxy 吧
不用R
.....
原來 Forti 有 proxy 功能喔,我還以為都是 SSLVPN
dono
那就是 proxy
他有quick connetion mode
n 你不能用
還是你能bypass他
現在能bypass他的瀏覽器好像不多了
[photo](media:AgACAgUAAx0CPZbPgAABFNchXrbo3W2GQYieXHiYYiJMw7rwGNkAAryqMRs-XLhVQ7DQzNvupztO-8RqdAADAQADAgADbQADN8cBAAEZBA@telegram)
所以要ㄇ
這什麼
web 幫你處理好的
類似 vnc 那種ㄇ
讓你不用裝Client
我很討厭要裝Clientㄉ東東
好笨
你才笨
我 L2TP 會動
但他們ㄉ不會動嗚嗚嗚
他們是要連 stuix 嗎
4
叫他們連連看我的?
你給他帳號R
或是你要接我的ldap
我給他們帳號連連看
我有架 PPTP L2TP 跟 OPenVPN
總有一個會動
但內建只有L2TP
[sticker](media:AAMCAgADHQI9ls-AAAEU1zdetuo9Jzs-9mh-8jlLVEseekpGwgACTwUAAutuoBAAAQspAu614DV8Q0sNAAQBAAdtAAMqmgACGQQ@telegram)
[sticker](media:AAMCBQADHQI9ls-AAAEU1zhetupf-tAcJ8t0N6fOa8PsAAE-CqoAAlEBAALuEZUMg3u2Evjo0QABKEEbMwAEAQAHbQADZQoAAhkE@telegram)
macOS 好像會蹦蹦
我在 mac 上用的是 OpenVPN
但我也是MacOS
我是好的
[sticker](media:AAMCBQADHQI9ls-AAAEU1z1etuxkmlzTbSG1A3A97lKgmjoczAACGgADDGCzCODJEBu83N6zC2DKMgAEAQAHbQADBU8AAhkE@telegram)
而且版本還跟他一樣
蹦蹦
OpenVPN 最穩
yay
PPTP 也穩
genㄍdomainㄉ出來
[photo](media:AgACAgUAAx0CPZbPgAABFNdEXrbtRFdzPImvI4de-5tghmyOSI0AAr2qMRs-XLhVQW_z_myCUTl0hm9qdAADAQADAgADbQADlM0DAAEZBA@telegram)
看看會不會通
要裝軟體
MacOS沒有
brew cask install
[photo](media:AgACAgUAAx0CPZbPgAABFNdJXrbtZ0fchs6VzwtIKNZfc4aDbHgAAr6qMRs-XLhVg7X_LXno74ztAh9rdAADAQADAgADbQADqUEAAhkE@telegram)
有夠髒
很好用欸
所以我才說用這個就好
很好用誒
好ㄌ簽好ㄌ
@TsundereChen 你也能玩看看
@DennyHuang 你也是啦 雷Fedora
[photo](media:AgACAgUAAx0CPZbPgAABFNdTXrbu5n-TkRNmjiPXW_qCFtZhnWcAAr-qMRs-XLhV8lnNXR-AFWWK8xtrdAADAQADAgADbQADnkgAAhkE@telegram)
玩啥啊
笑死
他笨笨
fortiㄉsslvpn
他不吃port forward
一定要port一樣
@gnehs_OwO 希望你連上ㄌ
不然我就要丟給 @lekous
他好像
連上了
你怎麼知道
因為我看到了
你怎麼看到ㄉ
蹦蹦
教ㄇ
你從哪看到ㄉ
為什麼我都沒看到
他連的是我 ROS 的 OpenVPN
喔酷
所以你逼人家裝ㄌ軟體ㄛ
好可憐
yay
所以他連上ㄌ
然後ㄋQuQ
不知道
他說會動了
yay
我把它流量導去你那邊好了
113 IP 看起來比較庫
三小www
[photo](media:AgACAgUAAx0CPZbPgAABFNdzXrbxsV5yxh5B1EI1OI7kTfysKssAAsGqMRs-XLhV1-_YoopjL6qbwfJqdAADAQADAgADbQADpLAAAhkE@telegram)
他拿什麼IP
搞不好我流量回不去
113 IP 的話
應該是 10.121.116
我 BGP 有宣告
過兩個hop我BGP就會炸掉YAY
弄爛了還沒修
爛死了wwww
只到113是好ㄉ
你到我台北家就會壞了
我跟你才一個 hop
沒事
yay
漆彈好好玩 yay
:(
雷雷也想玩
你要去看看喔那張圖ㄌㄇ
改天陪你玩漆彈(X
料料不會出門(
漆彈是遊戲
偶知道
偶也想玩
:(
那要出門幹嘛
[sticker](media:AAMCBQADHQI9ls-AAAEU14xetvMUJvz45Hm_2bnCYoB-Vzqd3AACBQADkyvZHYar0hcZH9sbHOLUMgAEAQAHbQADhSsAAhkE@telegram)
去公園玩啊
逼比說料料要玩物理漆彈 yay
噢不
ㄩㄇ
很熱
這天氣玩會死人
連雷雷ㄉ VPN 就能看ㄌㄇ
你還可以看 IEEE 看免費
我要去睡睡ㄌ
[sticker](media:AAMCBQADHQI9ls-AAAEU15hetvPtGhD9IfqX3BNTdxW-DfiGvwACrwEAAjg5dzPjTFzGaMTBU2np-2p0AAMBAAdtAAMfBgACGQQ@telegram)
我們ㄉ網路連在一起ㄉ
我已經在床上ㄌ
我可以直接看ㄇ
他在哪r
就那張librenms的你拉不好ㄉ那張
沒 我以為你動畫載完ㄌ
問一下 t.me/tocas_ui 是誰的,能不能把名字讓給我
[sticker](media:AAMCBQADHQI9ls-AAAEU16Vet2Z53CS11kuXeDFek7Lsudf7QgACggADMPlGPpM8la2ASQEFVmYkMwAEAQAHbQADdE8AAhkE@telegram)
[sticker](media:AAMCBQADHQI9ls-AAAEU16Zet2bgGpZgxlsxDoNdkusOdrRu3AACjQADDGCzCOt65760mSgQvo_KMgAEAQAHbQADEE0AAhkE@telegram)
你要 Release 了嗎,ㄚ
猜 Sean
為什麼底下有人說不難中和ㄚ
我也猜
@da21510 你們ELK都被塞後門了啦
笑死
[photo](media:AgACAgUAAx0CPZbPgAABFNeuXrd5YPSkQgAB8Dsay_sPBK2_F7oaAAIiqTEbF_XBVcQrlPMZaieuC19manQAAwEAAwIAA20AA3DOAwABGQQ@telegram)
[photo](media:AgACAgUAAx0CPZbPgAABFNevXrd5YJ4smqp0VtQ-Fk6FjssPD3YAAiSpMRsX9cFVin6hQU5f9b-HXxdrdAADAQADAgADbQADiEoAAhkE@telegram)
[photo](media:AgACAgUAAx0CPZbPgAABFNewXrd5YA_pWUd1xCrNPCOCGu0i0_0AAiWpMRsX9cFVGTZ6L3NUU30EuWZrdAADAQADAgADbQADUhYAAhkE@telegram)
[photo](media:AgACAgUAAx0CPZbPgAABFNexXrd5YMqCBu5wDbT4WO8BOvqitLcAAiapMRsX9cFVr7xYiWjl0XOqbRprdAADAQADAgADbQAD4UgAAhkE@telegram)
[photo](media:AgACAgUAAx0CPZbPgAABFNeyXrd5YGWUkzMQVMvF6zL84NZnM-cAAiepMRsX9cFVPU2wi849d0KWDyJrdAADAQADAgADbQADJ0MAAhkE@telegram)
[photo](media:AgACAgUAAx0CPZbPgAABFNezXrd5YPiZ-ufMNI06pdYv9vKsheoAAiipMRsX9cFV-gVictGS4kSgrWNrdAADAQADAgADbQADLxgAAhkE@telegram)
[photo](media:AgACAgUAAx0CPZbPgAABFNe0Xrd5YJ5UV6f79QEhXx5TnL4DKsoAAimpMRsX9cFVQsmILX4F50HA5RhrdAADAQADAgADbQADBksAAhkE@telegram)
[photo](media:AgACAgUAAx0CPZbPgAABFNe1Xrd5awj1Wlz-LSym4UIamyi_teIAAiqpMRsX9cFVc0oa8Fq4V8zXPWhrdAADAQADAgADbQADbBgAAhkE@telegram)
笑死還沒排過口罩
反而是在排手搖飲料
好好喔我也要喝
來啊(?
[photo](media:AgACAgUAAx0CPZbPgAABFNe6Xrd6REj-NwQ8Jt1vzbEP6lW28wsAAp-qMRtzILhVsaC0zy2HJKTZsu9qdAADAQADAgADbQADjcYAAhkE@telegram)
好遠好遠喔
[sticker](media:AAMCBQADHQI9ls-AAAEU17xet3pQv628oY96MjqcTXFD3VwOKQACrgEAAjg5dzN4XyQ3BQYplf1x4Gp0AAMBAAdtAAN-agACGQQ@telegram)
看起來要排很久
你來了應該還沒輪到我
我家住在離這邊 9 km 都過來排隊惹…
我在雲林欸
真假
那你去跟滴妹敲碗加盟
可以ㄅ
弱鹼滴定強酸
會變成
蹦蹦緩衝溶液
pH < 7 時就會達到當量點
弱鹼在這時會強制解離 沒有部分解離ㄉ問題
強制解離是啥
你高二沒上到ㄇ
@coin3x 逼比應該剛上完
你可以問他
ay
大概忘了
那是上學期的
我ㄉ記憶有半衰期
:(
沒有人會記得
蹦蹦指考
學測範圍ㄅ
ono
yes
那你為什麼不會
:(
ok +365n
當量點不考了
騙人
笨逼比
N
我真的不記得有強制解離這咚咚
++
o n o
不適滴滴滴滴到當量點而已ㄇ
雷雷太老
:(
um
你是高二不是ㄇ
酸鹼滴定我剛查了一下
在選修化學(上)
我們上的順序不一樣
笨學校
數學比化學有趣多了
誰要讀化學
嘔嘔嘔
n
化學好算多了
:(
一堆小數點
可是你數學也不好
:(
各種除不進
沒有配數字
老題目都這樣
尤其是什麼建x雄x的題目
數字乾那賽
哪有
: (
物理好多了
有 :(
我只是不擅長算術
[sticker](media:AAMCBQADHQI9ls-AAAEU2AABXreDxUxEYELpcCK5Yw2-8Ju82z4AAhcAA-nPYgiANyqPsub7Fk8gvjIABAEAB20AA3skAAIZBA@telegram)
我國小的時候也差不多誒
算10題錯8題吧
後來正確率就慢慢變高了
但是我還是比較喜歡數學
比起其他科目
我比起數學,更喜歡程式設計
數學比較難QQ
笑死
這鍋我可不背
其他實驗室我管不了
明明有log
求個詳細?
你打開
找一下log
哪台
就會看到有cron在跑
我電腦收起來了
我們沒ELK
那是其他實驗室的機器
[photo](media:AgACAgUAAx0CPZbPgAABFNgRXreO5cYEtBkgP3QjEfg5n7pE26MAAsKpMRt2GMFVZDiv7HwDVE0xqOxqdAADAQADAgADbQADEdMAAhkE@telegram)
有接Kibana的那個嗎
笑死
電腦太爛Wanna cry跑不動
突然挖古文
lol
我也發現了
看來我是IE
全都有接ㄅ
喔 收aruba的那台
hpcㄉㄅ

那全都不是我們網管的機器
我去跟他們老大告狀(
笑死
你有看到cron在跑啥嗎
curl || wget || perl || python | bash
pastebin c2
可惜pastebin被刪了
應該是一分鐘一次之類的
[photo](media:AgACAgUAAx0CPZbPgAABFNglXreR_ffu43NUL3KLQFyvxzFO_0cAAsapMRt2GMFVMlbnrltaXLVyfB1rdAADAQADAgADbQADmkwAAhkE@telegram)
你用什麼撈到他們被戳爆的r
我復現一次 拿資料去跟他們講
我用他們的kibana看到的
[sticker](media:AAMCAgADHQI9ls-AAAEU2Chet5OQvUzuh_5JePVR3WsQNHxbRAACTwUAAutuoBAAAQspAu614DV8Q0sNAAQBAAdtAAMqmgACGQQ@telegram)
他們有用filebeat還logstash收系統log
我就剛好喵到cron執行紀錄
啥鬼wwwww
連被爆破的log都噴出來給人看到ㄛ
感覺是中RevengeRAT(?
[photo](media:AgACAgUAAx0CPZbPgAABFNguXrengAZNsfbcCxCG6ryhSMzJRGMAAlmrMRtdQ7lVHA4Esg3_yKYkPmhrdAADAQADAgADbQADKhkAAhkE@telegram)
一進來就spam
@admin
噢噢噢
「一個」生物的定義是什麼啊
我要怎麼區分一坨東西是一個生物還是很多個
e.g. 僧帽水母
想請問有人參加過之前的Google學生開發者計畫嗎?
申請時有提到 DSC code ,想知道那是什麼。
[photo](media:AgACAgUAAx0CPZbPgAABFNg4XrfC7995SgzHhbv8oWa4usGAGjgAAtepMRt2GMFVXNRV_X9zk11ie2xqdAADAQADAgADbQADPM4DAAEZBA@telegram)
我也不知道你看到啥
很難解釋哪邊有洞0.0a
[photo](media:AgACAgUAAx0CPZbPgAABFNg7XrfEmZPeP-0l5MbxLjZwCjia8-sAAtmpMRt2GMFVb69Li1LimJ74q2NrdAADAQADAgADbQADBhsAAhkE@telegram)
跟他說是外校的同學看到的
麻煩狠狠的打臉他
笑死ww
還是洋蔥網路來的耶
我開始考慮把所有實驗室用vlan切開
噁心死了
[photo](media:AgACAgUAAx0CPZbPgAABFNhBXrfFfP3n6g-34no6-oKd1LQRLhYAAtqpMRt2GMFVsrbhIBmkCWnYdcNqdAADAQADAgADbQAD680BAAEZBA@telegram)
笑死
被肛還野外露出(
笑死 他真的有去看 log 嗎
他回了什麼
[sticker](media:AAMCBQADHQI9ls-AAAEU2EZet8oqMeEVFeNi9okWrgWDNb5tigACBQADkyvZHYar0hcZH9sbHOLUMgAEAQAHbQADhSsAAhkE@telegram)
他還沒回ww
[photo](media:AgACAgUAAx0CPZbPgAABFNhIXrfTQMqoIlYUG_Yq7Cxzi329PFgAAuKpMRt2GMFVpuK5_q-Tmz-EAW5qdAADAQADAgADbQADWNQDAAEZBA@telegram)
好久ㄛ
坐等有人載好第三季
我昨天原本載好了
然後ㄋ
yay
then?
電腦炸掉
我的網路現在很炸
router沒乖乖幫我masq
笑死
幹嘛連 zip 也傳上去
我爽
[sticker](media:AAMCAgADHQI9ls-AAAEU2FZet9sfRR9iFl92Ffrov8EgsgABj1AAAmISAALo1uISg3MwGy_7nvGjT5wPAAQBAAdtAAPUJQACGQQ@telegram)
為什ㄇ只有S2ㄚ
因為還在傳
[photo](media:AgACAgUAAx0CPZbPgAABFNhZXrfgzxTtfaDKIDueGmlPTp-CwPwAAuypMRt2GMFVZgABMMafIpcyZbTvanQAAwEAAwIAA20AA9nIAAIZBA@telegram)
[sticker](media:AAMCAgADHQI9ls-AAAEU2Fpet-IGeEbVwv6yNY1CvzfuOeJrkAACzxMAAujW4hJQNc1MYX6kQyAqPZEuAAMBAAdtAAOcZQACGQQ@telegram)
[photo](media:AgACAgUAAx0CPZbPgAABFNhbXrfo3ZLMyxr7btKBLJ3pjgYeu1sAAvapMRt2GMFVeI81B3Y0G-x7c8NqdAADAQADAgADbQADPckBAAEZBA@telegram)
大概跟嗨爆的密碼限制差不多
淦結果我剛剛
[photo](media:AgACAgUAAx0CPZbPgAABFNheXrfsZqLNthRtoG16Ekw0YYKkHbYAAvipMRt2GMFVx3a9ocAyEDQc9GpqdAADAQADAgADbQAD19YDAAEZBA@telegram)
是在銃三小wwww
科技部補助人工智慧技術暨全幅健康照護聯合研究中心
??????
為啥這兩個合在一起
欸欸
為什麼 gradient descent 的時候要大小取決於微分值
而不是看方向就好
微分值越大你對loss function的影響力越大,所以你需要調整的值理所當然要大一點,才會越快達到minimum
為什麼理所當然的較大
譬如說你weight_1調整1,loss可以降低1,然後你weight _2 調整1 loss卻降了100,這時候你會比較傾向讓weight_2調整多一點,這樣會比較快達到min
不然你如果要同樣的效果
你調weight_1要調很多
所以調weight_2 cp值高一點
cp值是建立在price是代價的情況
我可以調 w1 調很多ㄚ
會怎樣ㄇ
我想想
[photo](media:AgACAgUAAx0CPZbPgAABFNhwXrf83Xd_0US_apDlcXh8PfJiGaQAAgKqMRt2GMFVoBs7KT331zPwOvFqdAADAQADAgADbQADwM4AAhkE@telegram)
6/6 星期六
你會沒辦法下降
找你這麼說你每一個weight你都可以設很大的數字
這樣子你只會在函數上面亂跑
而不是慢慢下降
其實有一點learning rate的概念在裡面
我覺得你可以再想一下(
我覺得 Gradient Descent 依賴了某項假設
越平坦的地方越靠近 local minimum
---以下是我自己ㄉ想法---
3b1b不是有說weight關聯到神經元中間的強度
所以說你在optimized的時候就是在訓練神經元最符合資料想要的connection
所以你在optimization的時候,你會對weight跟bias做偏微然後利用資料來告訴你,那邊的connect應該要增強那邊應該要減弱,這樣才會更符合資料要的connection,然而你如果反而資料告訴你哪邊的connect不要增加那麼多,你卻在那個weight加了一個很大的數字
這樣等於你沒有在跟著資料學習不是ㄇ?
可是
我有按照資料的方向
你會走過頭啊
不是一直都是哪個方向
但我會回頭ㄚ
[sticker](media:AAMCBQADHQI9ls-AAAEU2IVeuAABsxwrR0mXX_tBaVke6MzMmsIAAiwAAwxgswgaG-Cc17zj5gRbyjIABAEAB20AA_xOAAIZBA@telegram)
我提供一個具體一點的方法好了
假設我在x點的梯度是 v(x)
通常我們用的方法是 new_x <- x-n*v(x)
那如果說,我們改成
new_x <- x-n* (v(x)/|v(x)|)
相當於改成一個方向相同,但長度為1的向量
可行不過會學的比較蠻
我覺得你可以把神經網路的緯度降回來三維的空間想一下
我們都知道三維空間是x,y,z軸
今天假設高度是z
空間裡有一個峽谷
你今天在最上面你要下山
你拿峽谷對x做偏微
跟對y做偏微
你會發現你拿到的東西是你站在的點,分別對x剖面和y頗面的斜率
然後x的方向比較陡但y相對來說比較平緩
今天你要往下走的話你是不是朝著x的方向走多一點是不是比較有利?
我現在已經在討論方向跟梯度一樣的情況了(
我現在討論的單純是大小
那一樣這個情境
如果你往下走越來越平了
斜率會變小對ㄅ
所以你已經預設了一件事ㄚ
越平的地方
越靠近終點
我質疑的就是這點是否成立
ㄇ想過這個問題
舉個例子
[photo](media:AgACAgUAAx0CPZbPgAABFNiiXrgDFKH-22-wUtdX7MNeYhBL4fMAAgeqMRt2GMFVtTNjbIsvAdzquGZrdAADAQADAgADbQAD0RwAAhkE@telegram)
感覺是在討論局域跟全域的
假設今天長這樣
你能用 Gradient Descent 找到最佳解
但是你會在那個平原
跑很久
對啊
訓練就是會出現這種狀況
但是你也沒辦法保證你一次調很多就會找到哪個坑啊
我覺得
說不定哪個坑根本不存在
你先不要用一個 「Gradient Descent 一定對」的想法在想事情
: (
我沒有覺得他一定對
有時候你同一個模型,同樣的東西跑兩次結果就不一樣了
其實也有靠賽的成分啦
這種case你應該也可以嘗試調整learning rate
我在想
我想了一下好像也不一定比較慢
要看情況
總之Gradient decent就是比較中規中矩的做法,應該這樣子說
@briansu 早安
有什麼 optimizer 是類似我說的嗎
[photo](media:AgACAgUAAx0CPZbPgAABFNi6XrgIVxT-Z2gxQC2lpV0tJTbRqiEAAhmqMRt2GMFVs7BBzT-6WvcaDSJrdAADAQADAgADbQADEUoAAhkE@telegram)
你是說每次都往梯度的方向走單位向量嗎
Y
沒有 吧
原則上走的距離都是正比於梯度大小的
但沒有人說你不能這麼做
只是你在斜率大的地方會走太慢
倒是有參考前一筆梯度的
然後在很靠近的地方反而走太快
有R
靠動量的
為什麼斜率大的地方就代表可以走比較遠
這只是其中一個因素而已 (?
就首先至少你不會希望是反過來的
再來是在「剛開始」的時候 斜率大就走快一點是合理的
那當 step size 收斂的時候 斜率對距離的影響就沒那麼大了 反正都走不遠
為什麼剛開始的時候不是都走快一點
而是只有在斜率大的時候走快一點
有這種optimizer
我知道
但是他跟梯度大小成正比
這邊的假設是距離最低點越近 斜率會越小吧
而且如果你的圖形是平滑的 這也是事實吧
我怎麼突然覺得如果放棄這種想法
會有很大的突破
實際上假設應該是 斜率會越小 => 距離最低點越近
這個是否吧
就例如我剛剛畫的平原
我們是因為怕跑過頭 所以才在斜率低的時候走慢一點 因為可能已經到最低點了
所以我在想
能不能完全依靠迭代次數來決定走的距離
而為了解決平原的問題
才會有考慮動量的 optimizer
而獨立於梯度大小
你是說回到你前面說的
用單位向量乘上 step size 嗎
我覺得 你 可以試試阿XD
只是能能結果不會有太大差異 (?
有什麼推薦的 framework 可以讓我這樣改ㄇ
framework 歐
這感覺比較需要手寫吧
ㄛ好ㄅ
反正一定是用 python
我想窩找到你的想法ㄌ
link
有頭緒ㄇ
我覺得他沒有解釋到(
你的想法可行
[sticker](media:AAMCBQADHQI9ls-AAAEU2OpeuA6j2FJjihgqWAP14qioB42tlwACbwADdjHSCS0JiGbxd7_8sm_eMgAEAQAHbQADa2gAAhkE@telegram)
應該是可行(?
如果每一次下降的單位都一樣
反正走過頭了方向也是會幫你修正回來
但是回答有點看不懂
Which is to say, no the book is right.
這句話是啥麼意思
如果你想要下降ㄉ最快,哪你下降的大小會跟倒數成正比
應該是這樣