プログラミングに詳しいやつちょっと来てくれください!やったことあるだけでもOK!

技術
Online education isometric concept, laptop on book, internet course for learning on home, young man working on pc, cartoon flat vector illustration
スポンサーリンク
1: 以下、5ちゃんねるからVIPがお送りします 2019/04/06(土) 23:56:37.944 ID:6jxO1bAK0
webサイトから情報拾ってくる技術のことをスクレイピングっていうけどwebサイトにクエリ渡してその結果を受け取るのもスクレイピングなの?
後者の実装をどうやってやるのかよく分かってないから誰かたすけて…!

引用元: ・プログラミングに詳しいやつちょっと来てくれください!やったことあるだけでもOK!

44: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:39:25.506 ID:KbY8ebhA0
>>39
その、何?ってのが出来ないと出来ないよ
C言語とかJavaでも出来ないことはないけどそれは一般的じゃないというか
出来る技術者はたぶんVIPにいない
簡単にしたのがCGIって言語になるけど
それすら知らないって状態じゃ出来ないけど
技術的にはたぶん出来るよ
ちなみに>>1に書いてあることを
APIっていうんだけど
天気予報とかAPIで取得できるよん
それをどう取得するのか?ってのがCGIとか使って取得して使うんだけど

2: 以下、5ちゃんねるからVIPがお送りします 2019/04/06(土) 23:59:44.970 ID:0vgen2Esa
だめ

3: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:00:10.203 ID:MiPfxdNs0
そこをなんとか…!

4: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:00:36.404 ID:MiPfxdNs0
なんてググればいいのかだけども教えて!

5: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:03:32.408 ID:MiPfxdNs0
誰か…助けてよ…

6: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:04:03.806 ID:MiPfxdNs0
苦しいよ…辛いよ…

7: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:04:10.898 ID:X4hQwoN70
まずdb接続はできてんの?

8: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:04:56.598 ID:MiPfxdNs0
>>7
んとねー…わかんない

10: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:06:49.625 ID:xVEMxN/Or
pythonでweb通信の仕事してるから教えようかと思ったけどうぜえからやめたわ
本当に聞きたいならそんなふざけた態度やめろよ。

11: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:07:15.519 ID:1N5Hssr/0
POSTした結果を取りたいんだろ

13: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:07:18.501 ID:X4hQwoN70
え、どゆこと?
他人のサイトのdbにクエリ渡して情報取得したいってこと?
そんなことできんの?

15: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:09:08.395 ID:MiPfxdNs0
>>13
だってフロントで検索するのだってdbにクエリ渡して結果得てるわけでしょ?
出来ないって理屈が成り立たないと思ってるんですけども…!

19: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:10:41.719 ID:+kt7XjgTH
>>15
開発者が意図しないルートからのアクセスは基本アウトというかできない

22: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:13:48.305 ID:MiPfxdNs0
>>19
そしたら開発者の意図に沿うように操作する方法はないでしょうか…?

28: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:18:15.851 ID:+kt7XjgTH
>>22
もし検索するページがあるならそれを使うのが意図に沿った方法だな
URLを開けばほしい情報が載ってるなら好きなように取得できるけど

14: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:08:57.727 ID:tC5iKP0xa
エンジンエックス

16: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:09:55.328 ID:zdUxQc0i0
webサーバー経由してんだから無理だろjk

20: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:12:03.332 ID:MiPfxdNs0
GETとかPOSTとかそういう通信関連全くわかんないけどPOSTで通信してるサイトにクエリお渡しして結果を頂きたいと存じております

21: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:13:21.825 ID:X4hQwoN70
とりあえずサーブレットでも勉強すれば?

23: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:14:29.305 ID:1N5Hssr/0
プログラミングできるの?

29: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:19:02.064 ID:MiPfxdNs0
別に直接dbとやり取りする必要はなくて考えてることとしては、フォーム入力の延長みたいなもんです…
要はフォーム入力とsubmitボタンをプログラミングで実行できりゃいいんです…

30: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:19:34.238 ID:X4hQwoN70
スクリプト

31: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:19:43.281 ID:KbY8ebhA0
普通に出来るんじゃないのかなぁ
まずGETとかPOSTで送信する画面に送って
帰ってきた変数をPHPとかで自分のとこのサイトの変数に格納して使えばいいだけ

34: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:22:29.766 ID:MiPfxdNs0
>>31
初歩の初歩で恐縮なんだけどそれってつまりこういうことじゃん?
これ出来るの…?
今までサイトづくりって自分で作ったページをつなぎ合わせる感じで遷移させた事無いから出来るのかどうか気になってました…
sssp://o.5ch.net/1f9ab.png

32: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:20:02.207 ID:tPp5V/8q0
postして取りたいんだろ

33: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:21:03.769 ID:thbWCKW10
SQLインジェクションってやつやん

35: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:26:42.662 ID:KbY8ebhA0
まず
webサイトから情報拾ってくる←これは出来るじゃん?
PHPとかで正規表現でもして数値やデータ拾ってこればいい
で、それを変数に入れて使えばいい
前にFXのドル円の数値とか拾えるかやった事がある

次に、他のサイトの
例えば、VIPの書き込みとかは自動化できるというか
GETかPOSTで必要な情報、変数を飛ばせば、
自分のサイトから書き込むことができるハズ
さらにそれを変数に入れればいいんじゃないのかなぁ
こういうのってやってみて出来るかどうかだと思うから何とも言えない

36: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:26:45.577 ID:tPp5V/8q0
できるけどそれ以上の事は自分で調べた方が早いぞ

37: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:28:08.000 ID:tC5iKP0xa
だからエンジンエックスかアパッチ入れろって

38: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:28:18.278 ID:KbY8ebhA0
でも落ち着いてほしいけど
まず前提条件でCGIとかが使えないと無理だよ?

39: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:30:41.457 ID:MiPfxdNs0
>>38
CGIってなに

42: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 00:37:34.901 ID:aqlLpLRm0
edgeやらChromeやらだってプログラムなんだから、プログラムで出来るさ
簡単に出来るかは別問題だけどね

47: 以下、5ちゃんねるからVIPがお送りします 2019/04/07(日) 01:41:27.032 ID:iMS5iiM70
取得したHTMLから必要な情報を抜き出す
→スクレイピング

クエリー渡して結果受け取る
→多分それはAPIコール

技術
スポンサーリンク
りょうたろうをフォローする
スポンサーリンク
プログラミングまとめ速報ちゃんねる

コメント

タイトルとURLをコピーしました