teratailもりあがっtail? 22問目

2018/11/22(木) 17:33:29.57

teratail
https://teratail.com/

■前スレ
teratailもりあがっtail? 21問目
https://medaka.5ch.net/test/read.cgi/prog/1541649918/

■ユーザ名の略称、用語
http://fiddle.jshell.net/17zs2rmp/1/show/light/

■次スレ用テンプレ
http://fiddle.jshell.net/17zs2rmp/1/show/light/#thread-template
上記URLの「テンプレ案」を元に次スレを立てて下さい。
1行目の」「!extend:」から始まる行は必ず入れて下さい。

VIPQ2_EXTDAT: checked:vvvvvv:1000:512:----: EXT was configured

2018/11/22(木) 17:36:25.62

>>1
次スレのテンプレ案
http://fiddle.jshell.net/17zs2rmp/2/show/light/

2018/11/22(木) 17:42:37.18

スレ立て＆テンプレ乙
一気に高度になったな

2018/11/22(木) 17:46:29.31

これあだ名とかつけくわえてもいいのん？

2018/11/22(木) 18:02:10.37

ヲチね

2018/11/22(木) 18:06:08.84

>>4
誰でも編集できるように、jsfiddleにしたから好きに変えてくれ

本文が画面端に寄りすぎていたので、CSSを調整してみた
http://jsfiddle.net/17zs2rmp/3/

2018/11/22(木) 19:40:30.84

テンプレ案のユーザ名の略称見てて思ったんだが
爺(Zuishin)とパパ(episteme)とママ(asm)とオカン(mts10806)とペット2匹(犬(Chironian)、スヌーピー(YouheiSakurai))で一つの家族みたいだな

2018/11/22(木) 20:33:00.40

> matsuzakaq (URL不明)
> MG1986JP (URL不明)
> zzzzz (URL不明)

名前は一字一句合ってるのかね？
合ってるなら退会済、間違っているならまだアカウントが生きている可能性があるが…

2018/11/22(木) 20:39:19.22

マジゲイは改名した
https://teratail.com/users/kuzurotto

松坂はもともと複垢多過ぎてどれが本体かわからない

いびきはBANされた

2018/11/22(木) 21:40:47.23

おいおいIP表示かよ。マイナーなプロバイダーを使っていたらほぼ特定されるじゃん！
インターネットマルチフィードのtransixサービスを使ったDS-Lite通信なんて使っている奴なんて
俺以外におるんか？

2018/11/22(木) 21:43:42.20

>>9
ありがとう、反映しておいた
http://jsfiddle.net/17zs2rmp/5/

その前に誰かが更新したみたいだが、何が変わったのか分からなかったので/5/に反映していない
http://jsfiddle.net/17zs2rmp/4/

2018/11/22(木) 23:26:02.12

バブみ、ガッテンランキングを追加しといた
http://jsfiddle.net/17zs2rmp/7/

http://jsfiddle.net/17zs2rmp/6/ というのがいつの間にかできてるが、用語が追加されてるみたいだな

2018/11/22(木) 23:57:41.92

こっちにホイ

2018/11/23(金) 00:02:42.38

https://teratail.com/questions/159810#reply-239432
いつものアヒルの名（迷）言でた

2018/11/23(金) 00:31:34.48

>>12
乙

- dl>divのHTML文法違反が気になったので、別の実装法に変えた
- 目次を追加した
- /6/の用語を一部加えた(「クラッシュポイント」は真偽不明なので入れなかった)
http://fiddle.jshell.net/17zs2rmp/8/show/light/

＞こっそり修正してくれる人へ
修正してくれるのは有り難いんだが、何の報告もなしにこっそりやられると修正されている事実に気が付かず、俺や>>12のように更新後にナンバリングが飛んで気が付く事になる
自分で更新した内容を反映してほしければ、ここで報告してくれ

2018/11/23(金) 00:41:21.87

次はワッチョイだけでIP要らんと思うが
>>1乙

2018/11/23(金) 00:55:44.31

フォークして色々変えた。内容的には8と一緒のはず。
(フォーク後に追加された分のコピペをミスしてなければ)
https://jsfiddle.net/zhvLes43/21/show

変更点
・CSS -> SCSS
・PureなJavaScript -> Babel + JSX
・リストはYAMLで管理できるようにした。説明とかはMarkdownを使えるようにしてる。
　Reactにしようかなと思ったけど、<template>をクローンしながら足すようにした。
・IEは捨てた。意識高い系の寺尾ラーにIE使いなどいない！

YAML知らない人のためにJSONも考えたけど、JSONって追加するのに","とか考えるの面倒だから、
人の手であつかうフォーマットじゃ無いんだと思うんだよね。
codepenだったら、趣味全開でpug+sass+coffeescriptのインデント3姉妹にしていたかもしれん。

2018/11/23(金) 00:58:15.98

ランキング部分は一つのリストから自動生成とかしたいね。
明日の朝までに妖精さんがやってくれるような気がする。

2018/11/23(金) 01:18:13.47

JSFiddleってつかったことないんだが

- 更新ってSign inせんと出来ないのん？
- {Update]押したらええのん？
- 更新は勝手にやってこっちには報告のみでええのん？

2018/11/23(金) 01:45:01.81

>>15 からの変更。
dl要素直下ではdiv要素を使えるはず( https://developer.mozilla.org/ja/docs/Web/HTML/Element/dl#Wrapping_name-value_groups_in_HTMLElement(div)_elements )
なので、とりあえず、項目ごとにdiv要素でグルーピングしておいて、少しCSSをすっきりさせた

http://jsfiddle.net/17zs2rmp/9/

2018/11/23(金) 01:52:34.32

>>19

- Sign inする必要なし
- ヘッダーのUpdateボタンを押す
　⇒「Update anonymous (public) fiddle?～」的なドロップダウンがでてくる
　⇒ドロップダウンの下部にある「Update fiddle」ボタンをクリック
　⇒URLの後ろについてる数字(http:~~/1/←ｺﾚ)がスレに出てなければ更新完了。更新後のURLを添えて変更点を報告
- 今のところいいんじゃね？いずれルール作らないとどうにもならなくなりそうだけど

2018/11/23(金) 02:02:01.88

>>21
ありがと。あとで気が向いたらやってみる。

2018/11/23(金) 02:08:53.62

Git使いたいとこだが匿名性消えるのよな

2018/11/23(金) 02:12:14.12

https://jsfiddle.net/zhvLes43/22/
新規ユーザーの追加、既存ユーザーのあだ名追加。

2018/11/23(金) 03:17:07.75

いまのとこ
http://jsfiddle.net/17zs2rmp/9/ 　と
https://jsfiddle.net/zhvLes43/22/ 　があるのか

どっちを使っていくかね(個人的には後者推し)。

2018/11/23(金) 08:39:00.49

見比べるの面倒だから丸投げ質問するけどどう違うの？

2018/11/23(金) 08:54:14.03

>>26
内容的にはほぼ一緒
17zs2rmpからzhvLes43への変更でJS等をどう弄ったのかは>>17にだいたい書いてある。

2018/11/23(金) 08:56:32.69

代わりに答えちゃうけど、２番目は１番目をforkして改良したもの。(>>17)
だから２番目が本流だと思うよ。

2018/11/23(金) 09:35:48.99

自己解決しました！(解決法の記述無し)

2018/11/23(金) 10:43:51.06

【至急】初心者　スクレイピングについて

### 前提・実現したいこと

レートとランキングのデータ取得ツールを作ろうと思っています。
スクレイピングを行うのに、おすすめの言語とライブラリを教えてください。

### 発生している問題・エラーメッセージ

teratail APIに総合ランキングを取得するパラメーターが見当たりません。

### 該当のソースコード

```
var request = require('request');

request('https://teratail.com/api/v1/users', function (error, response, body) {
console.log('Status:', response.statusCode);
console.log('Headers:', JSON.stringify(response.headers));
console.log('Response:', body);
});
```

### 試したこと

総合ランキングのページネーションでajaxが取得するデータを見ましたが、
JSONに生HTMLを入れているだけでした。

### 補足情報（FW/ツールのバージョンなど）

Windows

2018/11/23(金) 10:49:23.15

寺尾APIは糞だから、スクレイピングするしかない

2018/11/23(金) 10:58:46.93

>>20
> dl要素直下ではdiv要素を使えるはず( https://developer.mozilla.org/ja/docs/Web/HTML/Element/dl#Wrapping_name-value_groups_in_HTMLElement(div)_elements )
知らなかった
教えてくれてありがとう

俺としては、CSSの為にHTMLを書き換えるのはしっくりこなくて、元のCSSの方が「HTMLがすっきりしていていい」と思うが、好みの問題だろうな…

2018/11/23(金) 11:07:20.94

>>26
使用言語の違いが大きい

http://jsfiddle.net/17zs2rmp/9/
- HTML
- CSS
- JavaScript

https://jsfiddle.net/zhvLes43/22/
- HTML + YAML (tableデータをYAMLで管理)
- SCSS
- Babel + JSX

/zhvLes43/はYAML,SCSS,JSX,markdownを理解していなければ、コードを書けないという点で要求される技術レベルが高い
俺としては、ハードルを上げすぎない方が編集者が増えていいと思うが、どうしたものか

2018/11/23(金) 11:22:52.84

>>18
> ランキング部分は一つのリストから自動生成とかしたいね。
それが理想だが、リンキングを更新してくれる人が参照している元データが分からんと対処しようがない状態
とりあえず、zhvLes43のtable生成コードは汎用性を上げる余地があるので、改善してみる

34 (ｱｳｱｳｴｰ Sadf-A3/R [111.239.144.248]) · 2018/11/23(金) 11:26:50.46

> それが理想だが、リンキングを更新してくれる人が参照している元データが分からんと対処しようがない状態
よくよく考えたら、「順位,ユーザ名,総スコア,回答総数,BA数」を基に計算しているだけだな
やってみる

2018/11/23(金) 13:06:47.17

そもそもこっちじゃないとそれ置けない理由がないから

2018/11/23(金) 14:38:03.18

IP非表示をもとめるこえがそれなりにあるけど、逆に非表示に反対する奴はどれくらいおるん？
とくにいないようならテンプレ変えちゃうけど（IP非表示・ﾜｯﾁｮｲ表示・id表示）

2018/11/23(金) 15:58:49.43

>>37
IP表示賛同派
IP表示が下手な書き込みが出来ない抑止力になる事が期待できる

2018/11/23(金) 16:19:51.93

>>37
どっちでもいい。
俺のIPアドレスはどのGeolocationサービス使っても正確な場所が表示されないからな。

2018/11/23(金) 17:26:39.79

ここまで全員回答者

2018/11/23(金) 19:42:25.97

質問者がこんなところ見るんかいな

2018/11/23(金) 20:28:27.71

途中経過(11はBabelに変更してみただけ)
http://jsfiddle.net/17zs2rmp/10/

- HTML + CSS + JavaScript(Pure)
- 全ての表をYAMLから出力するようにした
- 目次を自動生成するようにした
- IE未対応になってしまった(Babel+JSXに変更するだけでは上手くいかんのね)

本題の「ランキング部分は一つのリストから自動生成」について
技術的には可能だが、総合スコアの元データが出ていないから、集計データを貰えないと作れない事に気がついた
「集計対象ユーザ総合TOP30、もしくは月間TOP10」もあいまいで集計手順が不明瞭なのが困る

2018/11/23(金) 20:30:58.44

バブみ率とガッテンレートの用語辞典には何も記載がないが、どっちかが総合集計でどっちかが月間集計なのかね…

2018/11/23(金) 20:59:44.56

IE11に対応させた
http://fiddle.jshell.net/17zs2rmp/12/show/light/

2018/11/23(金) 21:01:01.49

>>42
たぶん<template>についてIE対応が無理だとと思う。
もうIEはきっぱり諦めてばりばりのES2015+で行こうぜ。

44 (ｱｳｱｳｴｰ Sadf-A3/R [111.239.136.129]) · 2018/11/23(金) 21:12:06.10

>>45
バリバリのIE11対応にしてしまったZE!

2018/11/23(金) 21:41:31.72

正直、IE11対応よりもYAMLの扱いを覚えるのに時間がかかった
YAML自体は読みやすくて良いフォーマットだと思うが、表形式に変換するならハッシュとの相性が最悪
YAMLはオブジェクトとして解釈するから順番制御ができない
だもんで、列名の順番を定義しなくてはならなかったのだが、知らない人から見たら「なんでこんな面倒な事を...」ってなるよな
YAMLが気を利かせてMapを返してくれればよかったんだが

本音を言えば、二次元配列にすれば綺麗にまとまるんだが、>>17は読みやすさ重視でハッシュを採用したのであろうからそこは変更しなかった

2018/11/23(金) 22:07:59.49

>>47
そういやJavaScriptのMapについてQiitaに記事を書いた時に、
YAMLの連想配列をMapとしてくれるようなライブラリを探したんだけど、なかったんだよなー。
おっと、これ以上は身バレするからこの話はやめとこう。

CSVは編集しづらいだけなので、採用しなかった。
JSONは最後のエントリーに余計なカンマを付けられないなど制限が多すぎるので、採用したくはなかった。
CSONはさらに知っている人少なそうだから論外として、JSON5の方が良かったかも知れない。
その他の候補としては使ったことないけどTOMLとかかな。

ランキングのスクレイピングツールはNode.jsでつくるかRubyでつくるか未だ悩んでいて、一行も書けていない。
とりあえず、teratail APIが何の役にも立たないと言うことだけがわかった。
人の手で編集するわけではないので、こっちの出力はCSVでいいのでは無いかと思っている。

2018/11/23(金) 22:12:59.45

>>48
https://qiita.com/raccy/items/816a322fb330193e788b

2018/11/23(金) 22:20:37.86

これで一人埋まったな
ラッシーは日本ネットワークインフォメーションセンター
場所は東京あるいは大阪
多分東京

テンプレに追加よろ

2018/11/23(金) 22:40:06.47

>>48
YAMLでMap出力はやはり無理なのか
CSVは表計算ソフトを使えば、YAMLよりはよっぽど二次元データの編集しやすいと思うが、そんなに編集しづらいかね？

クライアントJSでスクレイピングは無理だが、HTMLソースから情報をひっぱるだけなら<textarea>で入力して貰えばいい気がしてきた
というか、あなた(>>30)は絶対に初心者ではないと思う

2018/11/23(金) 23:00:33.68

おうコピペミスしてる
日本ネットワークインフォメーションセンターじゃなくてインターネットマルチフィード株式会社だ

2018/11/23(金) 23:09:13.66

>>51
表計算ソフトを開くのが面倒でしょ？
というか、このPCにMS OfficeもLibreOfficeも入っていないことに今気付いた。
Google SpreadsheetsやOffice Onlineでも使えばいいやって思って入れてなかったわ。

2018/11/23(金) 23:13:56.91

>>52
インターネットマルチフィード株式会社は個人向けプロバイダーじゃなくて、
プロバイダー間のバックボーンの会社から、個人が直接契約結ぶことはないよ。
まぁ、transixサービスを提供しているプロバイダーはごく少数だと思うので、
ググっていればいつかは辿り着くと思うぞ。
ついでに、DS-Liteはマジで速いからお勧め。MTU1500の力は偉大。

2018/11/23(金) 23:19:10.50

>>53
表は表計算ソフトで編集してこそ真価を発揮すると思う
ぶっちゃけ、一から入力するならYAMLは面倒くさくて仕方ない
元からあるデータを少し、修正する程度なら良いが、セルのコピーできんし、他のデータを読むために表よりも長く縦スクロールしなければならない…とデメリットが大きい

2018/11/23(金) 23:20:55.51

ずっとNintendoの話をしてるのかと思ってた
はずかしい・・・

2018/11/23(金) 23:38:43.25

らっしーはそもそも大阪-京都圏だぞ
もっと言うと祝日だし、NTT系列の会社内部から5chに書き込めるわけ無いだろう
情報漏えいとして即刻クビが飛ぶわ

2018/11/23(金) 23:48:03.52

まあ重要なのはそこじゃない

プロバイダはともかく、そのドメインから接続してんのがラッシーと特定できたんだからラッシーは今後コテハンで書き込んでんのと同じことになったってことだぞ

2018/11/24(土) 00:00:13.30

つまりこのスレは隔離スレと
解散

2018/11/24(土) 00:49:45.08

ガッテン、バブみ率ランキングを作る時のために使っているブックマークレットくんを晒しておく
なんかの参考になればいいな（はーと）
https://codepen.io/anon/pen/yQjNgN

できることは
- 月間10位+総合30位以内のユーザを抽出
- 指定したユーザのスコアを取得
- 指定したユーザの総回答数を取得
- 指定したユーザの総BA数を取得
- 指定したユーザの総合評価回数を取得

2018/11/24(土) 02:11:21.43

https://teratail.com/users?tab=ranking-total のHTMLソースをコピペして「総合ランキング」を生成するようにした(ガッテンレートまでOK)
http://jsfiddle.net/17zs2rmp/13/
後はtable sort系スクリプトを取り込めばいいわけだが、既製品だと何がいいだろう？

>>60
BA数を得る方法がないか探していたのだが、やはりプロフィールページまでたどる必要があるのね
有難く参考にさせてもらう

2018/11/24(土) 02:15:55.46

流れを読んでみて、煽り、冷やかしが分かりやすいのはIPのメリットだと思った
携帯から書き込んでも地域程度は特定できるのね

2018/11/24(土) 20:08:34.91

色々試したんだがjsfiiddleのbabelがそもそもIE11では動いてくれないっぽい。
今更ES5文法なんて使いたくないんだけど、IE11は捨てる方向でだめかな？

2018/11/24(土) 20:29:00.18

ｱｳｱｳｴｰ Sadf-A3/R
http://hissi.org/read.php/ff/20181123/TFV6QjBvaldh.html
http://hissi.org/read.php/ff/20181124/cXZBK0UyMTBh.html
http://hissi.org/read.php/twwatch/20181124/UlVYallzZnVh.html

2018/11/25(日) 13:37:01.04

>>63
一応、JSBINならBabelが使えるようだ
https://jsbin.com/pepuqidimo/1/edit?html,js,output
plnkrもBabelのPackageはあるようだが、使い方が分からなかった
https://plnkr.co/edit/

2018/11/25(日) 13:40:13.49

>>64
わざわざ探してきたところ悪いが、どれも俺の書き込みではないな

2018/11/25(日) 14:29:39.23

IE11対応のままES2015+でかけるようにやっとできました。
https://jsfiddle.net/17zs2rmp/14/show

HTMLの最後の方にあるscriptタグ二つは消さないようにしてください。
polyfillはIE11以外は不要なので外出ししてbabel-polyfill読み込んでいます。
JS自体はアロー関数とfor-ofに変更したぐらいしか、直していません。
ぶっちゃけ、IE11だと表示遅いですが、情弱にはこれぐらいがちょうどいいでしょう。

ほんと、jsfiddleのバグだろ、これ。老舗のサービスなのにcodepenに勝てなくなったわけだわ。
やる気があったら、Qiitaにでもどう対応したかを書いておくよ、たぶん。

2018/11/25(日) 14:32:15.91

>>65
移るんならCodePenの方が俺好みなんだけど、
本格的にやるなら、CodeSandboxを勧めておくよ。

2018/11/25(日) 16:36:23.54

アウアウはなー
ワッチョイもIPもかぶるんよ
その上IPコロコロ変わるんよ

2018/11/25(日) 19:26:40.69

おかげでしょっちゅう規制食らう
多分荒らしとかぶってるんだろう

2018/11/28(水) 02:50:29.44

面倒くさい回答者と、面倒くさい質問者
どっちがより面倒くさいか

個人的には前者

2018/11/28(水) 07:07:41.29

単に自分に関わってくる奴が一番面倒くさいというだけだろ

2018/11/28(水) 11:19:24.64

面倒くさい質問者は放っておけばいいがmtsとzuiはそういうわけにはいかない
まあ二人とも自分がすることちゃんとしてれば大丈夫よ

2018/11/29(木) 22:17:45.05

# テンプレ案更新
https://jsfiddle.net/17zs2rmp/15/show

## 更新内容
* 前のバージョンや次のバージョンのリンクが作られるようにした。
* もし、新しいバージョンがあったら、メッセージを出したりするようにした。

## TODO
* [x] IE11対応。
* [x] ES2015+が可能にする。
　* [ ] ES2015+っぽいコードにする。
　* [ ] TypeScriptに移行する。
* [x] 次のバージョンへのリンク。
　* [ ] 最新バージョンへのリンク。
* [ ] iPhoneのSafariだと途切れてスクロールもできない問題の対応。
* [ ] 適当なCSSフレームワークを採用する(レスポンシブ対応など)。
* [ ] ランキングデータ(BA数含む)を取得するブックマークレット登録用リンクを用意する。
* [ ] 現行スレとか、なぜ誰も足さない。

## その他
とりあえず、CSSフレームワーク使おうぜ。
誰でも知っているならbootstrapだけど、なんか案あればよろしく。

2018/12/02(日) 00:37:21.49

>>74
乙

TODOについて突っ込むが、jsfiddleは最新バージョンの取得はできないはずだぞ
Set as baseを使えば不完全ながら実現できそうだが、Set as baseを使うにはユーザ登録しなきゃいけなかったはず

2018/12/02(日) 00:50:54.33

>>74
skeletonに一票
bootstrapは身長がでかくてこわい

2018/12/02(日) 10:40:46.28

>>74
乙。Babelだけでも結構ES2015+な文法を使えるんだな。

> * [x] ES2015+が可能にする。
> 　* [ ] ES2015+っぽいコードにする。
もう少し、「ES2015+っぽいコード」の具体案が欲しい。

> とりあえず、CSSフレームワーク使おうぜ。
CSSフレームワークは詳しくないので他の人の判断に任せる。

>>75
nextと同じように fetch() で再帰して取得するのではないか。
バージョンNo分だけ fetch() する必要があるが、技術的に不可能ではないと思う。

2018/12/18(火) 00:46:56.40

https://teratail.com/questions/164498
https://teratail.com/questions/164503

トリオプログラミング