여기에 추가할 수 있는 코드 링크가 있는 사람이 있습니까? 미리 감사드립니다!

안녕하세요 @ebarry 저는 이것이 실제로 더 심각한 문제라고 생각합니다 :sweat_smile: https://github.com/publiclab/plots2/pull/7609 에서 이것을 변경했지만 내가 그것을 엉망으로 만들고 잘못된 수를 계산했을 것입니다. 생각 :disappointed: @jywarren 에서 반복 죄송합니다 이 문제를 해결하려면 도움이 필요할 수 있습니다 :sweat_smile:

@Tlazypanda 안녕하세요, Tag.counter 유형 코드가 사용되는 다른 장소를 살펴보고 해당 코드로 전환해 볼까요 ?

https://github.com/publiclab/plots2/pull/7609/files#diff -8fe92870a7f027a46eed82a51c5c16bcR118

그러나 카운트는 매우 약간 떨어져 있습니다. 이것이 스팸으로 처리되고 수학에 약간 영향을 주는 문제인지 궁금합니다.

예를 들어 다음 카운트 간의 차이를 참조하십시오.

236 카운트가 계산되는 위치를 찾아 그 값으로 전환할 수 있습니다.

따라서 컨트롤러 생성 인스턴스 변수를 사용합니다.

https://github.com/publiclab/plots2/blob/c056cb0b97ebc6b34184ec3dfa9a83e1096395f9/app/views/tag/show.html.erb#L58

나는 이것이 계산되는 곳이라고 생각합니다.

https://github.com/publiclab/plots2/blob/c056cb0b97ebc6b34184ec3dfa9a83e1096395f9/app/controllers/tag_controller.rb#L551 -L560

안녕하세요 @jywarren , tag / : id에서 볼 수있는 것, 즉 태그의
그래서, 우리가 해야 할 일은 tag#show 에서 하는 것과 같은 방식으로 메모를 가져와야 하고 토픽 카드의 맨 아래에 개수를 표시하기 위해 다음 수학 표현식을 사용해야 한다는 것입니다.
태그 이름이 있는 메모 수-토픽 카드에 표시된 메모 수

tag#show에서 하는 것과 같은 방식으로 메모를 가져와야 합니다.

안녕하세요, 맞습니다! https://github.com/publiclab/plots2/issues/6855#issuecomment -578331475에서 "단일 소스 소스"의 개념에 주목하십시오.

https://github.com/publiclab/plots2/pull/7476(#6855 기준)에서 동일한 계산을 사용해야 한다고 생각합니다.

@urvashigupta7 참여 해주셔서

또한 https://github.com/publiclab/plots2/pull/7476/ 에서 스팸을 필터링하지 않는다고 생각합니다. 따라서 이 줄에 .where(status: 1) 추가해야 합니다.

https://github.com/publiclab/plots2/blob/c056cb0b97ebc6b34184ec3dfa9a83e1096395f9/app/controllers/tag_controller.rb#L551 -L560

이 코드는 스팸을 필터링하지 않는 이것에도 의존합니다.

https://github.com/publiclab/plots2/blob/f4dfdcbae4dfa60b0ec357081ee1fae6f2089436/app/models/node.rb#L609 -L618

마찬가지로 이 코드는 동일한 필터로 스팸을 필터링해야 합니다.

https://github.com/publiclab/plots2/blob/f4dfdcbae4dfa60b0ec357081ee1fae6f2089436/app/models/tag.rb#L118 -L124

흠. /after/ 다음 행을 실행하기 때문에 @total_posts 계산에서 스팸을 필터링하는 것처럼 보입니다.

https://github.com/publiclab/plots2/blob/c056cb0b97ebc6b34184ec3dfa9a83e1096395f9/app/controllers/tag_controller.rb#L204 -L218

그러나 Tag.counter 및 Node.for_tagname_and_type 필터링하지 않습니다. 그게 불규칙이 아닐까?

여기의 계산은 여전히 ​​옳지 않다고 생각합니다. 예를 들어 https://stable.publiclab.org/tags는 이제 balloon-mapping 대한 692개의 게시물을 나열하지만 다음은 해당 태그에 대한 통계입니다(안정 상태).

이 수정 사항에 의존해야 한다고 생각합니다. https://github.com/publiclab/plots2/pull/8245

그러면 다시 확인할 수 있습니다. 잠시 재개봉...손가락 🤞

이제 https://github.com/publiclab/plots2/pull/8245 가 완료되었습니다! 그리고 단위 테스트가 있어서 너무 좋습니다. 이제 이것이 작동할 수 있습니다...

알겠습니다. 573 posts » -- 흠

연구노트 469
질문 37
위키 페이지 77
사람들 346

내 말은, 메모 + 위키 = 546...? 그리고 플러스 질문은 583입니까?

이제 안정에서 tests 태그를 테스트하고 있는데, 캐싱이 진행되고 있는지 의심스럽습니다. 해당 태그를 새 메모 https://stable.publiclab.org/notes/aidanswope/05-21-2019/angel-s-point-balloon-map-updated 에 추가해도 메모 탭이 생성되지 않았습니다. 7에서 8, tag.count 는 tag.run_count 의 결과와 마찬가지로 8을 반환하지만

https://stable.publiclab.org/tag/tests

https://github.com/publiclab/plots2/issues/8244에 대한 참고 링크

YESSSSS 캐시 된 5 분 : https://github.com/publiclab/plots2/blob/e97eff7464a544a97f4b38f169f76250600b3148/app/views/tag/show.html.erb#L133

좋아요, 탭 수를 추적합니다.

https://github.com/publiclab/plots2/blob/e97eff7464a544a97f4b38f169f76250600b3148/app/models/node.rb#L621 -L630

Node.where(status: 1, type: 'note').includes(:revision, :tag).references(:term_data, :node_revisions).where('term_data.name = ? OR term_data.parent = ?', 'balloon-mapping', 'balloon-mapping').where.not(nid: qids).count => 470

주제 카드 수와 비교:

NodeTag.joins(:node).where(tid: 10).where('node.status = 1 AND node.type = "note"').where.not(nid: qids).count => 467

😭

이 세 가지는 차이점입니다. [6129, 7236, 7414] --

[#,

,

]

아주 이상한! 2가지 이유가 있습니다. 3개의 메모는 10개의 누락된 메모와 동일하지 않으며(아직 질문을 살펴보지 않았다고 생각함), 이 3개의 메모는 2013년 2월에 하나가 있고 2013년 5월에 2개가 있다는 점을 제외하고는 정상인 것 같습니다.

• https://stable.publiclab.org/n/6129
• https://stable.publiclab.org/n/7236
• https://stable.publiclab.org/n/7414

(업데이트: 중복된 태그 이름은 아래 참조)

또한 흥미로운 점:

Node.where(status: 1, type: 'note').includes(:revision, :tag).references(:term_data, :node_revisions).where('term_data.name = ? OR term_data.parent = ?', 'balloon-mapping', 'balloon-mapping').where(nid: qids).count => 29

이것은 다음에 동의합니다.

NodeTag.joins(:node).where(tid: 10).where('node.status = 1 AND node.type = "note"').where(nid: qids).count

대 37은 탭에 표시된 대로 다음과 같이 계산됩니다.

https://github.com/publiclab/plots2/blob/e97eff7464a544a97f4b38f169f76250600b3148/app/models/node.rb#L640 -L646

아하! 마지막 섹션은 question:balloon-mapping 태그가 지정된 게시물이 기본 balloon-mapping 태그가 없더라도 해당 개수에 포함된다는 것을 보여줍니다!!!

다음 8개의 게시물에는 question:balloon-mapping 있지만 balloon-mapping 같습니다.

[13556, 15762, 16426, 18994, 20694, 11301, 12251, 19625]

좋아요, 2개의 노드 내로 이동합니다. 이제 수동으로 비교해 보겠습니다.

irb(main):040:0> NodeTag.joins(:node).where(tid: 10).where('node.status = 1 AND node.type = "note"').count
=> 496
irb(main):041:0> Node.where(status: 1, type: 'note').includes(:tag).references(:term_data).where('term_data.name = ?', 'balloon-mapping').count
=> 499

irb(main):022:0> Node.where(status: 1, type: 'note').includes(:revision, :tag).references(:term_data, :node_revisions).where('term_data.name = ? OR term_data.parent = ?', 'balloon-mapping', 'balloon-mapping').collect(&:nid)
=> [146, 253, 254, 268, 403, 511, 724, 732, 743, 913, 1482, 1489, 1620, 1626, 1627, 1632, 1715, 1849, 1968, 1994, 2126, 2138, 2144, 2476, 2589, 2930, 3115, 3325, 4649, 4952, 5038, 5220, 5250, 5978, 6934, 7050, 7189, 7294, 7314, 7491, 7577, 7593, 7995, 8189, 8907, 8913, 8914, 8950, 9019, 9032, 9042, 9086, 9417, 9434, 9742, 9888, 9977, 10541, 11019, 11100, 11223, 11574, 11582, 11827, 12201, 12240, 12491, 12619, 12708, 13095, 13424, 13945, 14022, 14095, 14183, 14185, 14219, 14515, 14572, 14587, 14597, 14600, 14611, 14620, 14813, 14907, 14909, 14983, 15545, 15568, 16591, 16653, 16746, 16877, 18316, 19153, 19272, 19462, 19558, 19578, 19620, 19762, 20331, 23549, 24101, 24102, 1795, 6635, 347, 369, 439, 444, 792, 861, 1665, 1668, 1962, 2135, 2143, 2152, 2245, 2277, 2783, 2784, 3563, 3635, 3670, 4482, 4516, 4755, 4760, 4923, 4925, 6059, 7641, 10181, 10489, 11101, 11724, 13243, 13880, 13948, 17322, 64, 166, 202, 344, 1666, 1816, 1818, 1819, 2919, 3354, 3736, 3821, 4087, 8020, 8947, 9301, 11199, 11260, 11261, 11755, 12161, 1544, 1739, 1742, 1892, 2006, 5494, 9353, 10705, 828, 1515, 1786, 1877, 1926, 1949, 2121, 2625, 2666, 2677, 2846, 2892, 2961, 4092, 4907, 5394, 5415, 5664, 7132, 7367, 7368, 7717, 7964, 8400, 10243, 6175, 9507, 4636, 6293, 3014, 6624, 9806, 10289, 10554, 11278, 11391, 12104, 12622, 12894, 13143, 9935, 10036, 10196, 10450, 11283, 11719, 11769, 12237, 10246, 10605, 2462, 9497, 1889, 2131, 2443, 3026, 4127, 4252, 4673, 5538, 5893, 6608, 8034, 8902, 8959, 9644, 9707, 10045, 10162, 10335, 10336, 10337, 10373, 10540, 10570, 11107, 11110, 11112, 11124, 11143, 11175, 11298, 11336, 12053, 12203, 12590, 16984, 19515, 19580, 23822, 2163, 3634, 7620, 10166, 11056, 11319, 11589, 1541, 1652, 1676, 1677, 1746, 2154, 2237, 2275, 2311, 2623, 2785, 3454, 3652, 3822, 4014, 4691, 4720, 4950, 5161, 7785, 8866, 8926, 8928, 8937, 8958, 8986, 9759, 9915, 10101, 10230, 10244, 10302, 10311, 10374, 10523, 10602, 11021, 11078, 11103, 11253, 11726, 11988, 12686, 12752, 12757, 13400, 13845, 14116, 14660, 14713, 14756, 1716, 2660, 7191, 7192, 1743, 1636, 1900, 9317, 10651, 1741, 13904, 3096, 2352, 2824, 4091, 2715, 6080, 6082, 2732, 3801, 3908, 4545, 7121, 10284, 13791, 10631, 4921, 6751, 9429, 9743, 11577, 17331, 6073, 9858, 10711, 11118, 6525, 10267, 9034, 11252, 11268, 8033, 8868, 10159, 10214, 9027, 9785, 9033, 9076, 9299, 14501, 14508, 14562, 21733, 10282, 9909, 11178, 11738, 10024, 12667, 11262, 11343, 11978, 11983, 11992, 11826, 11061, 10227, 10428, 11077, 11131, 11137, 11280, 11281, 11518, 11551, 11807, 11812, 11947, 12039, 14158, 14729, 14943, 15641, 16273, 16349, 18560, 19269, 19286, 21547, 10343, 14852, 14901, 15352, 15387, 10612, 10638, 10986, 10994, 20181, 11002, 11127, 11128, 11183, 12166, 11342, 11494, 11955, 11673, 11707, 11711, 12190, 18839, 13802, 14595, 12227, 15912, 14007, 13093, 13096, 12981, 13102, 13160, 13194, 13196, 13227, 13242, 13267, 13278, 13281, 13298, 14168, 15161, 23143, 14058, 14766, 13748, 13839, 15603, 14241, 14179, 14239, 14246, 14240, 14255, 14488, 14487, 14245, 14785, 15160, 14703, 14995, 16571, 15172, 15179, 15424, 15713, 15732, 16141, 16284, 16334, 16382, 17387, 17498, 17499, 18498, 16960, 19689, 17815, 19394, 19464, 19650, 19955, 19476, 19477, 23203, 6129, 7236, 7414]

대:

irb(main):024:0> NodeTag.joins(:node).where(tid: 10).where('node.status = 1 AND node.type = "note"').collect(&:nid)
=> [146, 253, 254, 268, 403, 511, 724, 732, 743, 913, 1482, 1489, 1620, 1626, 1627, 1632, 1715, 1849, 1968, 1994, 2126, 2138, 2144, 2476, 2589, 2930, 3115, 3325, 4649, 4952, 5038, 5220, 5250, 5978, 6934, 7050, 7189, 7294, 7314, 7491, 7577, 7593, 7995, 8189, 8907, 8913, 8914, 8950, 9019, 9032, 9042, 9086, 9417, 9434, 9742, 9888, 9977, 10541, 11019, 11100, 11223, 11574, 11582, 11827, 12201, 12240, 12491, 12619, 12708, 13095, 13424, 13945, 14022, 14095, 14183, 14185, 14219, 14515, 14572, 14587, 14597, 14600, 14611, 14620, 14813, 14907, 14909, 14983, 15545, 15568, 16591, 16653, 16746, 16877, 18316, 19153, 19272, 19462, 19558, 19578, 19620, 19762, 20331, 23549, 24101, 24102, 1795, 6635, 347, 369, 439, 444, 792, 861, 1665, 1668, 1962, 2135, 2143, 2152, 2245, 2277, 2783, 2784, 3563, 3635, 3670, 4482, 4516, 4755, 4760, 4923, 4925, 6059, 7641, 10181, 10489, 11101, 11724, 13243, 13880, 13948, 17322, 64, 166, 202, 344, 1666, 1816, 1818, 1819, 2919, 3354, 3736, 3821, 4087, 8020, 8947, 9301, 11199, 11260, 11261, 11755, 12161, 1544, 1739, 1742, 1892, 2006, 5494, 9353, 10705, 828, 1515, 1786, 1877, 1926, 1949, 2121, 2625, 2666, 2677, 2846, 2892, 2961, 4092, 4907, 5394, 5415, 5664, 7132, 7367, 7368, 7717, 7964, 8400, 10243, 6175, 9507, 4636, 6293, 3014, 6624, 9806, 10289, 10554, 11278, 11391, 12104, 12622, 12894, 13143, 9935, 10036, 10196, 10450, 11283, 11719, 11769, 12237, 10246, 10605, 2462, 9497, 1889, 2131, 2443, 3026, 4127, 4252, 4673, 5538, 5893, 6608, 8034, 8902, 8959, 9644, 9707, 10045, 10162, 10335, 10336, 10337, 10373, 10540, 10570, 11107, 11110, 11112, 11124, 11143, 11175, 11298, 11336, 12053, 12203, 12590, 16984, 19515, 19580, 23822, 2163, 3634, 7620, 10166, 11056, 11319, 11589, 1541, 1652, 1676, 1677, 1746, 2154, 2237, 2275, 2311, 2623, 2785, 3454, 3652, 3822, 4014, 4691, 4720, 4950, 5161, 7785, 8866, 8926, 8928, 8937, 8958, 8986, 9759, 9915, 10101, 10230, 10244, 10302, 10311, 10374, 10523, 10602, 11021, 11078, 11103, 11253, 11726, 11988, 12686, 12752, 12757, 13400, 13845, 14116, 14660, 14713, 14756, 1716, 2660, 7191, 7192, 1743, 1636, 1900, 9317, 10651, 1741, 13904, 3096, 2352, 2824, 4091, 2715, 6080, 6082, 2732, 3801, 3908, 4545, 7121, 10284, 13791, 10631, 4921, 6751, 9429, 9743, 11577, 17331, 6073, 9858, 10711, 11118, 6525, 10267, 9034, 11252, 11268, 8033, 8868, 10159, 10214, 9027, 9785, 9033, 9076, 9299, 14501, 14508, 14562, 21733, 10282, 9909, 11178, 11738, 10024, 12667, 11262, 11343, 11978, 11983, 11992, 11826, 11061, 10227, 10428, 11077, 11131, 11137, 11280, 11281, 11518, 11551, 11807, 11812, 11947, 12039, 14158, 14729, 14943, 15641, 16273, 16349, 18560, 19269, 19286, 21547, 10343, 14852, 14901, 15352, 15387, 10612, 10638, 10986, 10994, 20181, 11002, 11127, 11128, 11183, 12166, 11342, 11494, 11955, 11673, 11707, 11711, 12190, 18839, 13802, 14595, 12227, 15912, 14007, 13093, 13096, 12981, 13102, 13160, 13194, 13196, 13227, 13242, 13267, 13278, 13281, 13298, 14168, 15161, 23143, 14058, 14766, 13748, 13839, 15603, 14241, 14179, 14239, 14246, 14240, 14255, 14488, 14487, 14245, 14785, 15160, 14703, 14995, 16571, 15172, 15179, 15424, 15713, 15732, 16141, 16284, 16334, 16382, 17387, 17498, 17499, 18498, 16960, 19689, 17815, 19394, 19464, 19650, 19955, 19476, 19477, 23203]

아하. 아마도 이것은:

Tag.where(name: 'balloon-mapping').length => 4
Tag.where(name: 'balloon-mapping').collect(&:tid) => [10, 3205, 3591, 4032]

예, 이것이 불일치입니다.

irb(main):045:0> NodeTag.joins(:node).where(tid: [10, 3205, 3591, 4032]).where('node.status = 1 AND node.type = "note"').count
=> 499
irb(main):046:0> Node.where(status: 1, type: 'note').includes(:tag).references(:term_data).where('term_data.name = ?', 'balloon-mapping').count
=> 499

irb(main):050:0> Tag.where(name: 'balloon-mapping').collect(&:count)
=> [574, 1, 1, 1]

그러나 특히 #7334의 method 또는 project 버그는 아닙니다.

irb(main):047:0> Tag.where(name: 'method').collect(&:tid)
=> [14474]
irb(main):048:0> Tag.where(name: 'project').collect(&:tid)
=> [14751]

자, 다음을 사용하여 중복 태그를 수정했습니다.

irb(main):053:0> NodeTag.where(tid: [3205, 3591, 4032]).each do |nt|
irb(main):054:1* nt.tid = 10
irb(main):055:1> nt.save
irb(main):056:1> end

그러나 DB에 더 많은 것이 있습니다. 우리는 이것을 통합하기 위해 더 큰 프로젝트를 원할 수도 있습니다.

업데이트: 예, 28개의 다른 인스턴스가 있습니다.

irb(main):063:0> Tag.count
=> 18532
irb(main):065:0> Tag.all.collect(&:name).uniq.count
=> 18504


irb(main):069:0> (Tag.all - Tag.all.group(:name)).collect(&:name)
=> ["fold-up", "gulf-coast", "kite-mapping", "gulf-coast", "brooklyn", "new-york-city", "balloon-mapping", "spectrometer", "farmhack", "white-balance", "fresh-kills", "balloon-mapping", "balloon-mapping", "kite-mapping", "newsletter", "newsletter", "passenger-pigeon", "jamaica-bay", "mobile-spectrometer", "infragram-sandbox", "mailing-lists", "diy-kite", "water-sensing", "carbon-arc", "diy-kite", "diy-kite", "workplace", "emergencies"]

지금 내 추천은 다음과 같습니다.

우리는 이것을 많이 좁혔고 두 부분으로 나뉩니다.

1. "고스트" 태그 - 태그 이름이 중복되어 기본적으로 일부는 계산되지 않습니다(해결되었지만 몇 가지 다른 태그에 대해 ~15개의 다른 인스턴스가 있음).
2. question:_____ 형식 태그는 /tag/____ 페이지의 질문 탭에서 계산되지만 자체 기본 태그가 없는 경우 주제 카드에는 계산되지 않습니다. 예: 8개의 게시물에는 question:balloon-mapping 있지만 balloon-mapping 가 없으므로 8만큼 카운트를 던집니다.

(2)에 대한 나의 견해는 우리가 그것을 기록하고 인식해야 하지만 그것을 해결해서는 안 된다는 것입니다(어쨌든 깨끗한 해결책이 생각나지 않습니다).

그리고 그 모든 파기 후에도 balloon-mapping 대해 여전히 1의 불일치가 있습니다. 그러나 우리는 가장 큰 태그 중 하나이고 해당 문제가 다른 사람들에게 영향을 미칠 가능성이 낮기 때문에 우리는 본질적으로 그것에 대해 괜찮아야 한다고 생각합니다. 다른 사람들의 의견도 듣고 싶습니다!